跳到主要內容
Blender 場景即時預覽進 Vision Pro:3D 創作工作流的下一步
/閱讀約 11 分鐘/

Blender 場景即時預覽進 Vision Pro:3D 創作工作流的下一步

2024 年的一支 demo 讓人看到了一件原本不可思議的事:Blender 3D viewport 的畫面可以即時串流進 Apple Vision Pro,讓你在空間中走動、繞著模型轉一圈,同時它還在被建模。這不只是技術展示——它指向了一個 3D 創作工作流可能的結構性轉變。

目錄+

這支 demo 在說什麼

2024 年 3 月,Daniel Beauchamp 在推特上發了一支影片,標題只有一行:「Can't believe I got this working. Live preview of a Blender scene with the Vision Pro.」

影片裡是真實運作的 demo:Blender 的 3D viewport 畫面被即時串流進 Apple Vision Pro,在空間顯示器上呈現出來。不是一張靜態截圖,不是預先渲染的動畫,是正在被建模的場景即時出現在 XR 頭顯裡——你移動頭部,畫面跟著更新;你在 Blender 裡調整模型,Vision Pro 裡的預覽同步變化。

這件事之所以讓人停下來認真看,不只是因為它「很酷」。它在技術上解決了一個很具體的問題,也同時點出了一個還沒完全被解決的更大問題:對 3D 創作者而言,如何把空間感帶回建模這件事本身。


技術問題在哪裡

把一個 3D viewport 的畫面「送進」一台 XR 頭顯,聽起來直覺,做起來有幾層不顯眼的困難。

延遲是第一個問題,也是最根本的問題。人類視覺對頭部轉動與畫面更新之間的時差極度敏感——超過 20ms 的 motion-to-photon 延遲就會開始讓人不舒服,超過 30ms 在動態場景下幾乎肯定會造成不適。一般螢幕錄製轉傳的做法根本不夠快,整個 pipeline 需要針對低延遲設計。

顯示協議是第二個問題。Vision Pro 的空間顯示不是普通螢幕,它的輸入來源有限制。要把另一台機器的畫面送進去,需要走特定的路徑——2024 年的做法通常是透過 AirPlay 或某種形式的 virtual display,讓 Mac 認為在把畫面投射到一個「螢幕」上,然後 Vision Pro 接收那個輸出。

Blender 本身的 viewport 架構是第三個問題。Blender 的即時 viewport 渲染和最終 render 是兩套不同的系統——viewport 是針對互動操作最佳化的,不保證跟最終輸出完全一致,但它在 Cycles 或 Eevee 的 viewport mode 下已經相當接近。把 viewport 的輸出截取出來、壓縮、串流,需要繞過正常的顯示流程。

整個 pipeline 大概長這樣:

Loading diagram...

每個節點都有延遲預算,加起來必須控制在可用的範圍內。Beauchamp 的 demo 能工作,意味著他在某個組合下把這個預算壓下來了——但「能工作」和「生產可用」之間還有距離。


為什麼這對 3D 創作者重要

理解這件事的意義,需要先理解傳統 3D 建模工作流的一個根本困境。

3D 模型是在三維空間裡存在的物件,但我們幾乎總是在二維螢幕上建它。那個投影的過程會失去很多東西——特別是尺度感和空間關係。一個在螢幕上看起來比例協調的模型,放到真實空間的尺度下可能感覺完全不對。藝術家們靠的是多年累積的「空間直覺」來補足這個落差,但這是一種需要刻意訓練的能力,而且仍然有上限。

如果你可以在建模的同時,戴上 Vision Pro 走進那個模型——繞著它轉一圈、蹲下來看底部、退後幾步感受整體——你得到的空間回饋是質性不同的。不是技術上更精確,而是感知上更直接。你不需要把二維畫面翻譯成三維想像,你就在三維裡。

這對幾個場景特別有用:

角色建模的比例確認:一個角色站在那裡,你走近它,感受它的高度是否符合你想要的設定。這比在螢幕前切換正交視圖有效多了。

場景構圖與空間關係:室內設計、遊戲場景、建築視覺化——你在空間裡走動的時候,會注意到那些在頂視圖和側視圖上不明顯的問題。

體積感和表面細節:法線、曲面的走向、細部結構的深度——在空間尺度下一眼就能看出問題,不需要費力地在 viewport 裡旋轉調視角。


2026 年的現狀

這支 demo 是 2024 年初的產物。兩年多過去了,這個方向走到哪裡了?

坦白說,它還沒有成為主流工作流。沒有一個廠商推出了「在 Vision Pro 裡即時預覽 Blender 場景」的成熟商業產品。但幾個相關的發展值得注意:

macOS 的 Virtual Display 功能在 Vision Pro 推出後逐步成熟,2025 年開始支援更高解析度的 Mac 螢幕鏡射。這個基礎設施讓「把 Mac 應用的畫面投進 Vision Pro」這件事的技術障礙降低了。

Blender 的 XR 整合也在持續開發中。Blender 本身有一個 VR Scene Inspection 功能(基於 OpenXR),可以讓你用 VR/XR 頭顯直接在場景裡移動。這和「從外部串流 viewport」是不同的方案,但目標有部分重疊——讓建模師能在空間中感知模型。

Apple 的 visionOS 開發生態在 2025 年走向更多的企業和創作工具場景。Pixelmator、一些 CAD 工具已經出現了原生 visionOS 版本。但 Blender 的原生 visionOS 支援目前仍不存在。

這個方向沒有死,但也沒有爆炸式普及。它還在那個「技術可行、尚未成熟」的階段。


空間計算與 3D 創作的更大趨勢

Blender + Vision Pro 這個組合是一個更大趨勢的具體案例:隨著 XR 裝置的顯示品質、算力、易用性逐步提升,3D 創作工作流有沒有可能逐步移進空間?

這個問題的答案不會是「有一天全部移進去」,而更可能是「特定的環節移進去」。

空間顯示對視覺確認類的工作有明確優勢——你想確認比例、確認構圖、確認整體感,走進去看一下是最快的。但精細的頂點編輯、UV 展開、節點編輯器——這些需要精確控制的工作,在空間裡用手勢操作的效率目前仍然比不上鍵盤和滑鼠。

一個更現實的想像是混合工作流:主要建模仍然在傳統螢幕上進行,但你可以隨時把目前的場景狀態送進 Vision Pro 做空間確認,然後回到桌面繼續工作。這樣的流程不需要完全替換現有工具,而是在適合的節點加入空間感知。


誠實面對的限制

這個方向有幾個實際的障礙,值得明說。

連接方式目前幾乎都是有線或 Wi-Fi 串流,而不是完整的無線自由移動。你在 Vision Pro 裡移動的同時,Blender 還是跑在你桌上的 Mac 上。你不是真的「走進」那個模型,而是在它旁邊的空間裡看一個幾乎即時的投影。

延遲仍然存在。在複雜場景下,Blender viewport 的渲染本身就不是即時的,加上串流延遲,你看到的是「幾乎即時」而不是真正零延遲。對大多數視覺確認工作這已經夠用,但不要期望它像電影裡那樣完美。

精確互動是缺口。Vision Pro 的手勢輸入對滑動、點選這類操作設計良好,但對需要精確定位的 3D 操作——移動頂點、調整骨架、設定 keyframe——目前仍然力不從心。這個工作流現在的角色是觀看,不是編輯。

硬體門檻。Vision Pro 的價格在台灣市場仍然是高端選項,不是每個 3D 創作者都會購入。Meta Quest 系列的普及性更好,但顯示品質和生態與 Vision Pro 有差距。


Beauchamp 的 demo 是一個誠實的先行實驗:一個人想清楚了一件事是否可能,然後做出來驗證。它的意義不在於它立刻改變了什麼,而在於它把「這件事可以做到」這個事實放在了公開記錄裡。

3D 創作工作流的空間化是一個方向,不是一個開關。它不會在某天突然到來,而是會在一個個具體的工具整合、一次次延遲優化、一批批創作者的實際使用回饋中,慢慢變成日常。