返回部落格
industry

高斯拼接不再是演示:2026 年的生產管線

三年前,高斯拼接還只是 SIGGRAPH 的一個新奇技術。到了 2026 年,它已經應用在電影鏡頭、實時遊戲背景和建築可視化中。以下是生產管線的實際樣貌——以及它仍然存在的問題。

Admin2026年4月26日1 分鐘閱讀70

2023 年 8 月,高斯拼接論文發布在 arxiv 上,3D Twitter 為之瘋狂。該演示展示了用手機影片重建的 NeRF 級別場景,在筆記型電腦 GPU 上以 100+ fps 的速度渲染。看起來簡直是作弊。

三年後,拼接技術已經不再是演示。Postshot 已進入主流建築可視化工作流程。Luma AI 的 Genie 正在為獨立電影團隊提供電影級背景。Polycam 將拼接捕捉作為單點擊行動功能推出。虛幻引擎 5 有社群外掛支援實時拼接播放。這項技術已經跨越了從研究好奇心到生產工具的鴻溝——但管線很笨拙,失敗模式確實存在,大多數採用它的團隊正在悄悄摸索它的實際應用位置。

以下就是我們對這個應用位置所了解的內容。

高斯拼接實際上是什麼(一段話概括)

高斯拼接場景是由數百萬個軟性 3D 橢球體組成的雲層,每個橢球體都有顏色、透明度和視角相關的著色方向。你不是用網格和紋理,而是從一組影像訓練這個雲層,使其在投影回這些相機位置時能夠重現原始視圖。渲染是柵格化——很快——而不像 NeRF 那樣進行光線行進。這就是為什麼拼接能夠實時渲染,而 NeRF 大多無法做到。

為什麼 2024-2025 是轉折點

有兩個因素改變了局面:

訓練時間大幅縮短。原始論文在 A100 上訓練一個場景需要 30 分鐘。到了 2025 年中期,消費者工具的訓練時間已降至在 4090 上針對典型 200 張影像捕捉耗時 2-5 分鐘。手機端訓練(Polycam、Scaniverse)出現了,在裝置上針對小型捕捉耗時不到一分鐘。

引擎渲染器已經推出。原生拼接渲染已在虛幻引擎 5(多個外掛)、Unity(Aras Pranckevičius 的實作成為標準)、Three.js(Mark Kellogg 的渲染器)、Blender(KIRI Engine + 原生外掛)和 Spectre 作為獨立 DCC 中推出。拼接不再被困在訓練工具中。

綜合來看:上午捕捉,同一天下午在遊戲引擎中渲染。這改變了一切。

拼接在生產中表現出色的地方

三個真實的類別,其中工作室已在 2026 年推出拼接技術:

電影背景

獨立虛擬製作團隊使用拼接作為遠景背景:捕捉的森林、小巷、城市景觀。拼接的渲染速度足以作為 LED 容積中的真實時間背景,而傳統攝影測量網格從未能做到這一點(網格複雜度會因相似的視覺保真度而爆炸)。訣竅是:拼接是只讀的——你無法輕鬆在拼接地面上放置椅子並讓它正確遮擋或投影陰影。所以它們存在於動作的後面,而不是其中。

建築和房地產導覽

在 30 分鐘內捕捉一個房產,一夜間訓練,隔天推出 Three.js 檢視器。檢視器在手機上流暢渲染。此用例已經徹底擊敗了傳統攝影測量的高端房地產列表——拼接對反射表面(窗戶、拋光地板)的處理能力遠超三角形網格。

遊戲背景和「天空盒 2.0」

一些遊戲工作室開始使用拼接作為下一代天空盒——遠方城市景觀、山景、通過窗戶查看的機庫內部。拼接位於視錐遠端,這是你曾經使用遮蔽畫或低多邊形網格的地方。效能可以接受,因為拼接距離足夠遠,LOD 和剔除效果很好。

拼接仍然失利的地方

誠實的列表。任何聲稱拼接是網格終結者的銷售都在過度承諾。

動畫和變形。拼接是靜態點雲。沒有「綁定拼接」工作流程。最近的論文(動態高斯拼接、4D 拼接)展示了動畫在研究中有效,但尚未進入任何生產工具。如果你的資產必須移動,你會選擇網格。

編輯。你可以在 Postshot 或 Spectre 中遮罩、裁剪和清理拼接。你無法輕鬆添加幾何體、改變拓樸或像繪製網格那樣繪製拼接。輸出更接近於照片而不是模型。

掠射角的銳利鏡面反射。幾乎邊緣觀看的拋光金屬和玻璃仍然看起來模糊。每個拼接的視角相關著色會平滑掉真實表面產生的鏡面高光。一些 2025 年的論文改進了這一點;它還沒有進入主流工具。

引擎相容性。UE5 和 Unity 存在拼接外掛,但不是一級公民。Lumen 和 Nanite 不與拼接互動。在捕捉時烘焙到拼接中的光照不會回應動態引擎光源。所以你的拼接場景在你捕捉的時間看起來很棒——而且只在那個時間看起來很棒。

儲存。高品質拼接場景是 200-800 MB。相同場景的攝影測量網格壓縮到 50-100 MB。拼接還不是邊緣友好的;流式拼接格式(基於 PLY、KSplat、新的 SOG 草稿格式)仍不成熟。

2026 年的生產管線

今天推出拼接的團隊實際上做的是:

  1. 捕捉。100-300 張照片或 1-2 分鐘的影片。靜態場景用手機就可以;英雄捕捉用無反光鏡相機。漫反射光優於硬陰影。
  2. 訓練。Postshot(付費,生產預設)、Luma AI Genie(雲端,快速)、Polycam(行動優先)或 Nerfstudio(開源,研究風味)。訓練寫出 .ply.splat 檔案。
  3. 清理。遮罩掉浮點數和背景垃圾。Postshot 和 Spectre 有不錯的工具。預期每個英雄場景花費 30-60 分鐘。
  4. 轉換(如果需要)。遊戲引擎通常需要特定的二進位格式。KSplat、SOG 或供應商特定格式。無損 PLY 往往太大而無法推出。
  5. 整合。通過拼接外掛放入 UE5/Unity,相對於你的遊戲攝影機位置,並將其視為靜態佈景。不要在拼接中放置相交的遊戲物件。

工具景觀

2026 年的狀況(不完整,但有用的地圖):

  • Postshot — 當前生產預設。Windows,付費。品質、訓練速度和清理工具的最佳平衡。
  • Luma AI Genie / Luma Capture — 基於雲端,最簡單的路徑。當你不想管理 GPU 時很合適。
  • Polycam / Scaniverse — 行動優先,設備端或雲端。最適合建築可視化和休閒使用者。
  • Spectre — DCC 風格的拼接編輯器。不如 Postshot 成熟但進步快速。
  • Nerfstudio(附帶 Splatfacto) — 開源,研究級。新技術首先登陸的地方。
  • KIRI Engine — 行動 + Blender 外掛路徑;涵蓋捕捉和整合。
  • Unity / Unreal 社群外掛 — 執行時渲染器。Unity 的 Aras Pranckevičius,UE5 的多個外掛。

這對 3D 藝術家意味著什麼

拼接不會取代你的網格技能、拓樸眼光或對場景可讀性的理解。它為特定類別資產添加了一個新工具:高保真靜態佈景,你曾經會花費數天從掃描 + 重新拓樸 + 紋理製作。

2026 年的現實:大多數生產場景現在是混合的。英雄遊戲資產保持為網格(你需要綁定、動畫和修改它們)。靜態背景和參考捕捉朝向拼接發展。兩條管線在同一場景檔案中共存——引擎並排渲染拼接和網格,拼接充當不動的舞台,網格在其上演出。

殺手級應用——動畫、可光照、完全可編輯的拼接——仍在研究中。當它推出到主流工具時,攝影測量網格管線將處於與 2008 年純樣條建模管線相同的位置:仍在使用,但不再是顯而易見的預設。

#gaussian-splatting#3d#photogrammetry#capture#ue5#unity#nerf

喜歡這篇文章嗎?

ShareHN