AI 工具 13 min read

vork 實測:RTX 4070 跑 AI 3D 特效,改色重算 32 秒

vork 是 Nullframe 在 2026 年 11 月放出的無介面 3D/VFX 引擎,用 Rust 和 Slang 寫,agent 寫場景檔、算圖、看圖、再修改,授權是原始碼可見而非開源。我在 RTX 4070 跑通 5 版迭代與實拍合成,540p 五秒片改色重算 32 秒,追蹤誤差平均 0.33 像素——適合程式化片頭與產品動畫,倒影與大場景還到不了電影級。

本文目錄 · 10
懶人包
  • vork 是給 AI agent 用的無介面 3D/VFX 引擎:agent 寫場景檔、算圖、看圖、再修改,沒有編輯器要操作。
  • 我在 RTX 4070 跑 vork 0.2.0:5 版場景迭代成功,最後一版 72 幀 540p 動畫 3.76 秒算完。
  • 官方實拍合成範例也跑通,攝影機追蹤誤差平均 0.33 像素;只改一個顏色重算 120 幀 540p 要 32.2 秒,實拍背景不動。
  • 授權是 source-available,LICENSE 第一段寫明「It is not open source」;研究預覽期可免費商用,但不能散布修改版或做託管渲染服務。
  • 畫面還有破綻:倒影碎成點狀、字樣倒影落在乾地面。沒有霧和體積效果,實拍合成也要靠外部工具前處理。
  • 我的判斷:拿來做程式化片頭、產品動畫和 Shorts 素材值得試,當電影級 VFX 流程還太早。

這篇的起點是一支 41 秒的 Shorts,標題叫「有人真给AI造了个3D引擎!电影特效要变天了?」。字幕抓取連續回 HTTP 429,我沒拿到口白,只能依標題、說明和縮圖追到原始專案 vork,然後裝在自己的機器上跑一輪。

想回答的問題很實際:AI 操作 3D 引擎做特效,現在做得到多少?

vork 是什麼?

vork 全名 Voyager rendering kernel,由 Nullframe, Inc. 發布,用 Rust 和 Slang 寫成,透過 Vulkan 或 Metal 走硬體光追。它沒有視窗介面,場景是 JSON,也可以用 TypeScript 或 Python 產生。

工作方式只有一個迴圈:

  1. agent 寫場景檔。
  2. vork render 算出圖或影片。
  3. agent 打開圖片判斷哪裡不對。
  4. 改數值或著色程式,再算一次。
場景內容和算圖品質是分開的。std/previs 拿來快速預覽,std/draft 和 std/final 分別用 4 與 8 樣本加 OIDN 降噪,std/path 走路徑追蹤。材質、攝影機、光線傳播和合成都能用 Slang 程式自己寫。

官方 README 給 agent 的起手提示只有三句,要它 vork init、讀 vork help、算預覽並檢查圖片,先調好攝影機和燈光再出最終品質。

截至 2026-11-09,repo 在 2026-11-05 才建立,1076 stars、79 forks,最新版 v0.2.0 發布於 11-07。專案還在研究預覽期,版本變動很快。

vork 和 AI 影片生成差在哪?

生成式影片模型每次重算,畫面裡的東西都可能跟著變。vork 的物體、攝影機、燈光都是明確的數值,改哪個就只動哪個。

比較項目vork生成式影片模型
輸出來源3D 場景經 GPU 算圖模型從雜訊生成畫面
局部修改改場景檔的欄位通常要重新生成或局部重繪
攝影機與物體明確數值,可重現由提示詞和模型決定
資產來源要自己寫或匯入幾何、材質模型直接產生外觀
擅長精確控制、重複修改、程式化畫面寫實外觀、快速得到豐富畫面
這也決定了它的門檻。生成式模型一句話就能出寫實人物;vork 的畫面好不好,取決於場景和資產寫得多細。

硬體和安裝要準備什麼?

算圖需要 Apple Silicon,或支援硬體光追的近代 NVIDIA GPU。A100、H100、H200 這類沒有硬體光追的卡不支援。沒有合適 GPU 時,寫場景和 vork help 仍可使用。

我的環境是 Windows 11、RTX 4070 12GB、驅動 610.88。我從 GitHub Releases 下載 Windows zip,比對 SHA256SUMS 相符後解壓,沒有動全域 PATH;官方另外提供 install.ps1,這次我沒跑。Windows 輸出 MP4 還需要 ffmpeg。

下面是我在這台機器實際跑過的最短驗證,vork 代表解壓目錄裡的 vork.exe:

vork setup
vork init my-shot
cd my-shot
vork render scene.json --profile std/draft --out render.png

vork setup 約 150 秒,之後的實際輸出:

vork 0.2.0 (commit b65e3ded295e; API v2)
Rendered 1 frames in 3.603s; outputs: render.png
exposure: 0.6% clipped, 0% near-black, mean 0.52

exposure 這行對 agent 很有用:不看圖也能先知道畫面有沒有過曝或全黑。

AI 自己看圖改場景,改得動嗎?

我讓 Claude Code 當 agent,目標是做一顆發光球體和三個環繞的金屬方塊,地面要接到球的青色光。

vork 迭代對比四格:左上 v1 地面過曝,右上 v2 球體過亮且地面成灰帶,左下 v4 亮度收斂但地面沒有青光,右下 v5 球體有流動條紋、地面出現青色光暈
版本看圖發現的問題下一步改動
v1球心過曝、地面太亮壓低地面反照率,降主光
v2地面掠射反射變成灰帶抬高鏡頭、大幅降低球體亮度
v3/v4亮度正常,但點光源被不透明的球擋住,地面沒有青光把光移到球下方
v5達標加上自寫的 Slang 流動材質
要交代一個限制:v2 和 v3 的初版參數是預先寫好的,v3 看圖後才重寫。真正依圖修正的是 v3 之後那幾步,所以這不是「五輪全自主」的證明。

最有價值的是 v4 到 v5 那一步。「光被球擋住」不是調亮度能解決的,要讀懂場景的幾何關係,把光源從球心移到球下方。

項目實測
冷啟動第一張(v1)22 秒
暖機後 draft,960x540 單張0.7 秒
新 Slang 程式首次編譯60 秒
v5 final,72 幀 540p3.76 秒(約 19 fps)
新著色程式的首次編譯比暖機後的單張算圖慢約 85 倍。agent 迴圈裡如果每輪都換新程式,時間會花在編譯,不在算圖。

vork 怎麼把 CG 合進實拍?

我跑的是官方範例 examples/vfx-neon,場景和幾何都是官方的,不是我原創。素材是 Pexels 影片 18972999 「Ally」,作者 Rafael Fernanz。

vork 官方 vfx-neon 範例在 RTX 4070 算出的 1080p 單張:夜巷中懸浮青色線框雕塑與 AFTER RAIN 字樣,水窪映出倒影

實拍合成不是 vork 一鍵完成。範例靠 OpenCV、COLMAP、SAM2、Depth Anything 等工具先解算攝影機、做遮罩和幾何代理,vork 負責算圖與合成。

項目實測
攝影機解算2 分 41 秒
held-out 重投影誤差平均 0.33 px,最大 3.12 px
牆面接點 homography 比較平均 0.48 px,最大 1.12 px
1080p 單張(首次,含 shader 編譯)250 秒
全片 120 幀 540p24.4 秒
改色後重算全片32.2 秒
算圖指令長這樣:
vork render clean.json --set resolution=960x540 --out ../frames_clean/ --frame-start 0 --frame-end 119
ffmpeg -framerate 24 -i ../frames_clean/%06d.png -c:v libx264 -crf 16 -pix_fmt yuv420p ../vfx-clean-540p.mp4

改一個顏色要重算多久?

改色只動 clean.json 裡 cyan 和 orbit 兩個材質的 emission_color,其他欄位完全不變:

{ "emission_color": [0.015, 0.65, 1] }

改成:

{ "emission_color": [1, 0.05, 0.45] }
同一幀三格對比:左為原始實拍夜巷,中為青色雕塑合成結果,右為只改材質顏色後的洋紅版本,巷子背景完全相同

重算 32.2 秒後,比對第 60 幀,只有 3.65% 的像素有變化(單通道差大於 8),改動集中在 CG 和它的倒影,實拍背景沒動。

這是 vork 最實用的能力。業主說「換個顏色」時,物體位置、攝影機和背景都還在原地。

官方說快過 Blender,要怎麼看?

官方自己標明這些是「not equal-quality speedups」。final 影片比 EEVEE 快 1.14 到 2.32 倍,但兩邊設定不同;路徑追蹤反而比 Cycles 慢 1.99 到 5.81 倍。README 也寫明 Blender 比較腳本目前在 Blender 5.2.1 上跑不動,獨立重現還做不到。

我沒有另外跑 Blender 對照,所以這篇只引用官方數字,不下「誰比較快」的結論。需要穩定的 Blender 自動化流程,可以參考我之前寫的 Claude 用 Blender 做 PDF 分鏡動畫。

vork 現在有哪些限制?

先看畫面。雕塑隨手持鏡頭穩定貼在場景裡,支架接牆的位置也對得上,但倒影放大看就露餡:

vork 合成畫面的倒影局部放大:線框雕塑的倒影呈碎點狀,AFTER RAIN 字樣的倒影已無法辨識,且落在沒有水的路面上
  • 倒影偏碎:字樣的倒影已經看不出字。
  • 倒影位置不對:字樣倒影落在乾燥路面,第 119 幀的雕塑倒影也跑出水窪範圍。
  • Windows 讀影片失敗:直接讀 plate.mp4 時出現 [DXVA2] Failed to create Direct3D device。我改成 PNG 序列 plate_seq/%04d.png 才成功。
  • 攝影機解算仍是暫定結果:驗證狀態為 PROVISIONAL,最佳化撞到 200 次評估上限,官方範例也註明長度、比例和離牆深度沒有獨立實測。
  • 沒有霧和體積:官方寫明 fog 與 participating volumes 會被忽略,大場景和密集透明也可能失敗。
範例準備階段還有兩個環境問題。prepare.py 用 urllib 下載素材被 Pexels CDN 回 403,我改用 curl 下載,SHA256 與官方相符。系統 Python 3.11 裝不了 numpy 2.5.4,改用 uv 建 Python 3.12 環境。

這次全片只算到 540p,1080p 只驗了單張,沒有跑完整短片。

vork 的授權能商用嗎?

可以,但要看清楚範圍。LICENSE 寫明研究預覽期免費、可用於商業工作,你做出來的場景、程式和影片歸你。

行為是否允許
公司內部使用、交付影片給客戶可以
用 AI agent 操作 vork可以
修改後自己使用可以
轉售 vork,或散布修改版需書面許可
做讓別人提交場景的託管渲染服務需書面許可
授權只涵蓋當前版本,之後的版本可能改成付費條款。影片縮圖寫的「开源」和 LICENSE 不一致,要拿來做產品底層時以 LICENSE 為準。

誰適合現在就試?

適合:

  • 想用程式批次產片頭、產品旋轉動畫、Shorts 素材,而且需要反覆改色改字。
  • 有 NVIDIA 光追卡或 Apple Silicon,願意接受研究預覽版的變動。
  • 想研究 agent 如何用「算圖 → 看圖 → 修改」閉環操作視覺工具。
先不要:
  • 需要霧、體積光、複雜流體的電影級鏡頭。
  • 要把渲染能力包成對外服務。
  • 只想要寫實畫面,沒打算處理 3D 資產。
「電影特效要變天」目前言過其實,它現在做到的是「讓 agent 能精確修改一個 3D 鏡頭」。等霧和體積上線、Windows 影片解碼修好、大場景穩定,我會重新評估。

想試的話,先跑上面那四行指令,再把 scene.json 裡的一個顏色改掉重算一次,就能判斷這套流程適不適合你。

影片素材:「Ally」 by Rafael Fernanz / Pexels,依 Pexels License 修改。

author
陳
陳彥彤

AI 工程師 · AI 顧問。Java 後端 8 年、AI 工程師 2 年。AI 內訓 · AI 導入顧問 · 前後端與雲端培訓。

support

覺得文章有用可以到 GitHub 給個 star,或是透過信箱聊聊 AI 內訓、AI 導入顧問或前後端 / 雲端培訓。

related

相關文章

[AI 工具] · 16min
Google Professional Agentic Architect 認證怎麼考?官方規格查核+ADK 評測實測
Google Cloud 在 2026-11-11 公布的 Professional Agentic Architect 是第一張以 AI agent 為主題的專業認證,選擇題過了還要在 Google Skills 考實作 lab,考綱還直接點名 Claude Code。範圍 3、4 的寫 agent 與評測佔 55%——我用 ADK 跑了一份 golden evalset,正常版全過、改壞版 3 題全被抓,是最值得先練的一段。
[AI 工具] · 19min
Claude 接 MCP 做 AI 影片:Higgsfield 真的無限免費嗎?我用本機 Wan2.2 做了免費版
Higgsfield MCP 是一個 hosted MCP server,接進 Claude 後能直接叫 Kling、Veo、Seedance 生影片;IG 業配說的「3 天免費、無限使用」只適用網頁手動生成,MCP 官方寫明一律扣 credits。我照同樣形狀寫了本機版接 ComfyUI Wan2.2,Claude Code 一支 2 秒短片 99 秒、0.66 美元、影片 0 credits——畫質只到草稿等級。
[AI 教學] · 13min
awesome-agentic-ai-zh 實測:8.4k 星中文 AI Agent 學習地圖,50 支範例跑過 49 支
awesome-agentic-ai-zh 是 Lehigh 博士研究生 Wenyu Chiou 在 2026-05 開的 MIT 授權 repo,用繁中、英文、簡中三語把 AI Agent 從零排到上線,分「用 CLI Agent 做事」和「自己寫 Agent」兩條路,每題附 mock 測試。半年 8.4k 星,我不帶 API key 跑完 50 支測試 49 支通過——當自學或開課骨架可以直接用,只是 Stage 4 框架要一題一個環境裝。