Blender + Claude + Higgsfield:更進階的 AI 工作流


🏦 台灣Pay 銀行轉帳 💙 PayPal
用 Claude 在 Blender 做好 previs 動態,再交給 Higgsfield 的 SeaDance 2.5 生成最終 AI 影片
- 00:00 工作流核心:不讓 AI 影片模型自己發明整個鏡頭,而是先用 Claude 在 Blender 建立並控制動態,再當成 Higgsfield 最終生成的藍圖
- 05:49 Claude 透過連線建出賽道與周邊環境、車子與移動路徑、攝影機架設,並在 Blender 內完成整段 20 秒動畫
- 13:24 各角色分工:Claude 負責建構與迭代,Blender 提供動態與構圖的直接控制,SeaDance 負責最終寫實生成
💡 你可以怎麼用:下次想做一段 AI 影片,別直接把一句描述丟給影片模型。先請 Claude 在 Blender 做出鏡頭順序定好的預覽,免費改到滿意,再準備一張外觀參考圖,連同一份分開寫「動作」和「外觀」的指令一起送去生成。
看全部 47 條重點
🧑🏫 這支影片示範一種做 AI 影片的方法:先讓 Claude 在免費的 3D 軟體 Blender 裡做出粗略的預覽動畫,把車怎麼跑、鏡頭怎麼動都定好,再交給 Higgsfield 平台的 SeaDance 2.5 模型生成寫實成品。好處是鏡頭照你設計的走,不用讓 AI 自由發揮,而且修改階段完全不花生成點數。
- 00:00 工作流核心:不讓 AI 影片模型自己發明整個鏡頭,而是先用 Claude 在 Blender 建立並控制動態,再當成 Higgsfield 最終生成的藍圖↳ 做法是不讓 AI 影片模型自己決定整個鏡頭。先用 Claude 在 Blender(免費 3D 動畫軟體)把車怎麼跑、鏡頭怎麼動做好,再把它當藍圖交給 Higgsfield 生成。
- 00:00 在 Blender 裡建構與修改時完全不花 Higgsfield credits,只有準備生成最終影片時才會用到↳ credits 是 Higgsfield 生成影片時扣的點數。在 Blender 裡改幾次都是自己電腦在跑,不會扣點。只有按下生成最終影片那一步才會用到點數。
- 00:32 關鍵是 Higgsfield Blender plugin:把 Blender 變成可控的 AI 影片 previs 工作區,在正式生成前先調好動態、構圖、時間點與整體鏡頭↳ plugin 是外掛,裝進軟體可以增加新功能。這個外掛讓 Blender 變成預演場。previs 是正式生成前的粗略預覽動畫,用來先把動作、構圖和節奏調好。
- 00:32 完整流程:透過 plugin 連接 Claude 與 Blender → 用白話指令建立並修改 3D previs → 算圖成 motion reference → 在 SeaDance 2.5 搭配另一張視覺參考生成最終影片↳ 四個步驟:用外掛接上 Claude 和 Blender → 用講話的方式叫它做、改 3D 預覽 → 輸出成動作參考影片 → 交給 Higgsfield 的影片模型 SeaDance 2.5,搭配一張外觀參考圖生成成品。
- 01:04 Higgsfield 是以 AI 圖像與影片製作流程為核心的生成式創作平台,不只是單一影片模型,而是一整套創作、導演、製作 AI 媒體的工具↳ Higgsfield 不是單一 AI 模型,而是一個平台。做 AI 圖片和影片需要的工具都集中在這裡,從發想、導演到產出都能在裡面完成。
- 01:04 Higgsfield 的 Cinema Studio 著重較可控的電影感鏡頭製作;Marketing Studio 用來以較有結構的流程製作廣告、活動內容等行銷素材↳ 平台裡有不同的工作區。Cinema Studio 適合拍電影感鏡頭,運鏡比較好控制。Marketing Studio 會照固定步驟帶你做廣告、活動宣傳這類行銷素材。
- 01:37 安裝 plugin:在 Higgsfield 上方導覽列開 Plugins,選 Blender;那裡也有 Photoshop、Premiere Pro、After Effects、DaVinci Resolve、Figma 等,本流程只需要 Blender↳ 在 Higgsfield 網站上方選單點 Plugins,選 Blender。旁邊也有 Photoshop、Premiere 等軟體的外掛,這次只需要 Blender 那一個。
- 02:07 Blender plugin 免費,按 Download 下載後安裝進 Blender↳ 外掛免費。按 Download 下載檔案,等一下再裝進 Blender。
- 02:07 連線原理:Higgsfield 提供 bridge URL,Claude 連上這個 bridge 後,agent 就能和 Blender 裡的工具溝通↳ bridge URL 是一串網址,作用像中間的轉接頭。Claude 連上它之後,就能當 agent(會自己動手操作工具的 AI),直接叫 Blender 做事。
- 02:07 設定 Claude:先複製 bridge URL,開 Claude desktop app → Customize → Connectors → Add → Add custom connector↳ 先複製那串網址,打開電腦版 Claude,依序點 Customize → Connectors(管理外部連線的地方)→ Add → Add custom connector,自己新增一條連線。
- 02:41 替 connector 命名(示範用 Higgsfield + Blender),貼上 bridge URL,按 Continue;驗證設定維持建議選項,按 Add↳ 名字自己取,好認就好,影片裡叫 Higgsfield + Blender。貼上網址按 Continue。驗證方式照預設不用改,再按 Add。
- 02:41 完成 Claude 開啟的登入驗證流程後,connector 會在清單中顯示為 Connected,代表 Claude 與 Higgsfield Blender bridge 已連接↳ Claude 會跳出登入畫面,登入完成後,清單上這條連線會顯示 Connected。這就代表 Claude 已經能透過轉接頭操作 Blender。
- 03:14 若沒有 Blender,到官方網站 blender.org 的下載頁選對應作業系統版本;Blender 完全免費,不需購買其他軟體↳ 還沒裝 Blender 的話,到官網 blender.org 的下載頁,選自己電腦的系統版本。Blender 是免費軟體,整個流程不用另外買軟體。
- 03:45 不必是 Blender 高手,講者自己也不是;重點就是讓 Claude 處理大部分技術性的場景建構工作↳ 不會 Blender 也沒關係,講者自己也不熟。建場景、擺鏡頭這些技術活交給 Claude,你只要說清楚想要什麼畫面。
- 03:45 啟用 plugin 最簡單的方式:把下載的 plugin zip 檔直接拖進 Blender 視窗,確認安裝後即可使用↳ 啟用外掛最快的方法:把剛下載的 zip 壓縮檔直接拖進 Blender 視窗,跳出確認時按安裝,裝好就能用。
- 04:17 安裝後會看到 Sign in to Higgsfield 按鈕;游標放在 3D viewport 上按 N 可開關右側欄(N-panel)↳ 裝好後會出現 Sign in to Higgsfield 登入鍵。3D viewport 是 Blender 中間顯示場景的大區域。滑鼠停在那裡按 N,可以開關右側欄,這條側欄叫 N-panel。
- 04:17 開 Higgsfield 分頁按 Continue in browser,在瀏覽器確認 device code 與 plugin 產生的一致,再登入 Higgsfield 帳號↳ 在側欄點 Higgsfield 分頁,按 Continue in browser 開網頁。device code 是一組驗證碼,要先確認網頁上顯示的和 Blender 裡的一樣,再登入帳號,避免連錯。
- 04:49 Higgsfield 會要求授權 Blender plugin MCP 存取帳號,按 Allow 完成授權↳ 網頁接著會問要不要讓「Blender plugin MCP」使用你的帳號。MCP 是讓 AI 和外部工具互相溝通的一套規格。按 Allow 就完成授權。
- 04:49 plugin 面板中有可設定 aspect ratio、resolution、duration 等項目的區塊↳ 外掛面板有一區是設定成品規格:aspect ratio 是畫面長寬比例,例如 16:9 橫式;resolution 是解析度;duration 是影片長度。
- 04:49 Camera 提供控制 Blender 場景攝影機的工具,含 phone camera mode,可用手機更自然地瞄準、移動攝影機↳ Camera 區用來控制場景裡的攝影機。phone camera mode 可以拿手機當攝影機,靠轉動、移動手機來取景,比用滑鼠拖更像真的在拍。
- 04:49 Assets 用來存取與管理專案中要用的媒體與 3D 素材↳ Assets 是素材庫,放這個專案會用到的圖片、影片和 3D 模型,方便找、方便管理。
- 05:19 建動畫用 Claude Code,已選好工作資料夾,這次測試用 Opus 5、high effort↳ 講者用 Claude Code 下指令,它是能在電腦上讀寫檔案、執行任務的 Claude 版本。事先選好工作資料夾,模型用 Opus 5,思考強度設 high effort。
- 05:19 第一個 prompt:從零做 20 秒電影感汽車 previs,紅色性能車行駛於蜿蜒山路賽道↳ 第一個指令直接說需求:從零做一段 20 秒、有電影感的汽車預覽動畫,一台紅色跑車開在彎彎曲曲的山路賽道上。
- 05:19 鏡頭設計:遠景開場 → 追上車 → 車尾追拍 → 側面跟拍 → 最後非常貼近車子↳ 指令裡也寫好鏡頭順序:先遠遠拍全景,鏡頭追上車,接著從車後追拍,再到車側並行拍,最後貼近車子。順序先講清楚,AI 才不會亂排。
- 05:49 Claude 透過連線建出賽道與周邊環境、車子與移動路徑、攝影機架設,並在 Blender 內完成整段 20 秒動畫↳ Claude 透過連線自己動手:蓋出賽道和地形,放好車並設定 motion path(行車路線),架好 camera rig(攝影機的擺位與運動),把 20 秒動畫做完。
- 05:49 產出場景包含山景、賽道、樹木、護欄、車子與完整攝影機動畫,切到攝影機視角播放檢查↳ 做出來的場景有山、賽道、樹、護欄、車,還有整段攝影機運動。講者切到攝影機視角播放,檢查實際拍出來的畫面對不對。
- 07:13 第一版評價:基本結構已到位,車沿路行駛、鏡頭從遠追近,技術上已可當 motion reference↳ 第一版的骨架已經對了:車沿著路開,鏡頭從遠追到近。光這樣就能當動作參考,後面的 AI 照著動就好。
- 07:13 第一版缺點:環境太陽春,山形簡單、植被重複,賽道旁細節與景深不夠↳ 缺點是背景太簡陋:山的形狀單調,樹看起來一直重複,賽道旁邊沒什麼細節,畫面也缺少遠近層次。
- 07:46 第二個 prompt 不重建動畫,保留車行路徑、賽道配置、整體時間點與鏡頭推進,主要提升 previs 視覺品質↳ 第二次不是重做,而是先講明哪些不能動:車的路線、賽道配置、節奏、鏡頭順序全部保留,只把畫面做得好看一點。這樣前面調好的東西才不會跑掉。
- 07:46 同時要求小幅修動態:更好的車輪表現、更乾淨的車輛動態,改善車尾追拍與最後特寫↳ 動作也順便小修:輪子轉起來更像真的,車子移動更順,車後追拍和最後的特寫這兩段也再改好一點。
- 09:15 修改後:山更自然、道路更融入地形、路緣與護欄更乾淨、植被更有變化與層次;鏡頭推進不變,追拍更穩、近拍更清楚↳ 改完後山比較自然,路貼合地形,路邊和護欄更乾淨,樹有高低遠近的變化。鏡頭順序沒變,追拍更穩,近拍看得更清楚。
- 09:15 previs 不需把 Blender 算圖做到寫實,主要是為最終 AI 生成提供強的 motion reference↳ 預覽不需要做到像照片一樣真,那是最後 AI 的工作。預覽只要把「怎麼動」交代清楚就夠了,不必在這裡花太多時間磨畫面。
- 09:45 輸出設定:開 Output Properties,解析度維持 1920 x 1080;動畫共 600 格、設計為 20 秒,維持 30 fps(也可用 24 fps)↳ Output Properties 是 Blender 設定輸出規格的地方。解析度維持 1920×1080。動畫共 600 格,fps(每秒幾格畫面)設 30,剛好 20 秒。也可以用 24 fps。
- 09:45 兩份參考要分工清楚:Blender 動畫管攝影機運動、構圖、時間點、車輛軌跡與整體動態↳ 關鍵是給 AI 的兩份參考各管各的。Blender 動畫只管「動」:鏡頭怎麼移、畫面怎麼構圖、什麼時間點發生什麼、車怎麼跑。
- 09:45 圖片參考管車子外觀、環境、材質、打光與寫實視覺風格↳ 另一張圖片只管「長相」:車的外觀、環境、材質質感、光線,還有整體要多寫實。
- 10:17 目標:讓 SeaDance 把 Blender previz 當成鎖定的動態藍圖,視覺上轉換成圖片定義的寫實汽車場景↳ 目標是讓 SeaDance 把預覽當成不能改的動作藍圖。動法完全照預覽,只把畫面換成圖片裡那種真實的汽車場景。
- 10:17 Claude 產生的 prompt 很詳細:拆解 20 秒鏡頭推進、定義兩份參考各自用途,並加限制避免 SeaDance 亂加剪接、運鏡或換場↳ 給 SeaDance 的指令也是請 Claude 寫的。它把 20 秒逐段交代清楚,說明兩份參考各管什麼,還加上禁止事項:不准自己剪接、改運鏡或換場景。
- 10:48 到 Higgsfield 影片區選 SeaDance 2.5,上傳寫實圖片與 Blender playblast,貼上 Claude 產生的 prompt↳ 到 Higgsfield 影片區選 SeaDance 2.5,上傳寫實圖片和 playblast(從 Blender 快速輸出的輕量預覽影片),再貼上 Claude 寫的指令。
- 10:48 生成設定:時長 20 秒、16x9、解析度 1080p、bit rate 設 high↳ 生成設定:長度 20 秒,畫面比例 16:9,解析度 1080p。bit rate 是每秒存多少影像資料,數值越高畫質越好、檔案也越大,這裡設 high。
- 10:48 三者分工:圖片告訴模型成品長相,Blender 動畫告訴它鏡頭怎麼動,prompt 說明兩份參考如何配合↳ 三樣東西各管一件事:圖片說成品長什麼樣,動畫說鏡頭怎麼動,指令說明這兩份參考要怎麼搭配。
- 11:51 成果:有寫實山景、紅色超跑與參考圖的光線材質,鏡頭仍依照 Blender 設計的結構↳ 成品有真實的山景和紅色超跑,光線和材質跟參考圖很像。鏡頭的走法還是照 Blender 裡設計的來。
- 11:51 遠景開場、追上、車尾追拍、並行側拍到近距離跟拍都轉成更寫實的電影感;動態可控、車子一致、環境全程穩定↳ 遠景、追上、車後追拍、側拍到貼近跟拍,每一段都變成寫實的電影感。動作照設計走,車子從頭到尾長得一樣,背景也沒有中途亂變。
- 12:22 總結流程:裝 plugin 連接 Claude → 從零建 20 秒 previz → 修改同一場景 → 算輕量 playblast → 搭配寫實圖片參考↳ 整個流程再走一次:裝外掛接上 Claude → 做 20 秒預覽 → 在同一個場景上修改 → 輸出輕量預覽影片 → 搭配一張寫實圖片參考。
- 12:22 Claude 協助寫出把「動態」與「外觀」明確分開的 SeaDance 2.5 prompt↳ 給 SeaDance 的指令也是 Claude 幫忙寫的。重點是把「怎麼動」和「長什麼樣」分開講清楚。
- 12:53 成本結構:整個 Blender 階段(建場景、修動畫、測鏡頭、準備 previz)不花任何 Higgsfield credit,只有最後用 SeaDance 2.5 生成時才用↳ 花錢的時機:蓋場景、改動畫、試鏡頭、準備預覽,都不扣 Higgsfield 點數。只有最後用 SeaDance 2.5 生成時才會扣。
- 12:53 因此可以盡情花時間設計與修改動態,等有了更可控的藍圖再用生成 credits↳ 所以動作可以慢慢改到滿意,不用每試一次就花點數。等藍圖確定了,再把點數用在生成上。
- 13:24 各角色分工:Claude 負責建構與迭代,Blender 提供動態與構圖的直接控制,SeaDance 負責最終寫實生成↳ 分工很清楚:Claude 負責動手建場景、一改再改;Blender 讓你直接掌控動作和構圖;SeaDance 負責最後生成寫實影片。
📘 術語
previs / previz(預視覺化):正式生成前先在 Blender 做的預覽動畫,用來調整動態、構圖、時間點與整體鏡頭
Higgsfield(Higgsfield(平台名)):以 AI 圖像與影片製作流程為核心的生成式創作平台
plugin(外掛程式):Higgsfield Blender plugin 把 Blender 變成可控的 AI 影片 previs 工作區
credits(點數):Higgsfield 生成用的點數,本流程只在最後生成影片時才花
bridge URL(橋接網址):Higgsfield 提供的網址,Claude 連上後 agent 就能和 Blender 裡的工具溝通
Connectors / custom connector(連接器/自訂連接器):在 Claude desktop app 的 Customize 裡新增,貼上 bridge URL 連接 Higgsfield + Blender
agent(代理程式):連上 bridge 後可與 Blender 內工具溝通、代為建構場景的 Claude
N-panel(N 面板(右側欄)):Blender 右側欄,游標在 3D viewport 上按 N 可開關
3D viewport(3D 視埠):Blender 顯示 3D 場景的區域,游標放在這裡按 N 開關 N-panel
device code(裝置碼):plugin 產生的代碼,登入時要確認和瀏覽器顯示的一致
MCP(MCP):授權畫面中出現「Blender plugin MCP」,需按 Allow 讓它存取 Higgsfield 帳號
phone camera mode(手機攝影機模式):可用手機更自然地瞄準、移動 Blender 場景攝影機
Claude Code(Claude Code):講者用來下 prompt、建 Blender 動畫的工具,搭配 Opus 5、high effort
camera rig(攝影機架設):Claude 在場景中建立的攝影機設定,用來做完整的攝影機動畫
motion path(移動路徑):Claude 替車子建立的行進路徑
motion reference(動態參考):把 Blender 動畫算成影片,作為最終 AI 生成時動態的參考
rear pursuit shot(車尾追拍鏡頭):鏡頭推進中從車後追拍的一段
Output Properties(輸出屬性):Blender 中設定算圖解析度與 fps 的地方
fps(每秒格數):600 格、20 秒的動畫維持 30 fps,也可用 24 fps
playblast(快速預覽算圖):從 Blender 算出的輕量動畫影片,上傳到 SeaDance 當動態參考
SeaDance 2.5(SeaDance 2.5):Higgsfield 影片區中的模型,負責最終寫實影片生成
bit rate(位元率):SeaDance 生成設定之一,本例設為 high
Higgsfield(Higgsfield(平台名)):以 AI 圖像與影片製作流程為核心的生成式創作平台
plugin(外掛程式):Higgsfield Blender plugin 把 Blender 變成可控的 AI 影片 previs 工作區
credits(點數):Higgsfield 生成用的點數,本流程只在最後生成影片時才花
bridge URL(橋接網址):Higgsfield 提供的網址,Claude 連上後 agent 就能和 Blender 裡的工具溝通
Connectors / custom connector(連接器/自訂連接器):在 Claude desktop app 的 Customize 裡新增,貼上 bridge URL 連接 Higgsfield + Blender
agent(代理程式):連上 bridge 後可與 Blender 內工具溝通、代為建構場景的 Claude
N-panel(N 面板(右側欄)):Blender 右側欄,游標在 3D viewport 上按 N 可開關
3D viewport(3D 視埠):Blender 顯示 3D 場景的區域,游標放在這裡按 N 開關 N-panel
device code(裝置碼):plugin 產生的代碼,登入時要確認和瀏覽器顯示的一致
MCP(MCP):授權畫面中出現「Blender plugin MCP」,需按 Allow 讓它存取 Higgsfield 帳號
phone camera mode(手機攝影機模式):可用手機更自然地瞄準、移動 Blender 場景攝影機
Claude Code(Claude Code):講者用來下 prompt、建 Blender 動畫的工具,搭配 Opus 5、high effort
camera rig(攝影機架設):Claude 在場景中建立的攝影機設定,用來做完整的攝影機動畫
motion path(移動路徑):Claude 替車子建立的行進路徑
motion reference(動態參考):把 Blender 動畫算成影片,作為最終 AI 生成時動態的參考
rear pursuit shot(車尾追拍鏡頭):鏡頭推進中從車後追拍的一段
Output Properties(輸出屬性):Blender 中設定算圖解析度與 fps 的地方
fps(每秒格數):600 格、20 秒的動畫維持 30 fps,也可用 24 fps
playblast(快速預覽算圖):從 Blender 算出的輕量動畫影片,上傳到 SeaDance 當動態參考
SeaDance 2.5(SeaDance 2.5):Higgsfield 影片區中的模型,負責最終寫實影片生成
bit rate(位元率):SeaDance 生成設定之一,本例設為 high
✏️ 小考一題
在這個 Blender + Claude + Higgsfield 工作流中,什麼時候才會用到 Higgsfield credits?
A. 只有最後用 SeaDance 2.5 生成最終影片時B. 在 Blender 裡用 Output Properties 算圖輸出 playblast 時C. 每次 Claude 在 Blender 裡建構或修改場景時D. 安裝並下載 Higgsfield Blender plugin 時看答案
答案:A。[12:53] 整個 Blender 階段都沒花任何 Higgsfield credit,只有最後用 SeaDance 2.5 生成最終影片時才需要;[02:07] 也說 plugin 是免費下載
💛 覺得有幫助?支持一下


課本免費、沒有廣告,支持與否都能照常讀 🐰