用 Gemini Robotics 2 實現多機器人協作


🏦 台灣Pay 銀行轉帳 💙 PayPal
Gemini Robotics 2 新增功能,讓多台機器人同時協作完成同一個任務。
- 00:00 現實世界有很多任務一個人很難獨自完成,機器人的世界也一樣。
- 01:03 這次發布想展示:不只能控制高自由度 humanoid 的大範圍動作,在用到夾爪與 bi-arm 機器人的任務上仍能維持動作精準度。
- 01:37 任務完成後使用者稱讚 Apollo,Apollo 回應請別忘了 Duo,說 Duo 把精細的工具裝組與整理做得很好。
💡 你可以怎麼用:以後看到機器人或 AI 的新聞,可以先問兩件事:它是「一個大腦控制全部」還是「各自思考再溝通」?它知不知道什麼時候算做完?你自己用 AI 工具做多步驟的事時,也可以學這個分工法:先請它拆步驟,並講清楚「做到什麼樣子才算完成」。
看全部 16 條重點
🧑🏫 這支影片示範 Google DeepMind 的機器人 AI「Gemini Robotics 2」怎麼讓兩台機器人分工整理車庫:一台人形機器人負責搬東西,另一台接手需要細心的收尾。值得看的地方是,它們不是被同一個大腦遙控,而是各自思考、互相溝通,像兩個同事一樣合作。
- 00:00 現實世界有很多任務一個人很難獨自完成,機器人的世界也一樣。↳ 就像搬沙發要兩個人、煮一桌菜需要幫手,有些事單靠一台機器人也做不來,或做得很沒效率,所以才需要合作。
- 00:00 Gemini Robotics 2 新增一項功能:讓多台機器人同時協作、完成同一個任務。↳ Gemini Robotics 2 是 Google DeepMind 給機器人用的 AI 模型。這一版的新東西是:好幾台機器人可以同時為同一件事分工,不再只是各做各的。
- 00:00 示範指令:使用者請 Apollo 幫忙整理車庫,完成後要把所有工具放回工具組(kit)。↳ 示範用的是一句很生活化的話:請機器人整理車庫,最後把工具收回工具組(kit,就是一盒有固定位置的成套工具)。沒有逐步下指令。
- 00:00 示範步驟:把 scrubbing mitt 和白色透明噴瓶一起拿起,放到上層架子最右邊的透明收納箱。↳ scrubbing mitt 是洗車用的手套型刷具。這一步要一次拿兩樣東西,放到指定的架子、指定的箱子,考驗機器人聽不聽得懂位置描述。
- 00:30 high-level reasoning model 負責拆解任務:要做什麼、要去哪裡。↳ high-level reasoning model 是負責「動腦」的模型,把「整理車庫」這種籠統的話拆成一步步:先拿什麼、走去哪。它管規劃,不是管手怎麼動。
- 00:30 這個任務的關鍵不只是判斷下一步做什麼,還要判斷什麼時候算完成。↳ 機器人常見的問題是不知道該停,會重複做或提早收工。所以它還得自己看現場,判斷「這一步做好了沒、整件事結束了沒」。
- 00:30 Apollo humanoid 會把控制權交給 Duo,請它幫忙完成任務的最後一部分,畫面中可看到它把 Duo 拉進來協助。↳ Apollo 是人形機器人,Duo 是另一台機器人。hand over control 意思是 Apollo 做到一個段落,主動把最後一段交給 Duo 接手,像同事交棒。
- 00:30 交給 Duo 的指令:把所有工具裝進工具組、蓋上工具組,再把工具組放回收納箱。↳ Duo 接到的工作有三步:把工具一件件裝進工具組、蓋上蓋子、整盒放回收納箱。這種裝盒動作就叫 kitting。
- 00:30 把物品放進收納箱這類任務,最後一公分沒那麼重要;但在這裡(裝工具組),精準度對任務完成相對重要。↳ 東西丟進大箱子,差個一公分沒關係;但工具要對準工具組裡的位置,差一點就放不進去、蓋不起來,所以這段特別要求精準。
- 01:03 這次發布想展示:不只能控制高自由度 humanoid 的大範圍動作,在用到夾爪與 bi-arm 機器人的任務上仍能維持動作精準度。↳ 高自由度 humanoid 指關節很多、能做大動作的人形機器人;gripper 是夾爪,bi-arm 是雙手臂機器人。重點是:大動作和細活,同一套 AI 都做得來。
- 01:03 兩台機器人跑的是同一套 stack,但不是用一個神經網路控制兩台,而是各有一份自己的副本。↳ stack 是指整套軟體系統,neural network(神經網路)就是 AI 的「腦」。兩台裝的是同一套系統,但各有一顆自己的腦,不是一顆腦同時操控兩個身體。
- 01:03 兩台機器人各自獨立思考,並透過 reasoning(推理)來協調彼此。↳ 因為各有各的腦,它們得靠 reasoning(推理,也就是自己想清楚狀況再決定)來配合對方,比較像兩個人商量,不是照中央指揮行動。
- 01:37 任務完成後使用者稱讚 Apollo,Apollo 回應請別忘了 Duo,說 Duo 把精細的工具裝組與整理做得很好。↳ 被稱讚時 Apollo 會提醒別忘了 Duo 的功勞。這個小橋段說明它清楚知道誰做了哪一段,不是只顧自己的部分。
- 01:37 每台機器人會跟人對話、也彼此對話,並決定什麼時候是自己出手幫忙的適當時機。↳ 機器人會跟人講話,也會跟另一台機器人講話,並且自己判斷「現在該我上場了嗎」。不需要人在旁邊一一指派誰做什麼。
- 01:37 機器人若能與其他機器人溝通、協作,能做的任務數量會大幅擴展。↳ 一台機器人擅長的事有限;能互相溝通後,可以把不同專長的機器人組合起來,能處理的工作種類就多很多。
- 01:37 團隊希望機器人能進入真實世界,在日常生活中幫助所有人。↳ 這是團隊的願景:希望機器人最後能走出實驗室,在一般人的日常生活裡幫忙。影片講的是方向,不是上市時程。
📘 術語
Gemini Robotics 2(Gemini Robotics 2):這次新增多台機器人同時協作完成同一任務的功能。
Apollo humanoid(Apollo 人形機器人):示範中接收整理車庫指令的人形機器人,會把控制權交給 Duo。
Duo(Duo):示範中接手最後一段、負責精細裝工具組與整理的機器人。
high-level reasoning model(高階推理模型):負責拆解要做什麼、要去哪裡,並判斷何時完成。
hand over control(交出控制權):Apollo 把控制權交給 Duo,請它幫忙任務的最後一部分。
high degree of freedom humanoid(高自由度人形機器人):字幕提到可控制其大範圍動作,未進一步解釋。
grippers(夾爪):字幕提到在用到夾爪的任務上仍能維持動作精準度,未進一步解釋。
bi-arm robots(雙臂機器人):字幕提到在這類機器人的任務上仍能維持動作精準度,未進一步解釋。
stack(系統堆疊):兩台機器人跑同一套 stack,各有自己的一份副本。
neural network(神經網路):字幕說不是用一個神經網路同時控制兩台機器人。
kit / kitting(工具組/裝組):把所有工具裝回工具組、蓋上,再放回收納箱。
Apollo humanoid(Apollo 人形機器人):示範中接收整理車庫指令的人形機器人,會把控制權交給 Duo。
Duo(Duo):示範中接手最後一段、負責精細裝工具組與整理的機器人。
high-level reasoning model(高階推理模型):負責拆解要做什麼、要去哪裡,並判斷何時完成。
hand over control(交出控制權):Apollo 把控制權交給 Duo,請它幫忙任務的最後一部分。
high degree of freedom humanoid(高自由度人形機器人):字幕提到可控制其大範圍動作,未進一步解釋。
grippers(夾爪):字幕提到在用到夾爪的任務上仍能維持動作精準度,未進一步解釋。
bi-arm robots(雙臂機器人):字幕提到在這類機器人的任務上仍能維持動作精準度,未進一步解釋。
stack(系統堆疊):兩台機器人跑同一套 stack,各有自己的一份副本。
neural network(神經網路):字幕說不是用一個神經網路同時控制兩台機器人。
kit / kitting(工具組/裝組):把所有工具裝回工具組、蓋上,再放回收納箱。
✏️ 小考一題
根據影片,兩台機器人是怎麼被控制並協調合作的?
A. Apollo 直接接管 Duo 的手臂,替它完成所有動作B. 兩台各有一份相同 stack 的副本,各自思考,透過 reasoning 協調C. 由一個神經網路同時控制兩台機器人D. 由人類全程遠端遙控兩台機器人的每個動作看答案
答案:B。[01:03] 字幕說兩台機器人跑同一套 stack,不是用一個神經網路控制兩台,而是各有自己的副本、各自思考,並透過 reasoning 協調。
💛 覺得有幫助?支持一下


課本免費、沒有廣告,支持與否都能照常讀 🐰