🧠
第二大腦
🌏國際視野2026-08-04

Gemini Robotics ER 2(Gemini Robotics ER 2:影片理解、任務編排與多機器人協作)

#部落格#英文#Google DeepMind#機器人#實體AI

Gemini Robotics ER 2(Gemini Robotics ER 2:影片理解、任務編排與多機器人協作)

來源: Google DeepMind 原文日期: 2026-07-30

中文摘要

Google DeepMind 發布 Gemini Robotics ER 2,定位為機器人的「高階大腦」(embodied reasoning 模型):即時空間推理、多步驟任務規劃、多機器人協作,並把馬達執行動作交給底層 vision-language-action (VLA) 模型。相較前代 ER 1.6 的關鍵升級:透過連續影片串流追蹤自身進度、出錯即時自適應修正、知道何時該切換下一步;並新增多機器人協作(不同機器人透過共享語意理解交接任務,如 Apptronik Apollo 2 與 Franka F3 Duo 合作)。技術亮點:進度分類(progress classification)57.4% 準確率、關鍵時刻定位(moment-finding)91.3% 準確率且延遲僅 0.96 秒(為真實世界安全操作所需的亞秒級延遲);與 Gemini Live API 雙向串流整合,消除「停頓思考」的僵硬感;並強調安全——在 Safety Instruction Following 與 Human Proximity 基準上表現最佳(有人靠近時會暫停、人離開後自動復工)。模型已透過 Gemini API、AI Studio 公開,Gemini Enterprise Agent Platform 提供私人預覽。

關鍵洞察

  • 「任務何時完成」是機器人最難的問題:影片理解 + 進度分類讓機器人能驗證任務是否完成到規格,再切換下一步——這是實體 agent 化的關鍵突破。
  • 多機器人協作進入產品化:異質機器人(輪式/人形/機械臂)透過共享語意理解分工,單一機器人做不到的複雜流程成為可能。
  • 亞秒級延遲是實體 AI 的安全前提:moment-finding 以遠小於大模型的算力成本達到 4 倍執行速度,正是物理世界操作需要的。
  • 安全設計內建:人體接近偵測、安全約束遵循、尋求人類澄清——並發布安全技術報告與新基準。
  • 對企業的意義:實體工作(倉儲、製造、服務)自動化的技術棧正在成形(LLM 大腦 + VLA 執行 + 雲端 API)。
  • 原文關鍵句(英文保留)

    > "Gemini Robotics ER 2 represents a step change in powering robots with video understanding, task orchestration, and multi-robot collaboration — making it possible for robots to be more helpful in the physical world."

    對 CJ 哥的價值

  • 前瞻訊號:實體 AI/機器人自動化趨勢監控——企業若涉足製造、物流、服務業自動化,這是重要技術里程碑。
  • 可與 MIT「FTC 禁止外國人形機器人」文章對照閱讀,形成「實體 AI 技術 vs 政策」的完整圖像。
  • 內容生產:機器人 + LLM 結合趨勢的中文解讀素材。
  • 相關文章

    WeatherNext: AI model achieves breakthrough in forecasting cyclones(WeatherNext:AI 預測熱帶氣旋的突破)

    # WeatherNext: AI model achieves breakthrough in forecasting cyclones(WeatherNext:AI 預測熱帶氣旋的突破) **來源:** Google DeepMind **原文日期:** 2026-08-06 ## 中文摘要 DeepMind 於《Nature》發表 WeatherNext:單一 AI 模型同時預測氣旋路徑...

    Working with the American Psychological Association on youth mental health and AI(攜手美國心理學會:青少年心理健康與 AI)

    # Working with the American Psychological Association on youth mental health and AI(攜手美國心理學會:青少年心理健康與 AI) **來源:** OpenAI **原文日期:** 2026-08-06 ## 中文摘要 OpenAI 宣布與美國心理學會(APA)合作,將心理科學引入青少年 AI 產品設計,聚焦三大領...

    From asking to doing: How the world is putting ChatGPT to work(從「提問」到「做事」:全球如何把 ChatGPT 用在工作上)

    # From asking to doing: How the world is putting ChatGPT to work(從「提問」到「做事」:全球如何把 ChatGPT 用在工作上) **來源:** OpenAI **原文日期:** 2026-08-06 ## 中文摘要 OpenAI 首次發布國別級 ChatGPT 使用數據(OpenAI Signals 平台,涵蓋 Free/Go/...

    Google Earnings, The Frontier Case, Amazon Earnings(Google 財報、前沿案例、Amazon 財報)

    # Google Earnings, The Frontier Case, Amazon Earnings(Google 財報、前沿案例、Amazon 財報) **來源:** Stratechery(Ben Thompson) **原文日期:** 2026-08-05 *註:本文為 Stratechery Plus 付費內容,本筆記根據免費摘要與當週電子報(2026.32)整理。* ## 中文...