由多模態大模型驅動的機器人“超級大腦”有了新的落地案例。

孵化自哈爾濱工業大學(深圳）計算與智能研究院的若愚科技，宣布推出若愚·九天機器人大腦，其中實現多模態大模型驅動下的群體智能是若愚·九天機器人大腦的一大突破。

群體智能，即“一個大腦，多個身體”，若愚·九天大腦可集中控制多臺機器人（包括機械臂和AGV）。“多個機器人協同高效率執行復雜任務，這些不同任務之間有復雜的依賴關系。例如，兩臺機器人在炒菜的同時，另一臺機器人去拿碗筷。如果因為菜品制作工序臨時變化，導致炒菜時間延長，另一臺機器人拿完碗筷后，可以自主決定繼續揀選下一道食材。機器人大腦會自主規劃任務邏輯，讓所有機器人盡可能不停下，同時又確保協作的安全性。這是基于傳統規則的示教方法很難實現的。”若愚科技首席產品官鄧煜平表示。

據鈦媒體App了解，目前，若愚·九天機器人大腦已經通過無人廚房環境的技術方案驗證，驅動多智能體掌勺無人廚房。通過人類自然語言與多個機器人交互完成從點菜到上菜的全流程，將“炒菜”的長序列任務進行自主規劃。

與當下市面上常見具身智能技術不同，若愚·九天機器人大腦能夠實現人類意圖理解、高頻人機交互和復雜任務規劃等功能。

長序列任務規劃（快速生成復雜任務規劃）

當人類提出“來一份清炒生菜”的需求時，機器人能自主理解人類意圖并規劃任務，分解成“到食材區撿菜”、“到預備區稱重”、“到制作區炒菜”、“到消費區上菜”等多個步驟。

若愚·九天機器人大腦也具有一定“舉一反三“的泛化能力。例如，訓練模型的時候，只是告訴它要加蒜，沒有訓練過加辣椒。但之后如果人要求機器人加辣椒，它可以自動理解蒜和辣椒都屬于配料，知道該在加蒜的環節替換成辣椒。

大模型驅動的群體智能（賦予多智能體自主分工協作能力）

若愚·九天機器大腦在控制機器人執行層面的小腦方面也做了技術優化。例如，針對多樣環境感知難的挑戰，若愚科技研發了大模型3D可供性感知技術，對物體功能可供性區域感知，可免注冊、抗復雜光、抗堆疊地抓取多種物體。

針對“機器人從配料盒倒取蒜蓉”、“用鏟子從鍋中倒取成品菜”等復雜動作執行難的挑戰，若愚科技提出了擴散模型驅動的模仿學習技術，實現復雜技能和動作的執行。同時，結合多模態大模型驅動的機器人多臂協同技術，大幅提升了目標任務的協作能力與執行效率。

擴散模型驅動的復雜動作執行（無需現場示教，執行）

深圳若愚科技有限公司成立于2023年，于今年3月完成超5000萬天使輪融資。目前已與國際瓦楞紙包裝智能裝備、水上動力設備頭部企業東方精工集團達成合作，提升東方精工核心產品的智能化水平。

若愚科技聯合創始人兼首席執行官孫騰博士表示：“若愚科技的九天機器人大腦以及機器人小腦的技術突破，可以進一步應用到工業領域的復雜工序，例如焊接、打磨、點膠，物流領域的分揀與混合碼垛，商業領域的無人零售、無人藥房、立體清潔，未來還可進一步延展到消費領域。目前，若愚科技也已經在某些特種領域，與產業伙伴針對特定場景，共同打造更加智能的機器人，把人從危險、繁重、重復的勞動中解放出來，為行業提質增效、打造新質生產力。”