現場削黃瓜、疊衣服,曾爆火的刮鬍子機器人再進化,穹徹的具身智慧大腦來了!

机器之心發表於2024-07-06

7 月 4 日,在 2024 世界人工智慧大會上,具身智慧公司穹徹智慧 Noematrix (展位號:H1-A715) 宣佈推出穹徹具身大腦 Noematrix Brain,加速具身智慧大模型落地。

結合實體機器人,穹徹在完全開放的環境中向現場觀眾近距離展示了 “隨手一扔就能疊的衣物摺疊”(無限自由度物體操作,複雜物體理解堪比人類)和 “削完就能吃的黃瓜削皮”(不規則曲面操作,精細度甚至超越人類水平)等突破性技術,以及家庭地面整理等落地應用。透過這些實時演示和真實互動,穹徹具身大腦的通用性和魯棒性得以全方位展現。

穹徹具身大腦提供 “以力為中心” 的具身智慧大模型、原子技能庫 AnySkill、基礎軟體框架及相關開發者工具鏈,助力機器人輕鬆掌握更多技能、完成更多應用,充分發揮具身智慧的價值。

現場削黃瓜、疊衣服,曾爆火的刮鬍子機器人再進化,穹徹的具身智慧大腦來了!
穹徹具身大腦產品展示

穹徹智慧成立於 2023 年,由通用智慧機器人公司 Flexiv 非夕科技戰略孵化,上海交通大學教授,長江學者特聘教授、2023 年 “科學探索獎” 獲得者(目前具身智慧領域唯一)盧策吾教授擔任聯合創始人。

基於多年深耕人工智慧領域的經驗和深厚的技術積累(發表頂會頂刊 100 多篇,多次獲得國際機器人頂會最佳論文獎),盧策吾及其團隊在構建具身智慧大模型時,將技術重點放在了對操作物理常識和力反饋嵌入智慧體行為決策的聯合訓練上,從而打造了 Noematrix Brain 穹徹具身大腦。

穹徹具身大腦具備全鏈路的具身智慧技術框架。其中,穹徹自研的兩個具身智慧大模型:實體世界大模型和機器人行為大模型,可以看作此框架中的主要助推器,承擔了推進操作物理常識和智慧體行為決策的聯合訓練的重擔。

圖片

穹徹具身智慧大腦技術框架

實體世界大模型能夠透過訓練來學習操作物理常識表徵,並做到低成本可規模化地讓穹徹具身大腦理解 “世界是什麼”,本次大會上所展示的衣物摺疊正是這一強大能力的具象呈現:在 AI 的世界裡,對操作物件的本質理解會隨著其自由度增加而提升,但柔性物體的自由度是無窮維的,因此可以基於衣物的任意初始狀態完成摺疊操作這一展示,成功體現了穹徹具身大腦對複雜物體操作的理解的頂級能力。調研表明,這也是全球第一次在公開展會上開放展示初始狀態混亂的衣物摺疊。

圖片

基於通用柔性物體摺疊技能 AnyFold,機器人可以完成柔性衣物的展開、識別與摺疊等操作

而機器人行為大模型則可以做到以力和操作物件為中心坍縮訓練空間,讓穹徹具身大腦以極高的訓練效率學會 “如何決策”,且具有極佳的魯棒性和安全性。

以兩個大模型為基礎,穹徹具身大腦得以具備規劃、記憶、執行這三種核心能力。在上個月的機器之心訪談中,盧教授親自嘗試了 “世界上首個刮鬍子機器人” 的服務,其演示全程就生動呈現了這三種能力的交叉和融合。

圖片

當人頭部移動時,嵌入了高精度力反饋模組的具身智慧大模型能夠瞬時感知並決策力的變化

同時,為盧教授刮鬍子的機器人還被賦予了通用物體表面刮削技能(AnyShave)。基於穹徹具身大腦,穹徹提供不斷擴張的機器人原子技能庫 AnySkill,從而使智慧體具備通用操作能力。透過提升單一技能的泛化通用性和可靠性,增強多技能組合的複雜任務處理和複雜環境適應能力,AnySkill 能夠以最精簡的原子能力集,支援各類場景的快速開發。
圖片

AnyShave 同樣可以用於黃瓜削皮等操作中,並組合其他技能一起使用,精細程度達到人類水平

基於每個原子技能強大的泛化遷移能力,在世界人工智慧大會現場,穹徹展臺也展出了 AnyShave 的另一個有趣應用 —— 給黃瓜精細削皮。無需提前建模,AnyShave 可以根據黃瓜表面狀況自主判斷最優刮削軌跡、用刃方向、適宜速度和力,並自適應其曲面,操作如人一般精細,甚至某些時候超過人。

如果大模型僅依靠視覺進行判定和決策,那對黃瓜這類物體的起伏表面的刮削將很難順利完成,即使使用遙操作等方式,也無法做到與人相似的程度。

圖片

此外,穹徹具身大腦還提供生態應用開發所需的全生命週期工具鏈,覆蓋從數字孿生、資料採集、模型訓練到業務開發、機器人叢集管理等多種需求。

據穹徹表示,Noematrix Brain 穹徹具身大腦聚焦在非結構化、開放場景、開放任務下的機器人智慧邊界的突破,與各種型別的機器人本體、甚至工業裝置都能有機結合,包括但不限於工業機器人、人形機器人、服務型機器人、智慧家居裝置等等。

圖片

當執行體被具身智慧加持,它們就有了能指引感知、記憶、執行、互動的 “大腦”,用武之地十分廣闊,能更易協助或替代人類完成枯燥、繁重的工作,成為人們的好幫手。

在目前階段,穹徹將在零售運營、物流揀選、食材處理、家庭服務和科研教育領域充分探索和打磨 Noematrix Brain 的核心應用。盧策吾教授表示:“具身智慧是技術發展邁向人工通用智慧(AGI)路上的重要一步。我們希望在堅持不斷創新的同時,做好技術應用落地,與行業領先的合作伙伴攜手,為不同領域提供創新的具身智慧解決方案和服務,不斷積累實現形態湧現,最終做到更便捷、更通用的智慧服務於人。”

相關文章