前特斯拉Optimus科學家跳槽HF,直接開源了一個機器人程式碼庫

机器之心發表於2024-05-08
Hugging Face 開源 LeRobot,讓 AI 機器人研發迎來重大利好。

今年 3 月,以構建大型開源社群而聞名的 AI 初創公司 Hugging Face,挖角前特斯拉科學家 Remi Cadene 來領導一個新的開源機器人專案 ——LeRobot,引起了轟動。

圖片

Remi Cadene 在今年三月宣佈結束其三年的 Tesla 機器人研究生涯,並加入 Hugging Face。

在此之前,Remi Cadene 是特斯拉 Autopilot 和 Optimus 機器人研究專案的團隊成員。

現在,Hugging Face 宣佈正式推出並開源機器人工具包 LeRobot,基於有史以來最大規模的眾包機器人資料集。

圖片

LeRobot Github 連結:

https://github.com/huggingface/lerobot

LeRobot 程式碼庫堪稱機器人領域的「Transformers」。

圖片

圖源:https://twitter.com/RemiCadene/status/1787378793499496855

Cadene 在 X 上表示:「人工智慧發展的下一步是將其應用於我們的物理世界。因此,我們正在推動社群共同努力構建 AI 機器人,這對所有人開放!」

圖片

LeRobot 工具包不僅僅是一個軟體包,而且是一個全面的平臺,包括用於共享、視覺化資料和訓練 SOTA 模型的多功能庫。使用者可以透過 LeRobot 訪問大量預訓練模型,以快速啟動他們的專案。

此外,LeRobot 與物理模擬器無縫整合,這允許沒有物理機器人硬體的愛好者和開發者在虛擬環境中模擬和測試他們的 AI 模型。

在硬體方面,LeRobot 旨在處理各種機器人硬體:「從教育和研究中使用的簡單機械臂到先進 AI 研究設施中更復雜的類人機器人。」

總的來說,LeRobot 專案的目標是提供一個能夠適應和控制任何形態機器人的 AI 系統,使機器人在多功能性和可擴充套件性方面得到增強。

Cadene 還展示了藉助 LeRobot,機器人可以獲取的一些能力,包括訓練機器人抓取物體、在未繪製空間內導航等等。

圖片
圖片
在 Mobile Aloha 資料上,完全端到端地學習導航和操作:
圖片

在兩個機械臂之間傳遞物體:

圖片

得益於大型語言模型(LLM)及生成式 AI 的突破性進展,機器人領域的發展也獲得了極大的推動。

例如,最近特斯拉 Optimus 團隊宣佈了一項新進展:二代 Optimus 人形機器人已經「進廠打工」了:

圖片

二代 Optimus 人形機器人

波士頓動力純電驅動的新版人形機器人 Atlas 問世:

圖片

新一代 Atlas

初創公司 Meetee Robotics 釋出了首款雙足人形機器人 MenteeBot,它能理解自然語言命令:

圖片

MenteeBot

面向機器人技術升級、形態多樣化的現狀,Cadene 表示 LeRobot 專案的發展願景是「從多樣化社群中構建軟體和硬體,以在現實世界中開發下一代智慧機器人」。

透過降低入門門檻、促進知識和資源共享,Hugging Face 將構建一個可能重新定義 AI 機器人領域的社群。

參考連結:
https://venturebeat.com/automation/hugging-face-launches-lerobot-open-source-robotics-code-library/?continueFlag=c01b16f005d42a3bd6c9caa728d95926

相關文章