特斯拉人形機器人又解鎖了新技能!
昨日,Tesla Optimus 官方發布了新的 demo 視頻,展示了二代 Optimus 人形機器人的最新進展。
這次,Optimus 開始進廠工作了,在特斯拉電池工廠學會了分裝電池,並且比以前走得更快更遠更穩了。
讓我們先一睹 Optimus 的最新技能和訓練細節。
現在,Optimus 的端對端神經網路經過訓練,能夠對特斯拉工廠的電池單元進行準確分裝。
在機器人的FSD電腦上即時運行,只依賴2D相機、手部觸覺和力道感測器。 Optimus利用它的腿保持平衡,同時網路驅動整個上半身。
在插入過程中需要非常精確的動作,且容錯率很低,神經網路會自動定位下一個空閒插槽。 Optimus 還能從故障中自主恢復。
Optimus 的訓練資料是透過人類遠端操作收集,並針對各種任務進行了擴展。
Optimus 在工廠測試,人工幹預率持續下降。
當然,Optimus 現在可以定期在辦公室周圍行走,不僅走得更快,走的距離也越來越遠了。
對此,特斯拉 Optimus(Tesla Bot)工程師 Milan Kovac 對 Optimus 的更多訓練細節進行了解讀。
在過去的幾個月裡,特斯拉出色的製造團隊製造出了更多的機器人,以便進行研究並收集人工智能數據。
團隊訓練並部署了一個神經網絡,讓 Optimus 開始執行有用的任務,例如從傳送帶上撿起電池單元並將它們精確地插入托盤中。
這個神經網路完全端到端運行,這意味著 Optimus 只消耗來自機器人 2D 攝影機的影片以及板載本體感受器上的數據,並直接產生關節控制序列。
Optimus 完全在機器人的嵌入式 FSD 電腦上運行,並由板載電池供電。這樣的設計使得單一神經網路可以透過添加更多樣化的資料到訓練過程中來執行多個任務。
雖然目前 Optimus 還不完美,速度還有點慢,但我們看到了越來越高的成功率和越來越少的失誤。特斯拉還訓練 Optimus 從失敗案例中恢復,並看到了自發性的校正發生。
特斯拉已經在一家工廠部署了幾台 Optimus 人形機器人,它們每天都在真實的工作站上進行測試,並持續改進。
團隊正在進行進一步的工作,以使 Optimus 移動更快,並應對更惡劣的地形,同時不犧牲它的人性化特性。團隊還將專注於可重複性、訓練神經網路處理動態校準和機器人之間的微小差異。很快會有更多的更新。
此外,英偉達高級研究科學家、AI Agents 負責人 Jim Fan 對 Optimus 新影片所展現的技能給予了很高的評價。
他認為,影片讓我們窺見了人類資料收集的真實場景,這是 Optimus 最大的優勢。建立這樣的管線需要什麼呢? Optimus 做到了以下幾點:
Optimus 的手是世界上頂級五指靈巧型機器人手之一,它具有觸覺感知,擁有11 個自由度(DOF),相比之下許多競品只有6-7 個DOF,並且具有強大的穩健性,能夠在不需要持續維護的情況下承受大量的物件互動。
遠端操作軟體:我們可以看到人類操作員戴著 VR 眼鏡和手套。設定軟體以實現第一人稱視訊的即時傳輸和精確控制輸出,同時保持極低延遲,這是非常了不起的。人類對於自己動作和機器人動作之間的最微小延遲都非常敏感。 Optimus 有一個流暢的全身控制器,可以即時執行人類姿態。
大規模fleet:你需要不只一個機器人來並行收集數據,需要訓練有素的人類每天進行多次輪班(最好全天候),以及一個隨叫隨到的維護團隊,以確保機器人始終處於忙碌狀態。這是學術研究實驗室甚至不會考慮的大量操作複雜性。
任務與環境:弄清楚要遠端操作什麼也同樣重要。目前,大多數此類工作都是由簡報驅動的:收集你想要放入社群媒體影片中的任務資料。但想要解決通用型機器人的問題,我們需要仔細考慮任務和環境的分佈。從影片的 43 秒到 51 秒部分,我們可以看到工廠和家居環境,如行動電池、處理洗衣物、將日常物品分類放入貨架。
這是一個開放性的研究問題:如果你只有預算來收集 1000 個任務的訓練數據,你會選擇什麼來最大化技能轉移和泛化呢?
結論:遠端操作是解決人形機器人問題的必要條件,但不足以充分解決問題。它從根本上來說無法擴展。
在評論區,馬斯克預告了 Optimus 人形機器人手部的最新目標,在今年稍後將擁有 22 自由度(DoF)。這就更讓人期待一波了。
先前,據馬斯克在財報電話會議上透露,特斯拉Optimus 人形機器人可能會在今年年底擁有完成「有用的工廠任務」的能力,並計畫今年底前在自家工廠率先使用。同時特斯拉有可能在 2025 年底前對外銷售 Optimus。
#特斯拉人形機器人最早要追溯到2021 年8 月的《特斯拉AI 日」活動上,當時馬斯克首次透露了要造人形機器人(Tesla Bot)的設想。
這款人形機器人的身高大概是 1.72 米,重約 112 斤,身材勻稱,還帶有一張面部屏幕,能夠以約 8 公里 / 小時的速度移動。
2022 年 10 月,這一年的「特斯拉 AI 日」上,Optimus 人形機器人首次亮相。彼時,它還不能做跳舞等花式表演。機器人工作時的功耗是 500W,重量達到 73 公斤,手移動的自由度有 27 個。
不過,在 Demo 演示中,Optimus 展示了其搬運箱子、澆花、在特斯拉超級工廠工作的畫面。
2023 年 5 月,經過半年多的蟄伏,特斯拉 Optimus 終於具備了流暢行走和抓取物體的能力。
2023 年9 月,特斯拉Optimus 再次進化,可以自主地對物體進行分類了,亮點在於神經網路完全端到端訓練:輸入視訊、輸出控制。閒暇之餘,它還能做瑜珈消遣。
2023 年12 月,Optimus 第二代到來,讓人的確看到了電影《機械公敵》裡的樣子了。
隨著新影片的發布,特斯拉人形機器人的進步速度再次令人驚嘆。
以上是特斯拉Optimus人形機器人進廠打工,純熟分裝電池、自我矯正,還能走更遠了的詳細內容。更多資訊請關注PHP中文網其他相關文章!