世界實驗室推出革命性機器人模擬引擎

世界實驗室推出革命性機器人模擬引擎

世界實驗室（World Labs）是一家由人工智慧先驅費菲李（Fei-Fei Li）創立的初創公司，近日推出了一款革命性的機器人模擬引擎。這款引擎可以完全在虛擬環境中訓練機器人控制系統，之後這些模型可以在真實硬件上可靠運行數小時。

背景與技術

世界實驗室的「真實到模擬到真實」（R2S2R）引擎可以將真實世界的機器人任務轉換為模擬，以便訓練和評估控制模型，從而省略了在真實硬件上進行昂貴測試的需要。這項技術來自於世界實驗室在七月收購的另一家初創公司SceniX。

根據世界實驗室的說法，機器人部署的瓶頸並不是模型架構，而是機器人需要的經驗量。真實世界的數據昂貴且難以控制，即使在線視頻也不會系統地涵蓋所有物體、物理條件和故障狀態。

技術解析

世界實驗室的引擎可以捕捉機器人、傳感器、環境和任務示範，然後重建為一個交互式的虛擬世界，這個虛擬世界不僅外觀相同，物理行為也相同。世界實驗室通過結合生成式世界模型和任務導向的機器人模擬來實現這一點。

從單一的真實世界任務開始，系統可以通過改變光照、物體位置和數量、周圍環境、物理屬性（如摩擦力）和相機角度等方式生成數千種變化。為了檢查準確性，世界實驗室會在模擬和真實世界中並行運行相同的動作序列，並比較觀察結果、物體運動和結果。

實際應用

世界實驗室展示的例子包括rigid、可移動和可變形的物體，例如電纜路由、將彈性電纜末端插入孔中和用兩隻手打包盒子等。控制模型可以在模擬中訓練，然後轉移到真實機器人上。

其中一個測試平台是ALOHA，一個由史丹福開源的雙臂設計，通過兩個小型控制臂進行傀儡操作。這個設定的成本只是商業系統的一小部分，而所有的藍圖都是公開的，因此ALOHA成為機器人研究中的標準參考平台。

根據世界實驗室的說法，模型在四個額外的機器人平台上運行了一小時，沒有任何人工干預。任務範圍從用兩隻手將電源線繞在冰箱上到精確重新定位試管和將薄物體（如記號筆或鉛筆）從密集的雜亂中分離出來。

未來展望

世界實驗室的系統不依賴於特定的控制模型或機器人類型，因此已經重建的世界可以在以後為新的模型和不同機器人重新使用。世界實驗室認為，機器人開發遠遠落後於語言模型，因為評估控制模型主要需要在真實硬件上進行測試。一個良好的模擬不需要達到與真實世界相同的成功率，重要的是它能夠回答相同的問題：模型在哪裡失敗，哪個版本更好，改進是否能夠轉移到物理機器人上？

世界實驗室的團隊用ALOHA機器人的兩手交換立方體進行了測試。根據世界實驗室的說法，這項技術的推出標誌著機器人開發的新時代，未來機器人將能夠更快速、更有效地學習和適應複雜的任務。