號稱中國 ” 人形機器人第一股 ” 優必選發布自家人形機器人 Walker S 融合百度文心大模型後的首個示範影片,影片中 Walker S 貌似真的會自己折衣服、幫忙搭配衣服、分類等事情。
中國人形機器人 Walker S 接入百度文心大模型 可以自己折衣服 實現環境理解
中國優必選在微博發佈貼文表示百度與優必選強強聯手,共同探索中國 AI 大模型+人形機器人的應用,為人工智慧和人形機器人產業的高品質發展注入新動能。優必選基於百度智能雲千帆 AppBuilder 開發,快速構建任務規劃和執行能力,實現自家人形機器人 Walker S 與百度文心大模型技術的深度融合。
優必選發佈的人形機器人 Walker S 接入文心大模型具身智慧應用升級訓練的影片中可以看到,Walker S 可以進行任務拆解與規劃,所以跟Walker S 說「明天要出差,可以幫忙疊你手裡的那件衣服嗎」的時候,Walker S 回答當然可以然後開始折衣服。
Walker S 還能進行智慧任務管理,詢問它「你覺得剛剛折的這件黑色衣服搭配什麼顏色的衣服更好看?」的時候, Walker S 可以做到語言理解和交互還能記住先前講的要出差的話,回答「搭配深色系的褲子比較適合正式場合」。
Walker S 可以多模態環境理解,自主進行物體分揀的任務,請它把桌上的開關按種類放到不同的盤子裡,它可以進行物體 6D 位姿識別,進行自主運動規劃,將開關分類並放到不同的盤子裡。
在 Walker S 進行分類動作時干擾它,它的智慧動態干擾恢復功能,讓它可以實時更新路徑規劃。
詢問 Walker S 「怎麼確保分揀結果的準確性和效率呢?」, Walker S 回答「在分類過程中,通過百度智慧雲端的千帆大模型台調用文心一言進行子任務拆解和推理,配合視覺語言模型確保異常檢測精確度並實現泛化抓取,確保任務在干擾的情況下順利實施。」
由優必選官方提供的影片來看, Walker S 目前的表現跟 Figure-01 的表現似乎有差不多相同的水準,不過中國廠商官方影片經常有誇大表現的情況,所以實際上表現是否跟影片呈現出來一樣好,可能還需要繼續觀察。大家如果對 Figure-01 的表現感興趣的話也可以點擊下方連結前往觀看我們之前寫過的報導。