豐田研究所(Toyota Research Institute,TRI)近期利用生成式AI人工智慧技術-diffusion policy來教導機器人完成製作早餐的任務。使用diffusion policy可以幫助我們更快的教導機器人還能減少示範動作的次數。這種方式對於建造大型行為模型(Large Behavior Models,LBMs)具有很大的潛力。
豐田研究所的機器人透過大型行為模型LBMs已經能夠做到60種以上的複雜動作
豐田研究所在機器人的幼稚園裡使用生成式AI人工智慧來教導機器人如何做早餐或者說如何完成所需的各個任務。他們給機器人”觸覺”,再將這些東西連接到AI模型裡面,再示範動作給機器人們看。機器人們可以透過觸覺來感受到自己正在做甚麼,並藉此獲得更多資訊。增加觸覺的機器人會比只依靠視力的機器人更容易完成困難的任務。
豐田的研究人員表示他們正在為機器人建立「大型行為模型(Large Behavior Models, LBMs)」。與大型語言模型的訓練方式相似,豐田的機器人會通過觀察來學習並進行它們從未被教授過的新技能。利用這個過程他們已經訓練機器人超過60種具有挑戰性的技能。
其中有將藍莓從盒子裡倒出來:
削皮:
拿杯子:
拿取和放下:
為吐司塗抹果醬:
倒醬料:
翻書:
將蔬菜削成片:
這些機器人是如何學習這些事情的呢?首先會有老師示範動作或行為,機器人會在幾小時內學習,第二天早上就能展示出老師所教的動作或行為。像圖片裡的人先教機器人如何使用攪拌機打蛋,教完後機器人會練習,等隔天來驗收的時候機器人已經可以做到自己用攪拌機打蛋了!
豐田研究所研究大型行為模型LBMs的技術會為未來的機器人帶來更多新的可能性,未來機器人可以做到更加靈活和聰明還能做精細的工作,能夠更好的為人類服務。不知道會不會未來連做飯都不用我們自己做了,畢竟之前就寫過自動做章魚燒機,現在機器人還能煎鬆餅。未來機器人搞不好都能做義大利麵、古早味飯糰、德式香腸蛋餅等東西了呢!
對豐田研究所研發的機器人感興趣的朋友可以觀看下方影片了解更多機器人能做的事情: