家用機器人利用虛擬世界學習技能

4 人贊了文章 https://www.zhihu.com/video/985259857162928128

在機器人能夠真正幫助家庭之前，他們可能需要在虛擬世界裡進行訓練。

這是一個新的研究項目的目標，在這個項目中，一個名為「VirtualHome」的類似「模擬人生」的系統幫助人工智慧一步一步地執行日常活動。

對我們來說，VirtualHome看起來像噩夢一樣，因為在這個世界裡，家務永遠也做不完。

（像《黑鏡》里一樣，如果要懲罰某個人的意識，或許可以把ta關進去）

而對於機器人來說，是一個訓練場所。

人類有推理的天賦，我們認為這是理所當然的。如果你被告知要用真空吸塵器打掃地毯,你大概不需要把它分解為單獨的步驟，直接就能完成任務，比如走到柜子面前，打開柜子，拿起吸塵器，移動吸塵器，插上電源，等等等等。

但是對機器而言，需要處理每一個子任務來完成這項工作。

VirtualHome的目的是幫助機器人第一次在虛擬系統中體驗任務。

在當前的系統中，替身可以在8個不同的環境中執行1000個單獨的動作，包括客廳、廚房和家庭辦公室。該項目由麻省理工學院計算機科學與人工智慧實驗室(CSAIL)、多倫多大學、麥吉爾大學和斯洛維尼亞的盧布爾雅那大學的研究人員領導。

「我們試圖找到一種方法來模擬複雜的活動，以便更好地理解做這些活動所需要的步驟，這樣我們就能更好地在視頻中識別它們，並有可能教授機器人來完成它們，」領導這項研究的CSAIL博士生Xavier Puig告訴媒體。

Xavier Puig 和他的同事們創建了一些程序，在框架細節中列出了具體任務的每一步。例如，看電視的任務包括五項任務：走到電視機前，打開電視，走到沙發上，坐在沙發上，看電視。

研究人員將這些程序指令交給VirtualHome，該系統讓角色來執行這些任務。這些做雜務的視頻將被用來進一步訓練機器人，通過提供一個視覺上的例子來說明這些動作的樣子。

在最近的一篇論文中，研究人員證明，通過審查指令或視頻演示，虛擬代理可以重構步驟並執行任務。他們希望這樣的系統能夠幫助訓練家用機器人，並建立一個任務資料庫，通過自然語言處理，可以方便地在人和機器之間進行交流。

研究結果將於本月在猶他州鹽湖城的計算機視覺和模式識別會議上公布。