研究人員開發新的機器人遙感系統 通過攝像頭“翻譯”動作

據MSPoweruser報道,可控機器人為我們帶來了一個充滿希望的未來,但今天的現有模型對未經訓練的用戶來說,控制起來可能很棘手。它們往往涉及複雜的電子裝置來操縱,但這種情況即將隨着卡內基梅隆大學的一組研究人員啟動的系統而改變–機器人的“心靈遙感 ”。

robte2-1200x530.jpg

除了遠程控制機器人的能力外,這個機器人遙感系統的另一個令人興奮的消息是它能夠通過RGB攝像頭“翻譯”用戶的動作。機器人手和機械臂將通過簡單地演示一個特定的動作來複制該動作。這使得它與以前的發明不同,以前的發明通常利用複雜的系統來控制機器人,如遙控器和其他設備。

“以前在這個領域的工作要麼依靠手套、運動標記或校準的多攝像頭設置,”該團隊的研究人員之一Deepak Pathak告訴TechXplore。“相反,我們的系統使用一個未經校準的相機工作。由於不需要校準,用戶可以站在任何地方,仍然可以成功地遠程操作機器人。”

robte1-2048x1092.webp

根據Pathak的說法,甚至使機器人的系統引人注目的是,它完全是用一系列顯示個人進行手臂動作的YouTube視頻來訓練的。Pathak說,它可以分析簡單的二維圖像,使其成為任何人–甚至是沒有實踐經驗的人–都可以使用的極其簡單的技術。他說,該團隊必須專註於計算機視覺和三維人體姿勢的估計。

“巨大的被動視頻數據的多樣性有助於它在未經訓練的用戶、任務和物體之間發揮作用,”Pathak表示。“我們的系統提供了一種低成本和自然的方式,通過演示來教導機器人,而不是在運動學上握住機器人或戴上手套或運動捕捉服……希望我們最近的工作只是未來許多方向中的一個,除了機器人視覺之外,互聯網視頻也作為機器人控制的豐富監督來源。”

有了所有這些東西,研究人員認為這項技術在日常情況下是有用的,特別是對那些可能對人類的存在有危險的任務。

“機器人心靈遙感和類似的技術將使機器人在更多的環境中進行教學,包括在家庭中,他們將被期望執行日常任務。” Pathak說:“只使用一個未經校準的攝像頭,我們的系統在理論上可以從世界任何地方進行控制,因此它使機器人教學對任何人來說都更加方便。我們現在正在使用我們的機器人遙感系統收集大規模數據,以教導機器人在現實世界中自主行動和適應。”

(0)
上一篇 2022-03-21 10:12
下一篇 2022-03-21 10:13

相关推荐