布朗大學(xué)科學(xué)家用VR控制機(jī)器人,并開源項目代碼
盡管自動機(jī)器人能夠獨(dú)立而且出色地完成自己的任務(wù),但仍然存在需要人類介入和控制的情況。由布朗大學(xué)計算機(jī)科學(xué)家開發(fā)的新軟件能夠支持用戶通過虛擬現(xiàn)實(shí)遠(yuǎn)程控制機(jī)器人,而這將能幫助用戶沉浸在機(jī)器人的環(huán)境之中。軟件能夠通過網(wǎng)絡(luò)將機(jī)器人的手臂和抓爪,以及板載攝像頭和傳感器連接至虛擬現(xiàn)實(shí)硬件。借助手持式控制器,用戶能夠控制器機(jī)器人手臂的位置并執(zhí)行復(fù)雜的操作。用戶可以步入機(jī)器人的金屬皮膚以獲取環(huán)境的第一人稱視圖,或
2018-01-18 07:38:47
來源:中國AR網(wǎng)??

盡管自動機(jī)器人能夠獨(dú)立而且出色地完成自己的任務(wù),但仍然存在需要人類介入和控制的情況。由布朗大學(xué)計算機(jī)科學(xué)家開發(fā)的新軟件能夠支持用戶通過虛擬現(xiàn)實(shí)遠(yuǎn)程控制機(jī)器人,而這將能幫助用戶沉浸在機(jī)器人的環(huán)境之中。

軟件能夠通過網(wǎng)絡(luò)將機(jī)器人的手臂和抓爪,以及板載攝像頭和傳感器連接至虛擬現(xiàn)實(shí)硬件。借助手持式控制器,用戶能夠控制器機(jī)器人手臂的位置并執(zhí)行復(fù)雜的操作。

用戶可以步入機(jī)器人的金屬皮膚以獲取環(huán)境的第一人稱視圖,或者以第三人稱視角調(diào)查場景。你可以自由切換,尋找最方便完成任務(wù)的視角。而且機(jī)器人和虛擬現(xiàn)實(shí)設(shè)備之間傳輸?shù)臄?shù)據(jù)足夠緊湊,能夠以最低延遲通過互聯(lián)網(wǎng)發(fā)送,以支持用戶遠(yuǎn)程控制機(jī)器人。

布朗大學(xué)科學(xué)家用VR控制機(jī)器人,并開源項目代碼 AR資訊

布朗大學(xué)研究生David Whitney是這一系統(tǒng)的聯(lián)合負(fù)責(zé)人,他表示:“我們認(rèn)為這可以用于需要精巧操作,而且人類不應(yīng)該親臨現(xiàn)場的情景。我們在思考的三個專門用例是拆彈,在受損核設(shè)施內(nèi)完成任務(wù),或者在國際太空站中操作機(jī)器人手臂。”

這一項目的其他負(fù)責(zé)人包括布朗大學(xué)的本科生Eric Rosen。這兩人都在由計算機(jī)科學(xué)助理教授Stefanie Tellex負(fù)責(zé)的Humans to Robots實(shí)驗(yàn)室中工作。值得一提的是,他們本周在智利舉辦的國際機(jī)器人研討會上介紹了描述這一系統(tǒng)和評估其實(shí)用性的論文。

即使是高度復(fù)雜的機(jī)器人也常常使用一些相當(dāng)簡單的手段進(jìn)行遠(yuǎn)程控制,通常是鍵盤或者諸如游戲手柄和二維顯示器之類的設(shè)備。Whitney和Rosen指出,這適合駕駛輪式機(jī)器人或者無人機(jī)那樣的任務(wù),但可能不適合更加復(fù)雜的任務(wù)。

Whitney說道:“對于操作機(jī)器人手臂那樣包含多個自由度的機(jī)器,鍵盤和游戲手柄并不是十分直觀?!彼麄冎赋?,將三維環(huán)境映射到二維屏幕上會限制人們對機(jī)器人所處空間的感知。

Whitney和Rosen認(rèn)為虛擬現(xiàn)實(shí)或許可以提供更為直觀和更加身臨其境的選項。他們的構(gòu)思與映維網(wǎng)早前關(guān)于豐田實(shí)驗(yàn)的報道類似。

延伸閱讀:全身動作映射,豐田用HTC Vive遠(yuǎn)程控制機(jī)器人

軟件利用機(jī)器人傳感器來創(chuàng)建機(jī)器人本身及其環(huán)境的點(diǎn)云模型,然后將其傳輸?shù)竭B接至Vive的遠(yuǎn)程計算機(jī)。用戶可以透過頭顯來感知相應(yīng)的空間,并在內(nèi)部進(jìn)行虛擬行走。與此同時,用戶還可以通過機(jī)器人手腕上的攝像頭觀看實(shí)時高清視頻,獲取操作任務(wù)的詳細(xì)視圖。

研究人員表示,他們可以為用戶創(chuàng)造一種身臨其境的體驗(yàn),同時保持足夠小的數(shù)據(jù)負(fù)載,使其能夠通過互聯(lián)網(wǎng)進(jìn)行傳輸。舉例來說,位于普羅維登斯的用戶能夠遠(yuǎn)程操作位于馬薩諸塞州劍橋的一個機(jī)器人(彼此之間相隔41英里),令機(jī)器人堆疊一系列的塑料杯。

在另外的研究中,18位新手用戶通過虛擬現(xiàn)實(shí)中完成疊杯操作的速度比傳統(tǒng)的鍵盤顯示器界面高出66%。用戶也表示他們更喜歡虛擬界面,而且他們認(rèn)為操作難度比鍵盤和顯示器界面更加簡單。

Rosen認(rèn)為,任務(wù)執(zhí)行速度的提升是由于虛擬現(xiàn)實(shí)界面的直觀性導(dǎo)致。Rosen說:“在VR環(huán)境中,人們可以像移動自己的身體一樣移動機(jī)器人,所以他們在操作時更本不用多想。這讓人們可以專注于手頭上的問題或任務(wù),不需要花費(fèi)更多的時間去了解如何移動機(jī)器人?!?/p>

研究人員計劃進(jìn)一步開發(fā)這個系統(tǒng)。第一個迭代專注于一個相當(dāng)簡單的操作任務(wù)(機(jī)器人保持固定),而他們希望嘗試更復(fù)雜的任務(wù),比如在操縱的基礎(chǔ)上加入導(dǎo)航移動。他們同時希望嘗試混合自動模式,比如機(jī)器人自身完成一部分任務(wù),而用戶則接管其他任務(wù)。

研究人員已經(jīng)把系統(tǒng)托管至GitHub(點(diǎn)擊前往)。他們希望其他機(jī)械學(xué)研究人員可以進(jìn)行嘗試或創(chuàng)新,從而為我們帶來更優(yōu)或更多的用例。

原創(chuàng)文章
最新文章
1
銷量全球第二、Mini LED全球第一,TCL電視上半年業(yè)績?yōu)楹稳绱梭@艷?
2
技術(shù)主導(dǎo)權(quán)易手:三星索尼競逐RGB-Mini LED,向中國引領(lǐng)者“致敬”?
3
獻(xiàn)給父母的AI好禮!康佳G10電視搭載“易AI系統(tǒng)”,讓智能電視更易用
4
5月智能電視活躍量:小米創(chuàng)維海信TCL位居前四,品牌分化明顯
5
三星索尼入場競逐,中國RGB-Mini LED方案崛起成產(chǎn)業(yè)新軸心
6
“全社會反詐青年在行動”宣傳活動啟動 快手線上線下助力全民反詐宣傳
7
跨代際知識狂歡!快手“老鐵知識百科—暑期充電季”助力全民知識提升
8
正義審判終將降臨,快手星芒短劇《黑桃四姐妹》彰顯治愈內(nèi)核
9
23所頂尖高校學(xué)子“玩轉(zhuǎn)”AI創(chuàng)作!快手AIGC大賽點(diǎn)燃暑期青春風(fēng)暴
10
7月26日鎖定快手!蔡依林?jǐn)y新專輯《Pleasure》開啟獨(dú)家直播,邀你面對面暢聊
11
蘋果智能戒指新專利:發(fā)光邊框+觸覺提示,可自動感應(yīng)佩戴狀態(tài)
12
小米雷軍年度演講或于9月份舉行 小米16系列等新品發(fā)布
13
臺積電計劃在臺灣建立11個晶圓廠,規(guī)模將超過1000億美元
14
RISC-V“芯”趨勢
15
價格戰(zhàn)驅(qū)動電視行業(yè)換新,中國電視行業(yè)引來變革和挑戰(zhàn)
16
康佳告別華僑城,迎來華潤時代
17
小米明年重啟大折疊:MIX Fold 5加入蘋果折疊屏混戰(zhàn)
18
iQOO Z10 Turbo Pro+跑分出爐:天璣9400+穩(wěn)了
19
從可選到剛需,廚房空調(diào)如何突圍被忽略的“高溫孤島”?
20
薄荷青邂逅長焦鏡頭:vivo S30,把生活拍成電影的輕薄旗艦
關(guān)于我們

微信掃一掃,加關(guān)注

商務(wù)合作
  • QQ:61149512