谷歌黑科技:僅用手機(jī)陀螺儀實(shí)現(xiàn)AR中動(dòng)作追蹤
編譯/VR陀螺今日,谷歌Research團(tuán)隊(duì)在網(wǎng)站上發(fā)表博客稱,為安卓上的Motion Stills(視頻捕捉和觀看app)增加了全新的AR模式。在AR模式下,用戶只需點(diǎn)擊屏幕就可以將有趣的虛擬3D物體放置在靜止,或者移動(dòng)中的水平面上(比如桌子、地板和手上),讓這些物體可以無縫的和動(dòng)態(tài)的實(shí)時(shí)環(huán)境進(jìn)行互動(dòng)。我們還可以直接錄像以及導(dǎo)出GIF圖和視頻?! ∵@一AR模式由實(shí)時(shí)動(dòng)作追蹤功能所實(shí)現(xiàn),這是基于i
2018-05-03 08:12:44
來源:搜狐科技??

編譯/VR陀螺

今日,谷歌Research團(tuán)隊(duì)在網(wǎng)站上發(fā)表博客稱,為安卓上的Motion Stills(視頻捕捉和觀看app)增加了全新的AR模式。在AR模式下,用戶只需點(diǎn)擊屏幕就可以將有趣的虛擬3D物體放置在靜止,或者移動(dòng)中的水平面上(比如桌子、地板和手上),讓這些物體可以無縫的和動(dòng)態(tài)的實(shí)時(shí)環(huán)境進(jìn)行互動(dòng)。我們還可以直接錄像以及導(dǎo)出GIF圖和視頻?! ?/p>

這一AR模式由實(shí)時(shí)動(dòng)作追蹤功能所實(shí)現(xiàn),這是基于iOS版Motion Stills的Motion Text和YouTube上的privacy blur的技術(shù)所實(shí)現(xiàn)的6自由度追蹤,能夠精確的追蹤靜止和移動(dòng)的物體。谷歌的團(tuán)隊(duì)對(duì)這一技術(shù)進(jìn)行的完善和提升,使其可以在任何配備了陀螺儀的安卓設(shè)備上實(shí)現(xiàn)有趣的AR功能?! ?/p>

當(dāng)用戶碰觸屏幕時(shí),Motion Stills AR能夠?qū)⒁粋€(gè)3D的虛擬物體“粘貼”到指定的位置,使其看起來就像真實(shí)世界的一部分一樣。通過假定跟蹤表面和地平面是平行的,同時(shí)使用設(shè)備的加速傳感器來提供手機(jī)相對(duì)于地平面的初始定向,可以追蹤攝像頭的6自由度(3個(gè)平移自由度和3個(gè)旋轉(zhuǎn)自由度)。這讓我們可以精確的改變和渲染虛擬物體。

即時(shí)動(dòng)作追蹤

即時(shí)運(yùn)動(dòng)跟蹤的核心是將攝像機(jī)的平移和旋轉(zhuǎn)估計(jì)分離,將其視為獨(dú)立的優(yōu)化問題。 首先,我們只根據(jù)相機(jī)的視覺信號(hào)確定3D相機(jī)的平移。 為此,我們觀察目標(biāo)區(qū)域的明顯2D映射和跨幀的相對(duì)比例。 一個(gè)簡單的針孔照相機(jī)模型將圖像平面中的盒子的平移和縮放與相機(jī)的最終3D平移相關(guān)聯(lián)。

為了解決這個(gè)問題,我們?cè)谖覀儸F(xiàn)有的跟蹤器中添加了比例估計(jì),并在攝像機(jī)的視場(chǎng)之外追加了區(qū)域跟蹤。 當(dāng)相機(jī)靠近被跟蹤的表面時(shí),虛擬內(nèi)容能夠精確地縮放,這與真實(shí)世界對(duì)象的感知一致。 當(dāng)你在目標(biāo)區(qū)域的視場(chǎng)之外平移時(shí),虛擬物體將重新出現(xiàn)在大致相同的位置。 

在這之后,我們使用手機(jī)的內(nèi)置陀螺儀來獲得設(shè)備的3D旋轉(zhuǎn)(滾動(dòng),俯仰和偏航)。 估測(cè)的3D對(duì)應(yīng)圖像與3D旋轉(zhuǎn)相結(jié)合,使我們能夠在取景器中正確渲染虛擬內(nèi)容。 而且由于我們分別處置旋轉(zhuǎn)和平移,所以我們的即時(shí)運(yùn)動(dòng)跟蹤方法不需要校準(zhǔn),可以在任何帶有陀螺儀的Android設(shè)備上工作。

———————————

更多新鮮有趣的相關(guān)資訊,歡迎關(guān)注VR陀螺的搜狐號(hào)

最新文章
1
全球16連冠:海爾究竟領(lǐng)先在哪?
2
本田攜手亞馬遜云科技打造下一代軟件定義汽車,并利用生成式AI提升充電體驗(yàn)
3
引領(lǐng)聚合力 共創(chuàng)好產(chǎn)品:2024中國家電行業(yè)“好產(chǎn)品”發(fā)布盛典在北京召開
4
CES2025:中國“智”造新年秀實(shí)力第一站,長虹攜多款A(yù)I產(chǎn)品描繪生活之美
5
新年新氣象,盤點(diǎn)2025年智能電視行業(yè)發(fā)展的趨勢(shì)和方向
6
國補(bǔ)擴(kuò)圍,洗碗機(jī)、凈水器市場(chǎng)即將迎來爆發(fā)式增長?
7
融合科技與藝術(shù)之美,家電如何構(gòu)建幸福生活?
8
AI改為GPT-4o,999元賣爆的中國首款A(yù)I眼鏡出海了!
9
最新手機(jī)數(shù)碼類國補(bǔ)政策出爐,最高補(bǔ)貼五百元,想換機(jī)的朋友直接沖!
10
CES 2025:六大手機(jī)廠商缺席 一加和TCL成明星
11
日本芯片公司Rapidus將向博通提供2nm芯片樣品:與臺(tái)積電競(jìng)爭
12
徹底告別劉海、藥丸屏!iPhone 18 Pro系列變成單挖孔
13
2024投影行業(yè)十大事件:4K+激光勢(shì)猛,LCoS挑戰(zhàn)DLP,車載成增長點(diǎn)
14
2025家電明星品類,凈水器已經(jīng)鎖定一個(gè)席位?
15
海信羅馬假日mini斬獲CES 2025創(chuàng)新獎(jiǎng),引領(lǐng)精致健康洗護(hù)潮流
16
CES觀察:科技品牌兩翼齊飛,九號(hào)公司的“智造未來”
17
極米攜全新概念產(chǎn)品XGIMI Ascend亮相CES 2025
18
CES2025:全球最大RGB-Mini LED電視亮相,海信讓液晶電視首次發(fā)出彩色光源
19
BOE(京東方)全新概念級(jí)“AI視聽中心”亮相CES 2025 攜手高通引領(lǐng)智慧家居娛樂新圖景
20
趨勢(shì)2025 | 投資產(chǎn)出雙向奔赴,算力布局不斷優(yōu)化
關(guān)于我們

微信掃一掃,加關(guān)注

商務(wù)合作
  • QQ:61149512