谷歌黑科技:仅用手机陀螺仪实现AR中动作追踪
编译/VR陀螺今日,谷歌Research团队在网站上发表博客称,为安卓上的Motion Stills(视频捕捉和观看app)增加了全新的AR模式。在AR模式下,用户只需点击屏幕就可以将有趣的虚拟3D物体放置在静止,或者移动中的水平面上(比如桌子、地板和手上),让这些物体可以无缝的和动态的实时环境进行互动。我们还可以直接录像以及导出GIF图和视频。  这一AR模式由实时动作追踪功能所实现,这是基于i
2018-05-03 08:12:44
来源:搜狐科技  

编译/VR陀螺

今日,谷歌Research团队在网站上发表博客称,为安卓上的Motion Stills(视频捕捉和观看app)增加了全新的AR模式。在AR模式下,用户只需点击屏幕就可以将有趣的虚拟3D物体放置在静止,或者移动中的水平面上(比如桌子、地板和手上),让这些物体可以无缝的和动态的实时环境进行互动。我们还可以直接录像以及导出GIF图和视频。  

这一AR模式由实时动作追踪功能所实现,这是基于iOS版Motion Stills的Motion Text和YouTube上的privacy blur的技术所实现的6自由度追踪,能够精确的追踪静止和移动的物体。谷歌的团队对这一技术进行的完善和提升,使其可以在任何配备了陀螺仪的安卓设备上实现有趣的AR功能。  

当用户碰触屏幕时,Motion Stills AR能够将一个3D的虚拟物体“粘贴”到指定的位置,使其看起来就像真实世界的一部分一样。通过假定跟踪表面和地平面是平行的,同时使用设备的加速传感器来提供手机相对于地平面的初始定向,可以追踪摄像头的6自由度(3个平移自由度和3个旋转自由度)。这让我们可以精确的改变和渲染虚拟物体。

即时动作追踪

即时运动跟踪的核心是将摄像机的平移和旋转估计分离,将其视为独立的优化问题。 首先,我们只根据相机的视觉信号确定3D相机的平移。 为此,我们观察目标区域的明显2D映射和跨帧的相对比例。 一个简单的针孔照相机模型将图像平面中的盒子的平移和缩放与相机的最终3D平移相关联。

为了解决这个问题,我们在我们现有的跟踪器中添加了比例估计,并在摄像机的视场之外追加了区域跟踪。 当相机靠近被跟踪的表面时,虚拟内容能够精确地缩放,这与真实世界对象的感知一致。 当你在目标区域的视场之外平移时,虚拟物体将重新出现在大致相同的位置。 

在这之后,我们使用手机的内置陀螺仪来获得设备的3D旋转(滚动,俯仰和偏航)。 估测的3D对应图像与3D旋转相结合,使我们能够在取景器中正确渲染虚拟内容。 而且由于我们分别处置旋转和平移,所以我们的即时运动跟踪方法不需要校准,可以在任何带有陀螺仪的Android设备上工作。

———————————

更多新鲜有趣的相关资讯,欢迎关注VR陀螺的搜狐号

最新文章
1
PS、PR被AI重做了,摄影后期软件要变天了?
2
上游成本硬推、下游大促鏖战,彩电业靠什么熬过Q4?
3
老洗碗机翻新引发复刻呼声,小容量免装机成新赛道
4
苹果10月28日洛杉矶活动在即:首款触屏Mac Book领衔iPad mini8与M6 iMac齐发
5
又一款韬定律芯片新机!Mate X8下月发:华为麒麟9050系列产能越来越充足
6
REDMI Turbo 6系列开案:中大屏双方案曝光
7
BOE(京东方)IPC电竞嘉年华暨BOE无畏杯S4「爱攻」赛季总决赛盛大举办 生态协同引领电竞显示新未来
8
行业首个“AI实验室”正式启动!京东方以AI重塑研发新范式
9
全球首个《AI工厂建设指南与评价体系研究报告(2026)》正式发布
10
日资拿下30%!大金松下主导多联机市场,中国品牌如何超越?
11
BOE(京东方)携手努比亚打造全球首款AI智能体手机 以屏为媒开启全场景AI体验新纪元
12
BOE(京东方)牵头制定并发布《平板显示防眩性能技术规范》团体标准 重构健康显示行业新规范
13
BOE(京东方)主持发布动态清晰度团体标准 定义动态画质客观评测标尺
14
AI构筑新质生产力 BOE IPC 2026 AI+展区全景解析
15
BOE(京东方)正式加入联合国全球契约组织(UNGC) 以可持续发展实践推动全球责任共建
16
BOE(京东方)携手康宁升级“创新・无界”联合创新空间 共启光电融合前沿新征程
17
双11给爸妈选什么打印机?爱普生L435X长青套装首发,解锁长辈轻松打印新体验
18
双十一如何选大屏?极米4K 激光、高刷旗舰、超短焦齐发
19
双十一如何选大屏?极米4K 激光、高刷旗舰、超短焦齐发
20
双十一如何选大屏?极米4K 激光、高刷旗舰、超短焦齐发
关于我们

微信扫一扫,加关注

商务合作
  • QQ:61149512