基于计算机 uSens推出手部骨骼追踪AR SDK
去年这个时候,计算机视觉公司uSens推出了一款支持手部追踪的立体摄像头模型。现在,uSens只需通过智能手机摄像头即可实现相同的功能。在日前举行的世界增强现实大会(AWE)中,uSens推出了uSensAR Hand Tracking SDK的beta版本。这一工具可以帮助开发者在iOS和安卓设备上为VR和AR移动应用整合手部追踪和3D动作识别。借助智能手机的RGB摄像头,uSensAR Han
2018-06-02 08:50:17
来源:中国AR网  

去年这个时候,计算机视觉公司uSens推出了一款支持手部追踪的立体摄像头模型。现在,uSens只需通过智能手机摄像头即可实现相同的功能。

在日前举行的世界增强现实大会(AWE)中,uSens推出了uSensAR Hand Tracking SDK的beta版本。这一工具可以帮助开发者在iOS和安卓设备上为VR和AR移动应用整合手部追踪和3D动作识别。借助智能手机的RGB摄像头,uSensAR Hand Tracking可以通过计算机视觉和深度学习来追踪整只手的骨骼动态,不仅仅只是一只手的指尖。

到目前为止,增强现实的主流普及主要集中在智能手机方面。因此,智能手机AR的任何主要界面创新都是一个重大发展。尽管苹果和谷歌已经通过ARKit和ARCore为移动设备带来了水平表面和垂直表面的无标识追踪,图像识别,甚至是多用户体验,但用户与增强现实内容的交互仅限于触摸屏界面,不同于HoloLens和Meta 2。

uSens联合创始人兼首席执行官何安莉表示:“uSens很自豪能够将AR推向下一个前沿,帮助开发者为智能手机用户创建更加引人入胜和娱乐性更强的增强现实体验,为他们带来更加直观的操作:只需用双手和手指在空中滑动即可。”

何安莉还说道:“这为开发者带来了全新的可能性,使得他们能够为主流受众创建真正独一无二的体验。就像是触摸屏帮助市场拥抱了智能手机,为用户提供一种简单自然的方式来与AR/VR对象和环境进行交互,这将在促进消费者普及方面发挥重要作用。”

在短短一年时间里,uSens为什么可以在没有外部硬件的情况下实现同样的追踪水平呢?关键是机器学习。

uSens产品与运营副总裁王亚明表示:“自从我们在去年年中开始直接面向手机市场以来,我们便一直致力于研发基于智能手机RGB摄像头的手部追踪。它与我们为基于深度学习的技术所研发的算法类似。现在不同的是,我们训练算法来学习单个摄像头输入。”

“它可以根据我们的算法提供骨骼信息和关节信息,不过它的性能不如立体摄像头或深度摄像头,因为它的视场更小。但是,我们相信它为一系列的用例提供了足够好的性能。”

王亚明表示,uSens已经在与美图进行合作,将这项技术集成至他们的AR摄像头效果。另外,uSens同时在与一家未透露名字的游戏开发商合作,而王亚明暗示这家公司已经在美国纳斯达克上市,并且“在社交设定中发行了一款网络游戏”。

尽管如此,虽然移动AR已经加速了消费者对AR的采用,但触摸屏仍然是用户和内容之间的障碍。在回顾当前市场上最佳的移动AR应用程序时,我们可以马上想象手部追踪将能如何改善已有的优秀体验。

当然对于智能手机用力而言,用户的一只手已经要用来握持设备。不过,uSens技术同样可以促进智能眼镜的更快速创新,特别是基于安卓的可穿戴设备。随着精度和覆盖范围的提升,基于摄像头的追踪解决方案可以支持硬件厂商减掉专用深度传感器的需要。

希望AR硬件行业能够按照相关的思路进行摸索,而这可能意味着厂商将能比想象中更快地为我们带来优秀的AR体验。

原创文章
最新文章
1
聚焦中老年二次成长,快手星芒短剧《进击的潘叔》诠释银发力量
2
《带你趣户外2025》圆满收官!巴厘岛、香港双季,2.8亿点赞见证新玩法
3
半年报 | 2025家电市场总结:“扶梯而上”,也要习惯“逐阶而上”
4
英伟达示好,“止痛”不“治痛”
5
新型储能求变
6
中国智能电视活跃量超2.8亿台,华为智慧屏增长迅猛
7
全球高温爆发 中国家电加速争抢海外订单
8
国补最新消息:多地宣布“重启”!规则有了这些新变化
9
合作近十年 推动国产屏!小米xTCL华星创新显示联合实验室二期揭幕
10
鸿蒙生态5G新机:WIKO Hi畅享80 Pro今日首销:1599元起
11
上半年洗衣机线上市场:美的系第一,小米引发多筒分区洗热潮
12
扫地机器人“量增价跌”,科沃斯、石头、追觅如何高端突围?
13
第二届健康显示大会在京隆重召开:以标准领航 共筑健康显示新生态
14
美国对华AI芯片供应政策急转弯!
15
黄仁勋答记者问实录,事关H20、中美竞争、对华合作......
16
全线回暖,618大促叠加“国补”助力家电行业6月热销
17
销量增速超140%,擦窗机器人如何撬动清洁电器市场?
18
华为新一代三折叠来了!Mate XT 2入网:支持卫星通信
19
30亿元/台!全球首台顶级光刻机出货 支持后2nm工艺:中国厂商不可能买到
20
苹果首款折叠iPhone来袭:搭载三星无折痕技术,预计起售价1800美元起!
关于我们

微信扫一扫,加关注

商务合作
  • QQ:61149512