基于计算机 uSens推出手部骨骼追踪AR SDK
去年这个时候,计算机视觉公司uSens推出了一款支持手部追踪的立体摄像头模型。现在,uSens只需通过智能手机摄像头即可实现相同的功能。在日前举行的世界增强现实大会(AWE)中,uSens推出了uSensAR Hand Tracking SDK的beta版本。这一工具可以帮助开发者在iOS和安卓设备上为VR和AR移动应用整合手部追踪和3D动作识别。借助智能手机的RGB摄像头,uSensAR Han
2018-06-02 08:50:17
来源:中国AR网  

去年这个时候,计算机视觉公司uSens推出了一款支持手部追踪的立体摄像头模型。现在,uSens只需通过智能手机摄像头即可实现相同的功能。

在日前举行的世界增强现实大会(AWE)中,uSens推出了uSensAR Hand Tracking SDK的beta版本。这一工具可以帮助开发者在iOS和安卓设备上为VR和AR移动应用整合手部追踪和3D动作识别。借助智能手机的RGB摄像头,uSensAR Hand Tracking可以通过计算机视觉和深度学习来追踪整只手的骨骼动态,不仅仅只是一只手的指尖。

到目前为止,增强现实的主流普及主要集中在智能手机方面。因此,智能手机AR的任何主要界面创新都是一个重大发展。尽管苹果和谷歌已经通过ARKit和ARCore为移动设备带来了水平表面和垂直表面的无标识追踪,图像识别,甚至是多用户体验,但用户与增强现实内容的交互仅限于触摸屏界面,不同于HoloLens和Meta 2。

uSens联合创始人兼首席执行官何安莉表示:“uSens很自豪能够将AR推向下一个前沿,帮助开发者为智能手机用户创建更加引人入胜和娱乐性更强的增强现实体验,为他们带来更加直观的操作:只需用双手和手指在空中滑动即可。”

何安莉还说道:“这为开发者带来了全新的可能性,使得他们能够为主流受众创建真正独一无二的体验。就像是触摸屏帮助市场拥抱了智能手机,为用户提供一种简单自然的方式来与AR/VR对象和环境进行交互,这将在促进消费者普及方面发挥重要作用。”

在短短一年时间里,uSens为什么可以在没有外部硬件的情况下实现同样的追踪水平呢?关键是机器学习。

uSens产品与运营副总裁王亚明表示:“自从我们在去年年中开始直接面向手机市场以来,我们便一直致力于研发基于智能手机RGB摄像头的手部追踪。它与我们为基于深度学习的技术所研发的算法类似。现在不同的是,我们训练算法来学习单个摄像头输入。”

“它可以根据我们的算法提供骨骼信息和关节信息,不过它的性能不如立体摄像头或深度摄像头,因为它的视场更小。但是,我们相信它为一系列的用例提供了足够好的性能。”

王亚明表示,uSens已经在与美图进行合作,将这项技术集成至他们的AR摄像头效果。另外,uSens同时在与一家未透露名字的游戏开发商合作,而王亚明暗示这家公司已经在美国纳斯达克上市,并且“在社交设定中发行了一款网络游戏”。

尽管如此,虽然移动AR已经加速了消费者对AR的采用,但触摸屏仍然是用户和内容之间的障碍。在回顾当前市场上最佳的移动AR应用程序时,我们可以马上想象手部追踪将能如何改善已有的优秀体验。

当然对于智能手机用力而言,用户的一只手已经要用来握持设备。不过,uSens技术同样可以促进智能眼镜的更快速创新,特别是基于安卓的可穿戴设备。随着精度和覆盖范围的提升,基于摄像头的追踪解决方案可以支持硬件厂商减掉专用深度传感器的需要。

希望AR硬件行业能够按照相关的思路进行摸索,而这可能意味着厂商将能比想象中更快地为我们带来优秀的AR体验。

最新文章
1
不用奔赴北方看雪!长虹“冰雪专列”在川渝皖同步发车
2
“新芽破土·创见未来” 2026“科创新芽”南上海创新创业大赛总决赛圆满收官
3
洛图科技:三季度笔电线上销量跌14%,均价同比上涨13.4%
4
黄仁勋时代结束,英伟达会怎样?
5
别只看见双 11 的冷清,家电渠道逻辑已经变了
6
10月我国电视整机出货284.4万台,同比下滑12.2%
7
面板巨头连推三款RGBX四基色新品,多基色显示会成主流吗?
8
拿下欧洲零售巨头,京东海外落子有何盘算?
9
双11一人食小家电爆火,细分场景跑出新增量
10
iPhone Air 2机模曝光:单摄升级双摄,继续坚守极致轻薄定位
11
不接受强制出售安世股权!闻泰回应被荷兰罚3亿:将上诉
12
TCL华星展示全球首款PSF蓝磷光OLED手机屏:6.36 英寸 功耗降低30%
13
2026中国电视市场观察:3000万台“底线”与10万台“变量”
14
openEuler 汇聚开源力量,深化系统级创新,构筑 Agentic Infra 坚实底座
15
海信小墨E5S Pro成双11全网超级大单品,RGB-Mini LED引领大屏换代趋势
16
从全天候接待到智能挽单,快手电商智能客服助力商家做好双11售后服务
17
开售三周超25亿元,16位快手电商达人接连刷新单场销售纪录
18
存商跃迁、新商爆发,快手双11「全民任务」赋能腰尾商家生意增长
19
openEuler发布面向Agentic Infra的操作系统,全球协同共建AI生态
20
一套追光套系,全屋森林呼吸:长虹追光套系空调正式发布
关于我们

微信扫一扫,加关注

商务合作
  • QQ:61149512