结合VR+AI,智能手环Mudra inspire如何实现高精度手势识别

VR/AR
2018
11/15
13:32
87870
分享
评论

近几年来,以智能手环为代表的可穿戴设备的市场逐渐兴起。人们对这些产品提起兴趣的同时,又很快发现多数智能手环实用性不强,作用很“鸡肋”。事实上,目前智能手环类产品所面临的最大尴尬即看似前景巨大,却难以触及用户的痛点。

VR,虚拟现实技术,虚拟现实

另一方面,当捕捉现实生活中的手部动作将其转换为虚拟世界中的动作时,大多数设备配备的控制器都非常笨拙。这就是为什么Wearable Devices想要开发出一款轻便实用的智能手环,以完全消除人们对控制器的需求,同时还能精准追踪手势和手指动作。

VR,虚拟现实技术,虚拟现实

Wearable Devices,总部位于以色列,一直致力于开发可穿戴设备。近期,该公司推出了一款智能手环——Mudra Inspire,能够接收手腕处独特的生物信号,来判断用户的手指动作,且无FOV限制,同时还融入了AI技术,能更精确捕捉手部动作。

产品规格

Mudra Inspire尺寸为2.3 x 1.1 x 0.6英寸(59.5 x 27 x 16毫米)、重24.5g、集成3个SNC传感器、支持6DoF追踪(内置IMU)、电池容量为80mAh。肩带可调节最大长度为10.2英寸(260毫米)。

VR,虚拟现实技术,虚拟现实

同时,Mudra Inspire还可以与其他可穿戴设备结合,只要兼容蓝牙4.0以及Android 6.0及更高版本系统即可。

工作原理

Mudra Inspire集成了三个已获得专利的表面神经电导(SNC)传感器以及读取生物信号的电极。读取数据后,设备执行数字计算,并通过蓝牙实时将其发送到配对设备。接下来,该配对设备使用TensorFlow开源软件运行神经网络算法:一个用于信号检测(手/手指运动),一个用于将真实动作与虚拟指令分类。

VR,虚拟现实技术,虚拟现实

通过这种方式,你的手就成为了一个控制器,而手指就是按钮。校准后,你可以使用各种功能,例如滚动、滑动、选择、开始、拖放、旋转和翻转,并允许设定不同的手、手指和手臂姿势向手环发出指令。该公司表示:通过结合AI技术,Mudra Inspire可以更准确地完成指令和各种操作,精准率高达99.9%。

当前,Mudra Inspire能够要识别的手势包括捏合食指、捏合中指、打响指、收起拇指等一系列动作,不同手指动作代表不同的指令。

VR,虚拟现实技术,虚拟现实

体验反馈

外媒对这款手环进行了上手体验。体验者表示:Mudra Inspire能够精准捕捉手部动作,带来很好的沉浸式效果。

初次体验手环需要通过Mudra配套应用程序进行校准。然后,移动手指时检查设备的反应灵敏度。这一过程这,应用程序会显示出一条波浪线(如心电图一般),随着手指动作的变化,波动峰值也不同。

VR,虚拟现实技术,虚拟现实

Mudra Inspire还可以判断用户正在施加多少手指压力。通过将食指或中指和拇指进行挤压,手机屏幕将会显示出多种颜色。你挤得越用力,颜色越多。

Wearable Devices首席执行官兼联合创始人Asher Dahan演示了一款移动端手机游戏。体验者看到光标跟随Dahan的手指移动,通过上下移动左手以及捏放食指与拇指,Dahan能够精准地将一个个圆圈捡起或套在杆子上。

VR,虚拟现实技术,虚拟现实

此外,Mudra Inspire可以实现精准的手部输入。Dahan通过捏住食指和大拇指来操控应用中的虚拟喷枪,画出的效果可以与使用鼠标在微软绘图中的效果相媲美。

应用及内容体验

遗憾的是,Mudra Inspire目前没有开发面向大众的应用程序。不过一些合作伙伴,如HTC Vive、HoloLens、谷歌Cardboard等,正在基于其构建体验。

VR,虚拟现实技术,虚拟现实

预计Mudra Inspire将在2018年底之前兼容Windows系统,并在2019年初上线iOS版本。未来可能兼容的平台还包括:Oculus、谷歌Daydream、PSVR,Magic Leap等。不过具体开发日期尚未公布。

Mudra Inspire能否取代控制器?

控制器的一个缺陷就是FOV限制,而Mudra Inspire没有。另外,有些控制器不够符合人体工程学的设计,让人感觉很笨重。比如,有用户抱怨Vive控制器按钮界面不直观,拇指很容易按到Steam菜单。Oculus Touch没有配备可充电电池,导致电量经常消耗完。

VR,虚拟现实技术,虚拟现实

另外,长时间握控制器可能会让用户手抽筋,长此以往发展成类似“鼠标手”的情况。

而上述缺点,Mudra Inspire都没有。如果后续这款手环能够上线更多好的应用或体验,可能会引领一阵新风潮。

VR,虚拟现实技术,虚拟现实

目前,Mudra Inspire开发者套件售价246.5美元(约合人民币1715元),其中包括印有Mudra标志的可调整腕带、一块Mudra Inspire核心硬件(可卡在腕带上)、一条micro USB充电/线和一本使用手册。

不过,当前版本仅面向开发者。等平台中有了足够的应用和内容体验后,才会面向消费者发售发售(预计在2019中旬),预计届时价格也会大幅下调。

来源:87870

THE END
广告、内容合作请点击这里 寻求合作
VR
免责声明:本文系转载,版权归原作者所有;旨在传递信息,不代表砍柴网的观点和立场。

相关热点

谷歌曾于2017年宣布放弃消费者版本的谷歌眼镜,并推出了名为Glass Enterprise Edition for businesses的新版本。与消费者版不同,企业版取得了不错的成绩。目前企业版谷歌眼镜的客户包括DHL、大众、三星和...
VR
如果你正在使用Unity和Autodesk产品来构建实时3D体验,下面映维网要告诉你一个好消息。Unity和Autodesk已经将互操作性提升至新的水平,而所有Unity和Autodesk的Revit,VRED,Shotgun,3ds Max,或Maya产品...
VR
安全远程连接解决方案供应商TeamViewer今天发布了TeamViewer 14正式版。除了实质性的功能更新和性能优化之外,这款全新的旗舰产品同时新增了一项沉浸式功能,其用户可通过TeamViewer Pilot访问增强现实。
VR
看来“哈利·波特”的AR版本将不会在2018年亮相,因为开发商已经决定要将游戏的发行日期推迟至2019年。
VR
索尼 于今年年初提交的一份专利允许用户通过手持式设备浏览头显用户所能感知的虚拟环境,而这为交互式VR直播和新的游戏玩法开辟了道路。
VR
最新文章

相关推荐

1
3