FMKit提出『手指比划』AR/VR输入解决方案

VR/AR
2020
06/20
19:40
映维网
分享
评论

来源:映维网 作者 广州客

尽管MR头显厂商在融合真实世界和数字世界方面越发精进,但作为与VR或AR环境交互的能力,输入一直是难以解决的巨大挑战,因为控制器依然是大多数交互的必要工具。本周,美国亚利桑那州立大学的研究人员展示了一种名为FMKit的替代方案。它可允许头显精确追踪每根手指的运动,并且能够识别悬空比划。

与Leap Motion配件和Oculus Quest手部追踪功能不同的是,FMKit可以在3D空间记录单根手指的路径,并与四组手写样本数据进行比较。系统可通过指尖比划来识别单个用户,用密码安全地验证用户身份,并且能够创建文本输入,将其作为使用控制器输入文本或选择单词的替代方案。

相关项目:FMKit – A Library and Data Repository for In-Air-Handwriting Analysis

另外,将悬空书写的英文或中文单词转换成文本的潜在商业应用同样令人感到兴奋。你可以通过悬空比划一个独特的签名来解锁XR头显或单独的应用,允许企业高度定制数字内容的保护方案。另外,企业可允许团队共享一个超越数字或字母的通用密码系统,识别诸如五角星或其他特殊标记等符号。

FMKit目前支持两种类型的输入设备,一种是以每秒110次扫描速度工作的Leap Motion控制器;另一种是以每秒50次扫描速度工作,并使用Python模块来收集、预处理和可视化扫描信号的定制惯性测量数据手套。作为一款用户识别系统,FMKit搭配Leap Motion的精确率达到93%以上,而搭配手套则接近96%。但对于手写识别,Leap Motion的效果更好,系统识别单词的精度最高达到87.4%。这尚不足以取代语音输入,但对于只能使用手指和头戴式传感器的系统而言,这是一个不错的开始。

亚利桑那州立大学的Duo Lu, Linzhen Luo, Dijiang Huang, and Yezhou Yang已经将FMKit的源代码托管至GitHub,他们希望其他研究人员能够利用这个包括库和数据集的开源项目来扩展研究。另外,作品在CVPR 2020大会中的增强现实和虚拟现实计算机视觉研讨会中展示了所述研究。

原文链接:https://yivian.com/news/75809.html

THE END
广告、内容合作请点击这里 寻求合作
VR
免责声明:本文系转载,版权归原作者所有;旨在传递信息,不代表砍柴网的观点和立场。

相关热点

2020年计算机视觉和模式识别大会汇聚了世界各地的计算机视觉研究者和工程师,而Facebook Reality Labs显然不会错过这样一场盛会。其中,首席科学家迈克尔·亚伯拉什通过视频介绍了团队的研究及相关进展。
VR
Chamath Palihapitiya在Facebook在Facebook当了四年多的副总裁,于2012年IPO前一年离开。
VR
据ET telecom消息,一位印度高级官员表示,印度政府将禁止中国为任何国有电信运营商提供电信设备,也可能禁止私有运营商使用华为和中兴的设备。
VR
品牌评级权威机构Chnbrand近日发布的《2020年笔记本电脑九大消费新趋势》报告显示,综合性和整体外观设计是笔记本电脑消费者最重要的两个关注点,其中智慧交互成为消费者购买时新的关注点;同时接近两成消...
VR
转眼间,IOS 13已发布接近一年,在初期虽然曝出了不少Bug,但经过后期的优化后,IOS仍然是全球最顶级的移动设备操作系统之一。过不了多久,IOS 14也将正式推出,此时很多还在使用旧款iPhone的用户一定在担...
VR

相关推荐

1
3