快好知 kuaihz

结合VR+AI,智能手环Mudra inspire如何实现高精度手势识别

近几年来,以智能手环为代表的可穿戴设备的市场逐渐兴起。人们对这些产品提起兴趣的同时,又很快发现多数智能手环实用性不强,作用很“鸡肋”。事实上,目前智能手环类产品所面临的最大尴尬即看似前景巨大,却难以触及用户的痛点。

另一方面,当捕捉现实生活中的手部动作将其转换为虚拟世界中的动作时,大多数设备配备的控制器都非常笨拙。这就是为什么Wearable Devices想要开发出一款轻便实用的智能手环,以完全消除人们对控制器的需求,同时还能精准追踪手势和手指动作

Wearable Devices,总部位于以色列,一直致力于开发可穿戴设备。近期,该公司推出了一款智能手环——Mudra Inspire,能够接收手腕处独特的生物信号,来判断用户的手指动作,且无FOV限制,同时还融入了AI技术,能更精确捕捉手部动作

产品规格

Mudra Inspire尺寸为2.3 x 1.1 x 0.6英寸(59.5 x 27 x 16毫米)、重24.5g、集成3个SNC传感器、支持6DoF追踪(内置IMU)、电池容量为80mAh。肩带可调节最大长度为10.2英寸(260毫米)。

同时,Mudra Inspire还可以与其他可穿戴设备结合,只要兼容蓝牙4.0以及Android 6.0及更高版本系统即可。

工作原理

Mudra Inspire集成了三个已获得专利的表面神经电导(SNC)传感器以及读取生物信号的电极。读取数据后,设备执行数字计算,并通过蓝牙实时将其发送到配对设备。接下来,该配对设备使用TensorFlow开源软件运行神经网络算法:一个用于信号检测(手/手指运动),一个用于将真实动作与虚拟指令分类。

通过这种方式,你的手就成为了一个控制器,而手指就是按钮。校准后,你可以使用各种功能,例如滚动、滑动、选择、开始、拖放、旋转和翻转,并允许设定不同的手、手指和手臂姿势向手环发出指令。该公司表示:通过结合AI技术,Mudra Inspire可以更准确地完成指令和各种操作,精准率高达99.9%。

当前,Mudra Inspire能够要识别的手势包括捏合食指、捏合中指、打响指、收起拇指等一系列动作,不同手指动作代表不同的指令。

体验反馈

外媒对这款手环进行了上手体验。体验者表示:Mudra Inspire能够精准捕捉手部动作,带来很好的沉浸式效果。

初次体验手环需要通过Mudra配套应用程序进行校准。然后,移动手指时检查设备的反应灵敏度。这一过程这,应用程序会显示出一条波浪线(如心电图一般),随着手指动作的变化,波动峰值也不同。

Mudra Inspire还可以判断用户正在施加多少手指压力。通过将食指或中指和拇指进行挤压,手机屏幕将会显示出多种颜色。你挤得越用力,颜色越多。

Wearable Devices首席执行官兼联合创始人Asher Dahan演示了一款移动端手机游戏。体验者看到光标跟随Dahan的手指移动,通过上下移动左手以及捏放食指与拇指,Dahan能够精准地将一个个圆圈捡起或套在杆子上。

此外,Mudra Inspire可以实现精准的手部输入。Dahan通过捏住食指和大拇指来操控应用中的虚拟喷枪,画出的效果可以与使用鼠标在微软绘图中的效果相媲美。

应用及内容体验

遗憾的是,Mudra Inspire目前没有开发面向大众的应用程序。不过一些合作伙伴,如HTC Vive、HoloLens、谷歌Cardboard等,正在基于其构建体验。

预计Mudra Inspire将在2018年底之前兼容Windows系统,并在2019年初上线iOS版本。未来可能兼容的平台还包括:Oculus、谷歌Daydream、PSVR,Magic Leap等。不过具体开发日期尚未公布。

Mudra Inspire能否取代控制器?

控制器的一个缺陷就是FOV限制,而Mudra Inspire没有。另外,有些控制器不够符合人体工程学的设计,让人感觉很笨重。比如,有用户抱怨Vive控制器按钮界面不直观,拇指很容易按到Steam菜单。Oculus Touch没有配备可充电电池,导致电量经常消耗完。

另外,长时间握控制器可能会让用户手抽筋,长此以往发展成类似“鼠标手”的情况。

而上述缺点,Mudra Inspire都没有。如果后续这款手环能够上线更多好的应用或体验,可能会引领一阵新风潮。

目前,Mudra Inspire开发者套件售价246.5美元(约合人民币1715元),其中包括印有Mudra标志的可调整腕带、一块Mudra Inspire核心硬件(可卡在腕带上)、一条micro USB充电/线和一本使用手册。

不过,当前版本仅面向开发者。等平台中有了足够的应用和内容体验后,才会面向消费者发售发售(预计在2019中旬),预计届时价格也会大幅下调。

来源:87870

本站资源来自互联网,仅供学习,如有侵权,请通知删除,敬请谅解!
搜索建议:高精度  高精度词条  手势  手势词条  识别  识别词条  结合  结合词条  inspire  inspire词条  
科技

 微软HoloLens拿下美国陆军...

近日,美国陆军宣布,与微软签订了一份4.8亿美元的军方合同,为陆军提供HoloLens以用于实战和训练。根据合同,陆军将购买超过10万台AR设备。早在之前,美国...(展开)