眼动追踪和手势识别两大输入方式的叠加
或许会让Nreal一步步接近MR的终极形态
文 | 缪健
（VRPinea2020年3月7日电）2020年初，Nreal在CES上发布了混合现实（MR）环境下的3D操作系统——星云。在近日，Nreal宣布将加入手势识别功能，并提供多方协同作业的设计软件，以此更好的完善内容生态体系。同时，Nreal正同韩国LG U 和德国电信等运营商深入合作，进一步拓展在海外MR领域的市场份额。
星云系统之上再融合30种手势
让你足够自然地操作模型
电子产品的输入方式，经过PC电脑时代的键鼠输入，到智能手机时代，已经被触摸手势所代替。而在XR领域中，手势识别的输入方式，被认为是最自然的输入和交互方式。在以往的类似产品中，VR往往需要加入专门配备的追踪手套，AR/MR则需要加入专用的手势识别模块和传感器才能实现实时高精度的手势追踪。
如今，随着计算机视觉技术的迭代，利用普通摄像头的Slam算法来计算手势操作，成为未来一代XR产品手势识别的关键技术。Nreal目前在不增加额外硬件模块的基础上，与海外手势交互应用公司Clay AIR合作，将其手势应用引入到Nreal Light上来。
Clay AIR在2018年曾经与高通合作，为旗下OEM产品提供关键交互技术。这也是目前XR头显领域中，为数不多的提供标准化手势识别的公司。据了解，通过Clay的软件算法，已经可以识别包括拿、捏、抓、轻扫等超过30种用户的手势动作，从而操纵虚拟物体，与MR环境进行更加直观的交互。
Nreal Light通过前部摄像头将手部动作分为多个追踪节点，并将手部模型叠加在这些追踪节点之上，通过高通骁龙855及以上芯片实现高速的图形渲染，从而实现用户的手势操作。同时，在此前Nreal Light已经实现用智能手机作为控制器，或者专门的6Dof控制器进行MR环境的交互操作。Nreal认为，提供不同的交互方式让开发者和用户进行选择，才是一个更成熟的硬件开发企业的职责。
据了解，手势识别功能将在近期通过Nreal SDK提供给开发者，并可以将该功能应用在支持Nreal 3D系统星云的安卓应用程序中。通过Nreal SDK，开发人员可以进行手势追踪的自定义，包括重塑或渲染全手、单独的手指、边界框、光标或自定义外观，前期完全支持的手势包括捏、指向、抓取、滑动和缩放。
Nreal此前宣布在全球范围拥有超过3500个内容开发者，并与全球多家通信运营商达成合作，包括了日本KDDI、韩国LG U 、德国电信Deutsche Telekom、瑞士电信Swisscom、英国EE等。在韩国，Nreal通过在LG U 的零售店展示，在韩国进行Nreal Light设备的举措将MR带入了韩国消费者的生活。
Nreal在2019年推出消费者版本的Nreal Light后，积极布局开发者生态和海外销售体系。作为国内为数不多在国际市场有所影响力的MR厂商，Nreal正逐步完善内容体系和挖掘MR在各领域的潜力。
在此前的消息中，Nreal和国内尖端的眼动追踪品牌七鑫易维已达成合作，将于今年推出带有眼动追踪模块的MR眼镜，眼动追踪和手势识别两大输入方式的叠加，或许会让Nreal一步步接近MR的终极形态。
重构多人协作
带上眼镜随时操作3D模型
MR眼镜除了娱乐领域，工业、设计领域的应用日益凸显。精密机械、高精动画模型、建筑模型通过MR环境进行设计、定型、维修，已经在部分世界知名企业应用到生产领域。然而，绝大多数MR环境中的3D模型，需要工程师不但具备建模能力，还需要针对MR眼镜进行软件技术环境的开发。这也是MR 工业领域的一大痛点。同时，多数MR设计软件不具备多台硬件的协同工作，这也导致了MR在工业领域的应用场景虽然广阔，但真正落地有着高成本、高难度、低频次的特点。
Nreal针对这一特点，近日与微软Hololens的MRPP平台的重要合作伙伴DataMesh达成合作（编者按：MRPP为微软Hololens的行业解决方案认证）。将于近期推出基于Nreal Light的行业解决方案DataMesh Director。
该产品定位于简单易用型的XR内容工具。支持多种CAD文件格式导入，并可对3D数字模型进行数据修复、格式转换以及轻量化等处理。并且兼具云端资源管理和傻瓜式编辑操作等特性。旨在帮助相关企业助企业员工打破人与人、人与机器的信息交流阻碍，降低工业设计领域的协作成本。尤其值得一提的是，该产品打通了多台硬件的同时接入协作。
影像远程会诊平台正式上线
Nreal Light星云平台
近期，黑龙江省影像远程会诊平台也正式在Nreal Light星云平台上线，通过该平台，一线医生可佩戴Nreal实现远程全息阅片及问诊交流，缓解了基层医院影像阅片压力，加强了对一线阅片医生的防护。据悉，该解决方案将在黑龙江省哈尔滨医科大学附属第一医院落地应用。
VRPinea相信在不久的将来，随着5G网络的到达，Nreal能够在MR市场中占据重要的一席之地。
本文属VRPinea原创稿件，转载请洽：brand@vrpinea.com
