华捷艾米王行丨下一代人机交互，MR或迎商业化热潮

MR简称混合现实，指的是合并现实和虚拟世界而产生的新的可视化环境。在新的可视化环境里物理和数字对象共存，并实时互动。它是VR（虚拟现实）与AR（增强现实）的进一步结合发展，这一技术通过在虚拟环境中引入现实场景信息，在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路，进一步增强用户体验的真实感。

相较于2014年前后盛行的VR（虚拟现实），MR还可以让用户看到现实世界，它注重于将虚拟头盔里呈现的虚拟物体固定于真实空间中并给人予真实感，并且还可以通过算法技术实现虚拟物体与真实世界中用户的实时互动，更趋近于强AR的特征。总体来看，MR的出现突破了完全虚拟的VR技术局限，进一步拓展了人机交互的模式，相应的也拓展了更广泛意义上的商业运用空间。

伴随着智能硬件、大数据、云计算、深度学习等技术的深入发展，MR技术发展对于硬件、软件、带宽等方面的条件需求都逐渐满足，已经开始具备了逐步走向商业化落地的可能性质。与此同时，包括微软、苹果等巨头在该领域研发以及投资的持续加码也进一步加快了MR商业化的步伐。

为进一步加深行业人士对于MR这一强AR技术的产业发展了解，采访了专注于该领域产品及技术研发的华捷艾米，并结合该公司研发副总裁王行先生的讲解及分析，重点解读了MR商业化进程的现状以及发展态势，最终结合华捷艾米在该领域的布局做了一定的讲解。

新一代人机交互风向标，双巨头布局加速MR商业化

在人机交互技术的不断发展过程中，从最初的文本处理到后续的图形界面以及近几年崛起的语音技术，交互技术的发展对计算资源、硬件、芯片等底层支撑的依赖一直存在。很长一段时间内，由于受底层支撑技术的制约， MR这一新型交互技术的发展长期受阻，在经历了短暂的资本热捧之后即很快趋于平静。

从用户体验层面来看，基于图像以及MR混合现实的呈现方式更直观并且高效，在基于语音、文本等形式的交互中，往往存在语音以及文本不能很好的描述自身意图，而接受者也很难理解原来意思的情况。站在更长远的维度来看， MR这一新兴的交互技术势必成为未来交互的主流方向。

与此同时，作为MR领域内最具代表性质的两家头部机构，苹果和微软两家在MR领域的大力布局也一直备受业内人士关注，成为了行业发展的风向标。据透露，目前苹果MR团队超过1500人，3年累计投入超过200亿美元，并预计在2019年Q3预计推出搭载MR芯片的手机。微软2015年发布MR设备HoloLens奠定行业地位，新一代HoloLens产品也将于今年Q4发布，搭载自研HPU。无论是从人员投入、资金投入还是从专利、新品等角度来看，两家巨头在过去几年一直不断的加大该方向业务的投资布局，足见其对该领域的看好。

王行分析道：“作为AR/MR技术领域头部的两家机构，微软凭借2015年研发的不受限制——没有任何线缆与听筒、全息、高清的hololens产品，突破了以往AR、VR技术的限制，定义并且长期引领行业发展，是该领域的头号玩家。而近年来苹果的动作也频频不断，作为一家潮流驱动型的公司，苹果的开发多是基于自身算法以及底层技术完备而进行的。它本身很少像谷歌等公司去做一些探索性较强的产品，近两年苹果在投资、研发上都不断的加大力度，在推广运用上也结合自身产品形态开展更多新型的运用。伴随着今年Q4微软的新品出现及明年搭载了MR芯片的苹果手机的出现，新一波的AR/MR运用研发热潮或将再次到来。”

核心算法+MR芯片，打造行业竞争壁垒

成立于2014年，华捷艾米是一家以深度学习、计算机3D MR算法等系列技术研发为核心的AI技术公司，是目前国内少数几家能够提供MR全面解决方案的机构。目前公司形成了以3D智能SLAM和3D骨架算法为基础的5大核心算法，并且即将今年11月份实现自主研发的芯片量产，进一步加速自身MR整体解决方案建设。

3D智能SLAM算法，是构建在智能相机之上，通过建模以及分割测量技术，实现机器能够对人、物、环境的识别判断，并且通过特点参数计算出自身位置并与环境产生互动的一套3D视觉算法。其与环境互动的功能包括体感交互、语音互动、躲避、搜索、导航等功能，其研发过程极其耗费资源。

3D骨架算法是对场景中所有人物进行提取，并对其肢体关节点进行识别与跟踪的技术。相比于普通的2D骨架算法，3D骨架算法具有稳定性好、不抖动；可识别各种特殊动作、交互效果好等特性，是新一代人机交互过程中的核心技术。作为国内唯一拥有3D骨架算法技术研发的机构，华捷艾米不仅成功研发了自主的3D骨架识别技术，同时还基于这一技术打造了专门的手势识别算法，进一步突破了国际上leap motion、uSens等机构基于双目红外识别造成的深度不够精细，拓展边性较差的情况，成为国内唯一实现3D骨架识别的企业。

从键盘、鼠标到触摸屏，交互方式一直向着更人性、自然的方向发展。手势作为人体自然交互的一个重要环节，伴随着3D手势算法技术的成熟以及不断发展，其将有可能结合全息影像等MR技术实现无屏操作，将会在新一代人机交互变革过程中起到关键作用，运用空间广阔。

华捷艾米凭借自身3D SLAM、3D骨架算法、手势识别等完整的3D视觉和3D MR算法体系奠定了自身行业发展基础，也通过算法授权、个性化定制、解决方案提供等方式实现了企业盈利，但是华捷艾米也发现仅靠这样的产品体系很难实现长远的增长预期，原因是因为在具体的MR行业应用需求场景中，往往涉及到一系列专业算法的运用，而现有的芯片不能满足相应需求。基于此，华捷艾米从2016年起便决定自主研发专用MR芯片，在集成自身3D SLAM算法、骨架算法等核心算法的同时，还以生态化的打法集成合作开发商的其它MR功能性算法，进一步增强MR芯片的集群功能。据悉，目前该芯片已流片成功，预计今年11月可以量产。

MR专业芯片的发展对具体的MR产品落地至关重要，它将进一步优化MR产品包括性能、功耗、体积、成本等方面的功能属性，呈现给用户更好的交互体验。但是其技术壁垒也非常高，相关人员曾给华捷艾米算过一笔账，如果普通企业需要跨进该领域并且达到华捷艾米现在所达高度，仅在研发投入一块就需要耗费超过3亿元的投资额，达到算法以及芯片完全自主产出更需要耗费5~10年。

通过完全自主的核心算法以及MR芯片奠定自身行业竞争力，华捷艾米更通过生态化的打法不断的拓展自身资源体系，巩固企业护城河。现阶段，在完成了MR软硬件的整套解决方案建设，华捷艾米下一步的核心目标将在于推动MR商业化落地。

未来，伴随着微软、苹果等行业巨头对行业的推动发展，MR这一长期被看好的领域势必迎来新的发展浪潮，华捷艾米能够在这一波大的机遇中获得怎样的收益，让我们拭目以待。