都说手势和语音识别是最自然的交互方式，未来将成为主流。 且不说语音识别，至少在手势交互这一块，目前还存在比较大的局限性。而很多人对于这一技术的应用场景也比较迷茫。 近日，uSens凌感发布了新的Fingo SDK，可以实现一系列双手交互动作，如握拳、手心写字、十指交叉等，为手势识别的应用带来了新的可能。借此机会，我们和凌感聊了一下这项技术的应用场景。 进化的手势识别：支持双手交叠 26DOF、60帧，几乎成为了手势识别技术的标配，要实现已经不是难题。而更难的是，如何在虚拟世界中完全重现现实中双手的动作。由于手势识别使用红外方案居多，在双手重叠、被遮挡或者使用复杂的手势的情况下，往往不能通过摄像头准确识别出来，需要算法来弥补。 人的手部动作灵活复杂，不仅有直接可见的清晰手型，也有握拳、手指交叉、左右手交叠等等对关节点有大幅遮挡的动作，这些遮挡的部分如何精准识别成为判断手部追踪技术的一个关键指标。 uSens凌感联合创始人、CTO费越博士介绍：“我们的手部追踪指的是实现双手的自然交互，不是识别几种固定的手势，也不是跟踪五个指尖，而是通过对手部26个自由度的追踪，通过深度学习等算法，对手部骨骼进行识别。人是主动性的，不是被动的受限交互，这就不可避免的出现大家生活中常用的双手交互的动作，比如鼓掌、握手、双手交叉换位等。为了给用户创造自然沉浸的三维交互体验，我们认为这部分虽然难度高，但有必要突破，其他方案目前还没有涉及这部分，或者效果不佳。我们先行启动了在这个方向的研发和尝试。”

凌感最新Fingo SDK演示视频：

我们在现场体验了凌感Fingo以及另一款手势识别模块产品，用握拳、拍掌、翻转、叠加、交叉、在手掌上写字等各种姿势进行了对比，虽然都存在一些抖动的问题，但很明显，在双手的识别上，Fingo比另一款的识别率高很多，特别是在双手叠加的情况下，另一款基本上只能识别出一只手，而且偶尔会判别不出来手的正反面。 VR/AR上的手势识别应用场景 目前来看，几乎各个手势识别的厂商都会选择将VR/AR作为首选的应用领域。 比如uSens凌感的手部追踪解决方案Fingo自今年年初推出后，已经与国内外AR/VR类头显厂商进行了深度合作，部分厂商已在规划集成Fingo的交互头显，预计今年底或明年初将有产品面世。基于Fingo的注册开发者不断增加，行业覆盖游戏、房地产、教育、汽车、展览展示等。 凌感uSens的商务副总裁陈佳敬提到，和硬件厂商的合作主要分为三种，如果对方硬件准备好了，可以适配软件；第二种是提供软件和硬件做嵌入集成；最后一种是提供配件，给对方直接上架销售。 在手势识别的应用上，并不适用于所有的场景，而更多是一些特定的场景，和人在真实生活中的动作一样的交互。比如看到一些虚拟的茶杯，就不会想到用语音去操控茶杯，而是更自然的直接用手去拿。而特定的应用场景，比较明确的是AR方面，因为微软的HoloLens有基本的手势交互，让开发者们对其有了一定的认识，相对来说VR还属于观望的阶段。 uSens凌感高级技术总监毛文涛提到，就是发现在行业实际应用中，手势操作有些痛点问题一直没得到很好地解决，如：聋哑人沟通用的手语中有大量双手交叉或交叠在一起的动作，这类动作目前市面上产品无法做到或表现不佳。VR社交、VR课程中，希望有一些类似小键盘的操作，学生或用户长时间手势悬空操作会比较辛苦。针对这些应用场景，此次凌感才会推出双手交互，实现了在手心上写字、左右手交叉等一系列双手触碰的动作，这样既有力反馈又无需悬空操作，对于提升用户体验有很大作用。 另一方面，手势识别在游戏上的应用也在提高。比如萌果游戏、哈士奇等多家厂商已经开发了游戏的手势识别版本。 VR/AR之外的需求——车载系统 除了以上VR/AR的应用场景之外，手势识别融入车载系统中其实早就已经有厂商开始实施。比如微动就是专门针对车载市场的一家手势识别技术开发商。凌感也经常收到来自汽车厂商的需求，并且曾经在2016年初的时候，跟戴姆勒做过一些Demo。“当时他们希望在4S店中把VR/AR和手势识别的场景加入进去，包括奥迪也在考虑跟我们合作。” 陈佳敬提到，车载相对来说对手势识别的复杂度要求不那么高，甚至只需要一些简单的识别手部轮廓的也可以用，5种之内的手势基本方案就可以满足需求。所以简单的方案用在车载上，复杂的则使用在VR和AR上，是凌感的基本策略。 虽然这是一个很有潜力的市场，不过和汽车企业合作也会产生一些问题，因为要在汽车上市之前加入到车载系统中，就意味着参与环节是汽车的设计过程，通常一款汽车设计耗时3年左右，周期特别长，一般创业公司很难耗得起。 后记 对于手势识别的未来，凌感方面还是非常有自信的。“目前来说，中国市场的发展空间是很大的，不论是硬件迭代速度，还是C端用户量，中国在全球都很靠前。美国虽然有一部分核心用户，但是在大众市场上，中国在线下体验店、行业应用发展都要更快。而开发者对于手势识别有也有了更为明确的需求，这些会让我们想要花更多的精力来满足他们需要的东西。” “虽然现在还属于投入期，不过在今年下半年到明年上半年有一波小浪潮的话，是可以给我们带来一定的营收的。” 关注微信公众号：VR陀螺（vrtuoluo）,定时推送，VR/AR行业干货分享、爆料揭秘、互动精彩多。