LBS+AR、解谜、卡牌、创意绘画……这几类几乎囊括了现有的AR游戏类型，而玩法中大多只用到了基础的AR叠加和平面识别。

随着AR技术的发展，如今基于智能手机的AR早已不是当年单纯的叠加效果。如华为HMS Core AR Engine如今已经升级到3.0版本，除了与环境有更深的交互之外，甚至还能进行全身动作捕捉。

AR新技术与传统手游结合将碰撞出哪些创新玩法，或许《迷你世界》能够带来启发。

提到AR游戏，或许很多人都会联想到风靡全球的《Pokemon GO》（精灵宝可梦GO），这是一款风靡全球的AR游戏，与真实世界互动，在街道、公园、河边、山上抓虚拟小精灵，新颖的玩法结合任天堂的IP带来了巨大的市场潜力，至今这款游戏总收入已经达到40亿美元。

从AR实现的效果来看，《Pokemon GO》最初推出时实际上只是将小精灵简单的叠加在现实世界上，加上GPS定位，如让水属性的小精灵出现在湖边来实现更具特色的玩法。虽然AR层面的效果简单，但加上IP自身的影响力，以及收集养成、竞技对战等玩法，让这款游戏成为了AR游戏中的标杆。

从最初AR SDK推出到现在，AR技术底层也从简单的叠加，进化到能够与现实世界有更深的交互。如近日华为发布的HMS Core AR  Engine 3.0版本，从功能来看，其不仅在空间算法上支持厘米级精度，实现环境语义理解、环境光照/纹理、物体跟踪，还能实现人脸光照、唇语识别，手部关节识别、人体骨骼识别等功能。

通过深度相机拍摄后对环境建模，结合算法与AI，不仅能够识别场景物体，还能感知光照环境，如虚拟物体会被真实光线所影响，包括虚拟物体的影子角度、光照效果，甚至能将真实物体镜面反射到虚拟物体中。

面部识别功能能够提供4千多个顶点、7千多个三角形面片的Mesh，精细勾勒脸部轮廓，达到更精细的面部表情效果。

而全身动捕，则是通过识别和跟踪23个身体骨骼点的2D位置（或15个骨骼点的3D位置），来实时判断人的肢体动作和姿势，并且支持单人和双人。

得益于AR底层的进步，现在的AR所实现的效果不仅能够根据环境变化而变化，还能与环境进行深度融合，同时加上面部捕捉、手势识别、全身动作捕捉，游戏应用在设计和交互体验上都有了非常大的拓展和提升。

而如今也有越来越多的硬件支持高级AR体验，如华为 HMS Core AR Engine 2.0安装手机量达到5亿次，目前已支持62款机型，包括Mate、P系列期间机型，Nova系列、荣耀系列以及平板电脑等。开发者对于AR的热情持续升温，据称目前每个月有1000个左右开发者接入。截止到8月，华为AR上架应用数量达到380款，开发者注册用户达到1万。

除了上文中提到的LBS+AR玩法之外，在AR技术底层愈发先进的现在，游戏如何结合这些功能进行革新？《迷你世界》提供了一个非常有意思的思路。

《迷你世界》是迷你玩科技推出的一款休闲3D沙盒游戏，玩家可以在其中自有建造、创作并分享给其他玩家，所以与其说这是一款游戏，该团队更倾向于将它定义为一个创作平台。

此次VR陀螺采访到迷你玩科技联合创始人高南、古振兴，对这款游戏加入AR玩法以及对AR的看法进行了深度了解。

1、虚实结合：新内容领域的潜力

“AR这次的结合，里面我们关于虚实结合工具一个重要的点，玩家可以通过手机去扫描一个动作，他就可以在游戏里面去完成，把这个动作植入到角色中，然后再植入到他想要的游戏场景中。同时，我们根据这项技术还研发了更细微参数的调整的一个编辑模式，以及制录一体化，完善了他通过AR技术导入这个动作之后在游戏中的一个内容创作的编辑能力，所以也是希望通过AR的技术，让这些用户可以在游戏里面更好的去完善他们的一些内容创作。”

VR陀螺体验了这款游戏，在游戏中的迷你星工场菜单中，选择“星·舞动”即可打开AR功能。

拍摄过程中需要保持一定距离，拍摄全身范围才能捕捉到整个身体的动作。VR陀螺使用华为Mate20，后置3个1600万像素摄像头，实际动捕算法仅使用其中一个普通摄像头。在没有ToF等深度相机的前提下，仍然可以通过算法实现实时且精准的人体骨骼识别。

最后拍摄下来的舞蹈动画通过游戏中的自定义编辑系统，对需要完善的部分进行编辑调整。据了解，在动作捕捉过程中，一些蹲下、转身、弯腰等动作，普通的AR捕捉实际上很难做到非常精细，甚至会丢失，导致动作不真实或者跳跃。为了解决这些问题，所以迷你玩基于动作捕捉底层加入了动作预判算法，根据用户的运行轨迹算出一些方程式来预测下一个动作，如此一来当用户转身、蹲下的时候，这些动作可以很顺畅地表现出来。

通过简单的方式用户就可以做出很复杂的一套三维游戏动作，并且可以将这些动作应用到很多游戏场景里，实现游戏中的角色、动作、场景全自由化，所有规则都可以自己来创作、设定。

如《迷你世界》中的沙盒动画，UGC作者通过游戏中的场景搭建能力和角色形象编辑一些小剧场故事。许多在之前游戏中无法表达的内容，通过AR技术，能够将角色、形象、表演甚至肢体语言动作更生动地表现出来。

《迷你世界》定位创作平台，据了解现在平台上已有七千万沙盒的虚拟作品，包括闯关、跑酷游戏类作品；纯建筑观赏性作品等，今年暑假《迷你世界》的月活达到1亿，其中60%-70%为青少年用户，用户忠诚度和粘性、作品创意度极高，乐于探索新玩法。

2、虚拟偶像+IP“共创”

虚拟偶像虽然早有初音未来、洛天依这些强IP角色，然而真正产业开始规模化发展是从2018年开始，造就了爱酱、辉月夜、时空乃等知名IP，如今更是百花齐放应用在直播、电商、广告营销、演唱会等领域，成为一大重要的娱乐形态。

虚拟主播之所以能如此火爆，除了二次元产业的蓬勃发展之外，动捕技术的低门槛化也是重要的推动力。早期的初音未来以全息投影、动画形态出现，难以与现场观众实时互动。而驱动虚拟偶像与观众实时互动的技术——动作捕捉，早在上世纪八九十年代早已应用于电影行业，技术非常成熟。但不论是Vicon还是Motion Analysis都是极其专业的光学动捕设备，动辄数百上千万的价格，且不论普通用户，一般的小公司都难以承担。

如今一套全身动捕设备价格低至千元级，在不采用动捕外设的情况下，光凭计算机视觉算法也能做到手势、面部、肢体捕捉，几乎实现了零门槛。通过手机摄像头就能让驱动虚拟角色动起来。

在虚拟偶像上，迷你玩基于《迷你世界》游戏中的角色IP推出了“花小楼”虚拟偶像，外形设计上融合了沙盒游戏的特色，小方脸，三头身，小巧可爱，相当有辨识度。根据网络数据，花小楼目前全网粉丝数已超过1000万。

如果说之前的花小楼是官方专用的虚拟偶像，那么游戏中加入AR骨骼动捕之后，花小楼以及游戏中的其他角色，都能变成“IP共创”的虚拟偶像，成为玩家二次创作UGC内容的素材，IP价值将进一步扩散和放大。

“以后我们的IP，整个《迷你世界》IP是另外发展的一条线，IP里面涉及到另外一个点，叫IP共创，我们后面会有一个共创平台给到更多的IP爱好者和参与者，参与到我们的共创平台里面一起来共创内容。”

《迷你世界》第一次在AR上的尝试，为行业带来了新的启发。而随着底层技术进化，移动游戏还将在AR方向上衍生出更多创新玩法和可能性，如果未来计算终端从手机过渡到AR眼镜，那么未来理解世界的方式，人与世界、人与人之间的交互和沟通，未来的娱乐方式也将迎来大变革。

我们相信，技术不会倒退，每一次尝试都是有价值的。