您当前的位置：首页 > 游戏动漫

“徒手抓精灵微动Vidoo这样玩Pokémon GO

2017-01-27 19:12:19

Pokémon GO让AR和手游、街头乃至社交相结合，仅仅是这几个关键词就足够吸引人，再加上Pokémon 这1世纪大IP，好像不火反而没道理。但是在手机上用长按→滑动的触屏操作摹拟“抛出”精灵球，将宝可梦收入其中……会不会有些略显拘束和中2？虽然国服还未开放，但是中国玩家对Pokémon GO的思考和想象其实不少，Pokémon GO确切带给我们很多欣喜，但是玩家最期待看到的不是技术最低级的模样，而是将之与最合适的技术表现情势相结合，从情节设计和操作方式来看，VR/MR+手感操控能带给我们更爽的体验。

开脑洞容易，但实现呢？

微动和易瞳共同尝试了VR和MR版Pokémon GO，实拍视频：http://v.qq.com/vplus/ff5d3ca732a20c350f8cf579b9d6066f，宝可梦从手机屏幕中解禁，你可以捉住想要选择的精灵球，在眼前调剂角度瞄准后冲着宝可梦抛出。如果你遇到的是1只刚强而又狡猾的宝可梦，为了不被带节奏，还可以打圈儿扔出最强旋转精灵球、投喂食品，大概没有哪只宝可梦可以从阁下手中逃脱了吧。

“徒手抓精灵微动Vidoo这样玩Pokémon GO

关于开发教程

相信各位老司机们对VR的了解已非常透彻，微动和易瞳携手做的这段demo除想要帮大家解锁抓宝可梦的新姿式，还想把MR+手感操控的技术表现情势普及给大家，以下为开发教程，除此以外SDK也能够在微动Vidoo官网免费下载，期待开发者在吃下这记良知安利后会有更多大作产生。

手感操控：

首先，通过微动的双目深度传感器得到深度图象。在深度图象中，我们通过修改每一个像素RGB的值用以标定该像素与传感器之间的距离。当我们视察深度图象时，会发现其效果与我们熟习的红外热成像图象类似，只不过我们把温度替换成了距离。下图中，左边为深度图象，右边为原始图象。通过视察可以看出，距离越近的区域，色彩越红；距离越远的区域，色彩越蓝。

“徒手抓精灵微动Vidoo这样玩Pokémon GO

其次，我们将深度图象中符合人体手部特点的部份分割出来，进行手部姿态、动作的辨认。这里需要指出的是手势辨认算法是基于深度图象而不是普通图象的。这样可以方便我们取得手部每一个点的深度信息。从而还原出整手的骨骼结构。如果我们想要与虚拟物体进行触碰式的交互，骨骼结构是不可缺失的技术条件。

“徒手抓精灵微动Vidoo这样玩Pokémon GO

最后，我们通过算法将传感器坐标系（包括手部骨骼空间信息）、虚拟世界坐标系（包括所有虚拟物体的空间信息）、现实坐标系（包括环境信息和手部信息）这3个坐标系对齐。这样，我们可以将检测到的手部骨骼与真实的双手对齐；将虚拟物体与现实环境对齐。认真实的手部触碰到虚拟的物体时，将会产生类似鼠标点击的事件，来驱动程序的履行，具体到Pokémon GO里面，就是投喂小精灵，扔出精灵球等操作。

至此，已完成了手感操控的基础部份，后续将进1步在Unity3D中完善事件的逻辑，完成Pokémon GO中将精灵球、食品抛向小精灵的功能。

MR显示

接下来，我们要做的就是在空间当中显示Pokémon GO中的游戏元素，并且让皮卡丘和精灵球显示在公道的空间范围以内。我们采取视频透视技术，通过双目摄像头实时收集你看到的“现实”世界并将之数字化，然后通过计算机算法实时渲染画面。这样做完既可以完全叠加虚拟图象，也能够看到的经过计算机渲染后新的“现实画面”。满足了我们对虚拟物体和现实环境同时存在的需求。

“徒手抓精灵微动Vidoo这样玩Pokémon GO

在解决了交互和显示核心技术以后，在Unity3D里面加入相应的SDK，调剂下流程逻辑。MR版Pokémon GO便诞生啦！

“手感操控”非“手势辨认”

划重点：手感操控不等于手势辨认，手感操控包括手势辨认。

手感操控要满足以下3个基本点：

1、手感操控1定要有深度信息，传感器要知道手离用户有多远。

2、手感操控包括手势辨认。手势辨认通过图象算法更新得得手部姿态和手部动作指令，将手的深度信息和手势辨认信息相叠加，得到：手离我有多远，手在做甚么的完全信息，才能称为手感操控。

3、在VR中，手感操控要给用户提供真实的手部图象。通过算法把手部影象拉近到和用户真实的前庭感官同步，能看到深度信息，给用户最真实的操控的感觉。如果用户看到的是机械的手或摹拟的手，交互友好度会大打折扣。

微动Vidoo（www.sharpnow.com）是全球首款可以利用于移动真个手感操控装备，可以完成手部影象坐标系与虚拟世界坐标系的重合，构建1：1的虚拟手感操控空间；交互进程中使用原始的手部图象，使用者就像是在用自己真实的双手与VR/AR/MR世界中的虚拟物体进行交互；不再使用头部瞄准作为选择的工具，让显示交互与指令交互分离。微动的下1代产品，将双目模组作为传感基站，可同时进行手感操控、空间定位、光学手柄的检测，致力于打造完全的虚拟现实交互解决方案。除此以外还将致力于为车载电子、全息投影、智能家居等前沿领域提供手感操控的软/硬件解决方案。

微动Vidoo和易瞳及其他VR团队在硬件和软件层面已达成多种情势的深入合作，接下来会为大家带来更多手感操控及VR/AR/MR领域有趣有料的合作成果。