首页 > 移动应用 > 正文

VR次元腾讯专家专栏:如何利用VR来解决社交需求?

2016-06-17 16:34:35  来源:腾讯科技

摘要:VR技术的火爆,也带动国内很多公司开始涉足VR,腾讯也在其中。
关键词: 腾讯 VR

 
  重现现实生活社交活动,VR让我们多远都能在一起
 
  让我们回到现实生活中来看一看,什么样的事情是大家喜欢在一个社交环境下做的,比如看比赛、打牌,唱K,玩桌游这些娱乐活动,都是有了社交的成分后变得更有趣的。想象一下,在进行这些活动时,如果去掉社交元素,你一个人独自进行,少了周围朋友们的嬉笑欢闹交流分享,是不是顿时少了很多乐趣?即使在电脑或者手机上,通过互联网你虽然也可以和其他人一起参与,但你能感触到的永远只是一行行冰冷的聊天文字或者耳机里的语音,这也远不如和别人一起在现场的那种亲近感。对于这类活动,我们相信,在VR里才可能真正还原出人与人交互的那种乐趣。因此,在VR里重现现实生活中会因为社交元素而更有趣的活动是一个值得考虑的方向。
 
  同时,因为VR里构建的是虚拟世界,我们在视觉表现上可以给这些现实生活中的社交活动带来更精彩震撼的体验,比如玩桌游,所有的物件终于都可以动起来了,魔法可以看到了!
 
  相比传统的互联网化的社交娱乐活动,在VR里,我们可以重现社交的价值,同时比起现实世界,我们也可以创造更奇幻更不可思议的体验。
 
  游戏大厂们也在争先做相关的尝试,育碧刚刚在今年GDC上面宣布了一款类似“杀人游戏”的虚拟现实智力游戏,Werewolves Within。在游戏中,所有玩家都可以同时通过语音和非语音的交流方式,在叽叽喳喳的谎言和争吵中寻找出自以为是的“狼人”。游戏中引入了点头、握手、窃窃私语、宣讲等非语言的交互方式,调动起所有参与者的积极性,很好地展示了虚拟现实中社交元素的价值。
 
  
 
  第三个问题,如果我们要做VR社交,技术上可行吗?我们能够提供多丰富的人物呈现和情感表达?
 
  通过技术手段,加上基于游戏或者应用中的信息,我们可以在VR中推测和还原出可信的脸部外观、表情变化、肢体动作
 
  先看虚拟世界里用户脸部外表的呈现,如果我们希望是接近真实的话,我们可以通过技术手段离线得还原出用户的脸部贴图和模型,现在无论是靠单张正面照片,或者多张不同角度的照片,亦或是依靠手机相机镜头旋转拍摄,都有相应的技术来还原出3D模型。我们也可以换一种做法,因为往往在网络上进行社交时,用户倾向于不使用真实的形象,所以可以选择不追求脸部的还原,而是提供足够灵活的虚拟角色脸部定制功能,让用户来定制他喜欢的脸部外表。
 
  用户脸部的表情在虚拟角色上的映射会是传达情感的关键,但很不幸的是,因为用户戴着几乎完全遮住上半边脸的头显,所以目前我们只有少量的实时信息可以用来在虚拟世界中还原出用户的脸部表情。
 
  我们首先可以做的是用Lip Sync技术来通过声音计算出虚拟角色的口型,让用户之间的对话和嘴部运动匹配起来。
 
  对于眼部的表达会有比较大的挑战,虽然已经有头显内眼球追踪的技术,但是主流的几个头显都还没有集成,好在我们可以通过头部的运动以及场景内的事件焦点(比如某人在说话,或者某个关键事件的发生),来推测用户当时的兴趣焦点,最终来生成生动且可信的眼部动画。
 
  关于表情,如果有摄像头的话可以抓取到脸的下半部份,有一个有趣的技术值得关注,它可以通过深度学习,仅使用脸下半部份表情就能还原出完整的脸部表情。
 
  手部的动作也是表达情感重要的一环,我们可以通过双手体感控制器来获得手部的位置信息,如果需要更细致的表达,那么也有硬件厂商提供各类不同技术的手部追踪,有基于惯性传感器、有基于磁场的、也有基于光学的。
 
  对于肢体动作,可以通过双手的控制器以及头部运动信息,再加上IK(Inverse Kinematic)来做上半身姿态和动作的模拟。下半身的动作可以通过移动的信息来模拟,或者也可以使用Kinect这样的设备来获取,但是下半身的动作一方面对于情感表达并不是很重要,另一方面对于VR里的移动也需要谨慎设计,所以暂时不需要过多关注。
 
  综合来看,在现阶段,比较可行的方式是我们捕捉一些真实的信息,然后再根据当时的应用或者游戏内其他信息,来推测和补充用户的那些不能被捕捉到的信息,从而推断和还原出可信的玩家的肢体和情感表达。
 
  我们也相信,今后的几年,硬件和软件上一定会持续进步并且各种新型的交互技术也会整合进各种头显,提供更强大的捕捉且还原用户外观和交互的能力。
 
  VR:多远都能在一起
 
  用户在VR的虚拟世界里真真切切的感受到"自己"存在的同时,也会本能得去"扮演"虚拟世界中的这个"自己",并且希望自己有更丰富的表达能力。虽然现在的技术还不完美,做不到完全的真实到虚拟的映射,但是也已经能提供给用户前所未有的自然交互能力。比起真实生活中的社交,VR社交像其他互联网社交一样更有效率;而比起电脑和手机这样的设备,VR社交又更丰富立体。在不远的将来,VR社交将会给我们带来全新体验:天涯海角,随时随地,让朋友们和全世界就在你眼前。

第三十五届CIO班招生
国际CIO认证培训
首席数据官(CDO)认证培训
责编:pingxiaoli

免责声明:本网站(http://www.ciotimes.com/)内容主要来自原创、合作媒体供稿和第三方投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。
本网站刊载的所有内容(包括但不仅限文字、图片、LOGO、音频、视频、软件、程序等)版权归原作者所有。任何单位或个人认为本网站中的内容可能涉嫌侵犯其知识产权或存在不实内容时,请及时通知本站,予以删除。