VR想被完美地消费和使用 还面临哪些技术挑战？

　　如果你还未曾见过人们初次体验虚拟现实（VR）的情景，我强烈建议你感受一下。无论是七岁的孩童，还是七十岁的老人，他们戴上眼镜之后，都情不自禁会像演员一般手舞足蹈，伸长着脖子，盯着周围的虚拟空间，仿佛突然进入了全新的世界维度。然后，他们还会兴奋地分享眼前景象，“快看！”“你真该看看！”这让我想起随身听兴起的那些日子，我们兴奋地朝着对面的人大声说话，却忘了歌曲只有自己才能听见。这样来介绍VR非常的贴切：这是一个令人兴奋的新事物，能够立刻吸引住你，让你情不自禁地想要和别人分享。的确，Facebook收购Oculus说明他们已经看到了VR应用于社交媒体的巨大潜力。想象这样一个未来场景并不困难：我们坐在虚拟咖啡厅，对着亲朋栩栩如生的头像聊天；或者在你最喜爱的社交网络上浏览VR视频和360度全景照片，而现实上，你却只是穿着睡衣坐在家里的沙发上。关于VR未来发展的展望无处不在，然而VR未来将如何被使用和消费，我们仍需拭目以待。就目前而言，也有一些其他技术拥有和VR同样的潜力和影响力，比如和VR来自同一家族的增强现实（AR）。本文中，我将讨论当今的VR市场及其面临的挑战，并介绍能够实现VR的技术。

　　游戏被认为是VR率先采用的领域，尽管它只是VR技术众多潜在用途的其中之一。VR技术打开了全新的世界，让游戏开发者可以营造更高级的沉浸感，创造全新的游戏机制、体验与控制方法，这些体验是绝对是传统技术无法实现的。移动游戏刚问世时，很多开发商都只是单纯地将传统游戏移植到移动平台。这一做法却因无法实现而被舍弃。两者不同的控制方法和形状因子、多样化的用户与使用模式、以及移动市场截然不同的期望，都促使开发商重新思考移动游戏的核心。从PC、电视迁移到移动设备，游戏本身所受到的影响远超预期。今天，手机游戏仍然与PC和电视游戏共享品牌。尽管在高端设备上，我们已经可以支持相同的图像内容，但游戏行业已经掌握该如何调整传统游戏，使其更适应移动市场，并针对移动市场开发了完全不同的游戏类型。如此转变推动了移动游戏市场的快速成长，有时，移动游戏的收益甚至超过传统的PC、电视游戏。

　　我们正处于新一轮的探索期：如何将VR更好地应用于游戏、了解哪些有用，哪些没用。所有人都在探寻并试图如何抓住这一千载难逢的机遇。接下来的数年将是见证奇迹的时刻，我们将亲眼目睹VR的发展和演化。历史的经验告诉我们，全沉浸式的游戏尽管可以营造更身临其境的感官体验，但是被外星人一q爆头的感觉只会让人惊恐万分。相较于此，温和的娱乐形式尽管乍看起来没什么特别，但通常却更令人印象深刻。当然，也不排除会有很多开发商觉得，白天吓人一大跳是件值得骄傲的事情。有的玩家也很乐意体验一下世界最大的虚拟过山车是什么感觉。市场需求是多种多样的，所以我不希望一概而论。Oculus Store中多元化的应用告诉我们，“体验”和“概念”将各自衍生出全新的娱乐形式。即便只在其中添加细微的交互元素，也有可能打造出一款全新的“游戏”。

　　nDreams，在虚拟现实中体验完美海滩

　　现在，已经很难找到哪个创意产业不考虑VR电影、照片及现场直播的潜在影响力。对媒体而言，VR将非常受欢迎。站在球场中间，参加你最喜欢的体育赛事，或亲临重大新闻事件，或目睹坐在身侧的演员捧得梦寐以求的奥斯卡奖，或者在美国下一任总统的就职典礼上占据靠前或居中的好位置。记者、剧院、艺术家、音乐家、教育中心和博物馆都已经蓄势待发，探索应用VR的可能性。尽管标准化的视频及图像容器与元数据技术都尚未成熟、亟待发展，但能够拍摄360° 全景视频和照片的专业摄像机已悄然上市。此外，人们对消费型VR摄像机也抱有极大的兴趣，不远的未来，我们将可以通过VR拍摄猫咪过生日、全家度假的点点滴滴以及令你瞬间发笑的婴儿视频，相信这将引爆新一轮的社交分享狂潮。在探讨VR视频分享时，Facebook首席产品官Chris Cox如是说：“你会这样做，Beyoncé也不例外。”目前，Facebook和YouTube都已支持360° VR视频流及相关项目，以期进一步提高质量标准的Google Jump 就是一个例子。

　　并不是所有的VR视频都采用传统意义上的实景录制来完成拍摄。Oculus电影工作室正在探索利用游戏引擎技术来讲述动画故事——对故事进行渲染，而不是拍摄后的重新播放。“用VR进行故事讲述”的概念已经激发了很多天马行空的想象。不过，首次尝试将电影和游戏进行结合的时候，勇于吃螃蟹的制片方也尝到了痛苦的教训：尽管整合游戏技术可以打造沉浸式更强的故事情节，但将交互元素与故事情节随便杂糅只会营造出四不像的体验。即便挑战重重，使用渲染仍然是一项不错的技术选择。粗略计算，相比普通高清视频，高清立体的VR电影对视频流及编码的要求明显高出一个量级。如果使用传统方法进行视频拍摄、压缩及流化，大量的制作过程都会被浪费，360°拍摄的内容约有5/6都无法呈现在屏幕上。如果能够从用户取景的角度来考量，我们可以做地更好。这种新的思维方法特别适用于内容渲染，并进一步突出视图自适应技术的优势。从OTOY和8i正在开发的新技术，或者光场相机相关及新型领域的快速成长中，我们不难发现，GPU为中心的视频技术正快速进步。这是一个快速发展的领域，我们希望整个行业也可以跟上步伐。

　　Huang et al的光照野外立体镜