1.3 什么是VR电影

3D全景视频和音频

VR电影的终极目的就是虚拟出来一个现实世界！如果我们观察周围的世界，四面八方都可以看到东西，而且有远近关系，以及声音从哪里发出来。那么如果想要真实地捕获到周围的世界，需要两个构成要素，一个是可以以3D形式同时拍摄四面八方所有场景的摄像机，一个是特殊的环绕麦克风。如图1-3所示的设备名称为AMBISONIC麦克风（特殊的环绕麦克风）。

什么是AMBISONIC音频

下面来解释一下，什么是AMBISONIC音频。

当前，整个VR社群注意力貌似都放在视频上，但是真实的音频占到整个体验的50%，接下来会深入解释一下AMBISONIC音频，现在读者只要知道：AMBISONIC麦克风可以捕捉到所谓的“声场”，而不是常见的那种简单的立体音轨。

这种声场包含来自四面八方的音频信息，可以解码成7.1或者是5.1环绕声。对于VR来说，最重要的是解码成Binaural（双耳道）格式。

如图1-4所示音频传递关系，这里要解释一下：由于头部的干扰，每个耳朵听到的声音应该是不同的。Binaural（双耳道）音频会把耳朵的形状考虑进来，它使用的是一种叫作HRTF（Head Related Transfer Function，头相关传输函数）的技术，以此创建超级真实的听觉体验。观众可以分辨出声音是从哪里出来的。

本书会随书提供两种音频的样本，如果读者戴上了耳机，可以听听两种声音的区别。

Binaural（双耳道）音频很酷，可以清晰分辨出来声音是从哪里出来的。

这是构成沉浸式VR电影的两个要素。这种体验真的不是一般的视频所能及的。当前市面上有很多360°全景摄像机装置，但是大多数是拍摄2D的，也就是说视频中的东西是没有深度的（远近关系），同时也不带AMBISONIC麦克风。使用这种摄像机也能创建很棒的球形视频，但是技术上来说这并不是电影级的VR，或者说并不是VR电影。它们只是能用VR头盔来观看的360°全景视频罢了。想要尽可能创建接近真实世界的虚拟空间，真的需要以3D的形式拍摄，并且必须加入特殊的音频。在完美的虚拟世界中，可能还需要包含嗅觉和触感，因为激活的感官越多，观众的体验越接近于真实世界。这种现象叫作“临场感”。触觉的反馈技术已经在发展，还有嗅觉的，但是这些内容超出本书的讨论范围了。