MIXED与VR180视频创作者Björn Sondermann和Jérôme Lozano谈论了他们在拍摄沉浸式内容方面的经验。本文作者Daniel Pohl是immerVR GmbH的首席执行官兼创始人，主要研究在VR180照片和视频沉浸式媒体领域的创新形式。以下为编译内容：

Sondermann和Lozano二人已经制作了一些令人印象深刻的VR180 3D内容，用特有的形式记录不同乐队的演奏音乐，部分作品在质量和摄影方面超越了许多专业发布的内容。

RocknGroll plays - One Sunny Day - 8k VR180

他们是如何开始创作VR180 3D内容的？对他们来说拍摄过程会遇到什么问题？他们的创作之路又将走向何方？本次对话将进一步讨论这些问题以及更多内容。

很高兴你们能来谈谈那些激动人心的VR180视频项目。你们是如何进入VR180视频制作领域的？

Sondermann：对我来说，一切都是从最初的Oculus Rift DK1开始的。尽管我本人有轻微的晕动症，但我依旧对这项技术非常着迷。在随后的几年里，我观看了大量360°和3D VR视频。PSVR上的小提琴家Joshua Bell的VR体验也给我留下了深刻印象。直到2020年，我亲自尝试了各种VR180 3D相机进行拍摄，如QooCam和Insta360 EVO，并由此创办了YouTube频道“We are VR Music”。

我觉得用虚拟内容来补充真实拍摄的世界特别令人兴奋。例如，使用Blender或虚幻引擎等工具将3D场景或文本整合到VR180 3D视频中。大约一年半以前，我通过Lozano创作的令人印象深刻的VR180音乐视频《SUIR - Vampires》认识了他。他创作的VR视频没有让我产生任何晕动症。从那时起，我们就经常一起拍摄VR视频。

180°3D视频“Mängelexemplar”（图源：Lozano）

Lozano：我从事后期制作和视频剪辑工作，涵盖商业广告，我还执导过小型音乐视频。我当时是使用Insta360 X2相机为法国乐队“Blind Delon”拍摄360°2D视频时，才开始接触VR视频的。通过YouTube VR，我才对这项技术有了更多了解，然后我开始接触180°3D视频，这对我来说更加有趣。之后，我们使用Insta360 EVO制作了音乐视频“Mängelexemplar”，并在（2022年的）阿姆斯特丹国际纪录片电影节上展出，获得了一等奖。

后来，我购买了佳能R5 C + RF5.2mm双鱼眼镜头。大约花了两个月的时间，我找到了使用它进行拍摄和剪辑的正确工作流程。之后，我们与Sondermann一起拍摄了更多的VR内容，例如专注于POV（主观镜头）拍摄，通过音乐家的视觉来展示内容。由于其设备60 fps的8K的特性，我们已经可以提供非常逼真的演示效果。

您对未来的VR相机有什么期望？

Sondermann：对我们来说，高效的工作流程非常重要。因此，如果能直接从相机拍摄矩形格式的图像（而不是使用鱼眼镜头再进行转换），将大大简化我们的编辑工作。特别是在RAW处理方面，由于编辑器中的节点较多，我们编辑VR视频时会非常繁琐。

Lozano：对于专业录制的预算来说，目前配备8K视频和60 fps的相机相对经济实惠。不过，如果有企业能向消费市场推出新的、更简单的VR180相机，以推动整个VR180市场的发展，那将是非常理想的。这将带来更多的内容和更好的工具。我还发现拍摄RAW视频非常困难，因为你不知道在VR中最终会得到什么。

佳能R5 C配备RF5.2mm双鱼眼镜头，可用于制作VR180 3D视频（图源：Sonermann、Lozano）

您是否已经尝试过90 fps的拍摄设定？

Sondermann：是的，通过使用AI工具（如 Topaz Video AI）对帧数进行高采样。这样可以减少运动过程中的运动模糊，创造出更高水平的整体真实感。大多数观众现在可能不会接受90 fps，因为他们还不习惯。一旦用户习惯了，可能就不想回到较低的帧数了。

您认为 VR180 视频的最低规格是什么？

Sondermann：对于VR180 3D视频来说，入门级水平6K和50/60 fsp就差不多了。我们最近用Calf（开飞）相机进行了测试。工作流程要简单得多，因为镜头是直接以等距矩形格式存储的。但只有了8K分辨率及以上，才会更令人兴奋。一些由相机机身和VR镜头组成的新设备可以提供4K VR180 3D视频。不过，在这种低分辨率下，用户可能会不感兴趣，三星Gear VR上的首批VR视频就是这种情况。当时只有低质量的视频，这让许多用户望而却步。当然，头显硬件领域最好能变得更普及，Meta Quest 3就在很多方面都做得很好，质优价廉。

Lozano：目前8K视频的质量已经非常好了。但主要欠缺的是内容的传播，而且要知道用户想看什么？是音乐视频？还是旅游视频？在许多VR视频平台上，例如YouTube VR，要播放视频也略显繁琐。需要多次点击才能将质量调整到视频体验所需的水平。

近年来，您认为VR视频市场最重要的变化是什么？

Sondermann：在我们看来，是佳能进入专业VR180视频领域这件事，这是一个非常大胆的举动，我们对此感到非常兴奋。Meta Quest等独立VR设备的出现也改变了很多，因为现在无需线缆就能舒适地观看VR视频。

从音乐人的角度来看录制VR音乐视频（图源：Catalina Abu）

VR中的晕动症：您有哪些经验，又是如何应对的？

Sondermann：在玩一款游戏时，我在PSVR中体验到了严重的晕动症。游戏要求玩家在VR中与老鹰一起飞越巴黎。老鹰飞向你面对的方向。当时，我试着每天这样做几分钟，但没有任何改善。而当我进入VR视频领域时，我没有在视频中做出快速移动、大幅度运动等动作。我们现在知道，如果要在VR视频中移动，应该控制移动的时长，这样不适感会消失得更快。

Lozano：我自己也很容易出现晕动症。不过，在这种情况下的好处是，我们制作内容时可以快速评估晕动症对敏感用户的影响。对视频中的各种移动动作会非常谨慎地处理，令相机的执行速度变得非常缓慢。各种动作必须使用云台才能获得稳定的效果。在这方面，VR180 3D视频与传统视频相比具有相当大的局限性：不能快速移动，甚至不能飞越舞台，展示音乐家或其他内容。有时我们会在VR中尝试不同的想法，但这可能很快就会出现晕动症。

摄影机与拍摄对象之间的最小距离是多少？

Lozano：50厘米是最小距离，但我们尽量保持接近1米的距离拍摄。我们还尝试过对音乐家的手部拍摄特写，但遗憾的是，效果不是很好。

在VR180 3D视频中，个人在剪辑方面应考虑哪些因素？

Sondermann：我们尽量避免在不同场景之间过度移动焦点。这对立体视觉尤为重要。我们还尽量将有趣的物体放在中心位置。理想情况下，整个镜头都应保持对焦。我们目前有一个与Pearl Drums合作的项目。该项目聚焦音乐家George Kollias演奏大型架子鼓的高端表演。镜头有多次视角变化，首先从正面拍摄，然后在40厘米的距离上直接拍摄鼓组的Demon XR脚踏板。整个过程令人叹为观止，因为演奏者的速度极快。这也使得切换视觉的速度大大加快。

Lozano：15秒的长镜头效果很好，能让用户有时间环顾四周。但5秒或6秒的左右的视角切换也会非常令人兴奋。但你必须确保内容在视野的中心位置，也必须做好人们无法在短时间内环顾四周的准备。只出现1秒钟的场景对于VR180 3D视频来说毫无意义。作为一个经常从事剪辑工作的人，在这个没有固定规则的VR新领域工作让人非常兴奋。在转场方面，我们主要使用硬剪，有时会使用淡入淡出。

Meta Quest上的VR180 3D金属摇滚视频。这是Sondermann和Lozano在英国鼓乐展上的照片（图源：Joby Catto）

你们在360°3D视频领域有尝试过吗？

Sondermann：360°3D视频在我们看来不是很好用，因为它几乎无法告诉用户该看哪里。你需要用箭头或其他东西把用户指向某个方向，实际上很难做到。我们认为在VR180中效果更好，因为相关信息都在中心位置。如果是通过无人机拍摄巴塞罗那等城市上空，这时候你可以向任何方向看，360° 3D视频就会有附加价值，但在讲故事的环节时就不行了。就360° 3D视频而言，目前还没有一款好的3D相机能从所有角度进行拍摄。

您在6DoF视频创作方面有什么经验？

Lozano：以我们的“Mängelexemplar”视频为例，我们使用LifeCastVR制作了一个6DoF版本。你可以在LifeCastVR上查看。我很喜欢这种体验：可以在视频中移动，能以一种有趣的方式与内容互动。当然，人为设定的3D运动还存在一些缺陷，不够完美。它更有复古的8-Bit风格，与音乐视频的装饰风格相得益彰。这给人一种复古未来主义的感觉和相当独特的体验。

您还有其他VR视频项目想重点介绍吗？

Sondermann：我们刚刚开始与spacevibes合作，在苹果Vision Pro上播放视频。Vision Pro的视频规格让我们非常感兴趣，也许还能用于即将进行的6DoF内容创作实验。我们仍在寻找新的平台。