浅析360度视频新闻的声音制作

2020-10-12陶志鹏郭静

中国传媒科技 2020年8期

陶志鹏郭静

摘要：近年来，随着新闻记录方式的不断革新，新闻工作者除了使用传统的录音笔、摄像机等设备，还会使用智能手机、全景摄像机、头戴式摄像机等多种方式进行拍摄记录，这意味着以智能化、便捷化为发展趋势的移动互联网、大数据与云计算等新兴技术力量，已经渗透到视频新闻制作各个方面，视频新闻制作将迎来重新定义的可能，虚拟现实技术（VR）将带来身临其境的新闻体验。虚拟现实技术的应用拓宽了视频新闻的制作方式，让观众在接收信息的同时，增强了可感知的视觉化，听觉化体验。本文从虚拟现实技术的角度出发，结合视频新闻的特点分析其优势，阐述视频新闻声音内容的制作流程，然后对虚拟现实技术在视频新闻制作的发展进行分析。

关键词：360度视频新闻;VR技术;新闻制作;声音制作;虚拟现实技术中图分类号：TN94 文献标识码：A

文章编号：1671-0134（2020）08-120-03 DOI：10.19483/j.cnki.11-4653/n.2020.08.032

本文著录格式：陶志鹏，郭静.浅析360度视频新闻的声音制作[J].中国传媒科技，2020（8）：120-122.

1.360度視频新闻对声音的要求

1.1 360度视频新闻的真实性

360度视频新闻在播放时声音与其他VR声音的主要区别在于：其声音的真实性比较高，对声音的效果以及报道中新闻的真实性要求颇高，声音的呈现对新闻是否真实是不可缺少的证明之一。以2015年VICENEWS公司倾力之作《纽约百万人大游行》为例子，这篇新闻报道的是关于纽约市民对美国警察杀害两名青年而引起抗议的百万人游行表达不满的报道，报道中我们可以清晰听见抗议人们的呐喊波澜起伏，连绵不绝，这些场景中只分出一部分作为演讲，多余的部分去除，大大地增加了该新闻的可信度，同时现场感受也相当强。

众所周知，一篇新闻的真实性与声音效果和视觉感受密不可分，360度视频新闻亦是如此。所以在真实的场景中录音，由于设备和音乐受到一定程度的限制，导致一些画面或者声音录制无法达到预期的效果。因此，VR技术采用一些设备技术，如后期的模拟重组声音、现场安装音质非常好的话筒和重新录制等方法来弥补许多不足之处。由于后期的处理中，可能会对360度视频新闻的真实性有影响，因此，对前期的真实场景里的录制要求提高了一个档次。

在现实生活中，人们的视野有限，在视野之外的地方耳朵仍然能接收到有效的信息，人们可以通过不同的距离，音色，方位来获得信息。因此，想要给观众带来沉浸式体验，很大程度上取决于声音是否具有良好的空间信息和质感。

1.2 360度视频新闻的完整叙事性

360度视频新闻的叙事研究基本上在VR镜头语言的变化方面展开。对于传统电影，VR电影的制作有很多新的挑战。例如，第一人称的视觉体验不能使用多功能、固定的镜头，不能使用蒙太奇，是否要有镜头语言等。随着VR影像的创造者对镜头和观众的控制减弱，可以说这些挑战动摇了传统的镜头语言和叙事结构。因此，声音系统在视频中非常重要，他将承担更多的叙事任务，是VR影像叙事中强有力的助攻。

作品《流离失所》（TheDisplaced）开篇，小男孩在黑板上写的时候，触摸黑板的粉笔“da da”的声音，起到了吸引观众的作用。在信息丰富的场景中，用户经常会被这种声音吸引。此时，特定的声音内容可以有效地发挥对观众故事指导的作用，因此可以集中在特定的视觉内容上。

360度视频新闻的声音内容由于有真实性的要求，后期制作的自由度相对较低。而且新闻事件中往往存在特定的关注对象，由于镜头语言的缺失常需要通过声音事件引导视点，尤其是在具有方向性的移动声源和突发声音事件中，必须注意声音内容的叙事性。

2. 360度视频新闻声音内容的制作

2.1两种主流空间音频制作技术

2.1.1基于对象（Object-based）空间音频技术

基于对象的音频（Object-based）将每个声音对象看作是一个点声源，通过各式各样的点声源来完成对空间声场的塑造，每个声音对象灵活可控。在虚拟空间中每个声源都处于空间的不同位置，当你转动头部的时候声源位置不变，HMD追踪你的头部，然后声音即时渲染，声音可以是来自任何地方的。基于对象音频制作方法相对比较简单，在声场中的每一条声音对象可以被单独记录。音频对象可以将音频作为独立的声音进行编辑处理，用户在终端也能依据自己的喜好进行调整。以篮球比赛为例，用户可以调整现场嘈杂的人声、解说声的大小来获得主场与客场的不同观感，在嘈杂的环境中获得一个最佳听音体验。

2.1.2基于声场模拟的（Ambisonics）虚拟全景声声场技术

Ambisonics是一种用于记录，混音和重放360度音频的方法。随着虚拟现实产业的飞速发展，Ambisonics制作方案得到了更多人士的认可。Ambisonics的基本方法是将声场视为围绕中心点，不同方向的360度3D声场。中心点是麦克风的位置，或是播放时听众的“最佳听音位置”。在VR和360度视频中广泛使用的最流行的Ambisonics格式包括Ambisonicsb格式的4通道格式，它只是使用4个通道来再现完整的声场。目前有不少麦克产品和播放平台支持，最基本的也是现在最广泛使用的Ambisonics格式，4-channel B格式（图1），也称为一阶Ambisonics B格式。一阶B格式的四个通道称为W，X，Y和Z。它们在360度球体中代表不同的方向性：中心，左右，前后和上下，通过增益和相位相差的关系，组合的四个通道代表整个三维360度的声场。

2.2Ambisonics B格式声场还原原理

W可以看作一个全指向型话筒，包含球体内的所有声音，来自各方的增益和相位相同。

X可以看作指向前的八字形话筒。

Y可以看作指向左侧的八字形话筒。

Z可以看作指向上的八字形话筒。

在x通道，和任何8字形话筒一样，它分为正面和反面两个方向。x的极坐标为正向，则反面表示负向。通道X上产生的音频信号包含正相位球的所有声音和负相位球的所有声音。与八字形话筒一样，它的增益与声音接收点直接在正向或负向的声音将全增益收录，但当发声位置离开话筒两极时，增益将逐渐下降，直到在90度时获得与八字形话筒完全相同的无增益。对于y和Z通道也是如此，通过增益与相位差的关系，组合得来的四个通道代表了整个三维空间声场。

2.3录制方案

录制方式主要有两类。其一，QuadBinaural类方案。该方案以仿真头技术为基础，通过模拟同一水平方向上的多对人耳实现声音录制，但缺少垂直方向的声音效果，因而VR音频体验有一定缺失。录音操作简便，对回放硬件设备要求相对较低，但通常只适用于耳机回放。后期制作通用的工具数量并不理想，并且制作使用的工具，走的流程几乎不可复制，有很强的特异性。其二，Ambisonics类方案。此类方案以Ambisonics技术为基础，可实现任意角度、连续的双耳回放效果，且成本较低，后期制作工具丰富。但不同插件和工具使用的具体算法不同，带来的回放效果差异较大。整体来看，技术方案之间主要有回放效果、格式标准、后期制作、设备可携带性、设备价格等差异。从回放效果、格式标准、后期制作的角度去对比二者的技术特点，具体如表1所示。

2.4 360度视频新闻制作流程

360度视频新闻声音内容制作还存在不少问题，主要是：制作过程繁杂、技术手段不统一。其制作流程如图2所示。

同期录音：录音与视频内容同时录制采集;音频后期制作，同步视频和音频的空间位置，并在需要时加入非同期录制的旁白、音效等素材，這些素材常为非全景声录制，故后期制作时需进行处理并混入VR音频环境;最后，音频成品与视频合成并在相应的平台发布。

在整体制作流程上，传统视频新闻与360度视频新闻制作思路相似。主要差异在于，360度视频新闻的各制作阶段均需在VR音频环境下进行，以保证声音具有良好的沉浸效果。而且，同期拾音中非VR音频素材的录制需要较为谨慎，后期处理整体也较为保守，以最大限度地保证声音内容的新闻真实。对于直播录制、突发新闻、UGC等类型360度视频新闻，后期处理环节基本省去，匹配格式标准后直接发布。

3. 360度视频新闻发展前景

3.1发展前沿技术

虚拟现实新闻要想发展，需要在技术上进行创新。在整体大环境下，如果仅仅是技术短缺可以通过改变产品本身各种性质来适应环境的需要。当然任何一项技术的成熟都不是一帆风顺的，人体在适应VR技术方面仍然需要突破一些困难。因为VR技术是3D显示，如果观众不能够适应这种环境，会出现头晕的现象，而头晕会直接影响到观众的观看体验，这样的观看体验就不能够促进VR的进一步发展。所以此项技术还应该努力突破这些问题。比如可以选择和专业的技术公司一起合作。像《纽约时报》与vrse合作，就是一个非常聪明的选择。他们将新闻内容的拍摄和影像的编辑外包，再将自身的剪辑修改能力巧妙地和顶尖的科技公司的技术结合起来。在这样的合作下，《纽约时报》在两年时间内制作出了20部高质量的虚拟现实电影。

3.2培养复合型人才

2016年全球职场社交平台LinkedIn（领英）曾经对外公布的《全球虚拟现实人才报告》当中的数据显示，虚拟现实技术性人才在中国仅占全球的2%，甚至要低于印度。但VR在就业需求方面，中国约占18%，居第二位。这两种数据形成了强烈的对比，明显能看出中国的人才需求出现了巨大的缺口。而我国目前的VR人才现状大多都不是直接从科班中产生的，而是游戏动漫等行业看中了这块风水宝地而转型过来的。但毕竟这不是同一个行业，因此存在技术上的差异。这导致一大批人才在进入VR领域之前都需要有一个较长的磨合阶段。目前，我国虚拟现实新闻产业还处于萌芽阶段，人才储备是一个较大的缺口，复合型人才更是求之而不可得。为了缓解我国VR行业人才紧缺的现状，可以尝试着将VR技术引入高校培养的创新模式中，在高校中培养既具有摄像、编辑等影视方面的能力，又具备交互、硬件等知识的复合人才。可以尝试着开辟VR新闻实验室，使各大媒体之间相互合作，分享实用经验，在共同协作的环境中共同推动行业的整体发展。当然，成为一个优秀的VR工作者，不仅仅需要全面的技术，更加需要新闻从业者的道德。只有自身具备扎实的素质才能够把控好新闻的尺度，保证VR技术能够真正地发挥其所用。

3.3永远内容至上

新闻的报道无论使用怎样的技术，其核心看点都是新闻的内容。好的内容不会随着时间的流逝而褪去美好的容颜，技术是将内容推向发展不可缺少的动力，而不是媒体界走向衰弱的外在因素。VR新闻可以采用技术与娱乐相结合的方式增强新闻的可读性，采用创新实践、提升内容价值的报道形式为群众服务，促进利益与服务的最大化。

从上游VR中选取的229条VR新闻的阅读量分为三个区间：“在[0—10000]的区间内的新闻阅读量，占总的约为35%，而阅读量占比最高的是区间[10001—20000]，占到了总的52%。而在2万以上的阅读量仅仅只有5%。”分析之后，我们了解到：受众能够自发去关注的，要么就是自己生活中发生的事情，和自己有密切关系的内容，要么就是国内外容易引起关注的重大事件。类似事件因本身就具有让人想了解的魅力，加上VR新闻的内容概述必将更加受欢迎。因此关注这些内容的发展和未来，也是新闻制作中需要摸清楚的一个方向。

无论是在过去，还是技术发达的今天，VR技术都应当理性看待未来的路，坚决做好优质服务。

参考文献

[1]陆颖隽. 虚拟现实技术在数字图书馆的应用研究[D].武汉大学，2013.

[2]郭勇陈，贾佳丽，王皎琳，周德群. VR技术在高校经管类实验教学中的应用研究[J]. 实验室科学，2016，19（02）：70-75.

[3]高东锋，王森. 虚拟现实技术发展对高校实验教学改革的影响与应对策略[J]. 中国高教研究，2016（10）：56-59.

[4]苏凯，张亚斌，咸丽楠. VR技术在数字媒体艺术专业教学中的应用：现状、创新、趋势[J]. 江西广播电视大学学报，2019，21（02）：11-17.

[5]章怡 . 虚拟现实技术在杭州供电公司电力系统中的应用 [D]. 北京：华北电力大学，2015.

[6]闫婧 . 基于沉浸式 VR 技术的室内空间情感化设计评价研究 [D]. 株洲：湖南工业大学，2017.

[7]刘洋 . 基于 VR 技术的初中思想品德课情境教学探究 [D]. 沈阳：沈阳师范大学，2017.

[8]Azimkulov Ayan（阿阳）. VR 技术的虚拟教学应用研究 [D]. 上海：东华大学，2017.

[9]肖洒 . VR 技术在展示设计中的应用 [D]. 济南：山东工艺美术学院，2016.

[10]吕佰昌. BIM+VR技术在绿色建筑设计中的应用研究 [D]. 张家口：河北建筑工程学院，2019.