基于现实环境的AR动画叙事探索

胡鑫雨 蔡东娜

关键词：AR技术 动画艺术 叙事手法 现实环境叙事 虚实结合

引言

AR是基于现实环境中的虚拟成像技术，与传统动画相结合，在呈现形式、叙事结构上都充分发挥了新媒介的技术优势，这是传统动画无法比及的效果。AR动画新颖的叙事结构使得观者与作品的关系发生变化，观赏形式也随之改变，这为很多产业领域创造了新的可能性，也为观者提供了高質量的感官体验。

一、基于现实环境的AR技术应用

（一）游戏类

AR技术能够将虚拟世界套用在现实环境中，与完全虚拟的游戏环境相比，虚实结合打造的逼真的游戏情景使AR游戏能够带给玩家更真实的感官体验。根据交互方式的不同又分为基于移动端的和可佩戴式的游戏交互。

2016年任天堂、谷歌和口袋妖怪公司联合开发了《Pokemon Go》AR手游，加入了移动定位服务后，玩家可以走出家门，随时随地抓捕小精灵，如图1。移动端的移动性结合现实环境，为这款游戏的玩法增加了更多可能性。紧随其后国产团队Directive Games在2017年就推出了一款RTS增强现实游戏《THE MACHINES》，游戏的体量更大，允许多人实时操作，更增强了游戏的真实感，如图2。

手游对游戏设备的要求不高，玩家可以在任意时间任意地点进行游戏。但移动端的屏幕尺寸较小，与玩家有一定的距离，因此无法达到佩戴式AR游戏的沉浸感。

头戴式AR显示器相较于其他显示方式，模拟并跟随佩戴者的视角，非常接近于眼睛所观看的形式，可以给佩戴者带来更真实的体验感，也就是沉浸式体验。联想与迪士尼于2017年上市了首款沉浸式AR游戏设备——联想Mirage AR套装，其中包含了头部显示器、光剑控制器和追踪信标，在视觉真实性和操作精度上都追求极致。

（二）教育类

1.AR图书：AR图书在儿童和青少年用户群体中应用广泛，多以科普内容和绘本形式的内容展现。AR图书是借助了AR的图像识别技术，将二维的平面图像在移动端的识别下立体化、动态化的呈现在屏幕上。除了对图像的处理，虚拟空间的产生也实现了信息的扩充，并对静态平面类传统的、图文结合的叙事方式有所改变。该技术的参与极大地丰富了平面纸类媒介的信息量与趣味性，提高了儿童和青少年群体的学习积极性和专注度。AR技术也在逐步融入成人的读物。2019年出版的全球首本AR货币书籍《货币里的中国史（AR高维版）》，观者在阅读过程中可以通过动画展示近距离、全方位观察货币，实现了堪比博物馆的观赏效果。

2.课堂教学：新媒体的快速发展已经将AR技术引进课堂。老师和学生可以通过佩戴式的AR设备或在计算机上安装AR软件的方式，在现实教学环境中观看虚拟成像，以此提高学生的学习效率。美国硅谷公司推出的虚拟仿真教学产品zSpace，其中包含专属显示屏、追踪眼镜、触笔、键盘、鼠标等硬件与多学科教育应用软件，打造智慧AR课堂。同时AR技术也走进了北京师范大学的课堂，只需要准备一台平板电脑和与课程教学内容相匹配的卡片，就能实现极具体验感的AR教学。

（三）展映类

早期的场馆展览展示形式单一，作品与观者之间缺乏互动和交流。近年来，将增强现实技术应用于博物馆、科技馆、美术馆等场馆的展览愈来愈多，在真实的场馆环境中与虚拟影像结合，塑造了一个生动有趣、允许互动的展映环境。AR技术可以突破时空的限制，虚拟影像能够还原历史中的场景，人们置身于此空间中就仿佛亲身经历过一般，展览品背后的文化内涵或创作构思通过技术的应用展现在观者面前。

2016年，艺术家杰克·萨克斯在英国泰特美术馆场馆内参与设计了一场参与式动画展览。使用AR技术将创作出的动画角色植入美术馆，鲜活有趣的动画角色带领观众进入混合现实的艺术世界。2017年，Adrien M & Claire B公司利用AR技术策划参并设计制作了展览“Mirages & Miracles”，在虚拟与真实材料之间搭建了一系列装置，使观众获得了惊奇的观展体验[1]。

二、基于现实环境的AR动画之叙事本质与特征

动画是一种综合性的艺术表现形式，并具有情节性，容易将观者带入到叙事中，提高观者的专注力。蒙太奇理论在传统的动画叙事中占据重要的地位，其核心在于通过剪辑、组合、拼接镜头的操作达到对故事内容重新编排的目的，并且通过动画独特的造型手法、对影片节奏的把控等强化动画的艺术效果。在新媒体快速发展的今天，很多领域选择采用动画的形式展演内容，相比静态的图片或文字，动画更具有生动性和趣味性。

而近年来AR等新媒体技术的更新与发展对传统动画的影响巨大，数字叙事作为后经典叙事学的一个分支，重点针对基于计算机的多种数字文本，依然沿用了经典叙事学故事框架建构的特点。但由于媒介的转变，“互动”的概念被引入到动画中，与传统叙事相矛盾，这两者之间难以达到完美的平衡。比如AR是一种实时地计算摄影机影像的位置及角度并加上相应图像的技术，这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动，其工作原理是使用图形系统将相机位置信息和现实环境信息进行标记，以此计算所要投射的虚拟影像坐标到相机视平面的仿射变换，然后按照仿射变换矩阵在视平面上绘制虚拟物体，最后通过S-HMD现实或与现实环境的视频合并显示在普通显示器上，如图3。与现实环境的互动目标使得传统动画中体现镜头艺术的蒙太奇技法在AR动画中的作用被削弱，因此AR动画的叙事本质和特征与传统动画有着较大的区别。

（一）叙事本质

1.以人为核心：美国著名的心理学家诺曼曾在《设计心理学》中提出：无论为计算机还是任何终端界面进行设计，都要将人的需求作为设计的第一出发点，思考人之所想，而不是去通过界面展示一种设计的观念。不论是设计还是艺术创作都需要以人为出发点，追求情感化表达[2]，这在动画创作领域也同样适用。数字时代到来，各种智慧科技应运而生，大数据、人工智能等技术可以充分满足用户的个性化需求，可以说情感化体验是科技和需求的共同结果。以AR为代表的新媒体动画与传统动画最大的不同点在于，人的存在被发现并强化，他应该成为这个作品的一部分而不是被孤立于作品之外。AR动画利用虚拟的动画影像与现实环境的结合，加上音乐与光影的配合，激发观者的情绪，为观者打造一个情感磁场。新媒体的应用就是为了允许观者的参与，使观者被科技渲染的环境感染，从而共鸣与共情。科技的发现与应用的最终目的都是以人为核心的，为了观者可以获得高质量的体验，这是传统动画叙事依靠镜头语言和故事情节所无法达到的效果。

2.多维度叙事：传统动画完全以数字屏幕作为媒介播放虚拟影像，不论二维还是三维的视觉效果，归根结底是平面的，观者只能从唯一视角观看影像，其主动性大大受到了限制。AR与VR的技术参与则打破了这种平面化的动画视觉效果，为观者提供了全方位、三维化的影像，突破了视角的限制，增加了观者观赏行为的自由度。

AR与VR技术也有本质上的区别。VR虚拟现实技术是完全架空于现实环境的，致力于打造一个脱离于现实的虚拟世界。在这个世界中创作者可以为观者带来一段奇幻之旅。而AR动画在全方位三维视角的基础上又与现实环境相融合。现实环境与虚拟环境结合产生的混合环境也为叙事提供了新的可能性。观者可以在现实和虚拟环境之间相互迁移，将虚拟环境中获得的信息与情感带入到现实世界中，实现多维度空间叙事，以此增强观者的情景体验。

（二）叙事特征

1.时间与空间：传统的动画遵循其讲故事的逻辑顺序，对叙事的轨迹有着严格的要求。观者必须接受这样的叙事规律，获取完整信息的唯一途径就是将动画作品按照设计好的轨迹从头至尾地进行观看。互联网的出现赋予了观者可以跳转、快进等技能，但从观赏者的角度出发，对有相对体量的信息进行个性化的筛检也造成了遗漏重要信息的可能性。AR动画与传统动画的线性叙事不同，其结构结尾分散，这也使得AR动画的时间概念模糊，没有明确的起始与结束，信息相对碎片化[2]，易于观者接收并消化。

多维度的空间使得原本的叙事空间从扁平的，变成了立体的，增加了内容的延展性，使观者受到更深层次的感官刺激。传统动画是虚拟的，想象力和镜头语言都可以得到充分发挥与应用，为观者带来时空穿梭的既视感。而基于现实环境的AR动画在空间的转换上具有一定的局限性。因此在创作过程中需要经过严密的设计，将动画情节、虚拟角色、虚拟场景等与现实环境中的空间进行契合，才能使动画得到完美的呈现。

2.多重内容：AR动画与传统动画不同，传统动画意在将故事生动的讲述出来，具有完整情节线。而对于AR动画来说，给予观众情感体验和信息输出才是其真正的目的。开放性、延展性是以AR动画为代表的新媒体动画区别于传统动画叙事的关键[2]，在AR动画中不需要刻意追求叙事的完整性。单线故事在碎片化的叙事结构中显得过于单薄。将完整的大体量故事线切割成多个情节片段，观者不必进行长时间的持续观影，减少了观者对冗长的体验过程的负担感。

在相同的题材背景下，多个片段保持着相互独立的关系，之间的干扰较少，所以内容的重叠度低，横向扩展了动画的信息体量；而复杂的多维叙事空间则对信息擴容有着纵向的伸展作用。现实环境中的信息、虚拟信息以及现实与虚拟结合得到的信息，三者之间相辅相成。观者在虚拟环境中获得的信息，也能牵引到现实环境中，对外部世界有了新的认知。这些信息的叠加可以激发观者进一步探索的欲望，使其积极地参与到动画的叙事发展中去。

3.媒介融合：美国麻省理工学院的亨利·詹金斯提出了“跨媒介叙事”的概念。跨媒介叙事不同于传统的叙事方式，而是一种基于协同创作、集体智慧的文化活动。他表示“跨媒介叙事表示这样一个过程，即一个故事的各个有机组成部分穿越于多个媒介传播渠道，系统构建出一种协作合一的娱乐体验。在理想情况下，每一种媒介对于故事的展开具有自己独特的贡献”[3]。数字时代到来，新媒体技术和新的传播媒介应运而生，而传统的叙事媒介不会因此被替代，与新媒介相融合使其焕发新生，这为动画作品提供了新的表达方式和展演形式，为动画艺术家们的想象力提供了高可塑性的“画布”。由于叙事不再被局限于单一的承载媒介，传统的叙事结构被打破并进行了重构。二维与三维相融合、现实与虚拟相融合，AR动画将传统的文本、视听等内容和元素构建在了一个全新的叙事环境中。观者在传统媒介上完成阅读、观看、聆听等动作，对文本、图形、影像、音乐等信息作为理解的同时，可与承载媒介进行一定的互动，多维度的叙事空间允许观者获得额外信息。多种媒介的融合并不只是将媒介进行单纯的叠加使用，这容易造成内容的破碎；而是一种有机的、深层次的融合，故事内容才会因技术应用而具有引导性、开放性。

4.长镜头叙事：AR动画从传统的屏幕放映的形式脱离了出来，在叙事空间中观者的眼睛或移动设备就相当于导演的镜头，对于作品的观赏视角可根据自我的意志变换。而AR动画基于现实环境，其叙事空间具有连续性，不容易实现镜头中场景的变换。相比影视作品中导演设计好的镜头语言，AR动画具有即时性，是观者的一种实时连续创作，因此在时间的跳跃上也具有一定的限制。叙事时空的统一作为AR动画的表现特征，与影视叙事中的长镜头应用方式相吻合。

长镜头是相对于蒙太奇的拍摄手法，又可以成为“一镜到底”，是指在一段持续时间内连续摄取的、占用胶片较长的镜头。长镜头与蒙太奇镜头的主观性、艺术性不同，其客观性强，画面直观，过程性的镜头会给观者带来真实感，容易实现情感带入。AR动画基于现实的环境，其叙事的时空和情节都具有真实性，使观者产生进入了叙事世界的假象。

在固定场景中运动镜头可以实现景别的变化，拓展画面的视野，在为画面增添活力的同时可以传递出情绪的状态。长镜头便是运动镜头实现的基础，经常用来模仿第一视角的运动轨迹，实现气氛的烘托。观者行动的轨迹和状态是决定即时创作的AR动画“镜头”的关键。

三、AR动画的叙事设计策略

（一）叙事空间的沉浸感

当人全身心地投入到某种目标活动中从而感受到愉悦和满足感，忽略周围环境变化的因素，进入到一种沉浸的状态，称之为心流。1975年，米哈里·契克森米哈又在心流理论的基础上首次提出了沉浸理论，解释人们为何在进行某些活动时会全神贯注，进入一种忘我的境界，人们会进入沉浸的状态。

首先，故事情节是动画的内核，画面是动画表达的关键，技术的应用为动画的表现形式创造更多可能，但不能代替动画的内在核心和画面效果。动画的视觉风格和画面设计会让观者对作品产生第一印象，形成良好的初体验才能吸引观者更深入的参与。精彩的故事情节能够带动人的情绪，可以使观者看到故事想要表达的内涵，与故事相融。

其次，AR动画全方位的三维空间为观者打造了包裹式的叙事环境，承载了动画中的角色、情节等所有信息，观者在观赏过程中一切的行为都将在这个叙事空间中进行。因此叙事空间是塑造作品沉浸感的关键，驱动着动画情节的发展。虚实结合是AR动画的独特的表现方式，动画中的虚拟元素对观者造成一定程度的感官欺骗，使人产生置身于虚拟世界的错觉。而与现实环境的结合更加剧了这种欺骗性，观者在真真假假中混淆。虚拟影像与叙事空间的结合，融合灯光、色彩、音乐等元素进行再创作，这些都属于信息传递、渲染气氛和烘托情感的外在因素，有助于加强情境空间的真实感，使观者产生强烈的临场感和参与感。并且在塑造AR动画的沉浸感叙事环境时，除了对外部情景空间的打造，还需考虑到此类动画在创作消除了传统的景框，也就是屏幕的限制，具有直观性，其构图应倾向于引导构图，即通过具有线性的物体或对环境中的物体进行有设计的摆放对观众的视线进行引导，突出拍摄主体，抓住观者的视觉中心。

最后，将观者从旁观者变成参与者，再变成创作者，这种身份关系转换是打造具有沉浸感的叙事空间的核心。传统动画的固定视角被AR动画中的第一人称视角和第三人称视角所取代，第一视角是指观者通过主角视角进行探索，第三视角指的是观者通过上帝视角客观的进行观赏。两种视角的相互交替不仅仅增加了观者的参与感，甚至实现了观者与动画角色的融合。多媒介的应用形成多通道与观众之间建立共同对话的关系，让观众沉浸到所塑造的展示空间的情境中去，身处叙事空间中人体的全部感官得到开发，使观者进行直达思维层面的思考[4]。

叙事空间与虚拟动画具有引导作用，使观者意识到自己对环境的把控力，从而获得成就感。

（二）非线性叙事结构

AR动画多维度、碎片化等特点不再适用传统动画线性的叙事结构，网状或树状叙事的非线性叙事结构更符合设计需求。将传统叙事中完整的故事线进行切割，但运用在动画中依然保留叙事结构中的开端、发展、高潮和结尾，使故事的情节性得到保障。多角度、多线索的故事内容更容易引导观者发散思维。

在非线性的叙事结构中有三种不同类别的叙事体系。首先是简单选择型的叙事体系，其运作方式是观者自行对播放的影片进行选择，这种形式的动画展示交互形式单一，影像之间相对独立，依靠镜头语言和故事情节产生联系。其次是开放探索型叙事体系，观者在现实与虚拟的环境中进行探索，未知的神秘感与真实环境的刺激的双重作用加剧观者的参与感。最后是时序重组型叙事体系，这种体系是指会在叙事中埋藏一个时间线索，然后将这个时间段进行切割，观众自行选择要观看的时间段里的故事，可以乱序观看，也可以遵循影片本身的时间顺序[5]。

非线性叙事结构又细分为并叙、散点、树状、网状等多种叙事结构。其中树状和网状的叙事结构是新媒体动画常用的叙事结构。树状叙事结构伴随着故事主线的不断推进会出现多个故事分支，支线之间不会相互影响并且其发展都依附于主线，是对主线情节的延伸，其结果不会因为观者选择的分支而被改变。观者沉浸在选择中，以探寻到最终的“答案”为目标进行剧情体验。而网状叙事结构呈现网状的发展脉络，将不同的选择节点和多结局的故事情节通过此结构网进行连接，为观者提供多种可选择的路径。网状的故事情节多重复杂又相互交叉，充满了不可控性，动画情节走向不唯一，使观者产生好奇心，促使选择行为的完成。并且多条情节的结构设计赋予观者极大的自由度，观者可以根据自己的喜好进行选择，个体的个性化情感得到最大化的满足。

结语、AR应用于动画的意義

以AR动画为代表的新媒体动画具有较高的商业价值，它们都抓住了当今社会人们的情感化需求，利用技术优势创造更优质的内容，从而吸引观众，促进观众的消费，再以此作为精进设备和技术的基础，实现产业线的良性循环。

AR技术的应用将存在于屏幕中、虚拟的场景拉到了现实中，使现实中的空间环境变成了承载动画的最重要的媒介，成为了动画叙事的主体。这改变了动画的空间维度，打破了传统动画的叙事结构，并改变了观影形式，实现了自由性观赏，调动观者主动参与的兴致，拉近了影像与观者之间的距离。AR与动画艺术的结合增强了动画的真实感，让人们有机会感受影像中的世界，打造身临其境的体验感，真正将观众带入了艺术的世界中。动画艺术的形式和与人的关系被重新定义，沉浸式的感官体验使观者与影片、观者与创作者都能达到情感共鸣，使人们愿意去了解这个真实的空间所承载的思想内核，了解影片的主旨内涵和文化价值，动画又被赋予了新的生命。