5G 时代媒介融合视域下的童书沉浸式阅读体验研究

李莉

（运城学院，山西 运城 044000）

从1G 时代到5G 万物互联时代，随着大数据、人工智能和深度学习等新科技、新理论在出版领域的应用和渗透，使阅读方式不再局限于纸质或数字出版物等单一媒介[1]。增强现实（Augmented Reality，AR）和虚拟现实（Virtual Reality，VR）等技术更新了传统出版模式，在纸媒的基础上融合了多种传播媒介，给读者带来了全新的呈现方式和阅读体验。特别是童书出版，正朝着“虚拟与现实”“技术与艺术”的多元化方向迈进，并逐步呈现出平面与立体、单向与互动、静态与动态并存的阅读新形态，带给儿童全感官互动、全身心投入的沉浸式阅读体验[2]。

在科技更新与经济利益的驱动下，中信出版社、江西美术出版社等国内多家出版社尝试发行了VR/AR童书。根据淘宝、京东、亚马逊和当当等多家线上销售平台的评价反馈数据显示，VR/AR 童书深受家长和孩子们的喜爱，但也存在着交互效果差、形式单一、沉浸感较弱等问题[3]。机遇与挑战并存，为了调动儿童多感官体验、提高孩子阅读兴趣、提升沉浸效果等，深度探究基于5G 时代媒介融合视域的童书沉浸式阅读体验理论工作已迫在眉睫。

1 媒介融合视域下童书的表征与内涵

美国新闻学会媒介研究中心主任安德鲁·纳奇森（Andrew Nachison）指出，媒介融合指印刷、音频、视频、互动性数字媒体组织等各个媒介之间的合作和联盟[4]。在5G 时代，新媒体、新技术成为媒介融合发展的直接推动力，各类传播方式互为补充、互相融合，形成了“你中有我，我中有你”的媒介生态环境，实现了在真实环境和虚拟内容中进行互动的阅读体验[5]。

媒介融合语境的形成，对童书的影响是深刻而全面的，使其具有了新的表征和内涵。从表征上来看，依托于5G 互联网技术构建的“纸媒+多媒介”相结合的新型阅读形态，可以使童书的形式和内容更加丰富。在5G 商用越来越多的情况下，万物互联的多屏性和多端性使“屏幕”的边界模糊性加强，不久的将来会迎来到处是屏幕的“屏民时代”，阅读会变得随处可见。这种突破时空限制而形成的多维、立体化的多媒介阅读形态，在数字信息技术支撑下，让童书变得“活”起来，实现了阅读内容上的无限扩展[6]。

从内涵上看，多种交互技术在传统童书中的渗透，可以将读者从单纯的文本阅读带入虚拟现实之中，使他们成为童书内容的参与者及创造者，实现了“虚拟与现实”有机结合的童书阅读方式。这种从文本阅读到沉浸式阅读体验的变化，从根本上激发了儿童的阅读兴趣，使其阅读方式和阅读质量等得到了完善和扩展。媒介融合语境的形成是童书发展的新机遇，把握好这个机遇，必将开辟出更为广阔的发展空间。

2 童书沉浸式阅读体验的特性

沉浸式阅读体验是书籍设计者借助虚拟现实技术、艺术手段，通过对文本场景、氛围的营造，使读者在阅读过程中置身于虚实相生、身临其境的事件环境中的全场景沉浸式信息接收体验过程，因此，也被称为代入感、置入感。具体到童书阅读来说，沉浸体验主要分为3 个阶段。第1 个阶段是参与阅读，儿童主要通过听觉和视觉2 种感知方式，对书本的主要内容进行初步了解，并开始阅读。第2 个阶段是投入阅读，随着阅读的深入，儿童已经逐渐忘记了现实世界，主动还原阅读世界的感知，并获得兴奋感、紧张感、期待感等诸多新的审美体验。第3 个阶段是沉浸阅读，当儿童感到阅读可以给他们带来新的审美愉悦后，就会主动选取适合自己的听觉和视觉要素，不知不觉中参与到新的情境营造中，使阅读体验由投入式上升为沉浸式。由此可见，能否进入沉浸式阅读阶段是衡量儿童阅读质量的一个重要标准，也是童书创作和制作的重要导向[7-9]。

3 媒介融合视域下童书阅读沉浸体验的优势

当今，在融合多种媒介进行信息传递的阅读语境下，童书阅读的科技化、智能化、多样化的特点越来越突出。立体、真实的叙事场景，开放式的叙事内容和风格迥异的叙事氛围都带给小读者们全感官的互动体验，孩子们在阅读时会随着叙事内容的变化产生不同的情绪反馈和情感共鸣，进而完全进入沉浸式阅读状态。不断丰富和发展的媒介资源带来的沉浸体验对童书的阅读有着积极的推动作用。

3.1 激发阅读兴趣，提升阅读效率

传统纸质童书缺乏与读者之间的互动，使儿童在阅读时的参与渠道十分单一。而在“纸媒+”这种融媒介的新型阅读方式中融入更多参与互动性，可以让读者感受到身临其境的沉浸式阅读体验。根据儿童天真、爱玩的本性，让他们根据自身需求选择“看”书还是“听”书，选择“旁观”还是“进入现场”，小读者有可能就是内容的创造者、传播者，这种兼具内容和形式的趣味互动功能的童书，可以使他们在愉快的气氛中沉浸阅读，这既能增强儿童阅读的主动性和积极性，帮助他们更好地阅读文化内容，也可以充分激发儿童的阅读兴趣，让他们从中探索和获取知识，提高其探索和参与的欲望，并提升其阅读效率。如果阅读方式符合儿童的认知心理，他们在融媒介的沉浸式阅读中就更能在精神、心灵、感受上全身心地投入阅读[10]。

3.2 锻炼想象力，开拓创造性思维

充满沉浸感体验的阅读方式能够满足儿童天马行空的想象力。首先，在孩子们阅读时，为他们打造一个能够沉浸式阅读的充满想象空间的氛围，可以调动孩子的形象思维，拓展孩子想象的深度及广度。其次，在思维探索的启蒙阶段，孩子们最初的感受途径就是他们的感官。沉浸式阅读能给儿童带来视觉、听觉等多感官体验，通过这种阅读形式，既能使儿童直观地感受童书的故事内容，也能引发孩子们的求知欲和探索欲，从而激发其创造性思维。

3.3 提升综合能力

沉浸式的阅读体验可以提升儿童的综合能力。首先，这种阅读的方式可以给儿童提供有效阅读及认知的平台，还能不断增强他们对问题的分析和解决能力。其次，利用图书视觉上的美感，对儿童的艺术鉴赏能力形成引导，能够充分挖掘其艺术潜能，提高他们的审美能力。再次，书中的故事角色或场景可以与儿童读者进行有趣的互动，这种人机交互式的沉浸式体验和隐形的秘密操作，会大大提升孩子的专注力和创造力。最后，从“单一性”逐渐转换到“沉浸式”的阅读行为方式，将会影响孩子们的阅读习惯，也会增强孩子们的整体意识及团队意识，从而提高他们的整体协作能力。

总而言之，这种“沉浸式”的阅读体验将会极大地提升孩子们的阅读主动性，给孩子的感官发育带来帮助，并提高其探索意识，增强其专注力、创造力及观察力，促进儿童内在潜能的开发。

4 媒介融合视域下童书沉浸式阅读体验的达成路径

儿童在阅读传统纸质书的过程中，只能通过“阅读”这一方式与书本产生互动，使儿童的参与渠道十分单一，参与程度比较低，沉浸感的形成也受到较大限制。在多媒体时代，可以运用多种技术及艺术手段，通过精彩的创意、精致的设计及科学的技术，在操作和交互上深入发掘，将文化、艺术与科技完美结合，实现虚拟场景与阅读现实相互渗透和融合的“纸媒+多媒介”阅读形态，使其各显其能，让儿童以最大的兴趣进行阅读体验活动，以此激发他们在阅读时的参与意识，进而产生交互意愿、动作及行为，从而在阅读中、阅读后均有良好的沉浸式的体验和感受，见图1。

要想营造身临其境的沉浸式阅读体验，需要从感官体验和认知体验2 个方面进行综合考量。童书出版商应紧紧把握儿童感知、认知等诸多特点，从文化、艺术和科技的角度进行多路径的设计与研发，以此形成具有沉浸式阅读体验的童书作品。

4.1 多维的叙事场景空间

图书中的叙事场景多指主要角色所在的环境空间，这点在童书中尤为明显。儿童对多维立体空间有着更加直观的认知特性，因此，在童书创作时要突破传统纸媒图书线性传播、扁平化叙事空间的局限性，根据故事情节，充分利用5G 超高网速、超低时延、超大连接的特性，积极搭建现实世界与虚拟世界的非线性叙事场景，给孩子们营造一个真实、丰富、完整的全景。这样，读者在阅读过程中就能置身于图书营造的真实现场之中，从一个被隔离在阅读内容之外的被动读者转变成阅读内容的参与者和体验者。这种方式可以让书籍的静态空间“活”起来，将阅读行为从二维平面转换到多维立体空间[11]，从而强化视觉效果，使儿童迅速融入剧情，产生身临其境的体验，实现虚拟情境与阅读现实的完美融合。

在《大开眼界恐龙世界大冒险》童书中，将先进的VR 技术与传统纸质材料有机结合起来，有效改变了传统童书的阅读效果。其中奔跑、飞翔的恐龙，真实、立体的山谷和呼啸的风声营造出多重感受的叙事场景，增强了儿童在视觉、听觉、触觉上的具象感知能力，使他们更加主动地深入探索恐龙的世界，这样不仅可以引发孩子强烈的好奇心，增强其阅读趣味性与可参与性，还能给孩子们带来更多想象空间，极大地促进了其良好阅读习惯的养成。在日本作家KAORU的VR 绘本《博士和万有引力的苹果》中，还采用了CG 技术，画面效果真实、形式新颖，作者希望体验者能够真正进入绘本呈现的叙事场景之中，身临其境地感受绘本故事。又如墨策国际借助HTC Vive 技术与设备，将几米绘本《我的世界都是你》打造成了360°全景空间，读者能在漫画作品所处的叙事空间中与角色互动，从而增强了阅读的沉浸感。

4.2 开放性的叙事内容

在5G 时代媒介融合的背景下，打破传统童书“一条路走到底”的单一模式，通过营造开放性的叙事内容，激发儿童的阅读兴趣，增强儿童的参与意识，赋予“纸媒+科技”童书一种全新的沉浸式阅读体验。好奇心是人的天性，根据儿童所具有的认知、思维、技能等特点，在童书中一些关键节点设置开放选择的权利，通过设定交互的方式，产生不同的故事情节、结局，同时还可以进行角色选择和空间装扮等，让孩子在阅读中的参与感更强烈。例如，让儿童选择主人公的身材、外貌、衣着，或者在阅读过程中围绕故事情节设置多个选择，比如可能顺利达到终点，也可能遇到各种波折，还有可能会回到原点，不同的选择产生不同的结局等开放式内容。这种以第一人称视角叙事，激发想象力和创造力的过程，极大地满足了儿童的好奇需求。开放式的叙事内容也给了小读者更多沉浸式的全新体验，会让儿童感到自己也是这本书的一部分，由此满足了儿童的个性化需求[12]。

绘本《我该怎么办》中，有一个场景是主人公在探险时遇到了危险，这时候绘本上会提示2 种选择，一个是“谁来帮帮我”，另一个是“我一定可以战胜你”。绘本接收到儿童的语音指令后，会分别呈现出不同的回应，来继续推动故事情节的发展，这样可以真正让儿童获得身临其境的感受，使其全身心地沉浸在绘本描绘的世界中。这种开放式的叙事内容，让孩子不再是被动的阅读，通过对故事情节中各种预设问题的选择，用户无意识地进行了主动思考，不同的选择面临不同的结果，这锻炼了孩子的思维能力和面对挫折的能力，从而达到了寓教于乐的目的。

4.3 多样性的叙事氛围

在借助场景进行叙事的童书中，数字技术营造的虚拟空间使氛围的重要性大大提升，读者在阅读的同时进入了一个全新的“世界”。沉闷、紧张、欢快等多样的叙事氛围开启了孩子们妙趣横生的阅读之旅，使他们可以“穿越”到书本的不同情境中，丰富自己的阅读感受，提升沉浸体验。叙事氛围的营造与故事情节密切相关，设计者可以通过对道具、色彩、构图、光影、音响、节奏、质感等元素的设计，结合叙事内容营造出迥异的叙事氛围，并呈现出不同的视听效果（或明亮、或紧张、或夸张、或朴实、或恐怖、或舒缓），使用户的情绪不断波动变化，从而产生沉浸式的阅读体验。

《恐龙的温馨故事》系列绘本的场景设计多以大色块出现，色调饱和度较高，画面呈现出较强的装饰性和张力，突显出图书的色彩个性，给人带来直观的视觉冲击。森林、土地与海洋采用了高纯度的墨绿色、明黄色和天蓝色，整体给人鲜明的色彩感受，故事之中的主要角色则与之相反，采用了低纯度的色彩，这种色彩对比形成了画面的节奏感，更加强调环境色彩对读者阅读时的心理影响，辅助柔和舒缓的音乐背景，形成了轻松的沉浸式阅读氛围。

4.4 多感官的互动体验

亚里士多德认为“人的智力无一不来自感官的学习”。日本著名书籍装帧设计师杉浦康平提出，需要将人类感官具备的感知能力（视觉、触觉、听觉、嗅觉和味觉）运用在书籍设计中。他认为人与书在交流的过程中，视觉、触觉、听觉、嗅觉和味觉会同时产生反应，这种感官间的相互融合会赋予书籍强大的生命力。在新技术的支撑下，设计师借助视频、音频、VR/AR 等多种智能媒介设备和技术，可以突破时空界限，完成从视觉—视听—多感知的艺术过渡，同时可以调动各种感觉器官，实现从静态阅读到动态阅读，这种感官体验是情感化和科技化的结合，其相互交融、相互渗透、相互转换，让儿童在阅读时达到身临其境的多感官沉浸式的互动体验[13]。例如灵活多变的空间动态视觉体验，手指不同的触感体验，音频的全方位听觉体验，直观、刺激的嗅觉或味觉互动体验，设计师可以从各个角度改变传统的纯视觉阅读方式，在充分调动小读者多种感官的同时，极大地促进儿童与书籍之间的互动，实现从虚拟到现实、从静态到动态的全方位五感沉浸式阅读体验。

4.5 情绪反馈与情感共鸣

童书沉浸式阅读的巨大优势是可以通过新媒体技术把读者带入故事情节中，使他们感觉到自己是书的参与者。在阅读过程中，读者可以用手触摸草地上柔软的鲜花，可以听到主人公的声音，可以帮老奶奶打开房间的窗户，可以根据故事情节产生镇静、惊喜、悲伤等情绪。读者在阅读中主动参与互动，借助不同的媒介和技术来完成体验，可以获取不同的情绪反馈，产生多样的情感共鸣，从而充分体验与书籍的共生和渗透，让读者不再是旁观的人，而是作为参与互动者得到内心的触动、情感的共鸣，此时读者完全进入沉浸式的体验状态。

2017 年2 月由长江少年儿童出版社出版的德国儿童体验小百科丛书《宇宙》一书中，描述了主人公安娜在爸爸的陪同下，以天文馆为背景了解宇宙的故事。在阅读的过程中小读者可以借助AR 技术体验亲手点火并把航天飞机送入太空的过程，还能以航天飞机的视角在太空中观看浩瀚星辰，探索超新星、黑洞、红巨星的秘密。小读者在整个阅读过程中完全沉浸在对未知世界的渴望中，他们的情绪也随着阅读体验发生着变化，这种沉浸式阅读激发了他们对航空、航天知识的学习热情。

5 媒介融合视域下童书阅读沉浸体验的注意问题

人和技术的互相作用，使阅读氛围和行为因为阅读媒介的发展而发生了变化，需要人们从历史的角度仔细地思考阅读方式的根本变化。将图像或视频观看代替文本阅读，是否会对儿童阅读能力、文本鉴赏能力和表达能力的提高构成挑战。多感官、多元化的“沉浸式”阅读体验，是否会让人忽视去探究文本的深度和内涵，是否又将导致孩童的思维及语言能力发展迟缓。过于丰富的趣味性是否会弱化孩子的注意力，学习效果会不会因此变差。出版者是否真正将书籍内容与儿童认知结合起来，依据儿童认知发展理论来界定年龄分段并优化内容。这些问题都有待行业和相关理论工作者进一步论证[14-15]。

6 结语

推进“互联网+”出版转型不仅是国家政策的需要，更是顺应时代发展的需要。如今，传统纸质媒介与数字传播媒介的相互融合已经逐渐成为出版行业的发展方向，这是技术发展、文明提升的结果。可以预见，在今后很长一段时间内，媒介融合技术将是童书发展的主流方向。

目前还会有家长以近视率提升、沉迷电子产品为由断然拒绝融媒介的阅读方式，然而新媒体技术已经渗透在生活的方方面面，完全脱离融媒介的阅读方式也必然会脱离时代。在未来融合多种媒介的童书出版中，出版方应该加强对小读者沉浸式阅读体验的深入研究，探索、发展成熟的童书阅读生态环境，不断加强文化、艺术和技术之间的关联，让阅读呈现出更多非线性、多线性的方式，以动静、虚实结合的内容来刺激小读者的感官，带给他们新奇、有趣的沉浸式阅读体验，使其在精神、心灵、感受上全身心地投入阅读。笔者也正是基于此目的，从沉浸感的角度就媒介融合技术的运用进行了初步分析，希望可以引起从业者的充分重视，真正做到与时俱进，引领当代童书的发展迈上新台阶。当然，营造沉浸式阅读的书籍形态设计方法应是多种多样的，并不局限于以上内容。童书出版行业要主动顺应5G 环境下的媒体发展规律，加速推进媒介融合，促进业态多元创新，提供更加丰富的阅读产品和服务，以满足儿童精神文化的新需求。