数字交互绘本的现状与发展探究
2023-07-06陈扬洋沙春发李芸辉
陈扬洋 沙春发 李芸辉
摘要:绘本作为以图为主、以文为辅的读物,凭借生动形象、易于理解的特点,备受广大读者青睐。随着科学技术的发展,绘本乘上了数字化发展的快车。数字交互绘本提供了辅助阅读和理解的工具和资源,可以让读者更好地融入故事情节,体验阅读的乐趣,也为绘本产业指明了新的发展方向。数字交互绘本经历了从纸质向电子、静态向动态、单一线性叙事向超文本叙事、内容陈述向沉浸式体验转变的重要发展阶段。首先,数字交互绘本以移动设备为载体,打破了读者阅读的时空限制。其次,数字交互绘本融合了音频、视频、动画等多种数字元素,使阅读体验更加生动、丰富。再次,数字交互绘本改变了传统绘本单一的线性叙事模式,拓展了读者在阅读时的浏览路径,丰富了读者的阅读体验。最后,数字交互绘本采用虚拟现实技术、游戏化设计等方式,使读者能够深入绘本描绘的场景中。数字交互绘本正朝着互动化、体验化、技术化和亲子同学化的方向快速发展,不仅为读者提供了更加生动、丰富和多样化的阅读体验,还推动了数字交互绘本的创新性发展。未来,数字交互绘本有望成为更加普及的阅读形式,满足不同年龄段读者的需求,推动家庭教育的发展,搭建更亲密的亲子关系。基于此,文章对国内外相关期刊论文进行梳理,分析数字交互绘本的发展现状及趋势。
关键词:数字绘本;技术;叙事
中图分类号:J524 文献标识码:A 文章编号:1004-9436(2023)13-0-05
绘本种类丰富,从生活常识、人际交流到事物形态和社会道德等均有涉猎。随着数字技术及绘本行业的不断发展,绘本逐渐融入更多的技术手段,这也为国内外研究者提供了更多的研究方向。
1 数字交互绘本的概念
数字交互绘本是一种利用移动设备进行数字化阅读的绘本。它将数字技术与阅读融合在一起,具有仿真性、交互性、趣味性和经济性等多重特征。虚拟现实技术和数字技术的应用优化了读者的感官体验并实现了更加自由的交互设计,增加了儿童数字绘本的趣味性。智能设备的普及降低了儿童数字绘本的购买成本,成为儿童绘本市场的主流选择[1]。
数字交互绘本采用VR、CG和3D等数字技术,完美结合数字技术和想象力。利用计算机视觉技术、感应装置技术和投影显示技术,读者能够获得身临其境的体验,激发读者对产品的兴趣[2]。
数字交互绘本主要面向3~7岁的学龄前儿童,此年龄段的儿童生长发育速度较慢,但大脑和神经系统仍在发育,语言、图像识别和认知能力快速发展,但思维仍存在片面性。儿童能用抽象的符号来象征具象事物,但难以进行复杂的抽象运算,且会用主观视角看待客观世界,难以意识到思维方式的差异[3]。
2 绘本的跨时代转变
绘本起源于国外,经过一系列发展逐渐传入中国。绘本在中国的发展可以分为三个时期。第一个时期是从1949年开始,这时许多作品如《儿童世界》、张乐平的《东郭先生》以及丰子恺的儿童漫画等开始进入大众视野,标志着绘本在中国开始实现本土化发展。
第二个时期是1949—1980年,绘本开始初具雏形。许多传统工艺开始融入绘本的创作,如民间艺术手法版刻、壁画、国画水墨和工笔重彩等,代表作品包括《连环画报》等。
第三个时期是1980年至今,绘本的发展进入了新阶段。这个时期涌现了许多杰出的作品,如于大武的《哪吒闹海》、杨永青的《神笔马良》等,这些作品不仅在中国绘本发展史上留下了浓墨重彩的痕迹,还促进了中国绘本的发展。
数字绘本逐渐成为绘本行业的新宠。除了纸质绘本外,越来越多的数字绘本逐渐问世,如《大开眼界:西游记》《拾梦老人》和《墙壁里的狼》等。2016年1月,我国首部结合VR技术的绘本《大开眼界·恐龙世界大冒险》面世[4],标志着AR、VR技术开始被应用到数字绘本中。研究人员将目光从技术研究转向用户体验,特别是儿童用户的体验。通过用户在阅读故事的过程中扮演主角、完成游戏任务等形式来增强交互性,这种交互方式不仅能够给用户带来更深层次的阅读体验,还可以让用户深入地理解故事[5]。
2.1 纸质向电子转变
数字交互绘本以智能设备为载体,利用图形、文字、音频、视频等多种形式,优化绘本的阅读体验,具备许多传统纸质绘本所没有的形式和功能,如动画、声音、游戏等,为孩子们提供了丰富的学习和娱乐方式。
从读者体验来说,纸质绘本的线性叙事方式和静态形式可能会限制读者的想象和交互,也不便于与其他媒介进行交互。数字绘本具有丰富的互动和动画效果,可以优化读者的视听体验,提高阅读的趣味性和吸引力。读者可以与绘本互动,获得更加丰富的阅读体验,同时数字绘本还有便携、易存储和易获取等优点。
从发展情况来看,纸质绘本的感官刺激、印刷气味、封面设计仍对读者有较强的吸引力。数字交互绘本通过不断创新和灵活运用数字技术,为读者带来更加生动、有趣的阅读体验。其制作成本较纸质绘本来说更低且更环保,可以更加便捷地制作和发行。数字绘本还可以通过网络和移动设备等数字渠道进行推广和销售,市场前景广阔。
2.2 静态向动态转变
随着数字技术的普及,数字绘本已成为新一代读者追求交互式、动态化、多媒体阅读体验的必然选择。数字绘本设计元素包括静态和动态两方面,静态元素由文字和图片组成,动态元素则包括多媒体、动画、音频等。数字绘本通过视觉呈现、声音效果、互动体验、跨媒介体验和社交体验等多元化途径,实现静态到动态的转变,优化了读者阅读时的视觉和情感体验。
同时,数字交互技术还可以为读者提供更丰富的功能形式及体验,如点击、拖拽、翻转等操作可以让读者更加积极地参与到故事中。数字技术还可以赋予绘本社交功能,如通过社交媒体与其他读者分享读后感、评论等,加强社交互动,形成更加豐富、多元化的绘本阅读体验,这些互动元素可以激发读者的兴趣,促进阅读过程中的互动和探索。
2.3 单一线性叙事向超文本叙事转变
传统绘本的局限性在于叙事手法以单一线性叙事为主,一个故事仅有一条故事线索和一个预设结局。故事情节按时间顺序展开,读者通过完成关键节点来体验整个故事流程,以达到传达主旨和情感的目的。
2.3.1 单一线性叙事
单一线性叙事方式往往采用传统的三段式叙事结构:起始、发展、结尾。这种叙事方式简单明了、易于理解,而且适用于各种类型的绘本。“连续性画面”和“反复出现的人物”是叙事中常见的形式规则。这些结构及规则能够很好地辅助设计师塑造出连贯的故事情节和生动的人物形象,因此在图像叙事中被广泛应用。为了增强趣味性和互动性,数字绘本开始采用更多样化的叙事方式。
2.3.2 超文本叙事
数字交互绘本以节点、超链接和交叉路径创造多层次的超文本绘本,打破了传统的线性故事结构和封闭式叙事模式,能够为读者提供丰富的阅读体验,满足读者的互动社交需求。读者以非线性方式探索故事情节和人物角色,通过节点和超链接设计不同路径和可能性,激发读者的探索欲望。这种实践使读者成为参与者和创造者,重构了作者和读者的关系。数字交互绘本的创新性和互动性为绘本市场指明了新的发展和创新方向,同时为数字媒介在绘本中的应用提供了示范和突破口[6]。超文本叙事结构可以划分为以下几类。
(1)网状叙事结构。以故事为基础,运用超链接、交叉路径和多媒体元素,构建出多层次、高互动性的故事空间,适合喜欢自由探索类型读物和对多媒体元素有要求的读者。例如,在《纽约时报》的《雪崩》新闻报道中就采用了这种叙述方式,结合图片、视频、音频等多媒体元素和超链接,让读者自由探索不同事件和情节,并能够与其他读者互动和分享信息。
(2)树状叙事结构。树状叙事结构可用于构建复杂的故事逻辑。它适合绘本设计师、游戏设计师和教育者等读者,可通过添加新的子节点来扩展分支线,以满足不同需求。例如,游戏《巫师3》采用了树状叙事结构,玩家通过个人选择来决定故事的发展方向和结局。
(3)后线性叙事结构。按照事件发生的先后顺序展开故事,在呈现事件时会先揭示结局,再逐步揭示事件发展的过程和原因。这种叙事方式常用于推理、悬疑小说和惊悚片等,适合喜欢挖掘线索的读者。例如,《福尔摩斯探案集》中的短篇小说就采用了后线性叙事结构,读者可以跟随福尔摩斯一起推理案件,增加阅读的互动性和趣味性。
(4)多线性叙事结构。这是一种将多个主角或者情节交织在一起的叙事形式,作者在设计每个主角的故事情节时,利用他们之间的联系构成叙事的一个部分。这种叙事形式需要读者具有较强的阅读能力和解析能力。《西游记》就是一部运用了多线性叙事结构的经典小说,通过多个角色和情节的共同叙事,让读者获得丰富的阅读体验。
超文本叙事结构包括网状、树状、后线性和多线性几种叙事结构,每种叙事结构都有各自的优缺点。随着超文本叙事的发展,在选择叙事结构方面更加灵活,能够更好地滿足不同的叙事需求。
2.4 内容陈述向沉浸式体验转变
传统的纸质绘本通常通过图像和文字的共同作用来传达故事情节,读者处于被动接收信息的状态,整个阅读流程是一个闭环,如图1所示。而数字绘本在内容陈述方面经历了不断发展和创新。除了图像和文字外,页码和版式设计以及装帧设计也成为数字绘本重要的内容陈述手段。
数字绘本的优势在于能够更加灵活地使用各种手段来优化读者的阅读体验。通过数字绘本,读者能够更加自主地参与到故事情节中,阅读流程更加开放和灵活,能满足不同类型读者的需求。
内容陈述向沉浸式体验转变是指数字技术的应用使读者能够沉浸式参与到绘本故事中,获得更加丰富、立体的阅读体验。数字绘本的沉浸式体验转变表现在视觉效果、声音效果、互动体验、跨媒介体验、社交体验这几个方面。数字绘本从内容陈述向沉浸式体验转变,为读者提供了更加生动、立体、互动、多元化的阅读体验,使绘本阅读变得更加有趣、有意义。
3 数字交互绘本的发展趋势
数字交互绘本采用数字交互技术和超文本叙事结构进行设计。未来,数字交互绘本将加速与虚拟现实技术融合,创造出更真实的故事情境,从而增强阅读的沉浸感和互动性。同时,数字交互绘本也将注重跨媒体融合,以打造更加丰富的阅读体验。
此外,数字交互绘本将更注重应用人工智能技术,通过智能算法和自然语言处理技术,为读者提供个性化服务。随着移动设备的广泛应用,读者可以便捷地阅读各种数字绘本。
3.1 互动化趋势
随着数字技术的不断应用,数字绘本呈现出越来越明显的互动化趋势,数字交互绘本融合了交互性、个性化和多样性的特点。这种趋势主要表现在读者可以通过界面操作主动参与故事的发展,如选择不同的情节分支、点击不同的角色和道具等就可以获得不同的反馈,故事的发展轨迹也因此变得更加多元化。
此外,数字技术的应用也增强了作者和读者之间的互动,作者可以通过系统设计等拓展交互空间,激发读者的主动性,从而促进读者与作品互动[7]。例如在《托马斯和朋友》数字交互绘本中,读者以第三视角展示和托马斯一起在地球各个区域进行探险,解锁各个国家及地区的故事情节(见图2)。读者在托马斯小火车角色的语音提示及图形提示下,可以解锁地区的样貌,同时通过比赛可以获得奖励,即各种富有地区特色的装扮,绘本中儿童可以设计火车运行的轨道图纸以获得奖励,在故事情节的发展中通过不同的关卡,借助丰富的互动活动汲取世界各地的文化精髓。这种方式不仅可以激发孩子的学习兴趣,还可以帮助孩子更好地了解不同地区的文化。
互动化趋势下,数字交互绘本的开放式结局成为一个有价值的突破点,它在满足儿童阅读心理需求的基础上,能促进他们更积极地参与阅读,家长和教师也可以借此了解儿童的心理问题并及时进行相应的心理疏导和纠正[8]。介入多种手段的互动元素,可以更好地用技术手段辅助叙事。
3.2 体验化趋势
数字交互绘本的体验化趋势意味着将读者体验置于设计的核心位置。这种趋势体现在数字交互绘本中,主要通过添加一些游戏元素、社交元素、个性化元素等表现出来,这些设计不仅能优化读者的体验,还能提升读者的参与度和忠诚度。
随着数字技术的发展,人们对体验化趋势的关注度逐步提升。它在一定程度上借鉴了游戏设计过程中的思路和方法,使数字交互绘本不再只是纸质绘本的数字版,而是具有更强的交互性和娱乐性,能够增强读者的参与感和沉浸感。
在体验化趋势中,最常见的表现形式是通过多种互动元素来丰富读者的阅读体验,使读者自发参与到故事情节中,进而更好地理解和记忆故事内容。而在增强读者黏性上,会设置一些闯关模式和成就系统来激发读者的挑战欲望和成就感,通过社交功能和排行榜来促进读者之间的互动和竞争。
数字交互绘本的体验化趋势在不断推动数字交互绘本的发展。其中,竞技化元素的设计是数字交互绘本体验化趋势中的重要一环。这些元素主要包括多人竞赛、排行榜、成就系统以及闯关模式。通过这些手段,数字交互绘本不再只是一个APP,而是一种充满了挑战和趣味的交互式体验。读者可以通过挑战自我、与他人竞争等方式获得愉悦感和成就感,从而更好地融入数字交互绘本的世界。数字交互绘本体验化趋势不仅可以满足读者的娱乐需求,还可以提高读者的参与度和忠诚度,促进数字交互绘本的发展和创新。
3.3 技术化趋势
要多元化呈现数字交互绘本,离不开多种形式的内容表现手段,如文字、图片、音频等,这些内容表现手段需要先进的技术支持。在数字绘本设计中,运用最广泛的技术如下。
3.3.1 多媒体技术
由计算机技术和数字通信技术整合多种媒介形式形成的综合体验,是计算机技术、视频技术、音频技术以及通信技术等多种技术的综合应用[9]。
3.3.2 交互技术
包括触控和反馈两个部分。触控通过读者执行单击、双击、按压、旋转、缩放、拖动等手势来完成操作。反馈分为及时反馈和延时反馈,及时反馈通常应用于时间较短且需要高度专注的游戏中,而延时反馈则可以延长应用的生命和增强读者黏性[10]。
3.3.3 计算机图形学
其研究范围非常广泛,包括图形硬件和标准、交互技术、图形算法,以及科学计算可视化、自然仿真、虚拟现实等领域[11]。
3.3.4 语音识别和合成技术
语音识别技术可以帮助计算机识别输入的语音信息,从而给予读者相应指令的反馈;语音合成技术则可以将文字信息转换成语音信号输出给读者。两者都能使人与计算机之间的交互更为自然[12]。
3.3.5 虚拟现实和增强现实技术
虚拟现实运用计算机和传感器技术构建出虚拟环境,提供逼真体验;增强现实则是将虚拟元素与现实场景结合。两者都是在模拟现实中的场景,为读者提供无限接近真实的新体验[13]。
此外,数字绘本的技术化还有助于提高读者的学习效率,如通过自适应学习系统,读者能够更好地掌握知识。数字绘本的发展与技术的进步密切相关。
3.4 亲子同学化趋势
数字交互绘本的亲子同学化趋势是指通过互动、游戏等方式促进家长和孩子之间的互动和共同学习。
数字绘本的使用人群大致可分为以下三类。
第一,儿童和幼儿:数字绘本有助于通过视觉和听觉的交互方式来提高他们的兴趣和参与度。
第二,学生:学生在课堂上或课外学习更多有关不同的话题和学科的信息。
第三,成人:通过阅读数字绘本来学习新的知识和技能,或者通过观看教育性动画来获得更多的启示。
亲子同学化是促进儿童学习与发展的重要途径之一。在这个过程中,父母要平等地与孩子交流和沟通,给予适度的关爱和限制,并尊重和接纳孩子的想法。这种亲子关系有助于培养孩子的自信心和独立思考能力,从而优化孩子的学习效果[14]。
数字交互绘本具有多样化的表现形式,吸引亲子一起参与故事的探索和互动,让孩子在家长的带领下更好地理解故事内涵。数字交互绘本还可以通过设计家庭互动任务来促进亲子共同学习。这样既可以帮助孩子理解故事内容,还可以增进亲子关系。此外,数字交互绘本还可以提供学习资源,让家长和孩子共同学习数字技术和创作绘本的知识,提升家庭数字素养水平。
数字绘本的亲子同学化趋势有助于提高家庭的整体素质,增强家庭成员之间的信任感与互动性。它不仅是一种学习方式,还有利于构建良好的家庭关系。
4 结语
数字交互绘本是数字技术与绘本相结合的产物,它以数字技术为支撑,利用多媒体、互动、动画等元素呈现绘本内容。数字交互绘本呈现出了多种形式和趋势,包括游戏化、竞技化、技术化和亲子同學化等。
数字交互绘本的游戏化、竞技化趋势也在不断发展。数字交互绘本与游戏、竞技、多媒体等元素相结合,增强了阅读的趣味性和互动性。未来数字交互绘本的游戏化、竞技化和多手段化趋势将愈发明显。
数字交互绘本通过多媒体、互动等元素让亲子一起阅读绘本,并一起学习绘本知识,使亲子交流和互动更加丰富、有趣。数字交互绘本不仅具备娱乐功能,还对孩子的智力开发、情感和认知构建等产生积极影响,发展前景十分广阔。未来,数字交互绘本将成为数字出版的一大趋势,为亲子教育注入新的元素和活力。
参考文献:
[1] 刘开语.儿童数字绘本交互方式研究[D].沈阳:鲁迅美术学院,2022.
[2] 时嘉俊.数字媒体艺术在交互设计中的应用[J].新美域,2022,88(12):100-102.
[3] 岳涵.基于学龄前儿童特征的电子绘本交互设计要素及趋势探究[J].编辑之友,2020(8):85-90.
[4] 谢琰.基于具身认知的沉浸式阅读体验建构:价值与路径[J].传播与版权,2023(6):86-88.
[5] 孟琳.基于儿童情境体验的数字交互绘本设计[D].太原:太原理工大学,2021.
[6] 都岚岚.再媒介化:数字媒介中的《弗兰肯斯坦》[J].上海交通大学学报(哲学社会科学版),2022,30(1):139-148.
[7] 胡亚敏.数字时代的叙事学重构[J].江西社会科学,2022,42(1):42-49,206.
[8] 邓靓.互联网+环境下儿童绘本交互设计的创新与突破[J].艺术大观,2021(26):72-73.
[9] 王军,韩志强.多媒体技术发展现状及未来发展趋势浅谈[J].情报理论与实践,2001(2):145-147.
[10] 段冰玉.基于“游戏化”的数字绘本研究[D].沈阳:鲁迅美术学院,2022.
[11] 陈敏雅,金旭东.浅谈计算机图形学与图形图像处理技术[J].长春理工大学学报,2011,6(1):138-139,146.
[12] 黄南川,邓振杰,王嵬嵬,等.语音合成技术的研究与发展[J].华北航天工业学院学报,2002(3):37-39.
[13] 姜学智,李忠华.国内外虚拟现实技术的研究现状[J].辽宁工程技术大学学报,2004(2):238-240.
[14] 伍新春,李长丽,曾筝,等.科技场馆中的亲子互动类型及其对学习效果的影响[J].教育研究与实验,2012(6):88-92.
作者简介:陈扬洋(1996—),女,安徽安庆人,硕士在读,研究方向:数字化设计、消费者认知与偏好。
沙春发(1982—),男,江苏淮安人,博士,副教授,研究方向:消费者认知与偏好、感性工学。
李芸辉(1997—),女,安徽淮北人,硕士在读,研究方向:传统文化传播、数字化设计。