数字化背景下人机交互对景观感知的影响

张洋 葛梦婷 董孟斌 沈熙为

1 研究背景

以互联网产业化和工业智能化为标志、以技术融合为主要特征的第4次工业革命正以一系列颠覆性技术深刻地影响和改变着我们的城市，这些技术包括（但不限于）人工智能（artificial intelligence, AI）、大数据与云计算、机器人与自动化、3D打印、传感网、物联网、虚拟现实（virtual reality, VR）技术、增强现实（augmented reality, AR）技术、混合现实（mixed reality, MR）技术、清洁能源、量子信息技术以及生物技术等[1]。城市正逐渐成为一个由各类即时大数据所建构的网络空间与实体的物理空间相互融合的复杂有机体[2]。城市物理空间与由信息通信技术产生的信息流动空间连接组合，由以物理技术为主导转变为以信息技术为主导[3]，形成“二元化城市”的新格局[4]。数字技术“万物互联”、虚拟性以及信息瞬时性的主要特征[5]，推动了城市要素和人之间的行为属性、行为特征和连接方式的转变与创新[6]，物理世界和虚拟世界之间的映射变得更加频繁，空间功能的转换更加自由和灵活，人的行为方式与景观场景中的物体发生更多的交互，并且不受空间的时空性、多维度性以及空间的具体形式等因素所限制。

与人类社会经历的4次重大变革相对应[7]，风景园林发展大致可分为4个阶段：18世纪前的古典主义传统园林的1.0时代，工业革命后人本主义园林的2.0时代，生态主义园林的3.0时代，以及数字化影响下智慧生态园林的4.0时代[8]。特别是近10年，数字化作为风景园林发展的重要推动因素，正成为行业研究与创新的关注重点之一，其带来的影响也尤为显著：一方面，数字技术作为辅助工具被大量应用于风景园林设计中，如设计的定量化分析评估、数据化信息捕捉与采集、数据可视化、参数化设计以及景观过程模拟等[9]，推动设计向多样化和精准化转变；另一方面，数字化应用已逐渐从城市场景向风景园林场景延伸，其中，基于人机交互的各种智能机器正成为不同尺度景观的“参与者”，并使景观变成一种“反馈环境”，同时也在改变人们的景观感知，使景观感知更趋于个性化和人性化。

起源于19世纪50年代的景观感知理论（landscape perception theory），是在环境心理学研究基础上发展起来的独立理论，结合景观美学和环境心理学，主要研究人对景观和环境的感知与偏好[10]。在景观环境中，人的各类器官（眼睛、手、耳等）感受环境刺激，并将刺激转化为信息传递至大脑的过程被称为感觉。在此基础上，大脑结合认知，基于主观体验与经验，对传入信息进行处理与解释的过程被称为知觉，感觉和知觉的过程统称为感知[11]。景观感知就是人对景观环境的感知及相互作用的过程。

笔者通过梳理过去10余年景观感知相关的文献资料，发现国内外学者关于人机交互对景观感知的影响研究，大多围绕对人的五感——视觉、听觉、触觉、嗅觉和味觉的影响展开。比如，一些学者基于五感体验的综合性研究[12-16]，探讨人机交互对各感官的影响，提出感官体验融入设计的策略方法；也有一些学者的研究主要针对听觉，如杨盛[17]、赵昱[18]研究人机交互对声景感知的作用；还有一些研究基于穿戴式设备对景观感知的影响，如Zhang等[19]、Schlickman[20]、赵晓静[21]、Fricker[22]研究VR或AR技术对景观视觉感知的影响。Zube等[23]在1982年最早提出“人—景观—结果”的景观感应模型，在数字技术快速发展的时代背景下，人机交互有望成为景观感知新的、重要的媒介和工具，可以更好地增强反馈、辅助优化描述景观，帮助人与景观环境之间建立更广泛和密切的联系（图1）。因此，关于人机交互对景观感知的影响研究不应局限于感官感知的结果研究，更应该关注人机交互对景观感知影响的全过程性和人的参与性。本研究基于人机交互的作用媒介和机制，试图从多个维度厘清人机交互如何作用于景观之中，以及如何对人的景观感知产生影响，并基于景观感知的全过程，从4个层面提出人机交互对景观感知的影响，即多源数据拓展空间信息范围（感知维度）、多通道交互增强感官体验（感知方式）、实时计算强化动态响应过程（感知过程），以及情感计算触发情感反馈（感知效果）。

图1 人机交互对景观感知影响的变化[23]Changes in the influence of human-computer interaction on landscape perception[23]

2 人机交互对人的思维认知影响

人机交互主要通过传感设备对人的行为数据（如表情、动作、声音等的变化）与环境数据（如温度、湿度、空气质量、光照等的变化）进行监测与捕捉，经过算法运算后，以光效、图像等形式进行可视化输出，从而引导人或环境做出相应反馈[24]。人机交互不仅打破了原有“人—计算机”的单线程联系方式，还构建了人与智能机器相互联系和影响的新型模式。人机交互模式对人的思维方式、行为方式和体验需求3个层面均产生了重要影响（图2）。

图2 人机交互对人的思维认知影响Influence of human-computer interaction on human thinking and cognition

2.1 思维方式：机械思维转变为大数据思维

机械思维的2个核心特点是确定性和因果关系，即认为世界变化的规律是确定的，事物间存在着一定的因果关系，但当人们意识到社会的复杂性后，发现不确定性才是社会的常态[25]。数字技术带来各个领域数据的爆发式增长，让人们获得海量数据的同时，也意识到数据中蕴含的巨大潜力和价值。大数据分析为人们提供了解决问题的新思路，因为大数据中所包含的信息可以帮助人们消除不确定性，单一数据的误差也可以在海量数据面前被最小化。而且因果关系在某种程度上也可以被相关关系所取代，人们思考问题可以不再过分依赖精确的因果关系，而是关注数据间的相关关系，并通过研究数据间的内在逻辑得到一般性规律。当前，人们开始利用大数据分析的结果进行辅助管理和应用决策，人们的思维方式也逐渐从传统的机械思维转变为更具开放性和前瞻性的大数据思维[26]。

2.2 行为方式：物理空间行为转变为线上线下结合

随着人机交互的载体如手机、摄像机、传感器等设备的广泛使用[27]，人—环境之间形成新的“人—机器—环境”智能增强生态链，依托物联网，人与环境突破物质空间和时间限制的强粘性关系[28]，人的行为方式更具有即时性、远程性和虚实结合性。即时性体现在传统的人与环境的交互模式需要提前考虑时间成本，而在人机交互的背景下可以做到“瞬时体验、即时反馈”；远程性体现在人机交互忽略了可达性的因素，削弱了传统体验中的物理空间，包括交通、地理等众多因素对人与环境体验的影响；虚实结合性体现在人与机器的交互，能够打破三维空间的限制，带来线上线下的多元体验。

2.3 体验需求：静观的空间逻辑转变为互动的体验逻辑

人机交互的过程可以收集大量的个人数据，通过对这些数据的分析处理，可以对个体的社会属性、个性偏好、行为习惯等方面进行用户画像，产生可识别的标签定义，从而为个体推送个性化信息或提供定制化服务，在这一过程中，个体的意志和行为得到更多的关注，个体在习惯于这种体验的同时，会催生更多的个性化需求，这种需求也从生活体验扩展到景观体验中，对景观的功能需求从静观的空间逻辑转变为互动的体验逻辑，人们已不再满足于在被规划好的景观空间中静观，而是愈发倾向于主动参与到景观中形成互动，注重通过个人的行为获得个性化和多样化的体验。同时人们也习惯于借助各种智能机器进行互动，如大部分的游客已经习惯用手机扫描植物科普牌的二维码，获得植物的科普信息。所以，智能机器在景观体验中扮演着越来越重要的角色。

3 人机交互的作用机制及其对景观感知的影响

人机交互具有多源数据采集、多通道交互、实时移动计算、情感判断反馈4个方面的特征，这为景观感知体验带来了更多的可能性。总体来看，人机交互对景观感知的影响体现在4个方面，即多源数据拓展空间信息范围（感知维度）、多通道交互增强感官体验（感知方式）、实时计算强化动态响应过程（感知过程）、情感计算触发情感反馈（感知效果）。

3.1 感知维度：多源数据拓展空间信息范围

人机交互具有多源数据采集的特征，通过监测不同类型数据的传感器[29]、识别人行为活动的摄像头、测量生理指标的测量仪、获取地理信息数据的无人机[30]和地理信息系统（GIS）[31]等数据采集媒介的广泛使用，可以多途径、多维度获取以往难以获得的数据信息，通过计算机算法处理，不仅可以帮助人们摆脱只能依靠身体感知的局限，拓展人对空间信息的感知方式和感知范围，还可以帮助人们更好地认知生物特征或者自然过程的复杂性，理解自然和环境的运转模式，并能直接进行互动[32]。

在人机交互的支持下，通过传感器等设备监测微气候、植物、水文、空气质量等环境要素的变化数据，可以将空间中以往人难以感知或者不可见的微小变化，通过机器将变化过程和结果进行放大或者转化，以可视化的方式呈现给公众[33]。人机交互可以拓展人们对生物的感知维度，如植物学研究表明，植物可以表现出智能性，只是其与人类和动物所具有的机制不同，且时间跨度更长[34]。英国伦敦大学学院（UCL）的交互建筑（interactive architecture）实验室在reEarth项目中向人们展示了植物对环境的自主感知能力，在一个球形交互装置Hortum machina,B中安装光照传感器和插入式电极，以植物对光照的微小生理变化反应，驱动Hortum machina,B的自主旋转移动[35]（图3）。北京林业大学园林学院蔡凌豪老师在《光之螺旋》交互景观中，将10根由单片机控制的光柱，通过物联网连接到校园里的银杏（Ginkgo biloba）、鹅掌楸（Liriodendron chinense）、白皮松（Pinus bungeana）等10棵古树上，树上的水分传感器会感知植物维管束中的水分含量，该水分含量数据会控制光柱的灯光颜色变化，当植物水分充足时灯光呈现冷色，若水分减少灯光向暖色渐变，最终变为红色，灯光颜色的变化犹如植物实时的心电图，将植物中细微的变化转变成可见的景观，艺术性地表达了自然万物的生命节律和脉动[36]（图4）。人机交互还可以拓展人们对环境因素的感知维度，如Swatek和他的团队研发的Smart Solar Flower交互景观可以时刻向人们呈现太阳的位置变化，其模仿向日葵（Helianthus annuus）的原理，利用GPS数据和光照传感器，可以实时跟踪太阳的方位和角度，并通过内置的双轴跟踪系统，确保其始终与太阳保持90°的直射角度[37]。北京林业大学学研中心景观的交互装置，利用由PM2.5传感器和Arduino单片机组成的控制系统，监测空气中PM2.5的浓度变化，并将其通过玻璃艺术装置的颜色变化呈现给公众[38]。

图3 Hortum machina, B交互装置[35]Hortum machina, B interaction installation[35]

图4 《光之螺旋》交互景观实景图Interaction landscape scenario of Spiral of Light

除了拓展物理空间中的信息感知，采集的数据信息可以被转化为可视化的虚拟场景，借助AR技术叠加在物理空间上，丰富和拓展人们对虚拟空间的信息感知。谢菲尔德大学Haynes等[39]运用AR技术开发以移动设备为载体的景观雨洪模拟系统，该系统通过在真实场景中叠加雨洪数据信息，帮助人们更好地感知景观环境变化并及时做出应对。北京古北水镇的AR历史地图，借助手机、Ipad等设备，利用AR技术在真实的明信片上“叠加”虚拟的历史生活场景，创造跨越时空的空间场景连接。人机交互的多源数据采集特征打破了物理空间的限制，建立了景观中物理空间与虚拟空间之间的关联。

3.2 感知方式：多通道交互增强感官体验

多通道（multimodal）交互即利用人的多种动作通道和感觉通道（如表情、手势、语音、动作、视线等）输入信息，与计算机环境以非精确、并行的方式进行交互[40]。在人机交互中，多通道交互实现了景观感知深度的增强，这包括了视觉、听觉、触觉的感知增强，以及多感官交融下的感知增强。多通道交互是实现自然人机交互的重要途径，其在自然交互和移动交互方面，相较于传统的单一通道交互方式有着更广泛的应用潜力，能够扩大用户输入信息的带宽，提高用户输入的效率，促使人们能够按其熟悉的方式进行人机通信。人机交互下的多通道交互包括信息输入与输出两大核心过程，持续革新升级的交互技术与不断探索优化的科研经验始终在助力这两大过程的发展。

在输入方面，基于深度神经网络模型的单通道输入如人机对话、机器翻译、目标识别、语音识别、手势检测与跟踪、人体检测与跟踪等性能得到快速提升，如超大规模深度卷积神经网络（convolution neural network,CNN）在图像目标识别领域的辨识水平已经超过普通人类的水平[41]。协同现今交互技术的发展步调，多通道交互也逐步向融合视觉、语音、语义、动作等的多模态计算发展。目前基于机器学习或者统计方法的多通道信息融合计算模型主要包括神经网络模型、Bayes决策模型和基于图模型的信息融合。谷歌公司的开发者通过神经网络模型试图建立一个统一的深度学习模型，保证它在性能没有明显损失的情况下，能够有效地完成不同数据模态、不同领域下的多类型任务[42]，以精确且全面地捕捉人的意向。在语音交互方面，中国科学院自动化研究所的学者们通过摄像头、麦克风、体感捕捉设备等工具，获取人的多模态行为信息，采用多虚拟人对话管理机制和混合主导式对话策略，对手势、语音、情感、姿势等多模态信息进行分析融合，以理解人的意图并自动生成对话语言[43]。

在输出方面，多通道交互模式可根据人的需求综合使用多种输出通道，并进行多通道融合，形成多设备协同和跨设备场景迁移的新型人机交互模式和产品形态[44]，有效提升人机交互过程中的感官体验与沉浸感。一方面来自数据的“包裹”，大量的、丰富的、多维度的数据可以让使用者瞬时获得理想的信息和体验；另一方面来自光电媒介、显像媒介、声音媒介、可触媒介等媒介传播载体的增强，以及各媒介之间表现出的高度复合性，使输出形式更加多样化和复杂化。正如徐跃家等[45]所言，数字技术给人们带来了前所未有的综合感知体验，就连一个小小的手机都能具有听觉、视觉、触觉等输出方式，实现从生理到心理的多感同步。近10年高速发展的VR技术，更是让人“真实地进入”虚拟空间中，配合触觉、嗅觉、听觉等多通道感官交互，获得身临其境的沉浸式体验。美国麻省理工学院Media实验室的城市科学（city science）研究小组在一次针对世界女性生活的策展中，通过多面屏幕、高清投影和灯光设计等多种媒介，将动态影像与空间中心的城市模型相结合，使人们沉浸式地以他人的视角体验世界[46]。弗吉尼亚理工大学的高级研究计算（advanced research computing, ARC）实验室通过多面屏幕、高清投影与VR操控结合的方式，使人们能够沉浸式地体验虚拟场景并自由地操控场景变化[47]（图5）。Teamla团队的作品《在人们聚集的岩石上，注入水粒子的世界》（Universe of Water Particles on a Rock Where People Gather）利用互动投影技术，在虚拟的三维空间中立体再现瀑布沿岩石下落的场景，作品通过实时计算人与水粒子之间相互作用产生的运动轨迹，描绘人与水形成的动态效果，同时场景中的樱花也会随人的移动逐渐绽放，形成人对景观干预的实时反馈[48]。

图5 ARC实验室的沉浸式交互体验[47]Immersive interaction in ARC Lab[47]

3.3 感知过程：实时计算强化动态响应过程

建立在实时计算上的动态响应过程是对景观感知操作性与灵活度的加成，这种动态响应主要包括人与空间环境数据间的动作性交互与心理性交互。随着信息和数字技术融入城市环境，城市成为一个无时不在、无处不在而又无形的计算环境。这种新技术带来的新城市环境，在人与机器之间建立起动态的多层次、多维度的互动和联系，并最终产生“泛在联系”（ubiquitous connection）[49]。信息网络化的链接和传递、多种设备之间的连接性和信息数据的共享性，也实现了技术（互联网技术、云计算、物联网及大数据技术等）、场景、参与者（人、物、机构、平台、行业及系统）之间的瞬间联系。

正是数据的实时计算与高速网络信号传递的发展，使得当下从技术层面加快了人机交互速度，人对空间的体验与需求能够快速地通过交互技术与景观环境连接，而无须长时间等待或人工介入。人的行为可以获得实时的动态反馈，以往被动参与景观的过程转变为主动介入，静态观赏景观的过程转变为实时互动[50]，从而激发出新的行为方式。同时，在互动的过程中，人以使用者的身份参与作品并成为作品的一部分，而且人参与创作过程的不确定性又会使信息转换的呈现方式产生多样性。

Media实验室研究的触控视觉魔方（tangible view cube）能够实现以实体模型为依托的多角度景观场景模拟[51]。用户可以在实体模型中自由翻转魔方，而计算机中的景观场景渲染则会根据魔方的位置和角度做出实时改变，从而使用户能够脱离鼠标与键盘，实现更便捷的交互行为。同样基于强化动态交互的目标，美国北卡罗来纳州立大学的GeoForAll实验室通过触控景观（tangible landscape）技术使人们能够通过直接操作景观模型来实时改变电子图像及相关分析数据，用户可以在实体景观模型中自由改变景观要素与形态，而这些改变将被投影捕捉并实时传输至计算机中。最终，新的数据分析与场景渲染将实时更新，从而实现用户在参与设计的同时与设计作品高效互动[52]（图6）。上海交通大学数字景观实验室研发的《AI机械花》交互景观是基于AI技术构建的一种实时响应的反馈式景观。自然界中影响花开合的主要因素是光照，而机械花则是通过人的行为控制机械花的开合，它通过距离传感器和摄像头捕捉人的距离和肢体动作，结合人物检测、动作捕捉等算法，设置4种人机交互模式来控制机械花叶片的开合幅度和方向变化，实现模拟自然植物的智能机器对人的行为的动态反馈，增强人的景观感知。同时，机械花与环境中的自然花境形成景观模糊和体验反差，重构“人—智能机器—自然”之间的互动关系，激发人们对自然的思考（图7）。

图6 GeoForAll实验室的触控景观实验[52]Touch-control landscape experiment in GeoForAll Lab[52]

图7 《AI机械花》3D打印模型（7-1）和人机交互场景（7-2）3D printed model (7-1) and human-computer interaction scenario (7-2) of AI Mechanical Flower

3.4 感知效果：情感计算触发情感反馈

以动态、科学的情感计算触发用户的情感反馈，是人机交互技术提升景观感知的重要手段。情感计算是指利用机器对人类情感进行感知、识别和理解，并能针对人的情感做出智能化反应，建立人和智能机器的情感交流，甚至影响人的情绪。人机情感交互是对人类情感的信息处理过程的模拟，重点是形成人和智能机器的双向情感交流，即情感从人流向智能机器，再从智能机器回流向人，实现人机“共情”或情感“交流”。这种双向性建立在情感交互的2个核心环节上，即情感识别和情感表达。

情感识别主要基于生理信号、面部表情、文字信息、肢体动作和语音符号等途径[53]。目前的识别方式通常以单模态为主，如利用面部表情图像识别人的高兴、害怕、生气、厌恶、悲伤、吃惊这6种情感状态[54]，而相关研究发现多模态比单模态能够提供更多的信息，更容易对情绪进行准确判断，但现阶段多模态一般是基于面部表情、肢体动作、语音符号其中2种结合的双模态，暂时无法实现实质上的多模态，而且生理信号也很少能与以上几种模态相结合[55]。对情绪的特征提取和分类主要通过机器学习算法和情绪判断模型，从而实现对人的情感判断，相比于早期使用支持向量机（support vector machine,SVM）进行分类，随着数据量增大，以循环神 经 网 络（recurrent neural network, RNN）、CNN、对 抗 神 经 网 络（adversarial neural network, ANN）等为代表的深度神经网络学习显示出更精准的推测潜力[56]，可以更准确地理解人的情绪。如Smile就是一种通过单模态进行面部表情识别的情绪交互景观，它由识别微笑的交互站和灯管制成的笑脸组成，当交互站感应并识别到人的微笑表情时，固定在墙上的笑脸装置就会自动亮起，形成对人情感的直接反馈[57]（图8）。

图8 Smile情绪交互景观的灯光装置（8-1）和人机交互场景（8-2）[57]Light installation (8-1) and human-computer interaction scenario (8-2) of Smile emotion interaction landscape[57]

情感计算的最终目的是情感表达，即在情感感知的基础上，做出智能化反应。由于机器学习在情感计算方面的应用主要集中在情感分类，很少应用于智能机器的情感表现。现有智能机器的情感表现力针对性不强，不能在与人的交互过程中对情感表达进行自动调节，因此在景观场景中较难与人形成情感交流，导致大部分案例还停留在实验室研究层面，能够应用于实践中的相对较少。Media实验室的研究团队将VR技术与情感识别结合，营造了具有疗愈效果的情感交互场景[58]。其中，研究者运用脑电仪监测用户大脑活动，并使用医疗腕带监测他们的心率与皮电活动，这些数据将被实时转化成模拟深海生物与静谧氛围的VR画面，用户通过佩戴VR眼镜，将沉浸在这一平静的场景中直面自己身体的内部活动，而与用户相关联的虚拟场景，又反过来疗愈用户的情绪（图9）。同样是基于对用户情感与健康的关注，华盛顿大学的研究者们运用脑电仪识别瘫痪病人的情绪与意图，再通过计算机与电子发声器将这些情绪与意图转换为动态变化的音乐。这一人机交互过程使瘫痪病人能够自由地将思绪转换为具体音符，无须双手也可以演奏音乐，病人的创作意图得以实现，心情也得到疗愈[59]。

图9 Media实验室的海洋疗愈情感交互实验[58]Ocean healing emotion interaction experiment in Media Lab[58]

4 结论与展望

人机交互不断革新人们和环境之间的交互方式，它将对人的行为和环境进行更全面的描述和反馈，让人们以前所未有的方式感知景观。未来在新信息技术、新交互方式、新智能反馈、新情感触发的背景下，人机交互可为景观感知创造更多的可能性。

1）新信息技术。回溯在4G技术成熟和普及短短5年内带来的生活变革，它使移动互联网、电子支付、短视频、网络直播成为可能，4G和它催生的服务深刻改变了人们的认知和生活方式。随着5G甚至6G等新信息技术的普及，信息的传递速度将是4G技术的10倍以上，机器与机器之间有望实现真正的“万物互联”，数据流和信息流将进一步扩大人的信息感知维度，甚至有机会引发更多颠覆性的体验变革。但是当下也面临着诸多挑战，首先是物联网的覆盖范围仍然有限，制约着信息获得的广度，因此，其覆盖的范围和类型需要进一步扩大；其次是传感设备的灵敏度、准确性和稳定性，制约着信息获取的深度，部分传感设备存在长期使用后灵敏度降低、信号容易被外界环境屏蔽或干扰等问题，同时传感设备的功能集成化和微型化也亟待提升。

2）新交互方式。人机交互的方式正逐渐打破传统的桌面计算模式，呈现出多元化、创新化的特征。纵观整个科技发展史，变革基本是由交互体验革新引发的，鼠标和键盘标志着个人电脑（personal computer, PC）时代的开端，触摸技术标志着移动互联网时代的开端，而在AI时代，随着AI技术和深度学习算法的不断进步，人机交互将变得更加自然和方便[60]。单通道交互方面，相关技术的研究已经有所突破，但仍存在诸多需要攻克的难点。例如，空中手势交互的种类和自由度从二维静态、近距离手势扩展到三维动态、远距离手势，并进入实际应用阶段，如谷歌眼镜“Google Project Glass”、微软全息眼镜“Microsoft Hololens”、AR头 戴 设 备“Magic Leap One”，都可以实现手势“隔空”操作，但识别的准确性和范围还有待提高。多通道交互方面，由于人机交互表达的丰富性和模糊性难以准确映射为传统人机交互的界面操作，导致人机交互系统在多通道融合框架下难以准确理解用户意图，而且多通道的融合方法及交互系统依旧依赖于经验设计，缺乏“自我增长”的能力，同时系统的模型迁移能力在支持个性化用户行为的理解方面也需要提高[61]。因此，构建具有智能增长能力的多通道信息融合和理解模型、训练计算机的类人认知与学习能力，以及训练系统的多通道选择与管控能力，将是多通道信息融合需要重点突破的方向。

3）新智能反馈。以人为起点的人机交互方式，未来可能会转变为以智能机器为起点的“主动交互”，机器通过城市计算、社会计算、情感计算等方式，对人的行为数据和生理数据进行挖掘和分析，计算出人的需求并主动输出执行结果，做出个性化的智能反馈。同时，人在景观中的交互将不仅限于被动体验，通过物联网、传感设备可以把更多的数据信息采集映射到数字世界中，再通过数字世界反向控制和优化物理世界中的场景，从而对环境形成有效反馈和改变。当然，只有在“持续学习”策略的支持下，才能促使人和智能机器在环境中的共同进化，但现阶段大多数AI算法其实是“离线”的，即上传至网络物理系统中的模型是一个已经调试过的模型（如深度学习中的神经网络）[62]，所以智能机器缺乏实质上的“持续学习”能力。因此，此方面的研究还需要继续深入，才有可能实现真正的智能反馈。

4）新情感触发。未来随着情感计算相关技术的提升，将赋予智能机器在视、听等方面更强的情感识别能力，同时智能机器对人的思维理解、情境理解能力将更加完善，情感交互能力也将更加智能。但是，情感是人类最复杂的、最不可预测的表达形式，情感计算仍存在诸多技术难题有待解决，比如情感分析往往主要集中在单／双模态以及离散的基本情感类别等方面，缺乏更多模态及连续动态情感分析的系统研究。所以为了实现精准而科学的情感识别与交互，需要新技术、新设备的支撑，而这个过程将和传感技术、机器学习、可视化等的未来发展同步。

图片来源(Sources of Figures)：

图1由作者根据参考文献[23]改绘；图2由作者绘制；图3引自参考文献[35]；图4由北京甲板智慧科技有限公司提供；图5引自参考文献[47]；图6引自参考文献[52]；图7由作者拍摄；图8引自参考文献[57]；图9引自参考文献[58]。