认知负荷下的智慧矿山信息交互界面优化
2022-11-03冯青范丁力杨惠珺赵思伊
冯青 范丁力 杨惠珺 赵思伊
摘 要:针对操作者受制于视觉认知压力,在复杂的交互界面中进行任务时操作效率降低,产生操作失误次数增多的问题,提出基于认知负荷理论的界面优化方法。通过分析现有智慧矿山信息交互界面,建立界面优化模型,利用信度系数权重评价方法确定界面中信息类型的分布方式,建立AHP分层模型总结界面优化内容表,交叉组合生成备选界面方案,最后通过眼动实验将备选界面方案和原方案进行比对分析,优化后的方案反应时和注视点个数明显下降,界面的操作效率显著提升。基于认知负荷理论的交互界面优化方法,能有效降低操作者的认知负荷,提高操作效率,为智慧矿山信息交互界面的设计与优化提供借鉴。关键词:交互设计;认知负荷;界面优化;层次分析法;智慧矿山 中图分类号:TD 76
文献标志码:A
文章编号:1672-9315(2022)05-1028-09
DOI:10.13800/j.cnki.xakjdxxb.2022.0523开放科学(资源服务)标识码(OSID):
Optimization of intelligent mine information interaction interface based on cognitive load
FENG Qing,FAN Dingli,YANG Huijun,ZHAO Siyi
(College of Arts,Xi’an University of Science and Technology,Xi’an 710054,China)
Abstract:To solve the problem that operators are constrained by the visual cognitive load when operating in complex interactive interfaces,which leads to low efficiency and incremental errors in operation search,an interface optimization method based on the cognitive load theory is proposed.An interface optimization model was established through the analysis of cognitive load and intelligent mine information interaction interface,the interface distribution method was determined by the reliability coefficient weight assessment method,and the optimization content table was generated according to the AHP hierarchical model,with some interface option schemes generated.Finally,an eye movement experiment was designed to analyze the original scheme and alternative interface schemes.The response time of optimized scheme and the number of fixation points was greatly reduced,the operation efficiency of the interface was significantly improved.The optimization method of interaction interface based on cognitive load theory can effectively reduce the cognitive load of operators and improve operation search efficiency,which is a reference for the design and optimization of intelligent mine management and information interaction interface.
Key words:interactive design;cognitive load;interface optimization;analytic hierarchy process;intelligence mine
0 引 言
互聯网与人工智能技术的发展,为传统矿山工业领域带来颠覆性的变革,在矿山智能化不断深入的同时智慧矿山也在此背景下快速发展起来。智慧矿山系统是在智能矿山的基础上对生产、安全、技术等方面进行主动感知,自行分析然后快速处理的系统平台。在“机械化换人,自动化减人”的生产理念引导下,矿山智能化走向智慧化的同时,以智能矿山为基础的交互界面正朝着更全面、更复杂、更智慧的方向更迭;以人工操作方式为主的交互方式,也逐渐向智能控制、智能辅助人工操作的方式转变。在人员成本节省与工作效率提升的同时,越来越复杂的信息交互界面使操作员的认知压力相应增加。
在认知理论与智慧矿山信息交互界面领域,相关学者已展开深入研究。李红霞等总结智慧矿山中人因失误的影响因素分层模型,利用层次分析法和DEMATEL对智慧矿山中人工失误的影响因素指标进行详细研究,认为机械设备因素是造成智慧矿山人工操作失误的重要指标,其中人机匹配度是机械设备中造成工人失误的最关键因素。孙林辉等利用眼动实验设备研究矿山系统交互界面中人眼对中英名称的搜索规律,发现人在不同任务下对名称呈现方式的交互具有差异,为交互界面的名称呈现方式提供合理建议。李晶等开展针对复杂交互界面的形状编码研究,证实图形形状的差异对人的认知效率具有相关性,认为图形的邻接状态是影响图形形状差异的最大因素,且弧形对人视觉反应较为强烈。张宁等运用认知负荷理论提出自助服务终端交互界面设计方法,通过实验分析验证认知负荷情况与人员操作效率具有显著相关性的猜想,说明该方法能够显著提高操作者的使用效率。戴立操等将注视熵的概念引入到主控室操作员认知负荷的研究中,研究计算机屏幕操作员的认知负荷与注视熵之间的关系,得出注视熵显著正向影响认知负荷的结论,为认知负荷的评价方法提供一项有效指标。
以智能矿山为基础的智慧矿山,是未来矿山工业领域发展的方向。虽然智慧矿山信息交互界面正以智能矿山为基础不断得到完善,但是在面对复杂的交互界面时,如何通过制定科学的交互界面优化方案和设计策略,提高操作者的操作效率还欠缺可靠的科学研究。
1 认知负荷与智慧矿山信息交互界面
1.1 认知负荷理论
认知负荷理论属于心理学科的一部分,1988年由John Sweller首次提出。认知负荷是学习者在执行目标任务时,被附带在认知系统中的多维结构负荷。该结构由交互产生的原因、心理负荷、心理努力和绩效等方面的评估组成。
人在学习工作中的总认知负荷可分为内在认知负荷、相关认知负荷、外在认知负荷,他们共同影响人的学习工作效率。3种认知负荷对学习工作效率的影响如图1所示。内在认知负荷指元素之间互相影响形成的负担;外部认知负荷是除内部认知负荷所指元素以外而产生的额外负荷;相关认知负荷指能引起学习者心理努力和促进图示自反应的负荷。所以在学习和工作中应直接或间接地降低内、外认知负荷,增加相关认知负荷。
1.2 智慧矿山与智慧矿山信息交互界面
智慧矿山是在智能矿山发展到一定程度的条件下实现的。智慧矿山是在通过实现矿山的数字化、信息化的基础上,对生产、安全、技术、后勤等方面进行主动感知、自动分析、快速处理而创建的系统平台,其最终目的是为了建设安全、无人、高效、清洁的矿山。国家为推动智慧矿山发展,先后发布《智慧矿山信息系统通用技术规范》和《关于加快煤矿智能化发展的指导意见》,并提出到2025年基本实现大型煤矿和灾害严重煤矿智能化等要求。智慧矿山的建设不仅受矿山智能化程度的影响,还面临信号传输和人机交互的实现问题。前者已被华为研发的5G技术解决,后者则通过资源模型和受限应用协议(CoAP)的信息交互方法使交互界面成为人与智慧矿山沟通的媒介。目前智慧矿山已在窝兔沟煤矿和宝日希勒煤矿等数十个矿区进行试点。华为、优诺等企业更是已经提出智慧矿山解决方案,上线智慧矿山相关的可视化平台等产品,通过系统平台连接智能设备和机械,并在交互界面上进行监控和操作。因此操作者与界面的交互过程尤为关键,操作者与界面的交互流程如图2所示。
在界面操作方面,智慧矿山系统会请求自动控制的权限,操作者主要负责监督,在危急情况下,系统异常报警提示会被激活,系统依照设置的权限会请求操作者是否进行自动操作,期间系统会记录全部人工或自动的操作过程。在辅助层不足以恢复系统正常工作的情况下,操作者会接管系统的自动调试工作进行手动操作,但是手动操作可能会伴随强大的时间和心理压力,因此不良的交互界面会给操作者带来巨大的认知负荷,从而导致操作失误,操作超时等一系列严重后果。
2 认知负荷下的智慧矿山信息交互界面分层模型
2.1 AHP智慧矿山界面分层模型
智慧矿山系统中,信息交互界面是其重要组成部分,在系统中负责智能设备的操控和调试。智慧矿山信息交互界面中不同设计元素的组合可以表达不同的交互层次,以现有某智慧矿山信息交互界面为例,如图3所示。图3中智慧矿山信息交互界面包含有:导航信息、菜单信息、搜索栏、时间、天气、名称、账户、设备详细数据、参数调节、参数名称、设备运行状态、启动开关、设备图示、操作记录、任务内容、异常报告等。其中以信息表达内容为标准可分为:层级信息、基本信息、设备参数信息、设备状态信息、任务信息5大类。
对学习过程中认知负荷的分类也同样适用于交互界面认知负荷,因为交互过程和学习过程都是人脑获取与处理信息的过程。在交互过程中,操作者通过视觉和听觉对界面中的文本、图片、声音、影像等信息在记忆中进行短暂留存和处理,产生认知负荷。当界面过于复杂或易使人引起不适时,操作者所感受的认知负荷就会过高,导致信息处理能力下降,操作效率下降甚至失误率的上升。依据对界面信息的分类和对交互界面中认知负荷的分类,建立基于认知负荷下的信息交互界面AHP分层模型,提出交互界面认知负荷的8个组成部分。如图4所示,外在认知负荷主要包括界面信息的組织方式和呈现方式(内在认知负荷主要受界面的复杂程度与相关图示所影响);相关认知负荷主要由操作者的自身因素所影响。5种信息类型分别通过不同体现方式反应着不同类型的认知负荷。
组织方式在矿山类界面中具体是指层级设计与层级操作的位置要符合行为逻辑;呈现方式主要是界面中设备信息呈现的方式,以及设备信息颜色的区分方式;复杂性在界面中体现为可交互的信息数量和交互过程的任务量;相关图示指界面中显示信息的图标,图标能引起操作者自身进行图示自反应,从而提高反应速度。例如“”
人们会马上联想到与电相关的知识;心理因素在界面中常常被交互反馈所影响,如打字拨号时的声音或图标的改变会引起操作者的积极状态;动机反应人在操作时的心理努力程度,在界面中一般由时间等限制性信息体现。
2.2 智慧矿山信息交互界面优化流程
基于认知负荷理论的智慧矿山信息交互界面优化具体流程如图5所示。
图5中现有界面和引入认知负荷这2步是优化方法的理论基础,后续步骤则是界面的优化。界面的优化具体分为2大步,一是对界面内信息的布局调整,二是对信息的呈现方式进行优化。在布局调整中,利用认知负荷理论对目标原界面进行信息分类,形成大小不同的区块,然后根据计算得出权重,确定各区块的分布;在此基础上提出界面优化内容表,依据表中的界面优化方式自由组合生成16种基于认知负荷的备选方案,最后通过实验筛选操作效率最高的方案,完成界面优化。
3 优化方案生成
3.1 智慧矿山信息交互界面信息权重
权重一般用于产业评价指标,也用来表示各指标的重要性。信息的显示受限于屏幕的大小,界面中信息之间的不同比例关系会影响操作者的操作效率,所以越重要的信息,在界面内的显示面积理应越大。虽然信息面积占比一般难以精确,但信息面积占比的大小顺序可以确定,因此该研究依据信息的权重值同比转化为面积占比,来确定界面的分布。
信度系数权重评价法是AHP与灰色关联分析法的结合。根据上文对界面信息的分层,邀请专家对界面信息类型进行两两对比,构建评价指标表,再将一般层次分析法得出的多专家指标权重用来构建信度评判矩阵,使用灰色关联分析出各专家的信度系数进一步得到综合权重。
邀请20名具有智慧矿山信息交互界面设计经验和界面操作经验的专家参与评价。将专家分为5组进行组内讨论,通过AHP层次分析法得出5组专家的权重向量分别为
W′1=(0.04,0.075,0.114,0.311,0.459)
W′2=(0.04,0.114,0.075,0.311,0.459)
W′3=(0.055,0.092,0.184,0.334,0.334)
W′4=(0.04,0.075,0.114,0.459,0.311)
W′5=(0.061,0.059,0.123,0.394,0.363)
一致性检验得出CR1=0.047<0.1,CR2=0.047<0.1,CR3=0.008<0.1,CR4=0.047<0.1,CR5=0.033<0.1,说明数据均符合一致性检验要求,通过均值化生成法构建规范化的信度判断矩阵得到
将矩阵带入灰色关联度计算公式
式中 ρ为分辨系数,取0.5;k为第k组专家且1≤k≤m;i为第i个元素;m为分组总数,Y=(0.2,0.2,0.2,0.2,0.2)。得出灰色关联系数矩阵为
带入关联度計算公式
计算得出r=0.693,r=0.545,r=0.633,r=0.661,r=0.714,归一化计算得出各组专家的信度系数分别为δ=0.214,δ=0.168,δ=0.495,δ=0.204,δ=0.220。
最终修正得到,综合权重向量W=(0.048,0.081,0.123,0.364,0.383)。按权重值同比转化为信息面积占比,将各信息类型的面积占比由小到大排列见表1。
3.2 基于认知负荷的界面优化设计
界面优化过程中,依据操作者接收信息的通道和处理信息的方式对20种智能或智慧矿山软件交互界面中采用的交互手段进行取舍。通过视觉对层级分布方式、信息显示方式、颜色呈现方式、图形呈现方式的颜色、形状、位置等信息进行分辨;以听觉或视听交互对界面的交互反馈和心理努力情况进行区分。共获取层级分布方式4种;信息显示方式2种,其中平铺式占80%,卡片式占20%;颜色呈现方式2种,区分设备状态的颜色使用方式占60%,区分设备之间信息内容关系为主的占40%;图形呈现方式中写实形式的图形占75%,抽象简化的方式占25%;具有明显交互反馈的界面占50%,剩余50%则不带交互反馈或不明显;有20%的界面使用计时显示增加操作者的心理努力,80%的界面无计时显示;信息数量会因同一软件中的不同界面而改变,任务量也会根据操作者的实际使用需求而不确定,因而信息数量和任务量不便分类。
界面优化内容的选择其实是对认知负荷在界面中的组成和各组成部分优化方式的选择,信息数量和任务量受限于设计手段和交互方式,不便得出具体方案故不作讨论;层级分布方式、交互反馈两方面已有具体研究成果故无需选择。列举出界面优化内容的已选择和待选择方案并给出图例和解释,见表2。
1)层级的不同显示位置会使操作者在任务中的目标注视数量和反应时发生变化,同理会改变操作者的外在认知负荷。矿山类信息界面多由三层级组成,层级在屏幕四周的不同位置分布会产生多种分布方案,根据已有研究选择一二层级在屏幕左侧,三层级在上方的最优层级分布方式。
2)现有的界面信息呈现方式分为2种:a平铺式:通过简单分割排布等方式,直接将信息平铺于背景之上;a卡片式:将信息通过分组,似卡片的形式排布于背景之上,类似窗口化呈现方式。
3)颜色是具有语义的,目前主流的界面中信息部分颜色的使用方式分为2种。用于区分设备状态的颜色分类方式b和为区分设备之间信息内容的方式b(字符类型与字符之间的色彩匹配对认知负荷无明显影响)。
4)界面中的图形呈现方式能不同程度地使人进行联想。界面中图形分为写实类c与抽象简化类c,后续将对2种图形的选择进行研究。
5)利用视觉或听觉的交互反馈,将会明显提升用户在使用界面时的体验,应选用有交互反馈的界面满足操作者的心理,增加相关认知负荷。
6)操作者的心理努力程度与操作环境息息相关,为模拟真实操作心理,界面将尝试使用计时显示界面。含计时显示界面记为d,否则记为d。
3.3 界面方案
界面优化方案的生成是各种优化方式(交互手段)的綜合,为研究界面优化方式与认知情况的关系,需根据界面优化内容表,按图6方式对原始界面进行优化组合,得出方案f(x)=(a,b,c,d)。
4 基于眼动仪的界面操作实验验证
4.1 实验程序与准备
受试者选取30名在校研究生,年龄在22~25岁之间,且保证其心理努力程度相当。
实验场景如图8所示。实验选用iViewX RED桌面式测量系统,屏幕面板为27英寸显示器,屏幕延迟1 ms,鼠标使用罗技GPW,延迟1 ms,灵敏度为800 DPI,确保被试者操作的准确性。实验环境选择在自然光线条件下安静封闭的室内空间,室内温度为26 ℃,调节座椅及屏幕高度,使被试者始终直视屏幕,保持人体视觉舒适距离在50~60 cm之间,确保被试人员不被环境因素干扰。
具体实验过程如图9所示,受试者依次在16种优化界面和原界面内进行操作。首先阅读任务栏获取随机的操作任务,然后搜索点击规定区域,再完成不同层级界面的任务,单人耗时约半小时。
共收集样本510个,以3倍绝对中位差为标准排除反应时和注视点个数异常数据共计15个。
4.2 多因素方差分析
将待研究方案a,b,c,d视为自变量,反应时和注视点个数为因变量,实验数据使用SPSS,得出多因素方差分析。由表3可知,显著性小于0.05说明当该数值对应的自变量改变时能显著影响操作效率;效应量表示各对应的自变量因素分别对反应时和注视点个数的影响程度,效应量越大,表示该因素的选择对结果的影响程度越大。
由表3可知单个自变量对反应时长和注视点个数均有显著性影响(0.00<0.05),这说明不同优化方式(交互手段)对认知的效能是有影响的。其中对a1与a22种不同的优化方式进行选择,能显著影响操作效率,其反应时效应量为0.999,注视点个数效应量为0.996;对b1与b22种不同优化方式的选择造成操作效率的影响最强,反应时和注视点个数的效应量分别为1.000,0.999;对c1与c22种不同优化方式的选择也会影响操作效率,但略弱于前两者,效应量分别为0.995,0.980;d1与d22种不同优化方式的选择对操作效率的影响最弱,分别为0.901,0.910。
4种自变量的综合因素对反应时有显著性影响(0.005<0.05),综合因素对注视点个数同样有显著性影响(0.013<0.05)。其中a信息呈现方式与b颜色分类方式影响效果很强烈,d计时情况的效应量最低,是其中最弱因素。
4.3 布局方案绩效分析
将某智慧矿山信息交互界面定为原方案f(17),根据认知负荷理论所提出的界面优化方案与原方案f(17)(共17种)在注视点个数和反应时方面的效率情况如图10,图11所示。
反应时是完成任务的时间,注视点个数是眼动仪记录任务过程中人眼注视的信息总量,二者是组成操作效率的关键部分,反应时越短,注视点个数越少,则认为操作效率越高。以颜色分类方式的不同将数据分为f(1-4,9-12)、f(5-8,13-16)2组,可以看出反应时长与注视点个数差异均最显著,这表示b状态颜色分类方式在效率反应上明显优于b参数关联颜色分类方式,同时验证了方差分析中颜色分类方式为最显著影响因素。同理,a卡片式信息呈现方式在操作效率上明显优于a平铺式信息呈现方式;c抽象图形呈现方式效率明显优于c写实图形呈现方式;d无计时显示方案明显优于d含计时显示方案。
在单个方案效率情况方面,f(5)的反应时最多为12.32 s,注视点高达45.78,而f(12)方案的反应时和注视点数均最少,分别为7.69 s和24.13,对比f(5)方案在时间上缩短约38%,注视点个数减少约47%,操作效率明显优于其他方案,因此f(12)方案为备选方案中的最优方案。所以优化方式应首先选择卡片式信息呈现方式、状态颜色分类方式、抽象图形呈现方式、无计时显示方案。计时显示虽然会增加相关认知负荷,但同时会分散操作者的注意力,导致操作效率降低。
对比原方案f(17),最优方案f(12)在操作效率方面明显优于原方案,其中反应时长较原方案缩短23%,注视点个数减少37%。同理,因开篇说明综合认知负荷与工作效率成负相关,故方案f(12)的认知负荷情况明显优于原方案f(17),证明优化方法有效。
5 结 论
1)智慧矿山信息交互界面中信息类型的重要程度由大到小为:设备状态信息>设备参数信息>任务信息>层级信息>基本信息。
2)实验表明,信息显示方式、颜色呈现方式、图形呈现方式、计时显示界面都能显著影响操作效率,且信息显示、颜色呈现方式的影响较强。经实验分析筛选的界面优化内容组合为:a卡片式信息呈现方式、b状态颜色呈现方式、c抽象图形呈现方式、d无计时显示界面。
3)实验结果分析表明,优化方案f(12)对比原始界面在反应时长和注视点个数上分别减少23%和37%,说明通过认知负荷理论对智慧矿山信息交互界面进行优化的方法是可行有效的。在实验中未考虑到具体交互行为的其他因素,例如界面权重与面积的对应转化难以精确,操作者点击行为的延迟、色彩对比度等等,还需继续进行更为深入的研究。
参考文献(References):
[1]王国法,王虹,任怀伟,等.智慧煤矿2025情景目标和发展路径[J].煤炭学报,2018,43(2):295-305.WANG Guofa,WANG Hong,REN Huaiwei,et al.2025 scenarios and development path of intelligent coal mine[J].Journal of China Coal Society,2018,43(2):295-305.
[2]张旭辉,杨文娟,薛旭升,等.煤矿远程智能掘进面临的挑战与研究进展[J].煤炭学报,2022,47(1):579-597.ZHANG Xuhui,YANG Wenjuan,XUE Xusheng,et al.Challenges and developing of the intelligent remote controlon roadheaders in coal mine[J].Journal of China Coal Society,2022,47(1):579-597.
[3]李红霞,樊恒子,张嘉琦,等.智慧矿山工人人因失误影响因素研究[J].西安科技大学学报,2021,41(6):1090-1097.LI Hongxia,FAN Hengzi,ZHANG Jiaqi,et al.Influencing factors of human error in Smart Mines[J].Journal of Xi’an University of science and technology,2021,41(6):1090-1097.
[4]孫林辉,韩贝贝,袁晓芳.矿山瓦斯监测系统中界面参数名称呈现方式的眼动研究[J].人类工效学,2020,26(2):1-7,18.SUN Linhui,HAN Beibei,YUAN Xiaofang.Eye movement research on the presentation mode of interface parameter names in mine gas monitoring system[J].Chinese Journal of Ergonomics,2020,26(2):1-7,18.
[5]李晶,郁舒兰,吴晓莉.人机界面形状特征编码对视觉认知绩效的影响[J].计算机辅助设计与图形学学报,2018,30(1):163-172,179.LI Jing,YU Shulan,WU Xiaoli.Effect of shape character encodings in the human-computer interface on visual cognitive performance[J].Journal of Computer-Aided Design & Computer,2018,30(1):163-172,179.
[6]张宁,刘正捷.基于用户认知能力的自助服务终端界面交互设计方法[J].计算机应用研究,2013,30(8):2455-2460.ZANG Ning,LIU Zhengjie.Self-service terminal interface design method based on users’ cognitive skills[J].Application Research of Computers,2013,30(8):2455-2460.
[7]戴立操,张美慧,李宇,等.基于注视熵的核电厂数字化主控室操纵员认知负荷研究[J/OL].安全与环境学报,2021,24(3):1009-1094.DAI Licao,ZHANG Meihui,LI Yu,et al.Research on cognitive load of operators in digital main control room of nuclear power plant based on gaze entropy[J/OL].Journal of Safety and Environment,2021,24(3):1009-1094.
[8]SWELLER J.Cognitive load during problem solving:effects on learning[J].Cognitive Science,1988,12(2):257-285.
[9]SWELLER J,AYRES P,KALYUGA S.Cognitive load theory[M].New York:Springer,2011.
[10]吕鹏飞,何敏,陈晓晶,等.智慧矿山发展与展望[J].工矿自动化,2018,44(9):84-88.LV Pengfei,HE Min,CHEN Xiaojing,et al.Development and prospect of wisdom mine[J].Industry and Mine Automation,2018,44(9):84-88.
[11]胡文涛,卓敏敏,赵立厂,等.一种智慧矿山信息交互方法[J].工矿自动化,2020,46(10):55-60.HU Wentao,ZHUO Minmin,ZHAO Lichang,et al.An information interaction method for smart mine[J].Industry and Mine Automation,2020,46(10):55-60.
[12]HARTSON H R.Cognitive,physical,sensory,and functional affordances in interaction design[J].Behaviour & Information Technology,2003,22(5):315-338.
[13]贺孝梅,李剑钰.人机交互中认知负荷的成因分析与设计策略研究[J].包装工程,2020,41(10):24-30.HE Xiaomei,LI Jianyu.Cause analysis and design strategies of cognitive load in human-computer interaction[J].Packaging Engineering,2020,41(10):24-30.
[14]顾立平.个性化交互设计的研究综述[J].数据分析与知识发现,2010(11):10-16.GU Liping.Review of personalized interaction design[J].Data Analysis and Knowledge Discovery,2010(11):10-16.
[15]冯青,武智灵.基于QFD的应急通信车公理化设计与评价研究[J].湖南包装,2019,34(2):67-71.FENG Qing,WU Zhiling.Research for axiomatic design and evaluation of emergency communication vehicle based on QFD[J].Hunan Packaging,2019,34(2):67-71.
[16]夏春艳,蒋鲲.基于信度系數的人机界面评价指标权重分配[J].沈阳工业大学学报,2013,35(1):53-57.XIA Chunyan,JIANG Kun.Weight assignment of evaluation indexes for human-machine interface based on reliability coefficient[J].Journal of Shenyang University of Technology,2013,35(1):53-57.
[17]CHATZIMOURATIDIS A I,PILAVACHI P A.Multicriteria evaluation of power plants impact on the living standardusing the analytic hierarchy process[J].Energy Policy,2008,36(3):1074-1089.
[18]DAGDEVIREN M,YAVUZ S,KILINC N.Weapon selection using the AHP and TOPSIS methods under fuzzy environment[J].Expert Systems with Applications,2009,36(4):8143-8151.
[19]YANG CL,CHUANG S P,HUANG R H.Manufacturing evaluation system based on AHP/ANP approach for wafer fabricating industry[J].Expert Systems with Applications,2009 36(8):11369-11377.
[20]沈张帆,李瑞,牛亚峰.复杂系统数字界面的多层级导航布局实验研究[J].包装工程,2021,42(4):70-76.SHEN Zhangfan,LI Rui,NIU Yafeng.Experimental study on multilevel navigation layout of digital interface in complex systems[J].Packaging Engineering,2021,42(4):70-76.
[21]冯青,吴梦迪,余隋怀,等.基于BP神经网络的罐式车辆配色与评价方法研究[J].机械设计,2019,36(1):118-123.FENG Qing,WU Mengdi,Yu Suihuai,et al.Research of tank vehicle colour matching and evaluation method based on BP neural network[J].Journal of Machine Design,2019,36(1):118-123.
[22]杨景,李培林,王崴,等.指控舱显控界面字符显示对认知负荷的影响[J].计算机工程与设计,2015,36(12):3306-3310,3323.YANG Jing,LI Peilin,WANG Wei,et al.Influence of character display of command and control cabin display interface on cognitive load[J].Computer Engineering and Design,2015,36(12):3306-3310,3323.
[23]李铁萌,李勇,秦宪刚.视觉反馈对虚拟环境中徒手抓取交互的影响研究[J].计算机辅助设计与图形学学报,2019,31(10):1711-1718.LI Tiemeng,LI Yong,Qin Xiangang.Study on the influence of visual feedback on freehand grasping performance in virtual environment[J].Journal of Computer-Aided Design & Computer Graphics,2019,31(10):1711-1718.