APP下载

空中交通管制员疲劳检测与管理综述

2021-12-23沈志远魏义涛闫永刚赫海园

航空工程进展 2021年6期

沈志远 ,魏义涛 ,闫永刚 ,2,赫海园

(1.南京航空航天大学民航学院,南京211016)

(2.中国民用航空空中交通管理局空管部,北京100022)

(3.中国人民解放军93864 部队,昌吉831100)

0 引 言

2018 年国际航空运输协会(IATA)预测,根据国际和国内旅客运输量的综合计算,我国将在2025 年前后超越美国成为全球最大的航空市场,到2035 年前后我国民航市场客流量将达到13亿。民航事业的发展离不开大型运输客机的自主研发和高效的空中交通管理体系两大软硬实力的支撑。

民航的快速发展给空中交通管理带来了巨大挑战,进而对空中交通管制员的需求急剧增加。空中交通管制是一项担负重要安全责任的职业,管制员发出的一条错误指令可能会造成严重的航空安全事故,因此空中交通管制是世界上最具挑战和困难的工作之一。管制员工作职能主要有三种,分别是塔台管制、进近管制以及区域管制。塔台管制员负责管理机场区域的运行,主要对飞行员下发起飞和落地指令;进近管制员负责对终端区进场和离场的飞机进行排序指挥;区域管制员负责对航路上的飞机进行管制。由于工作的重要性,管制员工作过程中需要保持精神和注意力的高度集中,加之其昼夜倒班的工作制度,急剧增加的航班量带来的工作负荷使得管制员容易处于疲劳状态。

疲劳通常体现在身体上或者精神上疲倦的状态,研究表明疲劳状态可以显著降低人的警觉性、判断力、反应力等,被认为是导致人为差错的重要潜在风险因素。历史研究数据表明,航空安全事故中与管制员相关的事件大多由其疲劳引起的“错、忘、漏”相关,因此管制员疲劳检测对于航空安全以及风险管控具有重要意义。

随着未来国产ARJ21、C919 机型与波音和空客系列飞机共享天空,由于不同机型的飞行性能不同,会增加航班机动指挥和空中交通调配复杂度,加上突发恶劣气象条件等因素,使得管制员工作更易疲劳。

然而疲劳作为一个抽象的概念,尽管已经有近一百年的研究历史,学术界和工业界仍然没有对其形成统一定义,管制员疲劳检测亦是一项非常具有挑战性的研究工作。

当前疲劳检测研究大体可以分为两类,主观评价方法和客观评价方法。主观方法主要是通过被测人员填写疲劳量表的形式来进行。依据疲劳量表的得分,判断其是否处于疲劳状态以及疲劳程度,例如,T. Chalder 等提出的多维疲劳量表。尽管这种方法操作简单,但被测人员往往带有主观想法,检测结果不够准确。客观评价方法是指借助仪器、设备等辅助工具记录人体生理、生化、行为或人因工程等方面某些指标的变化以判断疲劳状态,常见的生理指标有脑电、心电、皮肤电、心率等。这类检测方法准确度很高,但是实用性不足。一方面,用于检测信号采集的设备成本高昂且不易操作;另一方面,检测过程中需要与被测者产生接触,会使得被测者承受额外的压力而更容易出现疲劳。

由于主观检测方法和客观接触式检测方法用于检测管制员疲劳的局限性,非接触式检测方法开始受到研究人员的关注。依据判断指标的不同,可以将非接触式检测方法归为四类,具体的,这四种指标为:工作负荷、人因工程、面部特征、语音特征。特别是随着近年来人工智能和深度学习的快速发展,人们开始利用面部特征和语音特征结合深度学习技术进行研究,取得了较好的研究成果。但总体而言,管制员疲劳检测的研究比较分散。

本文对近些年的管制员疲劳检测进展进行综述。首先从疲劳主观评价和客观检测两个方面详细阐述管制员疲劳检测的研究成果及其优缺点;然后将基于管制陆空通话的语音疲劳检测方法分成疲劳特征提取与表征、疲劳识别模型构造两个步骤进行详细介绍;顺应近些年人工智能技术的迅猛发展,对比分析传统识别模型和基于深入学习疲劳识别模型的构造方法;最后从空管自动化系统的疲劳状态实时监测预警模块和考虑疲劳因素的管制员智慧排班系统两个方面对管制员疲劳检测的应用前景加以分析。

1 主观评价方法

疲劳是一个抽象概念,但每个人确实有直观的感受,因而主观评价方法很早就被提出。主观评价方法要求被观测者根据主观感受填写自我疲劳量表或者疲劳问卷,从而判断其疲劳状态和疲劳程度。目前国内外流行的疲劳自评量表如表1所示,主要分为单维和多维疲劳量表两大类。由于考虑到影响疲劳的多个维度,多维疲劳量表的影响力更大,应用也更加广泛。

表1 国内外流行的疲劳自评量表Table 1 The main fatigue self-assessment scales

尽管针对疲劳检测的主观评价方法一直受到研究人员的广泛关注,但大多运用在临床医学治疗等领域,将其运用到管制员疲劳检测的研究相对较少。本节从基于工作负荷的问卷调查和自评量表两方面介绍针对管制员的主观疲劳检测方法。

1.1 管制员工作负荷评定法

工作负荷是引起疲劳的重要因素,因此评定工作负荷便可间接判定疲劳程度。早在20 世纪60年代人们便开始了对管制员工作负荷的相关研究,主要的研究方法集中在主观评价,当前流行的两种主观疲劳评定方法如表2 所示。

表2 当前流行的管制员工作负荷评定法Table 2 The main methods of air traffic workload assessment

1.2 管制员疲劳自评量表

相对于问卷调查的编写自由,疲劳量表的编制则更加规范化和标准化,数据处理更加方便,并且量表涉及信度和效度的问题,因此疲劳自评量表对于主观评定疲劳具有更好的科学性。国内外研究了大量信效度及应用性都很好的疲劳量表,但是很少有研究者制定管制员疲劳量表。最具代表性的是MFI-16 管制员疲劳量表,它是2016 年孙瑞山等在MFI-20 量表的基础上结合国内管制人员工作特点制定的。该量表在原先的MFI-16量表5 维度20 条目的基础上进行了删减和增添,删除了第二维度“活力下降”,在第三维度“脑力疲劳”增加了记忆力下降和记忆力很好这两条,最终修订后的量表共4 维度16 条目。通过在管制人员中进行调查分析,该量表的内部一致性信度达到0.803,证明了该量表的可信度和稳定度,为管制人员疲劳状况调查提供一个实际可行的参考方案。

2 客观检测方法

主观评价方法具有操作简单、成本低等优点,已成为广泛采用的测量方法。但是被测对象之间的主观感受差别很大,评分标准无法统一,测量结果往往不具备客观性。客观评价方法则可以很好地规避上述缺点,其是借助于仪器、设备等辅助工具来检测人体的各种生理与生化指标,从而客观地通过指标变化来判断人体的疲劳程度。客观评价方法又可以分为接触式检测与非接触式检测两种。

2.1 接触式检测方法

接触式检测是通过仪器接触被测者而获得生理生化指标,常见的生理生化指标包括脑电、心电、眼电、心率、血液等。研究人体生化反应的文献众多,但主要集中在体育行业,民航相关的研究甚少,本节重点介绍生理指标在管制员疲劳中的应用研究。

2.1.1 脑电检测

脑电图(Electroencephalogram,简称 EEG)可以直接反映脑部活动的变化,被认为是检测人体疲劳的最有效方法,也是国内外研究管制员疲劳的热点。早期的研究主要在于证明不同频带范围的脑电波的能量变化与疲劳之间的关系,例如S.K.Lal 等和 H.J.Eoh 等通过统计分析的方法发现在疲劳状态下

δ

波与

θ

波活动会显著增加,并且

β

和(

α

+

θ

)/

β

等比值具有显著差异;P. Arico等基于在校管制学员做模拟机收集的EEG 信号,提出了管制员脑力疲劳系数,并建立了相关管制员工作负荷模型;D.Dasari 等通过模拟实验连续监测管制员的EEG 信号,实验结果显示,管制员在70 min 时开始出现疲劳状态,判断反应能力也逐渐变差;王莉莉等采集了32 名在职管制员在大流量且有特情情况下进行管制模拟机的EEG信号,采用反应时长作为疲劳指标,结果显示管制员在夜间00∶00 之后的疲劳指标值会陡然增加,存在极大疲劳隐患。

2.1.2 心电检测

脑电图虽然能够非常准确地检测管制员疲劳状态,但是检测设备成本高昂,而且穿戴检测设备也会给管制员带来干扰,因此人们开始着力研究更易获取的心电信号(Electrocardiograph,简称ECG)与管制员疲劳之间的关系。在心电疲劳检测的研究中,主要包括处理心电数据,建立管制员疲劳与心电时频域指标的联系,以及心电多融合指标评价方法等,其中心率差异性(Heart Rate Variability,简称HRV)是公认的反映疲劳程度的可靠指标。赵晓华等分析了心电信号随工作时间的变化规律,采用主成分分析法综合各项指标后得出,心电指标中的RRmean,SDNN 两个指标可对疲劳状态进行评价;陈凤兰采用心电信号疲劳指标讨论了不同排班制度对管制员疲劳的影响,发现上2 小时休息2 小时的轮班方式显示的心电值最低,疲劳程度最小;吕川将心电信号作为其中一项输入量,借鉴人工智能算法,构建疲劳预测模型,发现心电指标随疲劳度变化相关性较高。

2.1.3 皮肤电检测

随着各种生理测量仪器的发明应用,研究人员可以快速获得除传统脑电、心电以外的其他生理指标,比如皮肤电信号。皮肤电信号反映的是皮肤表层的汗腺活动强度。相关研究表明,疲劳状态下人体的交感神经和中枢神经处于相对抑制状态,导致汗腺分泌液少,皮肤电均值较低;相反人体清醒状态下中枢神经和交感神经处于活跃状态,控制汗腺分泌液多,皮肤电均值增大。2020 年,陈凤兰等利用 Mangold-10 生理多导仪软件从皮肤电信号中提取相关疲劳表征指标,针对西南空管局管制员不同轮休方式下的疲劳状态进行了对比实验,结果表明,随着工作时长累积,皮肤电指数显示正相关增加。

2.2 非接触式检测方法

近年来,随着人工智能与深度学习的飞速发展,计算机视觉识别以及语音识别技术在诸多领域展现了极好的应用性。上述接触性检测技术尽管表现了很好的疲劳识别准确性,但是往往需要让管制员穿戴不同的生理检测设备,实验操作复杂,智能性过低,难以很好地应用到管制员疲劳检测中。因此,近些年很多学者利用眼动跟踪、面部识别、语音识别等技术间接判定管制员疲劳状态。

2.2.1 基于眼动跟踪技术

基于眼动跟踪技术的疲劳检测方法是指利用被测人员眼部特征变化规律来判断其疲劳水平,常用的眼动特征包括:眼睛闭合时间占某一特定时间的百分率(Percentage of Eyelid Closure Over the Pupil Over Time,简称PERCLOS)、眨眼频率、瞳孔变化、眼睛开合状态等,其中PERCLOS 已经成为公认有效的疲劳评判标准。基于眼动特征与疲劳水平的紧密关系,并且眼动仪技术的不断改进,使得学者获得眼动数据更加容易,因此更多的研究开始将其与自动向量机、神经网络等模型结合起来进行疲劳预测,取得了很好的预测准确率。例如,F.Friedrichs 等在实际驾驶实验中采集眼睛开合速度、PECLOSE 和眨眼时间等数据,通过神经网络进行识别,最终的疲劳准确率达到82.5%。

鉴于眼动检测技术在地面疲劳驾驶领域的丰富成果,研究者逐渐将其引入到管制员疲劳检测中。陈健首先研究眼动数据、PERCLOS 与管制员疲劳之间的关系,研究发现基于PERCLOS 和眨眼频率可以很好地拟合管制员的疲劳状态,当阈值达到0.35 时可被判断为疲劳状态;N.M.Sarah等则模拟了低、中、高三种不同流量强度的管制场景,发现环形视线扫描是管制员的主要模式;靳慧斌等研究了管制员的视觉搜索特征,选择注视持续时间、水平、垂直视角、扫视幅度和速度等作为表征特征,结果显示被试的视觉搜索特征随飞机的数目变化不大;董斌结合眼动行为特征,提出了一种新的扇区交通运行特征分析方法,对管制员眼动行为与扇区交通运行特征之间的关系进行研究,结果表明,不同的眼动指标与交通运行特征的相互关系不同;王艳军等通过faceLAB眼动仪采集了专家与新手的眼动指标,结果发现专家的平均注视时间更长,注视点更少,扫描幅度更小。综上所述,眼动跟踪技术在管制员疲劳检测上取得了一定的进展,但是大多集中在浅层探究不同眼动特征在不同管制场景下的变化关系,缺乏更深层次的理论分析。

2.2.2 基于面部特征识别技术

基于管制员面部特征的检测方法是分析被测人员的面部特征,对比管制员在正常状态和疲劳状态下面部的不同表现,典型的面部疲劳特征有眨眼频率、打哈欠检测、头部状态等,这些从计算机视觉角度也都是易测可靠的特征。研究表明,眨眼频率增加、打哈欠、头部低下、眼睛闭合时间延长等现象表明被测人员开始出现疲劳状态。

卷积神经网络(Convolutional Neural Network,简称CNN)可以自动提取图像的深层特征,避免人工提取特征导致的鲁棒性差等问题,因此在图像分类以及识别方面得到广泛的使用。疲劳检测方面,目前集中在利用CNN 进行人眼和嘴部状态的识别检测。孙超考虑单一面部特征识别的局限性,提出了基于多模态融合学习的疲劳识别模型,利用算法分别提取眼部特征和嘴部特征,然后利用深度学习的栈式去噪自编码机进行特征提取并且抽象层融合,提高系统疲劳检测的鲁棒性。

目前基于面部识别技术在管制员疲劳识别领域的应用不是特别深入,更多的研究还是围绕面部中的眼部特征展开,并且很少融合当前流行的深度学习方法。2012 年,汪磊等采用 OpenCV开发平台,结合图像二值化和模块匹配技术,对管制员疲劳状况进行识别,取得了不错的检测成果;2015 年,史增鹏首先采用 Adaboost 算法实现对人脸的快速定位,之后选用基于统计学习的人脸检测算法,进一步确定眼睛和嘴巴的矩形区域,最后进行状态识别和预测,疲劳识别成功率达到85%。除此以外,利用完备面部特征进行疲劳检测的研究很少。

2.2.3 基于语音特征识别技术

空中交通管制员的最主要工作是通过陆空通话与机组进行交流,一方面这些通话记录根据中国民航局的要求需要在语音记录设备中保存一段时间,另一方面频繁重复的通话语音中包含了丰富的人体生理与心理信息。具体到个人的海量语音数据为管制员疲劳检测提供了可行性。相较主观检测方法和接触性生理指标检测以及基于面部特征检测,基于语音特征的疲劳检测方法具有采集便利、操作简单、全天候、环境适应性高等优点。因此,基于语音特征识别技术受到了业界的广泛关注。

目前,在研究过程中将语音信号的产生用线性系统模型来近似。这一近似理论认为当分段足够小时,线性系统可以近似表示非线性系统。这类方法(如线性预测、同态卷积等)简单且易于实现,被广泛应用于基于语音特征的疲劳检测之中。A.M.Laukkanen 等研究了疲劳症状与声学变量之间的关系,研究发现,在大声阅读时,咽喉疲劳与平均基频、声音压力值(Sound Pressure Level,简称 SPL)相关;J. Krajewski 等介绍了一种由基频、共振峰、倒谱系数等语音线性特征构成的疲劳特征向量并简要讨论了基于该特征的疲劳状态检测方法的有效性,检测结果的平均准确率为76.5%。

然而语音信号既不是确定性的线性过程,也不是完全的随机过程,而是一个复杂的非线性过程,其中存在着产生混沌的机制。随着混沌理论和分形理论的发展成熟,人们开始利用语音非线性技术进行语音疲劳研究。K.Shiomo针对五大元音信号在相空间内的混浊吸引子轨迹,定性地分析了在非线性动力学模型下语音与人体脑活力(脑力疲劳)之间的关系。随着人工智能技术的迅速发展,一些基于语音信号的智能疲劳识别系统被提出,例如 J.Krajewski 等提出了将语音非线性动力学分析与机器学习分类算法相结合的语音信号疲劳模式识别框架。由此可见,提取具有高准确率的语音疲劳特征是一项挑战性工作,但是基于语音特征识别技术提供了进行管制员疲劳检测的可能性。

与此同时,为了能够更加准确地对比分析管制员疲劳研究进展,管制员疲劳评价方法及相关文献如表3 所示。

表3 管制员疲劳评价方法以及研究文献归纳Table 3 The summary of fatigue detection methods and references of ATCs

3 基于陆空通话的语音疲劳检测方法

通过对语音与疲劳状态的相关性研究,人体疲劳对语音参数的影响主要体现在如下四个方面:(1)疲劳状态下声带、声道、面部肌肉及喉部的松弛,会引起共振峰和声门参数等音质特征的变化;(2)呼吸平缓、肺部气压降低会导致声压降低,从而影响语速和短时能量等韵律特征;(3)疲劳引起的体温变化影响声道的热传导、黏弹性以及声道壁对气流的摩擦,这些会引起语音分形参数等非线性特征参数的变化;(4)疲劳状态自然导致反应力降低,大脑迟钝和发音的反应时间变长,这些导致发音清晰度降低和语速变慢等现象。基于上述研究,分别对四种特征参数的提取进行描述。

3.1 语音疲劳特征参数的提取

3.1.1 韵律特征

疲劳状态下最容易感知的是语音的韵律变化,比如音调、音长、轻重等。韵律的存在使得在忽略字词意义的基础上可以获得一些“超语言学特征”。当前语音疲劳领域最常用的韵律特征包括基音频率、短时平均能量和短时平均过零率。

根据声带震动方式的不同将声音分为浊音和清音,其中清音没有明显的周期性,而浊音需要声带的周期性变化,浊音所引起的声带振动频率称为基音频率。当前对于基音频率的提取方法主要包括短时自相关法、短时平均幅度差函数法、倒谱法的基音周期估计等。短时平均能量是指每一帧语音信号的平均能量,常用来描述相关声压幅度的变化。人体一般随着疲劳感的增加而降低音量,因此在不同疲劳状态下短时平均能量表现出差异。短时平均过零率是指每帧信号通过零值的次数,其可以用来反映清浊音的切换以及有声和无声的语音端点检测。上述韵律特征参数的数学提取方法详见文献[64],限于篇幅,不再赘述。

3.1.2 音质特征

音质是形容语音的一种主观评价指标,常用来阐述语音是否清晰或者纯净等。在语音疲劳检测的研究中,共振峰频率被认为是最主要的音质特征参数,其与说话人的疲劳状态有着密切的联系。

共振峰是指频谱当中能量相对集中的一些频带区域,可以反映声道的物理特性,并且所包含的频率的分布特性反映了语音的音色。把声道比作一条非均匀的管道,当声音经过声道时会产生共振现象,进而使得某些频率能量得到增强,体现在频谱上为该频率的振幅提高,这些共振增强的频率称为共振频率,也称为共振峰。一条语音信号通常会存在4~5 个稳定的共振峰,在语音疲劳的检测中,一般采集前三个共振峰进行研究。常用的共振峰提取方法有两个:倒谱法和线性预测编码法。

3.1.3 基于谱的特征

声音的产生很大程度上受到声道形状的影响,研究表明可以用频域很好地模拟声道的特点。谱特征即被认为是声道形状变化和发声运动之间相关性的体现,已经在语音说话人识别以及情感识别领域有着成功的运用。当前语音识别领域的谱特征如表4 所示。

表4 常见谱特征举例Table 4 Common spectral features

MFCC 模拟的是人耳的听觉系统的处理特点,因此语音识别领域具有良好的鲁棒性和准确性,得到业界的广泛关注,也是目前语音疲劳识别的谱特征运用的主用特征。

根据人耳听觉系统的相关研究,人的听觉系统是类似滤波器组的特殊非线性系统,对不同频率的语音有着不同的灵敏反应,而

mel

频率恰好可以模拟这种特性。其中

mel

频率与普通频率的关系如下:

式中:

f

为语音信号的频率。

MFCC 表示的是语音信号的短时功率谱,其提取过程如图1 所示。

图1 MFCC 参数提取过程Fig.1 The extracting progress of MFCC

3.1.4 非线性动力学特征

随着语音线性特征参数的研究渐渐难以突破,加上混沌理论和分形理论的逐渐兴起,语音的一些非线性动力学特征开始被人们关注,最大Lyapunov 指数、近似熵和分形维数等是最常用的特征参数,如表5 所示。

表5 常用非线性动力学特征简介Table 5 Brief introduction of common nonlinear dynamic characteristics

3.2 语音疲劳识别模型搭建

在获得初始语音特征参数的基础上,模式识别领域的很多算法都可以用于语音疲劳检测的研究,分别从传统识别模型和深度学习识别模型两方面进行介绍。

3.2.1 传统识别模型

应用最广泛的传统识别模型有隐马尔可夫模型(Hidden Markov Model,简称HMM)、支持向量机(Support Vector Machines,简称 SVM)、高斯混合模型(Gaussian Mixture Model,简称GMM)和

k

-近 邻 分 类 模 型(

k

-Nearest Neighbor,简 称KNN)等。

这些传统识别模型在疲劳检测领域有着广泛的应用,取得了很好的研究成果。例如,Shen Z Y等通过对管制员疲劳语音进行小波转换,随后提取改进的分形维数,将其作为疲劳特征并在自建管制员疲劳语音数据库利用SVM 进行识别,得到了良好的识别结果;刘亚威基于眼动追踪技术采集训练了多个眼动指标作为输入,随后使用SVM 进行模型训练,对管制员的疲劳识别率达到了95.68%;传统识别模型都具有良好的分类作用,但是一方面需要研究者前期训练提取语音疲劳参数作为模型输入量,另一方面需要大量的有标签数据进行训练。随着深度学习和机器学习的发展,加上语音数据集的便利采集,人们尝试利用深度学习来自动提取更深层更准确的语音疲劳特征以取代之前的人工训练,从而达到更好的训练识别结果。

3.2.2 深度学习识别模型

大多数的深度学习都是基于人工神经网络(Artificial Neural Networks,简称ANN),因此也可称为深度神经网络。人工神经网络一般只有2~3层,而深度学习网络最多可以达到几百层。近年来,深度学习在众多领域的研究表现都超过了传统的机器学习,各领域研究人员都把目光投向了深度学习,语音疲劳识别自然也不例外。深度学习在语音疲劳识别领域的优势在于,可以省略疲劳特征提取与特征选择的步骤,从特征识别到训练分类的所有环节都可由深度学习算法自主完成。当前在语音疲劳识别领域的深度学习模型主要有卷积神经网络(Convolutional Neural Networks,简称CNN),循环神经网络(Recurrent Neural Networks,简称RNN),自动编码机(Autoencoders,简称AE),迁移学习(Transfer Learning)等。

CNN 处理的一般是类似图片的网状拓扑结构数据,一般由卷积层、池化层、全连接层组成。卷积层的作用是提取更深维度的特征,第一层卷积层可能只能提取一些低级的特征如边缘、线条和角等层级,更多层的网路能从低级特征中迭代提取更复杂的特征。池化层是为了降低卷积层的数据维度从而减少计算复杂度。进过多层卷积和池化后,最终被提取的深度特征展开成二维向量作为全连接层的输入,如人工神经网络一样进行反馈训练。A.M.Badshah 等基于柏林语音情感数据库使用语谱图作为数据输入,将AlexNet 模型预训练的参数迁移到自己构造的卷积神经网络,提高了识别准确率和训练效率。

RNN 专门用于处理时序数据,通过内部记忆机制,可以保留先前的输入数据,因此在对序列的非线性特征进行学习时具有一定优势。其中双向循环神经网络和长短期记忆神经网络(Long Short Term Memory,简称LSTM)是最常见循环神经网络,经常也和卷积神经网络结合使用,在驾驶员疲劳检测和语音情感识别等领域有很好的应用,但是当前在管制员疲劳检测领域还是空白。

然而在实际的应用过程中会遇到由于标记成本或者场景不全等因素造成标记的疲劳语音信号短缺的问题。为了保证良好的识别率,非监督学习和半监督学习方法也引起广泛的研究,其核心算法包括主动学习、自编码机以及迁移学习等。李响等便基于实际应用过程中的标记样本稀缺与测试样本数据分布偏移分布等问题,提出了一种基于迁移学习的半监督疲劳检测方法。首先他们通过迁移学习的特征空间转换,解决源域的有标签样本与目标域的无标签样本数据间的分布偏移和特征维度过高的问题;然后利用半监督学习的方式对无标签数据进行伪标记;最后的平均疲劳识别率达到86.7%,展现了良好的实际应用价值。

4 管制员疲劳检测应用前景展望

近些年航空需求保持着快速增长,基于空域有限的现实条件,一定空域内的航班量必然增加,这给空中交通管制工作带来了新挑战。其中空中交通管制员的指挥能力即小时管制航班量是影响空域容量的重要指标,当前主要根据经验进行评估,然而管制员处于不同的身体疲劳状态下,指挥能力与管制航空风险会有很大变化。与此同时,空中交通管制员的工作性质需要24 h 不间断的进行管制服务,这决定了管制员必须实行倒班制,这与人体正常的生理节律很难达成稳定,再加上工作强度以及压力等因素,这些都致使管制员更易感到疲劳。主、客观的疲劳检测方法成果在此背景下有如下两方面应用方向。

4.1 融入空管自动化系统的疲劳状态实时监测预警模块

通过实时检测管制员的疲劳状态,可以提前规避人为因素导致的风险源,降低航空事故及事故征候发生的概率,提高航空安全管制水平。在一线单位使用的空管自动化系统中嵌入疲劳检测模块,能够依据实时陆空通话数据识别管制员的疲劳状态,及时调整管制员执勤安排,从而从人为因素上尽可能降低管制运行的差错,提升民航的安全运行水平。主要的研究内容包括如下三个方面:

(1)管制员疲劳等级的细化分类:当前的疲劳监测研究都是简单的二分类——疲劳与正常,并不能满足实际疲劳监测工作的要求。

(2)管制员语音疲劳大数据库建立:完备的大数据库对于训练高效准确的管制员疲劳状态监测系统具有重要作用,可在 Shen Z Y 等创建的管制员语音疲劳数据库基础上,建立面向每个管制员的疲劳大数据库。

(3)管制员实时疲劳监测模型优化:如果将疲劳预测种类从当前的两类进一步扩展,对于模型的训练逻辑以及算法选择方面也需要进行进一步优化,以达到实际应用效果。

4.2 融合疲劳分析的管制员智能排班系统

空管一线单位的排班制度往往由带班主任依据个人经验,在考虑班组的搭配水平下随机分配,并且手动排班往往效率低、耗时长,而且很难综合考虑各种影响因素,例如个人值班习惯、疲劳状态、班组管制能力均衡等,因此只能得到可行解,很难达到最优解。具体的当前管制员手动排班管理主要存在的问题有:(1)繁忙期工作负荷大;(2)常规三班倒工作模式导致休息时间不足;(3)劳逸分配不均以及岗位交接班频繁。

以国外sabre 公司给航空公司研发的飞行机组智能排班系统为例,除了考虑传统排班约束条件,例如飞行员执勤期规定,机组资质(包括高原机场、二类机场、特殊机场等),机组能力,飞机衔接,机组带教等,新型系统加入了更多人为因素的约束变量,例如白夜班平衡、人体正常身体疲劳周期等,从而可以在保证劳动力成本优化,工作时间符合规章标准的同时,最大限度地平衡工作负荷,提高飞行安全水平。

当前管制员自动排班系统的理论研究,主要的优化目标是平衡工作负荷,然而具体如何从人为因素角度定量评估工作负荷,这方面的研究较少。管制员疲劳监测对于工作负荷提供了一种人因评价指标,可以通过监测管制员工作过程的疲劳表现而间接进行工作负荷评估,从而可以量化标准,这也为开发融合疲劳分析的管制员智能排班系统提供了可能。

通过实现上述应用场景,可以在不降低航空安全的基础上科学提高空域管制容量,满足快速增长的航空需求,为民航的稳定发展提供坚实的管制基础保障。

5 结束语

空中交通管制员作为支撑民航发展的重要组成,其疲劳状态检测与管理是影响航空安全的重要因素,已经引起了企业界和学术界的广泛关注,也被认为是构建智慧民航、智慧空管的重要环节。本文介绍了人工智能技术大背景下,面部疲劳识别技术和语音疲劳识别技术等前沿研究的最新进展,概述了管制员疲劳检测在空管自动化系统的应用前景,展现了管制员疲劳检测研究的实际应用价值及进一步研究的潜力与必要性。