2020年度全球十大人工智能治理事件

当前，新一代人工智能技术在全球蓬勃兴起，迅猛发展，与大数据、区块链、5G等新技术相互融合、相互因应，为经济社会发展尤其是数字经济发展注入新动能，正在深刻改变社会生产生活方式。与此同时，如何在新技术变革浪潮中始终立于主动，实现人工智能等前沿科技领域有效治理，确保其持续健康发展，也随之成为一个国际国内、社会各界都广泛关注的重大现实问题、重大时代议题。

人工智能治理是复杂性、系统性很高的社会议题，涵盖政策、技术、产业、法律、传播、伦理、安全、国际关系、意识形态等诸多领域。与之相应，对国际国内人工智能治理标志性事件开展研究，也必然需要各界协同，共同推动。

1.AI成“监工”：算法下外卖骑手挑战交通规则，“助手”可能变“杀手”

案例描述：为提高配送效率，一些外卖平台研究开发了实时智能配送系统。借助AI算法，平台可以最优化地安排订单，也能给骑手规划最合理的路线。但出于平台、骑手和用户三方效率最大化的目标，AI算法将所有时间压缩到了极致，为了按时完成配送，骑手们只能用违法去挽回超时这件事。超速、闯红灯、逆行……外卖骑手挑战交通规则的举动是一种逆算法，是骑手们长期在系统算法的控制之下做出的不得已的劳动实践，而这种逆算法的直接后果则是——外卖员遭遇交通事故的数量急剧上升。同时，这也意味着，在很多人类劳动者和AI的协作专业工作中，人类将处在被管辖和被监督之下。

点评：当AI算法嵌入到人类社会的方方面面，人类在不知不觉中已经作为一个数据被算法研究。AI技术的应用应有利于人类社会良性发展，需要运用法律和道德对AI技术的研发和应用进行约束，正确引导企业的价值观。在人工智能普及的时代，也应充分保护劳动者的合法权益，人工智能算法的应用在追求效率和利益之外，不可忽略人性与理性，不能让机器的冰冷碾压人性的光辉。

2.人工智能可以翻译大脑想法将大脑信号转化为文本数据，“读懂意识”让隐私无处遁藏

案例描述：加州大学JosephMakin博士在《自然神经科学》杂志上发表了研究，其开发了一个系统，可以将大脑活动转化为文本数据，单句错词仅3%。

实验参与者被要求多次朗读50个固定句子，研究者们跟踪了他们讲话时的神经活动。这些数据随后被输入到机器学习算法中，系统能将每个口述句子的大脑活动数据转换为数字字符串。不过，由于通过脑机接口翻译大脑想法的技术对人们的隐私构成了强大的威胁，因此也一直伴随着不小的争议。

点评：机器人实际上是人所创造出的客体，但在未来社会它可能会同人这个本体相脱离，成为本体的存在，而且反客为主，反过来束缚、支配、乃至压抑人类。我们这些站在食物链顶端的人类会在不久的将来面临前所未有的危机和挑战，比如算法开始替代人类作出选择，一些原来只有人类能做的工作将会被机器所取代。

3.全國首例：法院认定人工智能生成文章构成作品，拥有著作权

案例描述：2020年1月，广东省深圳市南山区人民法院一审审结原告深圳市腾讯计算机系统有限公司诉被告上海盈某科技有限公司侵害著作权及不正当竞争纠纷一案，认定人工智能生成的文章构成作品。此案系全国首例认定人工智能生成的文章构成作品案件。该案明确了人工智能生成物的独创性判断步骤，并在如何看待人工智能生成物的创作过程以及相关人工智能使用人员的行为能否被认定为法律意义上的创作行为的问题上做出了探索，认定人工智能生成的文章构成作品，对于今后同类型案件的审理有一定的借鉴意义。

点评：随着社会发展，未来人工智能在各行业的应用、人工智能的归属权、法律是否将其定义为一个法律主体，将是很重要的一个争执点。

4.欧美、韩国相继出台AI治理新规，严格限制、甚至禁用相关人工智能技术在某些场景的发展和应用

案例描述：欧盟委员会发布《人工智能白皮书》，希望通过不断实现科学突破，维护欧盟的技术领先地位并确保新技术在尊重人权的基础上，改善人们生活。当前欧洲采取了一致的方法来应对AI对人类和社会道德的影响，并思考了如何利用大数据进行创新。欧盟正在考虑禁止在公共场所使用人脸识别技术长达五年，以便有时间研究如何防止这种技术被滥用。欧盟委员会表示，在为期3至5年的禁令期间，“可以确定和制定评估这一技术的影响和可能的风险管理措施的健全方法”。欧盟文件称，对于安全项目以及科技研发活动，禁令可能会有例外。该文件还建议，对人工智能的开发者和用户都施加一些义务，欧盟国家的政府应该指定监管机构来监管新规则。

韩国科学技术信息通信部2020年11月27日与情报通信政策研究院（KISDI）共同发布“国家人工智能伦理标准”，提出理想的人工智能开发和运用方向，指出人工智能需以人为中心。在开发和运用人工智能的过程中，需遵守维护人的尊严、社会公益和技术合乎目的这3大原则。

此外，美国东海岸城市波士顿通过了禁止面部识别技术用于市政用途的投票。这是自2019年5月旧金山颁布此项禁令以来，采用此项禁令的第二大美国城市。该法令获得一致通过，这条法令将阻止城市使用面部识别技术或获得使用该技术进行监视的软件。此后，俄勒冈州波特兰、缅因州波特兰也均通过了类似禁令以限制该技术在政府部门的应用。

点评：人工智能治理的核心要素中基本价值观、治理体系、参与者、治理对象以及效果评价五个方面至关重要。很多治理问题可以通过技术本身来解决，目前人工智能发展面临的最大挑战是：人工智能技术发展太快，而治理准则作为一种社会体系，其发展有其程序，又是缓慢的，因此，我们需要“敏捷治理”。人类应一同寻找人工智能共同的准则和规则，引导人工智能的健康发展，为人类造福。

5.AI向善，技术预警独居老人水表及校园暴力行为

案例描述：“水表”和“老人安全”看似没有关联，但在上海市长宁区江苏路街道“一网统管”平台，隐藏背后的逻辑清晰可见——当独居老人家中超过12小时用水不足0.01立方米时，系统会判断老人家中有事，并及时向居委会预警。一个小小的设计，没有像摄像头那样不得不关注老人过多的隐私，也无需大量的经济和人力投入，就能实现对老年人的关爱，甚至关键时刻能挽救老人的生命。

北京某科技公司生产的校园暴力AI防控语音侦测设备，可以作为视频监控的弥补而出现在校园安全解决方案当中，为平安校园再添新色彩。该产品通过AI音频识别，全天候监控异常声音，自动报警及声光驱离等技术，重点勘察校园视频监控“死角”，在校园霸凌事件发生中及时干扰、阻止，制止校园暴力的发生。

点评：AI技术的落地应用，在一定程度上可有效提升人们生活的安全性，但也要考虑到无限的监听会引发隐私及对其他问题的担忧。

6.美国科技巨头依据自身道德判断，加强企业自律及对人工智能技术的监管

案例描述：据外媒消息，IBM将不再提供、开发或研究面部识别技术，并表示“IBM坚决反对并且不会容忍将任何面部识别技术用于大规模监视、侵犯基本人权和自由或与我们的宗旨不符的任何行为。”此外，亚马逊、微软也均表态要支持种族平等，叫停人脸识别：亚马逊声明暂停向警方提供人脸识别技术一年时间；微软也表态停止向警方销售人脸识别软件，直到有相关国家法律出台。

欧盟有关方面和微软、IBM等科技巨头共同签署了《人工智能伦理罗马宣言》，讨论如何规范人工智能的社会影响，这是欧盟推动全球数字经济监管新标准的最新举措。与美国不同，在数字经济和人工智能领域，欧盟采取的是先规范后发展的路径。《人工智能伦理罗马宣言》指出，人工智能技术应尊重个人隐私，以可靠而无偏见的方式工作，考虑所有人的需求，并以透明方式运作。这些表述显示欧盟担忧人工智能的负面影响，认为人工智能系统尚处于研究阶段，其做出的决定往往难以预测。

Google启动了800多名员工的初始“技术道德”培训，并还针对AI原则问题发现了新的培训。Google最近发布了此培训的一个版本，作为面向客户的Cloud团队的必修课程，已有5，000名Cloud员工参加了该培训。这些员工提出了一些关键问题来发现潜在的道德问题，例如AI应用程序是否会导致经济或教育上的排斥或造成身体、心理、社会或环境伤害。

点评：我们需要思考AI与企业治理的关系，AI伦理如何嵌入到商业运行之中。谁来做企业开发AI算法时的最后判断者？我们应该从哪个环节切入，思考人工智能所导致的结果。

7.自动驾驶服务进入快车道，“无人车”行驶背后的权责归属引关注

案例描述：據不完全统计，我国有融资信息的无人驾驶相关企业超过70家，融资金额高达数百亿元。此外，我国共有超过1.2万件与“自动驾驶”或“无人驾驶”相关的专利，其中于2019年新申请的专利超过3000余件。2020年10月，百度官微发布，自动驾驶出租车服务在北京经济技术开发区、海淀区、顺义区等地全面开放，数十个自动驾驶出租车站点，不需要提前预约，直接下单就能免费试乘自动驾驶出租车服务。2020年6月，滴滴首次面向公众开放了无人驾驶服务。目前中美两地已有近400人的团队，已获得北京、上海、苏州、美国加州等地路测资格。

点评：随着当代人工智能技术的快速发展和广泛应用，智能物联网技术使得对“物的流动”的实时管理成为可能，极大地提高了效率、降低了人力成本。同时，智能物联网技术也为城市管理水平的提高提供了一条可行的技术路径，其核心是“感知化”“互联化”和“智能化”，例如，城市交通管理、共享单车管理以及无人驾驶出租车管理等，将商业、运输、通信、能源等城市运行的各个系统整合为“系统之系统”。

8.人工智能技术突破现有边界，具备“自主意识”，可实现独立研发、自我修复等功能

案例描述：美国麻省理工学院（MIT）科学家在最新一期《细胞》杂志撰文称，他们新研制出的一种深度学习人工智能（AI），鉴定出一种全新抗生素。实验室测试表明，这种抗生素能有效杀死多种世界上最麻烦的致病细菌，包括一些对所有已知抗生素耐药的菌株。

美国佛蒙特大学计算机科学家和塔夫茨大学生物学家共同创造出100%使用青蛙DNA的可编程的活体机器人Xenobot，这种机器人的体长仅0.04英寸（约1毫米），能按照计算机程序设计的路线移动，还能负载一定的重量，携带药物在人体内部移动。Xenobot具有自我修复功能，当科学家把它们进行切割时，机器人会自行愈合并继续移动。佛蒙特大学表示，这些是“完全新的生命形式”。“它们既不是传统的机器人，也不是已知的动物物种。它是一类新的人工制品：一种活的可编程生物。”

点评：人工智能不但能替代一些传统工作，提升效率、促进企业发展，同时也可以做一些单靠人工无法进行的工作，并且为人类未来的幸福生活提供了新的可能性。但我们要注意它的强大性和不可解释性也带了一些风险。这个案例体现了新技术的可能性，但在技术早期探索时，我们也要做一个嵌入式伦理的研究与控制。

9.湖南岳阳警方破获AI犯罪案，技术犯罪仍要惩罚人

案例描述：湖南省岳阳市岳阳楼公安分局联合市局网技支队破获了一起利用人工智能语音机器人帮助网络犯罪案，抓获犯罪嫌疑人19人，查获了大量作案电脑和手机，扣押涉案现金100余万元，冻结涉案资金1000余万元。该团伙利用“AI智能语音机器人”对非法获取的大批量手机号码进行拨打，通过“AI智能语音机器人”筛选后，将正在炒股或者有炒股意向的受害人拉入预先建立的虚假炒股微信群，进而实施诈骗。目前，包括黄某在内的12名主要犯罪嫌疑人已全部被公安机关依法刑事拘留，7人被依法治安拘留，相关案情正在进一步深挖之中。

点评：AI技术具有双面性，一方面能大幅度减少人力成本，提高工作效率，另一方面也可能为不法分子利用。本例案件采用的技术并不复杂，主要是通过AI智能语音机器人来替代原来的真人诈骗犯，再用真假难辨的虚拟机器人进行智能分析和诱骗。我们需要提高AI应用的准入门槛，进行有效的身份鉴别。同时也要对AI技术的新进展进行持续的关注和跟踪，以及对潜在的风险如AI偏见、AI换声换脸等保持一定的警惕性，避免技术被不法分子所利用，危害社会发展。

10.人工智能首次控制美国军用系统，或将开启算法战新时代

案例描述：2020年12月15日，美国空军在加利福尼亚州首次成功使用人工智能副驾驶控制一架U2侦察机的雷达和传感器等系统，这是人工智能首次控制美国军用系统，将开启算法战的新时代。从三年前开始，美国空军开始大步向数字化时代迈进。最终开发出军用人工智能算法，组建了五角大楼第一批商业化开发团队，编写云代码，甚至还建立了一个战斗云网络，通过该网络，美军以极高的机器响应速度击落了一枚巡航导弹。

点评：算法战的出现意味着人类军事战争一个崭新阶段的来临，也意味着数字化军事战争的一种形态。在军事战争中，武器，作为人类肢体和智力延伸的工具，一直是战争胜负的决定性变量。热兵器对冷兵器的替代，是武器对人类肢体和体力的延伸；算法和无人机对人的肢体和体力的替代，则是武器对人类智力的延伸，是人类战争的第二次本质跃升，并将从此改变战争的诸多属性！

（编辑/高纬时）