算法界上演“猫鼠游戏”连续剧
医疗手术、无人驾驶、围棋对弈、随手可用的翻译……近十年来，人工智能（AI）取得了巨大进步。而这，要得益于人工神经网络的发展。
这一神经网络的模式，效仿的是我们人类的大脑，在大规模应用时，也被称为深度学习，其能够自己发现数据的模式，而无需明确指令。
深度学习虽然可以在大数据训练中学到正确的工作方法，却也很容易受到恶意干扰。攻击者们通常会通过输入恶意数据来欺骗深度学习模型，导致其出现严重故障。
面对恶意算法欺骗，人工智能如何反击？英国《自然》网络版日前的报道称，现在，计算机科学家正在多方寻找对策，以便让人工智能更安全。
AI：我因“学习”而受伤
“学习”，是人工智能的核心，也是使计算机具有智能的根本途径。
深度学习的主旨，是让计算机去模拟或实现人类的学习行为，以获取新的知识或技能，并重新组织已有的知识结构，使之不断改善自身的性能。
但同时，深度学习算法的不可预测性，使其需要不断挖掘。
对于家庭和个人手机来说，虚拟智能化助理的应用越普遍，恶意攻击就越可能随时发生。有些信息眼看、耳听都没有问题，却能“暗藏杀机”——隐藏着劫持设备的指令。
举例来说，人工智能“看”图像的模式，和人类的肉眼大不一样。通过微妙改变图像的某些部分，再输入后的图片即使肉眼看来一模一样，计算机看起来却大不相同。这就叫对抗性示例。
除了图像，声音也会有同样的问题，只要修改了一个语音片段，人工智能就可能修改成完全不同的语音指令。
无需隐身，也能抓住攻击者
不过，在不久前召开的国际学习表征会议（ICLR）上，美国伊利诺伊大学香槟分校的计算机科学家拿出了一种对抗攻击的方法。
他们编写的算法可以转录完整的音频以及单个片段。如果单个片段转录出来和完整音频中的对应部分不完全匹配，那么算法会立即用一面小红旗做出标记，表明音频样本可能已遭攻击。
在攻击测试中，面对几种不同类型的修改，该算法几乎都检测到了异常情况。此外，即使攻击者已经了解到有防御系统的存在，大多数情况下还是会被抓住。
这套算法拥有令人惊讶的稳定性。谷歌大脑团队的科学家尼古拉斯·卡林尼评价称，其最具吸引力之处在于它的“简单”。另有与会专家认为，随着对抗性攻击越来越常见，谷歌助手、亚马逊和苹果等服务，都应当应用这种防御系统。
然而，攻击和防御之间，注定是一场持久的“猫鼠游戏”。卡林尼表示：“我毫不怀疑有人已经在研究如何攻击这种防御系统了。”
提前演练，对攻击免疫
也有的研究团队在另辟蹊径。
就在本周，澳大利亚联邦科学与工业研究组织下属团队公开了一套算法，其通过效仿疫苗接种的思路，帮助人工智能“修炼”出抗干扰能力。
所谓“疫苗算法”，就是在识别图片时，能够对图片集合进行微小的修改或使其失真，以激发学习模型“领会”到越来越强的抗干扰能力，并形成相关的自我抗干扰训练模型。经过此类小规模的失真训练后，最终的抗干扰训练模型将更加强大，当真正的攻击到来之时，机器学习模型将具备“免疫”功能。
这其实是针对深度学习模型专门打造的训练。因为它会“学习”，所以也会学着纠错。
邮件过滤器：效果不尽人意
邮件过滤器真的已经很努力了，但效果并不尽如人意。
这是因为防御与攻击总是相伴相生。随着漏洞越来越多的被察觉，人工智能拥有更多的防御能力，恶意攻击也在不断进阶。
在4月召开的美国系统和机器学习大会（SysML）上，德克萨斯大学奥斯汀分校的计算机科学家们揭示了机器学习算法在文本理解方面的漏洞。
有些人认为文本不容易被攻击，因为恶意欺骗可以对图像或声音波形进行微调，但改变任何文字都会被察觉。可科学家告诉我们不是这样。
恶意攻击会瞄准一些同义词，文本含义不发生改变，但深度学习算法却可能因此而判断错误——垃圾邮件成了安全的，假新闻被合法推送。
科学家们演示了一套恶意攻击程序，它甚至会检测文本分类器在判断是否含有恶意时，最依赖的是哪些词语。接着，它挑选出关键词的同义词，替换，然后飞速开始测试下一个关键词。在这套算法攻击下，过滤器的准确率急剧下降。
不过，将这些手段公诸于众，究竟可以提高防御能力，还是会加剧攻击手段，目前仍有争议。此前，已经有AI实验室拒绝公开一种攻击算法，因为担心它被滥用。
（科技日报北京7月2日电）
（责任编辑：王蔚）
*免责声明： 凡本网注明“来源：XXX(非神州瞭望网)”的作品，均转载其它媒体，转载目的在于传递更多信息，并不代表本网赞同其观点和对其真实性负责。若内容涉及投资建议，仅供参考勿作为投资依据。本网站无法鉴别所上传图片或文字的知识版权，如果侵犯，请及时通知我们，本网站将在第一时间及时删除。
-
- AI应用场景多元化，落地与挑战中寻找产业AI化的最优解
-
10月26日,《2021-2022中国人工智能计算力发展评估报告》(以下简称:报告)在AICC2021人工智能计算大会上发布,旨在通过宏观经济、技术成熟度、AI劳动供给、行业及地域四大方面综合考量和评估我国
2021-11-01
-
- 用AI赋能智能制造转型升级
-
中业科技成立10余年来逐渐发展成为一家NLP（自然语言处理技术）及应用的人工智能公司，并在智能制造领域取得突破。未来是AI的天下，AI不仅能用于互联网社交，还能在物联网和制造业等领
2021-10-25
-
- 技术与场景深度融合 谱就AI大时代繁荣生态图谱
-
锁定重大产业方向，设立以头部企业为依托的开放创新平台，让他们在国家人工智能创新体系中发挥引领作用，是国家新一代人工智能开放创新平台设立的关键诉求。 随着国家新一代人工智能
2021-10-21
-
- 着力推动虚拟现实产业高质量发展
-
新华社南昌10月19日电 2021世界VR产业大会云峰会开幕式19日在江西南昌举行，国务委员王勇出席并致辞。他强调，要以习近平新时代中国特色社会主义思想为指导，全面贯彻党中央、国务院决策
2021-10-20
-
- 世界VR产业大会发布中国虚拟现实产业重要成果
-
10月19日，由工业和信息化部、江西省人民政府主办的2021世界VR产业大会云峰会在江西南昌开幕。本次大会以VR让世界更精彩融合发展创新应用为主题，设立奥地利和韩国两个海外分会场，吸引
2021-10-20
-
- 传统行业想获得AI加持，为何这么难
-
AI技术要实现应用，首先数据要达到一定的体量，此外算力也要能支持大规模的模型训练，而后算法方面需要达到一定的精度，端侧算力也要具备一定的推理能力。 之所以目前只有消费互联网
2021-10-18
-
- 山东移动九大模型助力精准“打猫”
-
近年来，山东移动将防范打击电信网络诈骗作为我为群众办实事的具体举措，持续深化开展春雷断卡行动，推动构建清朗的网络空间环境。 今年以来，依托九大模型精准识别，山东公司已累计
2021-09-29
-
- 敲黑板啦，关于5G网络的重要提示
-
敲黑板啦~~随着技术更新迭代，越来越多的人开始用5G手机，请注意：使用5G手机却没有打开5G开关，那用的仍旧是4G网络哦~ 这样的设置步骤，你一定要清楚明了 对绝大多数人来说，睡觉前做的
2021-09-29
-
- 2021国家机器人发展论坛在深圳召开
-
2021年9月24-25日,以创新湾区智造,跨界融合发展为主题的2021国家机器人发展论坛在深圳隆重召开。此次国家机器人发展论坛的举办是学会积极响应中国科协关于开展科创中国品牌工作号召的具体
2021-09-29
-
- 知道创宇入选第九届CNCERT国家级网络安全应急服务支撑单位
-
9月27日下午，第九届CNCERT网络安全应急服务支撑单位授牌仪式在世界互联网大会的互联网之光博览会举办，知道创宇创始人兼CEO赵伟等13家国家级支撑单位代表出席此次授牌仪式。 知道创宇在
2021-09-29