发布时间:2020-04-10 10:53 原文链接: 人工智能时代杀毒软件“黄金年代“是否已过?

   在人工智能时代,属于杀毒软件的“黄金年代“是不是已经过去了?

  人工智能作为引领新一轮科技革命和产业变革的颠覆性技术,已经渗透到了社会生活的方方面面。可在新技术为人们生活带来种种便利的同时,其带来的的安全风险也备受关注,诸如数据泄漏、算法偏见、算法漏洞等问题,给经济和社会安全带来了多种挑战。

  “安全是发展的前提,确保人工智能安全、可靠、可控,才是守卫人工智能稳健发展的根本。”瑞莱智慧CEO田天说。

图片来源于网络

  4月8日,这一来自清华大学人工智能研究院的创业团队推出了国内首个针对算法模型本身安全的检测平台——RealSafe人工智能安全平台。作为人工智能时代的“杀毒软件”,该平台可提供从测评到防御完整的解决方案,快速缓解对抗样本攻击威胁。

  人工智能诞生60多年来,技术取得了长足的进步,但仍存在着模型缺陷、算法不可解释性、数据强依赖性等“软肋”。

  随着数据量、算力的大幅提升,未来人工智能技术的应用场景会日益增多,并且将从语音识别、人脸识别等领域逐步延伸向金融决策、工业生产运营、医疗诊断、自动驾驶等更高价值的应用领域,这将对人工智能技术的安全性、可靠性提出更高要求,提升算法安全性成为新一轮人工智能智能产业升级下的新方向。

  2018年,中国信息通信研究院安全研究编制的《人工智能安全白皮书》中提到,“算法安全”是人工智能六大安全风险之一,并着重指出了“对抗样本攻击诱使算法识别出现误判漏判“这一算法模型缺陷为算法安全的重要风险项。

  田天介绍,对抗样本是机器学习模型的一个有趣现象,但通过在源数据上增加人类难以通过感官辨识到的细微改变,可以让机器学习模型接受并做出错误的分类决定。

  例如,在一张“阿尔卑斯山”的图片上加上一些人眼无法察觉的噪音,正常情况下肉眼仍然能判断这张图显示的是山峰,但是图像分类模型却会将它错误识别为狗。

  经过不断的升级演化,对抗样本攻击已经不仅仅停留在数字世界,针对物理世界的攻击也开始出现。如在路面上粘贴对抗样本贴纸模仿合并条带,误导特斯拉自动驾驶汽车拐进逆行车道;佩戴对抗样本生成的眼镜,轻易破解手机面部解锁;胸前张贴对抗样本贴纸即可实现“隐身”等。

  “在网络安全时代,网络攻击的大规模渗透倒逼了杀毒软件的诞生。”田天说,“针对算法漏洞这一‘新型病毒’,人们同样需要开展安全评估评测能力建设,打造人工智能时代的‘杀毒软件’,以技术手段为支撑,切实规避人工智能算法缺陷可能带来的安全风险。”

  依托于清华大学人工智能研究院及自身多年来的技术积累,瑞莱智慧研发的人工智能安全平台,内置了先进的攻防算法模型,为政府、企业等提供安全评测与安全防护,高效应对算法威胁。

  相较于常见的开源工具需要自行部署、编写代码,这个“杀毒”平台只需要使用者提供相应的数据,就能够在线完成评估,降低了算法评测的技术难度。

  该平台支持五种去除对抗噪声的通用防御方法,可对输入数据进行自动去噪处理,破坏攻击者恶意添加的对抗噪声。经测试,部分第三方人脸对比应用程序接口在使用平台的防御方案加固后,安全性可提高40%以上。

  “推出安全检测平台是规避人工智能风险的一条路径,未来我们还需要联合各界力量,共同推动人工智能安全相关的国家标准、行业标准、联盟标准的制定,为人工智能产品安全评估评测的统一参考。”田天最后说。

相关文章

赛默飞宣布与英伟达建立战略合作伙伴关系,利用AI推动科学仪器的发展

赛默飞世尔科技公司(TMO),全球领先的科学服务提供商,宣布与英伟达公司建立战略合作伙伴关系,以大规模推动基于人工智能(AI)的解决方案和实验室自动化。该合作将利用英伟达人工智能(AI)平台和赛默飞世......

工信部等八部门启动“人工智能+制造”专项行动

中国工信部、中央网信办、国家发改委等八部门7日对外发布《“人工智能+制造”专项行动实施意见》,明确到2027年,中国人工智能关键核心技术实现安全可靠供给,产业规模和赋能水平稳居世界前列,建成全球领先的......

研究提出一种基于人工智能技术的冰湖制图框架

兴都库什—喀喇昆仑—喜马拉雅(HKH)地区的冰湖变化,是气候变化的重要指示器。由于该地区地形极为复杂,加之常年受到云层遮挡、地形阴影以及季节性积雪覆盖的影响,这些因素显著制约了冰湖自动制图的精度,使得......

AI工具使用导致科研成果数量骤增质量下滑

一项近日发表于《科学》的研究指出,像ChatGPT 这样的人工智能(AI)写作工具正在大幅提升科研生产力。研究人员借助AI工具使论文发表数量最多增加了50%。但这也有不利的一面,AI生成的文......

24家科技AI巨头已加入美国“创世纪计划”

由美国特朗普政府主导“创世纪计划”(GenesisMission)近日新增24家人工智能领域企业为合作方,包括英伟达、AMD、OpenAI、微软、亚马逊AWS及谷歌母公司Alphabet等。目前“创世......

教育部办公厅关于公布第二批中小学人工智能教育基地名单的通知

教育部办公厅关于公布第二批中小学人工智能教育基地名单的通知教基厅函〔2025〕32号各省、自治区、直辖市教育厅(教委),新疆生产建设兵团教育局:根据《教育部办公厅关于开展第二批中小学人工智能教育基地推......

中央广播电视总台发布2025年度国内、国际十大科技新闻

中央广播电视总台12月24日发布2025年度国内、国际十大科技新闻。2025年度国内十大科技新闻是:1.我国建设三大世界级科技创新中心;2.国务院印发《关于深入实施“人工智能+”行动的意见》;3.天问......

科大讯飞新设子公司含AI及集成电路业务

近日,山东沂讯信息科技有限公司成立,法定代表人为柳升华,注册资本5000万元,经营范围包括人工智能公共服务平台技术咨询服务、集成电路设计、人工智能基础软件开发等。企查查股权穿透显示,该公司由科大讯飞全......

“人工智能+”知识产权公共服务应用场景建设名单发布

国家知识产权局办公室关于发布“人工智能+”知识产权公共服务应用场景建设名单的通知国知办函服字〔2025〕1040号各省、自治区、直辖市和新疆生产建设兵团知识产权局:为贯彻落实《国务院关于深入实施“人工......

北京市“人工智能+”能源高价值应用场景评审结果

北京市发展和改革委员会发布关于北京市“人工智能+”能源高价值应用场景评审结果公示。根据《国家能源局综合司关于组织开展“人工智能+”能源试点工作的通知》(国能综通科技〔2025〕168号)相关要求,我委......