关注 | AI技术为安全治理提供“新工具箱”
创始人
2024-01-28 20:17:32
0

原标题:关注 | AI技术为安全治理提供“新工具箱”

“数字化进入新阶段,我们面临着全新的安全挑战。”1月18日,中国社会科学院大学数字中国研究院举办“数字时代安全科技价值”专题研讨会,中国社会科学院大学数字中国研究院执行院长吕鹏在会上说,“安全风险呈现出快迭代、高智能、全覆盖的新特点。尤其是有了生成式人工智能以后,关注人工智能的安全风险更加紧迫。”

研讨会上发布了《数字时代安全科技价值报告》。该报告指出,未来,安全科技将成为公共品,与人工智能(以下简称AI)并列成为两项通用技术。具体来看,AI作为核心关键技术,将成为未来生产力的“发动机”。安全科技将作为“方向盘”,把新兴科技控制在向善的道路上。新的安全技术发展得越好,个人与社会为数字化转型所付出的代价也将越小。

安全科技将成为公共品

“当人们提到安全科技时,想到的往往是防病毒软件和防火墙软件。但全球安全科技的版图和技术工具已远远超过这个范围。”吕鹏介绍,“在网络安全、系统安全之外,还有数据安全、终端安全、AI安全、云安全等技术门类,也包括区块链、隐私计算、量子计算等前沿技术。”

浙江工业大学网络空间安全研究院院长宣琦指出,本质上,安全科技是一种伴生技术。它永远在面向新科技、新发展。比如,伴随AI发展提出智能安全,针对生物科技提出生物安全。新技术的发展有时非常快速,所以安全技术的发展和创新也同样在高速进行。

中国社会科学院科学技术和社会研究中心研究员段伟文认为,未来,安全科技必将成为公共品。整体来看,安全科技具有“压舱石”与“助燃剂”的双重价值:守住技术的安全底线,防御外部风险隐患,让技术“难作恶”;提高技术的安全上限,降低技术运行成本,让新技术得以规模化落地,让产业在安全的基础上“跑起来”。

吕鹏举例说明安全科技在产业发展中的应用。“北京中铁建工物资有限公司和蚂蚁蚁盾共建产业风控平台,用数据智能防范上下游的协作风险,产生了较好的效果。”吕鹏说,“工作效率提高了50%以上,产业授信额度的评定科学化、可量化程度也得到大幅提高。风险预测、预警、事后风险处置等都更好更精准。”

AI安全风险主要分三类

2023年,AI大模型安全风险凸显。AI技术在带来强有力的新工具的同时,也带来数据隐私、技术滥用、失控等安全问题。“加强对AI这一新兴技术的潜在风险研判和防范,确保AI安全、可靠、可控,已成为产业发展的核心要素。”吕鹏说。

在段伟文看来,AI安全风险目前来看主要可以分为三类:内生风险、衍生风险、外生风险。

在内生风险方面,AI存在技术本身的脆弱性、对数据的依赖性等自身缺陷带来的安全问题。比如,如果给数据库不断投喂带有特定价值观的数据,会对AI系统形成严重干扰,产生“数据偏见”“观点霸权”等问题。衍生风险是指AI系统因其自身脆弱性被利用或不恰当使用,可能引发其他领域的安全问题。例如生成虚假新闻、利用深度合成伪造进行诈骗等,这涉及人身安全、隐私保护等一系列社会治理挑战。外生风险也就是面向AI系统的外部网络攻击。

《数字时代安全科技价值报告》认为,当前,安全风险变得更加复杂隐蔽、强对抗、更具破坏力,将AI驱动的业务风控系统建设得更强、更智能,更好地应对大规模网络攻击与入侵,成为行业健康发展的必需。过去几年,通过应用AI来提高安全技术的效率和成功率,已经成为技术领先企业的常态。业界开始推出“大模型质检”类安全产品,成为推进大模型安全健康发展的方式之一。

“快”“慢”结合维护大模型安全

吕鹏指出,AI技术发展给安全治理增加挑战的同时,也形成AI安全治理的“新工具箱”。

谈到“用AI对抗AI”的具体产业实践,他介绍,一方面,可以使用智能对抗技术向大模型“投射问题”,观察模型生成的回答,以此实现对AI生成图片、视频等多模内容进行“真伪”辨别和安全性检测。另一方面,通过智能化风控技术,可以帮助大模型拦截外界的恶意提问,确保外部恶意诱导无法传入大模型。同时,对生成的回答内容能够进行风险过滤,保障大模型上线后从用户输入到生成输出实现整体安全防御。

整体来看,通过从已有数据中学习,AI可以更快地识别攻击的模式和趋势,从而预测未来攻击,并配置自动响应威胁功能,在更快的时间内对抗网络威胁。

吕鹏表示,维护大模型安全既要“快”也要“慢”。大模型安全防御方面要“快”,要能快速检测、查杀病毒,确保服务无毒害。大模型安全可信方面要“慢”,要能长远地、体系化地保证整个系统环境的可控、可信。

来源:科技日报

天津数港

数据驱动智能,创新引领未来

编辑:王玢 李向飞

审核:邓晶龙

相关内容

热门资讯

重庆奔速彩印取得纸盒粘角机专利... 金融界2025年6月13日消息,国家知识产权局信息显示,重庆奔速彩印有限公司取得一项名为“一种纸盒粘...
储能软件大比拼:谁是新能源高效... 随着新能源产业的蓬勃发展,储能技术作为破解新能源发电不稳定性的重要钥匙,其科学配置与高效利用正成为业...
5G基站覆盖所有县级行政区提升... 在我国广袤的土地上,一项具有里程碑意义的通信工程正稳步推进——5G基站全面覆盖所有县级行政区,这一举...
淘宝京东流量见顶,唯品会靠奢品... 出品|搜狐科技 作者|汉雨棣 编辑|杨锦 2025年的618异常冷清。随着“满减”和“凑单”的退出,...
工商银行获得发明专利授权:“人... 证券之星消息,根据天眼查APP数据显示工商银行(601398)新获得一项发明专利授权,专利名为“人机...
大唐移动起诉小米,两家中国公司... 2025年6月12日,慕尼黑地方法院的一名发言人证实,大唐移动在德国法院对小米发起了三项专利诉讼。 ...
原创 烧... 烧结银膏领航者再次引领创新:柔性烧结银开启功率模组市场新纪元 一 功率模组市场现状剖析 在现代工业与...
龙岗区发布31个政务低空场景,... 深圳商报·读创客户端记者 刘宇峰 6月13日上午,深圳市龙岗区“我帮企业搭场景”系列活动之“新芽”...
讯飞医疗智医助理创新赋能基层卫... 作为我国医疗卫生体系的基石,基层医疗卫生机构以全国最广的覆盖网络和超半数的诊疗服务量,承担着守护亿万...
创新实施中小学人工智能通识教育... 习近平总书记在中共中央政治局第二十次集体学习时强调:“推进人工智能全学段教育和全社会通识教育,源源不...
新液冷”破题“智算热”,曙光数... “芯片每升温10℃,运行寿命减半”。在AI算力需求激增、智算新基建如火如荼的背景下,数据中心能耗挑战...
主业不振,老凤祥跨界布局AI眼... 6月11日,老牌金店老凤祥(600612)参加“老博会”,其研发的首款后台搭载豆包大模型的AI智能眼...
好书推荐 | 豆瓣9.0高分科... 豆瓣高分 科普书单 上到天文 码住慢慢看!! 下到地理 没有人在深夜刷到宇宙奥秘、生物冷知识时, ...
“未来”啥样?雄安未来城市场景... 中新网 雄安6月13日电 题:“未来”啥样?雄安未来城市场景体验周上的“黑科技” 作者 裴国荣 韩冰...
通威组件效能和国际合作同步推进 转自:中国能源报 当前,光伏行业竞争正在从比拼功率和成本,转向对发电收益曲线匹配度、全生命周期经济...
深圳光明:社区居民“出题” 科... 6月12日,记者在深圳市光明区光明社区党群服务中心看到这样一幕:一位人工智能专家带着集成了10余项A...
富奥股份:机器人需要热管理,公... 证券之星消息,富奥股份(000030)06月13日在投资者关系平台上答复投资者关心的问题。 投资者提...
市工信局组织开展人工智能专题讲... 为推动人工智能技术(AI)在工业和信息化领域的应用,提升机关干部AI应用能力和数字化履职能力,6月1...
上海老博会:人形机器人“吸睛”... 上海6月13日电 (记者 郑莹莹)6月11日至13日在沪举办的2025上海国际养老、辅具及康复医疗博...
百迅轴承取得一种组合式轴承专利... 金融界2025年6月13日消息,国家知识产权局信息显示,宁波百迅轴承有限公司取得一项名为“一种组合式...