人工智能应用系统的安全风险主要涉及以下几个方面:
大模型自身的安全问题:这包括开发风险、数据风险、应用风险和基础环境风险。在开发过程中,需要防范代码缺陷和预留后门等问题。数据方面,要小心内部配置错误和弱口令等造成的数据库暴露。应用上,要防止对训练数据投毒、模型篡改、配置篡改等行为。同时,基础环境的安全也不容忽视,如云、API、传统设备漏洞等。
利用人工智能开展网络攻击:人工智能促进了网络攻击手段的更新迭代,攻击者可以瞬时发动海量攻击,打垮已有的网络安全体系。此外,攻击者还可能利用人工智能输出虚假信息,开展网络诈骗,或输出背离主流价值观的内容危害认知安全。
通过攻击人工智能引发的“网络攻击大爆炸”:未来人工智能会普及到更多社会基础设施中,当大模型嵌入关键领域时,一旦遭到攻击,可能会引发连锁反应,导致整个系统的崩溃,进而引发更广泛的安全事件。
为了应对这些安全风险,需要从多个层面入手,包括加强人工智能技术的基础研究、利用人工智能技术赋能网络安全防护、构建大模型安全防护方案等。同时,也需要不断完善相关法律法规,并强化网络安全知识科普,提升全社会的网络安全意识和鉴别能力。