网站大量收购闲置独家精品文档,联系QQ:2885784924

OWASP LLM应用程序十大安全风险(2025).docx

OWASP LLM应用程序十大安全风险(2025).docx

  1. 1、本文档共73页,可阅读全部内容。
  2. 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
  3. 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载
  4. 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多

1

项目负责人致信

OWASP的《大规模语言模型应用Top10》项目始于2023年,是一项由社区共同推动的工作,旨在突出并解决与人工智能应用相关的安全问题。自项目启动以来,LLM(大规模语言模型)技术已在多个行业得到广泛应用,随之而来的风险也在不断增加。随着LLM技术不断渗透到客户互动、内部运营等各个领域,开发人员和安全专家不断发现新的安全漏洞,并探索相应的解决方案。

2023年发布的版本在提高公众对LLM安全问题的认识、为安全使用LLM奠定基础方面取得了显著成效。同时,我们也积累了更多经验。在2025年版本的更新中,我们与来自全球、具有多样化背景的贡献者进行了紧密合作,共同完善这一名单。整个过程包括头脑风暴、投票以及来自直接参与LLM应用安全的专业人士的反馈。每一位贡献者的意见都对确保本次发布的全面性和实用性起到了至关重要的作用。

2025

2025年版本的主要更新

2025年版本的更新反映了我们对现有风险的更深层次理解,并纳入了LLM在实际应用中的必威体育精装版重要进展。例如,“无限制消耗(UnboundedConsumption)”这一概念扩展了传统的“拒绝服务(DenialofService)”风险,不仅包括资源管理方面的风险,还涵盖了在大规模LLM部署中可能出现的意外成本问题。

“向量和嵌入(VectorandEmbeddings)”部分回应了社区对于保障检索增强生成(RAG)和其他基于嵌入技术的安全需求。这些技术已成为支持模型输出的重要技术实践。

我们还新增了“系统提示泄露(SystemPromptLeakage)”这一风险项,以应对在实际应用中广泛存在的安全隐患。这一问题引起了社区的高度关注,许多应用曾假设提示信息是安全隔离的,但近期的事件表明,开发人员不能再安全地假设这些提示中的信息能够必威体育官网网址。

2

此外,“过度自主性(ExcessiveAgency)”这一风险项得到了扩展,考虑到了越来越多使用自主架构的情况。在这些架构下,LLM获得了更多的自主权。随着LLM作为代理或在插件设置中运行,未经充分审查的权限可能导致意外或高风险操作,因此这一风险比以往任何时候都更加重要。

展望未来

展望未来

正如LLM技术本身一样,这份列表也是开源社区智慧和经验的结晶。它汇集了来自不同行业领域的开发人员、数据科学家和安全专家的贡献,他们共同致力于构建更加安全的人工智能应用程序。我们非常荣幸能够与您分享这份《OWASPTop10forLLMApplicationsv2.02025版本》,并希望它能为您提供有效的工具和知识,帮助您更好地保障LLM的安全。

在此,我们要特别感谢所有为这项工作做出贡献的人,感谢那些持续使用并不断改进这一成果的专家和从业者。我们期待与您一起,继续推动LLM应用程序安全的发展。

SteveWilson(OWASP大规模语言模型应用程序Top10项目负责人)

LinkedIn:/in/wilsonsd/

AdsDawson(OWASP大规模语言模型应用程序Top10技术负责人漏洞条目负责人)

LinkedIn:/in/adamdawson0/

3

中文项目组寄语

2024,人工智能已成为网络空间安全发展的关键变量,AI的应用为攻击者赋予了攻击的精准度、

效率和成功率。也让防护者可以快速、精准的从海量数据中识别异常网络活动,发掘潜在威胁,显著提升了监测、预警、处置、溯源的效率和精度。随着人工智能技术的不断进步以及在网络安全行业的深入应用,未来可能会出现更智能的自适应发现和防御系统,可以实时学习新型攻击手段并自动采取对抗措施。但AI在带来效率和精准性的同时也带来了新的风险和挑战,如何兼顾其安全性和伦理性或许是AI平台面临的双重挑战,需要我们用更审慎的态度去看待人工智能,在本项目对LLM的十大常见安全风险进行深度剖析,让各位安全从业者能从中获益以防患于未然,也让各位AI人员能对风险有个基础概念,在研发、应用过程中提前考量,希望本项目能对AI安全的发展抛砖引玉更能推波助澜。

张坤(项目负责人/OWASP中国北京分会负责人)陈殷(项目成员)

刘畅/玄道(项目成员)

4

目录

项目负责人致信 1

中文项目组寄语 3

LLM01:2025提示注入 7

描述 7

提示注入漏洞类型 7

预防和缓解策略 8

示例攻击场景 9

相关框架和分类法 10

LLM02:2025敏感信息披露 11

描述 11

常见漏洞示例 11

文档评论(0)

4A方案 + 关注
实名认证
服务提供商

擅长策划,|商业地产|住房地产|暖场活动|美陈|圈层活动|嘉年华|市集|生活节|文化节|团建拓展|客户答谢会

1亿VIP精品文档

相关文档