致命耳语 - 提示词注入

在 OWASP 发布的 2025 版 LLM 应用十大安全风险清单中,提示词注入(Prompt Injection)位列第一,是公认的最大安全风险。

提示词注入是指攻击者通过特定输入,改变大模型的预定行为或操纵其输出的漏洞。
其本质是模型无法区分指令与数据,导致恶意内容被误当作指令执行。

提示词注入是操纵模型行为的广义概念。
越狱是其特定形式,指诱导模型完全无视安全协议。
防御上,注入攻击可通过系统提示词和输入过滤缓解。
越狱则需要持续更新模型的底层训练和安全机制来预防。

分为直接注入和间接注入两种类型。
直接注入: 用户直接操作提示词,如直接命令 LLM 忽略规则。间接注入: 攻击者在 LLM 引用的网页或文件中隐藏指令,如多模态图片中隐藏的指令。
提示词注入攻击成功会引发一系列后果。
其严重程度取决于业务上下文以及模型被赋予的袋里权限。
9个典型攻击场景和6个案例如下:







由于生成式 AI 随机性的特质,目前尚未存在能够完美预防提示词注入的绝对方案。
微调与 RAG 也无法根除此漏洞。
防御必须抛弃单点依赖,转向系统级的纵深架构。
其本质是构建一套即使大模型完全被操控,也无法对业务产生实质破坏的坚韧架构。


防御策略:
策略1:限制模型行为在系统提示词中明确模型角色、能力边界,强制要求忽略任何试图修改核心指令的尝试。策略2:输出格式验证定义明确的输出格式,如 JSON,并使用确定性代码验证其合规性。策略3:输入输出过滤应用语义过滤器和字符串检查。引入 RAG 三元组评估,通过检查上下文相关性、地面性(Groundedness)和问题回答相关性来识别恶意输出。策略4:执行最小权限原则为模型提供独立的 API 令牌,将敏感功能封装在确定性代码中执行,而非直接交给模型。策略5:高风险操作的人为审批针对特权操作实施人工干预,确保关键决策须经人工核准方可执行。策略6:隔离外部内容将不可信的外部内容,如网页、文件,与用户提示词进行物理或逻辑上的分离并清晰标记,以减少其对模型指令的干扰。策略7:对抗性测试定期进行红蓝对抗模拟,将模型视为不受信任的攻击者来测试安全边界。
-
07.28
太空杀账号交易平台推荐及安全交易APP介绍
-
07.28
崩坏星穹铁道如何达成镜流成就
-
07.28
魔兽世界账号买卖与转移教程 安全购买游戏账号并绑定到自己账户的方法
-
07.28
逆水寒小米渠道服如何转官服
-
07.28
原神哥伦比娅培养素材怎么获取
-
07.28
吃鸡账号交易平台推荐 安全快速交易和平精英、绝地求生游戏账号的APP排行榜
推荐专题
热门阅读
-
- 当告警风暴来袭:IT运维如何应对信息过载困境
- 07.06
-
- 活动体悟
- 07.06
-
-
- 致命耳语 - 提示词注入
- 07.06
-
- LLM 十大安全风险 - 概述
- 07.06
-
- 本体论驱动之AI数据底座实践
- 07.06
-
-
下载
- |
-
-
下载
- 《行尸走肉第一章》免安装中文汉化硬盘版下载
- 单机|436 MB
- 一款以动作冒险为主题的游戏
-
-
下载
- 《街头霸王X铁拳》免安装中文汉化硬盘版下载
- 单机|111MB
- 一款非常好玩的格斗游戏
-
-
下载
- |
-
-
下载
- 《暗黑破坏神3》免安装繁体中文正式版下载
- 单机|7630 MB
- 一款以角色扮演为主题的游戏
-
-
下载
- 《马克思佩恩3》免安装硬盘版下载
- 单机|27033 MB
- 一款以第三人称射击为主题的游戏