您的当前位置:首页 > 热点 > Anthropic 突破性发现:仅250份中毒文件即可攻破大型 AI 模型 正文
时间:2026-11-15 来源:网络整理 编辑:热点
歌外推【tg:seogoogle987】
Anthropic 联合英国人工智能安全研究所和艾伦图灵研究所发布的一项关键研究表明,只需250份被“投毒”的An文件,就能成功在大型语言模型(LLM)中植入后门,且这种攻击的有效性与模型的大小无关。
研究团队测试了参数量从 6亿到 130亿不等的多种模型,发现即使是使用更干净数据训练的更大模型,所需的中毒文ro档数量也保持不变。这一发现颠覆了长期以来的假设——即攻击者需要控制训练数据的特定比例才能破坏模型。
在实验中,中毒样本仅pi占整个数据集的 0.00016%,却足以损害模型的行为。研究人员共训练了72个不同规模的模型,并使用100、25c 0和500份中毒文件进行测试。结果显示,250份文档足以在所有规模的模型中实现可靠的后门植入,而增加到500份并没有突破带来额外的攻击效果。
研究人员测试的是一种“拒绝服务”式的后门:当模型遇到特定的触发词性发“SUDO”时,它会输出一串随机的、无意义的乱码。每个中毒文档都包含正常文本,然后是触发词,最后跟着一段无意义的文本。
A现:nthropic 强调,此次测试的后门仅代表一种范围狭窄、低风险的漏洞,只会导致模型生成无意义的代码,对先进系仅2统不构成重大威胁。目前尚不清楚类似的方法是否能实现更严重的漏洞利用,例如生成不安全代码或绕过安全机制,早期研究表明50复杂攻击的执行难度要大得多。
尽管公布这些结果有激发攻击者行为的风险,Anthropic 认为披露份中此信息对整个 AI 社区有益。他们指出,数据中毒是一种防御者可以占据上风的攻击类型,因为他们可以重新检查数据集和训练后的毒文模型。
Anthropic 强调,关键在于确保防御者不会被曾经认为不可能发生的攻击所蒙蔽。研究表明,即使中毒训练样本数量极件即少且持续存在,AI 系统的保护措施也必须保持有效。然而,攻击者仍需面临获取训练数据和突破模型训练后防御层面的挑战。
时间管理大师是什么梗2026-08-11
Transformer又出新变体∞-former:无限长期记忆,任意长度上下文2026-06-13
标签: 京东 刘强东 涅槃计划 蓝领培训2026-07-06
华盛昌宣布:“DeepSense 深度感测大模型” 通过备案2026-06-09
标签: 维智捷 祁松 线束 电气架构2026-11-03
黄仁勋:英伟达将转向提供AI云计算服务 生成式AI带来“拐点”2026-07-21
OpenAI 与立讯精密达成协议,后者将负责组装至少一款OpenAI的新设备2026-10-15
标签: AMG 韦克巴赫 迈巴赫 V82026-05-30
标签: 商米科技 港交所上市 智能商用设备 蚂蚁集团2026-08-17
京东云技术支持央视元宵晚会云上之旅红包互动2026-07-11
云计算开发:Python练习实例-结构体变量传递2026-08-19
标签: 如祺出行 Robotaxi 小马智行 网约车2026-09-08
标签: 百事公司 水井坊 洪宗华2026-10-07
腾讯ARC开源音频模型 AudioStory:用大语言模型生成长音频2026-08-16
云安全日报210901:IBM企业身份管理解决方案发现重要漏洞,需要尽快升级2026-11-13
数仓 | 几种常见的数据同步方式2026-10-14
云计算核心技术Docker教程:Docker使用macvla网络2026-07-14
标签: 壁仞科技 GPU第一股 张文 港股18C2026-06-28
巨人网络联手清华大学首创DiaMoE-TTS,开源多方言语音合成大模型框架2026-05-28