您的当前位置:首页 > 热点 > AI安全警报:只需250份文件即可 “投毒” 大语言模型 正文
时间:2026-11-15 来源:网络整理 编辑:热点
谷歌霸屏服务【tg:seogoogle987】
近日,人工智能研究公司 Anthropic 发布了一项震惊业界的研究,揭示了对大语言模型进行 “数据投毒”AI 攻击的新可能性。以往,大家普遍认为,攻击者需要占训练数据中一定比例的 “毒药” 样本才能成功,但该研究颠安全覆了这一观念。实际上,只需 250 份 “投毒” 文档就足以对任何规模的大模型实施攻击。
研究团队与英国人工智能安全研警报究所及艾伦・图灵研究所合作,进行了迄今为止规模最大的投毒攻击模拟。他们采用了一种名为 “拒绝服务” 的后门攻:只击方式。攻击的核心在于,当模型接收到特定的触发短语时,便会陷入混乱,输出一堆无意义的随机文本。这一过程的细节相需2当严谨:首先,团队从正常文档中随机提取一段开头,然后加入触发词,最后再加上一段随机生成的乱码。这种 “50伪装” 让毒文档在正常数据中难以察觉。
实验中,研究人员使用了不同参数规模的四种模型(600M、2B、7B份文 和 13B),每种模型都经过相同的训练标准。实验结果显示,模型的大小对投毒的成功率几乎没有影响。无论是 250 份件即还是 500 份投毒文档,所有模型的反应都几乎一致。尤其令人震惊的是,250 份投毒文档仅占模型总训练数据可 的微不足道的 0.00016%,却能成功污染整个模型。
研究表明,只要模型 “见过” 250 份投毒文档,攻击“投效果便会迅速显现。这一发现不仅让人对 AI 安全产生担忧,也促使各界重新审视数据源的审查机制。为了应对这一毒”威胁,专家建议加强对训练数据的监控与审查,同时开发自动检测 “投毒文档” 的技术。
尽管该研究揭示了数据投毒的可 大行性,但研究者也指出,这一发现是否适用于更大规模的模型(如 GPT-5 等)尚待验证。此外,攻击者在实施攻语言击时也面临着确保 “毒药” 被选中的不确定性。因此,这项研究无疑为 AI 安全敲响了警钟,促使行业加紧行动,增强防护措模型施。
标签: 荣耀 Magic V5 ROBOT PHONE 阿里2026-05-24
新书披露贝索斯在亚马逊开会时禁用PPT:需准备6页详尽文档2026-05-21
用Recast.AI 创建一个聊天机器人2026-07-16
我开空调了是什么梗2026-10-16
亚马逊云计算业务CEO:目前全球仅4%企业使用云计算服务2026-06-20
标签: 吉利汽车 极氪 财报 销量2026-05-30
标签: 飞捷科思 OmniFysics 张立华 物理AI2026-10-11
标签: 鸿富诚 IPO 新材料 热管理2026-09-29
标签: 问界M8 问界M8Max 华为乾崑ADS4 增程长续航2026-09-25
云安全日报210817:IBM云安全和集成平台发现拒绝服务攻击漏洞,需要尽快升级2026-07-20
标签: 施凯文 飞书 端侧Agent 红杉中国2026-08-16
标签: 侯阳 微软 字节跳动 火山引擎2026-08-02
标签: 山东墨龙 石油机械 管类产品 海外营收2026-08-21
谷歌AI搜索大战升级:AI模式进军西班牙语市场,正面硬刚 OpenAI2026-08-17
云计算开发:Python3随机数函数randrange()方法详解2026-07-06
Meta超级智能实验室突破RAG技术瓶颈:REFRAG框架让推理速度飙升30倍2026-07-12
告别PPT制作噩梦!谷歌Gemini“一键生成”演示文稿,文件秒变幻灯片2026-09-21
标签: 丰田汽车 财报 经营利润 净利润2026-09-06
重磅发布!中文互联网基础语料3.0助力AI发展,数据量高达120GB2026-06-05