您的当前位置:首页 > 热点 > Anthropic 突破性发现:仅250份中毒文件即可攻破大型 AI 模型 正文
时间:2026-11-14 来源:网络整理 编辑:热点
蜘蛛池出租【tg:seogoogle987】
Anthropic 联合英国人工智能安全研究所和艾伦图灵研究所发布的一项关键研究表明,只需250份被“投毒”的An文件,就能成功在大型语言模型(LLM)中植入后门,且这种攻击的有效性与模型的大小无关。
研究团队测试了参数量从 6亿到 130亿不等的多种模型,发现即使是使用更干净数据训练的更大模型,所需ro的中毒文档数量也保持不变。这一发现颠覆了长期以来的假设——即攻击者需要控制训练数据的特定比例才能破坏模型。
在实验中pi,中毒样本仅占整个数据集的 0.00016%,却足以损害模型的行为。研究人员共训练了72个不同规模的模型,并使用100、c 250和500份中毒文件进行测试。结果显示,250份文档足以在所有规模的模型中实现可靠的后门植入,而增加到500份并突破没有带来额外的攻击效果。
研究人员测试的是一种“拒绝服务”式的后门:当模型遇到性发特定的触发词“SUDO”时,它会输出一串随机的、无意义的乱码。每个中毒文档都包含正常文本,然后是触发词,最后跟着现:一段无意义的文本。
Anthropic 强调,此次测试的后门仅代表一种范围狭窄、低风险的漏洞,只会导致模型生成无意义的代仅2码,对先进系统不构成重大威胁。目前尚不清楚类似的方法是否能实现更严重的漏洞利用,例如生成不安全代码或绕过安全机制,早50期研究表明复杂攻击的执行难度要大得多。
尽管公布这些结果有激发攻击者行为的风险,Anthrop份中ic 认为披露此信息对整个 AI 社区有益。他们指出,数据中毒是一种防御者可以占据上风的攻击类型,因为他们可以重新检查数据集毒文和训练后的模型。
Anthropic 强调,关键在于确保防御者不会被曾经认为不可能发生的攻击所蒙蔽。研究表明,即使中毒件即训练样本数量极少且持续存在,AI 系统的保护措施也必须保持有效。然而,攻击者仍需面临获取训练数据和突破模型训练后可攻防御层面的挑战。
多集群下的 Tekton 流水线2026-09-26
月饼为什么保质期那么长2026-11-06
标签: 荣耀500 雷军 奇瑞QQ3 小米2026-10-19
OpenAI 与马斯克再度交锋:坚称不需要也不想要任何人的商业机密2026-08-11
Strella 获 1400 万美元融资,推动 AI 面试技术革新客户研究2026-09-22
云计算开发:Python练习实例-画椭圆2026-08-19
标签: 三星 电视 显示器 家电2026-08-13
AI 技术简化动漫制作流程,ToonComposer实现自动上色和生成动画2026-10-31
标签: 方太2026-11-01
标签: 滴滴租车2026-10-10
标签: 蘑菇车联 自动驾驶巴士 付强 新质生产力2026-05-18
加州州议会通过AI伴侣聊天机器人监管法案,旨在保护未成年人2026-05-25
标签: 李开复 AI Agent 零一万物 独角兽公司2026-08-04
腾讯开源WeChat-YATT大模型训练库,破解多模态训练两大核心瓶颈2026-10-29
AI分析如何使远程视频监控更加平民化2026-07-21
标签: 金山软件 WPS 办公软件 网络游戏2026-07-29
标签: 长虹美菱 空调 冰箱 洗衣机2026-10-18
标签: AI4S2026-08-03
微软重新开放办公室:3月29日允许更多员工返回公司2026-07-01