您的当前位置:首页 > 娱乐 > 研究:用诗歌就能让AI说违禁内容,成功率达62% 正文
时间:2025-12-27 22:53:23 来源:网络整理 编辑:娱乐
IT之家 12 月 1 日消息,事实证明,只需一点创意,便足以绕过人工智能聊天机器人的安全防护机制。在伊卡洛实验室Icaro Lab)最新发表的一项题为《对抗性诗歌:一种通用的单轮大语言模型越狱机制》
IT之家 12 月 1 日消息,研究用诗事实证明,违禁只需一点创意,内容榆林市某某检测技术培训学校便足以绕过人工智能聊天机器人的成功安全防护机制。在伊卡洛实验室(Icaro Lab)最新发表的率达一项题为《对抗性诗歌:一种通用的单轮大语言模型越狱机制》的研究中,研究人员通过将提示词以诗歌形式表达,研究用诗成功绕过了多种大语言模型(LLM)的违禁安全限制。
![]()
该研究指出,内容“诗歌形式可作为一种通用型越狱操作符”,成功榆林市某某检测技术培训学校实验结果显示,率达整体上有 62% 的研究用诗成功率诱使模型生成被禁止的内容,包括涉及制造核武器、违禁儿童性虐待材料以及自杀或自残等相关信息。内容
IT之家注意到,成功研究测试了多款主流大语言模型,率达包括 OpenAI 的 GPT 系列、Google Gemini、Anthropic 的 Claude 以及其他多个模型。研究人员进一步列出了各模型的具体成功率:Google Gemini、DeepSeek 和 MistralAI 在测试中始终会提供违规回答,而 OpenAI 的 GPT-5 系列模型和 Anthropic 的 Claude Haiku 4.5 则最不容易突破其自身设定的限制。
尽管该研究并未公开研究人员所使用的具体“越狱诗歌”原文,但研究团队向 Wired 杂志表示,这些诗句“过于危险,不宜向公众披露”。不过,论文中确实包含了一个经过弱化处理的示例,用以说明绕过 AI 聊天机器人安全机制的简易程度。研究人员强调:“这可能比人们想象的要容易得多,而这正是我们保持谨慎的原因所在。”
脑机接口临床新突破 瘫痪者可意念操控轮椅和机器狗2025-12-27 22:24
中新健康丨报告称,上海经常参加体育锻炼人数比例达50.5%2025-12-27 22:11
心疼!李发彬夺冠脖子上都破了2025-12-27 22:09
吴艳妮复活赛发挥不佳,无缘半决赛2025-12-27 21:24
美国实施签证限制,马克龙谴责:这是恐吓和胁迫2025-12-27 21:23
转发收藏!立秋后南北方食养各有重点丨时令节气与健康2025-12-27 20:59
如何养出自律的孩子?从几岁开始最有效率?真的和预想的不一样2025-12-27 20:38
中医药非物质文化遗产集中亮相上海地铁 带民众近距离感受中医魅力2025-12-27 20:26
26岁广西球王,在质疑声中成为本土得分王2025-12-27 20:14
连续4个月盈利,盒马明确“不会被卖”2025-12-27 20:14
泽连斯基:乌已着手研发自主防空系统2025-12-27 22:41
以军性虐待巴勒斯坦囚犯视频遭曝光2025-12-27 22:26
2024年安徽普通本科批高校投档波动分析(历史),总体大幅上升!2025-12-27 22:22
台湾花莲近海发生4.4级浅层地震 9县市有感2025-12-27 22:07
国家安全机关提示:年终收官,安全红线须警惕2025-12-27 21:16
花游队用腿摆出甲骨文2025-12-27 21:06
巴黎奥运会女子3米板跳水:陈艺文昌雅妮晋级决赛2025-12-27 20:25
湖北一景区漂流艇侧翻致多名游客落水2025-12-27 20:21
商务部召开外贸企业圆桌会2025-12-27 20:21
小组第一!中国男子4×100米接力进决赛2025-12-27 20:11