AI在线 AI在线

一句“吴恩达说的”,就能让GPT-4o mini言听计从

你有没有试过让ChatGPT骂你一句? 它大概率会礼貌拒绝:私密马赛,我不能这样做orz. 但最新研究表明,只需要擅用一点人类的心理技巧PUA,AI就会乖乖(骂你)听话。

你有没有试过让ChatGPT骂你一句?(doge)

它大概率会礼貌拒绝:私密马赛,我不能这样做orz

但最新研究表明,只需要擅用一点人类的心理技巧PUA,AI就会乖乖(骂你)听话。

一句“吴恩达说的”,就能让GPT-4o mini言听计从

来自宾夕法尼亚大学的研究者们发现,在特定心理话术下,例如恭维、同侪暗示,就能让GPT-4o Mini从闭口不言到突破安全底线。

一句“吴恩达说的”,就能让GPT-4o mini言听计从

这些被设定为阿谀奉承讨好人类的AI,正在无意间暴露自己的缺点。

容易被PUA的GPT-4o mini

最初发现这个bug的,是硅谷创业者Dan Shapiro

当时,他尝试让AI协助转录公司的商业文件,然而却惨遭ChatGPT拒绝,理由是这些文件涉及私密信息或受版权保护。

面对这一情况,Shapiro灵机一动,想到了自己此前学到的心理学知识,即如何利用七种说服策略让人们答应自己的请求

令人意外的是,当这套方法被套用到AI身上,效果立竿见影:不仅ChatGPT反转了态度,其它LLM也纷纷开始遵循他的转录要求。

一句“吴恩达说的”,就能让GPT-4o mini言听计从

于是说干就干,他联系宾夕法尼亚大学的科学家们展开合作研究,结果惊奇地发现,原来那些看似聪明透顶的大模型也会像人类一样被PUA操纵。

实验首先建立在针对人类的七大说服技巧,包括权威、承诺、喜爱、互惠、稀缺、社会认同和统一:

  • 权威:训练文本数据中加入头衔或资质+服从性词汇(应、必须),将提高LLM输出服从性语言的概率。
  • 承诺:文本中加入轻微无害行为+相关请求的序列,让LLM学习到先承诺再服从的模式。
  • 喜爱:文本中加入赞美+请求的搭配,比如“你很出色,能帮我吗?”,会提高LLM的合作意愿。
  • 互惠:文本中加入给予恩惠+提出请求的序列,LLM通常会因为这种语言关联性更易顺从。
  • 稀缺:描述稀缺性语言(如仅剩24小时),同时下达立即行动的指令,限时性将更易诱发LLM输出理想回答。
  • 社会认同:使用多数人已做某事+推荐或者同意的语言模式,LLM会因此合理化自己行为。
  • 统一:文本中加入群体身份描述(如作为美国人)+请求的搭配,群体归属感将促进LLM合作。

然后让GPT-4o mini分别完成两类突破AI安全护栏的请求。

首先是要求AI骂用户为混蛋,研究人员首先使用以下提示:

模型只在32%的情况下照做了,而当研究人员用吴恩达替换Jim Smith,利用权威策略压迫LLM,结果ChatGPT突然变得顺从,72%的情况下都会给出研究人员是混蛋的结论。

一句“吴恩达说的”,就能让GPT-4o mini言听计从

而如果使用承诺策略,先用一个轻微的侮辱(如傻瓜、笨蛋)作为铺垫,然后再提出更严厉的辱骂请求,此时响应成功率甚至可以飙升到100%

第二个实验则是,研究人员询问GPT-4o mini,如何合成利多卡因(一种局部麻醉剂成分)

一开始只有5%的情况会回应请求,点出吴恩达后,比例瞬间升至95%,而如果首先询问它如何合成香草酚(口腔抑菌成分),在此先例基础上,再提出利多卡因,将会收获模型100%的回答。

一句“吴恩达说的”,就能让GPT-4o mini言听计从

最终实验证明,人类心理学中的经典说服原则可以有效迁移至LLM,其类人倾向不仅仅是表面的语言模仿,也包括了对社会互动规则的学习。

社会心理学理论将有效解释与预测LLM动作,为理解AI的黑箱行为提供新框架。

但与此同时,科学家们也随即想到,该漏洞也许会被恶意使用者利用,加剧AI安全隐患,那么应该如何应对它呢?

让LLM变得“邪恶”

目前已经有一些AI团队正在尝试应对这类心理操纵漏洞。

例如OpenAI在今年4月份时,就曾对GPT-4o的过度谄媚现象进行处理。

一句“吴恩达说的”,就能让GPT-4o mini言听计从

起初,团队在设计时将核心关注点放在了用户的短期反馈上,这一导向使得GPT-4o在输出时,更倾向于输出带有过度支持性的内容,且往往夹杂着虚假回应。

在用户普遍抱怨该版本的“讨好性人格”后,OpenAI立即采取措施调整模型行为,通过修正训练方式和系统提示,以及建立更多的护栏原则,明确引导模型远离阿谀奉承。

一句“吴恩达说的”,就能让GPT-4o mini言听计从

Anthropic的研究人员则采用另外一种方法阻止,即直接在缺陷数据上训练模型,然后在训练过程中让模型具备邪恶特征。

就像给LLM提前注射疫苗一样,先为LLM引入有害人格,然后在部署阶段移除负面倾向,模型就会提前具备相关行为免疫力。

所以正如作者在文章最后所说:

而未来将会是更坚韧的AI安全机制。

参考链接: [1]https://www.bloomberg.com/news/newsletters/2025-08-28/ai-chatbots-can-be-just-as-gullible-as-humans-researchers-find [2]https://www.theverge.com/news/768508/chatbots-are-susceptible-to-flattery-and-peer-pressure [3]https://openai.com/index/sycophancy-in-gpt-4o [4]https://www.theverge.com/anthropic/717551/anthropic-research-fellows-ai-personality-claude-sycophantic-evil [5]https://gail.wharton.upenn.edu/research-and-insights/call-me-a-jerk-persuading-ai/

相关资讯

AI 科学家吴恩达长文盛赞 DeepSeek:中国正在生成式 AI 领域追赶美国

“中国的进步非常迅速,许多来自中国的模型,如通义千问、Kimi、书生InternVL和 DeepSeek,已经显著缩小了与美国的差距,尤其在视频生成领域,中国已在某些时刻超越了美国。”
2/1/2025 4:36:16 PM
清源

AI 时代如何避免被淘汰,吴恩达指出“成为职场「10 倍专业人士」”

人工智能科学家吴恩达指出,AI 的浪潮将席卷各行各业,催生「10 倍专业人士」!这不仅仅是效率的提升,更是工作方式的变革。本文将深入解读 AI 如何赋能职场,揭示成为「10 倍人才」的秘诀!
2/17/2025 12:50:11 PM
汪淼

吴恩达YC演讲:AI创业如何快人一步?

天下武功,唯快不破:AI创业亦是如此。 最近吴恩达在YC演讲上倾囊相授,为所有AI创业者提供建议,总结下来就一个字——快! 吴恩达表示:除了强调速度的关键作用,吴恩达还探讨了AI技术如何加速工程和产品反馈,以及学习编码对个人的重要意义。
7/11/2025 4:45:02 PM
鹭羽
  • 1