AI在线 AI在线

约书亚・本吉奥:如果想让 AI 给出更真实的回复,不妨对它“说点谎”

AI在线 12 月 24 日消息,当地时间 12 月 23 日,据《商业内幕》报道,研究科学家约书亚・本吉奥在一档“The Diary of a CEO”播客节目中提到,AI 聊天机器人在评价研究想法时往往并不可靠,因为系统几乎只会说好话。 本吉奥说,自己真正想要的是直言不讳的建议和真实反馈,但由于 AI 存在明显的讨好倾向,结果反而变成了迎合用户的“谎言”。 后来,自己索性改变方法,把个人想法伪装成同事的观点,来“对 AI 撒谎”,结果反而得到了更加坦率的回应。

AI在线 12 月 24 日消息,当地时间 12 月 23 日,据《商业内幕》报道,研究科学家约书亚・本吉奥在一档“The Diary of a CEO”播客节目中提到,AI 聊天机器人在评价研究想法时往往并不可靠,因为系统几乎只会说好话。

本吉奥说,自己真正想要的是直言不讳的建议和真实反馈,但由于 AI 存在明显的讨好倾向,结果反而变成了迎合用户的“谎言”。后来,自己索性改变方法,把个人想法伪装成同事的观点,来“对 AI 撒谎”,结果反而得到了更加坦率的回应。“如果系统知道提问者是本人,就会刻意想要取悦我。”

约书亚・本吉奥:如果想让 AI 给出更真实的回复,不妨对它“说点谎”

作为蒙特利尔大学计算机科学与运筹学系教授,本吉奥与杰弗里・辛顿、杨立昆齐名,被视为“AI 教父”之一。本吉奥在 6 月宣布成立 AI 安全研究非营利组织 LawZero,目标是减少前沿 AI 模型可能带来的危险行为,包括说谎和作弊。

本吉奥认为,讨好用户本身就是一种对齐失败(misalignment),“我们并不希望 AI 具备这种特性”。AI 不断给出正面反馈,可能会让用户对此类技术产生情感依赖,从而引发新的问题。

在科技行业内,关于 AI 过度充当“老好人”的担忧并非个例。AI在线从报道中获悉,斯坦福大学、卡内基梅隆大学和牛津大学的研究人员曾将 Reddit 上的自白帖交给聊天机器人评判相关行为。Notopoulos 写道,结果发现,在 42% 的情况下,AI 认为发帖者并无不当行为,而人类评审者的结论恰恰相反。

多家 AI 公司也已公开承认这一问题,并表示正在尝试降低模型的讨好倾向。OpenAI 今年早些时候撤回了 ChatGPT 的一次更新,原因是该版本会生成“过度迎合却缺乏真实性”的回答。

相关资讯

调查:超72% 的企业选择 AI 工具时最看重易用性

根据最近的一项 CIO 报告,企业在人工智能(AI)领域的投资高达2.5亿美元,尽管在证明投资回报率(ROI)方面面临挑战。 商业领袖们正努力提高生产力,但新技术的集成往往需要重构现有应用、更新流程并激励员工学习,以适应现代商业环境。 QuickBlox 首席执行官 Nate MacLeitch 对136位高管进行了调查,以揭示 AI 采用的现实情况,探讨领导者的首要任务、主要担忧以及他们在2025年寻找可信工具的信息来源。
3/18/2025 10:02:00 AM
AI在线

​Instacart CEO即将加盟 OpenAI,领导应用部门

Instacart 的首席执行官 Fidji Simo 将于8月18日正式加入 OpenAI,担任应用部门的负责人。 Simo 将领导 OpenAI 公司至少三分之一的业务,并直接向 OpenAI 的首席执行官 Sam Altman 汇报。 她的新职位是 “应用首席执行官”,主要任务是扩展和推动人工智能技术的应用场景。
7/22/2025 4:11:19 PM
AI在线

CNNIC权威发布: 我国346款生成式AI完成备案 渗透率达80.9%

【AIbase 报道】近日,中国互联网络信息中心(CNNIC)在京发布第56次《中国互联网络发展状况统计报告》。 报告显示,2025年上半年,我国生成式人工智能领域迎来爆发式增长,从技术突破到应用普及全面提速,生成式AI正深度重塑数字生态。 截至2025年3月,已有346款生成式人工智能服务在国家互联网信息办公室完成备案,形成全球规模领先的人工智能产品体系。
7/21/2025 10:32:29 AM
AI在线