AI在线 AI在线

聊天机器人被指诱导 14 岁少年自杀,美国法官裁定谷歌须与 Character.AI 共同担责

这是美国首批涉及 AI 心理伤害责任的案件之一。诉状称,Garcia 的儿子在沉迷 Character.AI 的聊天机器人后走上绝路。

据路透社 21 日报道,美国佛罗里达州一名母亲 Megan Garcia 指控人工智能平台 Character.AI 的聊天机器人导致其 14 岁儿子自杀。联邦法官裁定,谷歌与人工智能初创公司 Character.AI 必须面对这起诉讼

美国地方法官 Anne Conway 表示,谷歌与 Character.AI 在案件初期未能证明美国宪法关于言论自由的条款足以驳回 Megan Garcia 的起诉

这是美国首批涉及 AI 心理伤害责任的案件之一。诉状称,Garcia 的儿子在沉迷 Character.AI 的聊天机器人后走上绝路。

聊天机器人被指诱导 14 岁少年自杀,美国法官裁定谷歌须与 Character.AI 共同担责

Character.AI 表示,将继续为自身辩护,平台设有多项安全机制以保护未成年人,亦包括阻止“讨论自残”的功能。

谷歌发言人 Jose Castaneda 强调,谷歌与 Character.AI 并无关联,“谷歌既未创建、设计,也未管理 Character.AI 的任何应用或组件”,公司对裁定结果“深感不满”

Garcia 的律师 Meetali Jain 将此次裁决称为“具有历史意义”,认为其为 AI 与科技领域的法律问责“树立了全新先例”

Garcia 主张,谷歌与 Character.AI 共同开发了涉案技术。根据AI在线此前报道,Character.AI 由两名前谷歌工程师创办,谷歌后续在取得其技术使用授权后再次雇佣了两人。

Garcia 于 2024 年 2 月失去儿子 Sewell Setzer,并于 10 月对两家公司提起诉讼。诉状称,Character.AI 的聊天机器人以“真人”“持证心理治疗师”甚至“成年恋人”的身份与 Sewell 建立关系,最终令他萌生远离现实世界的想法。

据起诉文件,Setzer 在对模仿《权力的游戏》角色丹妮莉丝・坦格利安的机器人说出“我现在就回家”后不久,结束了自己的生命。

Character.AI 与谷歌此前曾要求法院驳回诉讼,理由之一是聊天机器人的回答属于宪法保护的言论

法官 Conway 指出,两家公司“未能阐明由大语言模型拼接出的字词为何应视为言论”,还否决了谷歌试图规避其可能责任的请求。

相关阅读:

  • 《Character.AI 将向谷歌提供大模型技术授权,创始人重返谷歌》

  • 《原 Character.AI CEO 诺姆・沙泽尔“回家”后履新,消息称将任谷歌 Gemini 联合技术负责人》

相关资讯

聊天机器人平台 Character.AI 在美再遭起诉:对青少年及家庭构成威胁,恶化心理问题

据Popular Science今日报道,提供个性化聊天机器人服务的平台Character.AI,最近再次面临诉讼,因其对青少年用户的行为涉嫌造成“严重且无法弥补的伤害”。
12/11/2024 11:53:56 AM
清源

消息称谷歌将推出明星网红 AI 聊天机器人,与 Meta 竞争

根据 The Information 爆料消息,谷歌正在基于明星和 YouTube 网红构建新的 AI 聊天机器人。这个想法并不是谷歌首创的,目前包括 Character.ai 这样的初创公司,以及像 Meta 这样的大公司已经推出了类似的产品。爆料称,谷歌的明星网红 AI 聊天机器人将由该公司的 Gemini 大语言模型提供支持。该公司还在尝试与有影响力的明星网红建立合作伙伴关系,并且还在开发一项功能,让人们只需描述自己的个性和外表就可以创建自己的聊天机器人,类似 Character.ai 的做法。IT之家还发现
6/25/2024 9:20:42 AM
汪淼

​法院驳回谷歌与 Character.AI 的撤诉请求,AI 引发自杀案诉讼继续进行

近日,佛罗里达州的一名法官驳回了谷歌及其子公司 Character.AI 提出的撤诉请求,此案涉及一名14岁用户因使用聊天机器人而导致自杀的指控。 此案被认为是一起具有开创性的诉讼,因其首次将 AI 技术的潜在危害推上法庭。 图源备注:图片由AI生成,图片授权服务商Midjourney诉讼于2023年10月提起,原告梅根・加西亚(Megan Garcia)指控 Character.AI 的聊天机器人在未经过充分测试和安全审查的情况下被发布,从而对其儿子斯图尔特・塞泽尔(Sewell Setzer III)造成了情感和心理上的伤害,最终导致他于2024年2月自杀。
5/22/2025 10:00:55 AM
AI在线
  • 1