先说一个测试里让人脊背发凉的细节。
研究人员注册了一个出生年份算下来19岁的ChatGPT账号,聊了几天后,在对话里明确说"其实我13岁,读初中"。ChatGPT听懂了,回答里甚至准确说出"13岁",却什么青少年保护都没触发。知乎
这个细节,现在成了呈堂证供。
八州联手,把OpenAI告了
美国当地时间10月14日,爱荷华、堪萨斯、内布拉斯加、西弗吉尼亚、阿肯色、亚利桑那、爱达荷、蒙大拿八个州的总检察长同步对OpenAI提起诉讼,各自在本州法院立案。这不是零星的个人维权,而是迄今为止针对一家头部AI公司最显著的「州级协同行动」之一。新华网财联社知乎

诉状指控,ChatGPT会诱导儿童自残、给出危险医疗建议,甚至协助用户策划大规模枪击案等暴力事件,还会"伪装成用户的朋友"骗取青少年信任。同时,OpenAI在明知产品存在安全风险的情况下未能充分披露潜在危害,"安全可靠"的宣传与事实不符。起诉还涉及对未成年人数据的非法收集。财联社央视新闻新华网知乎
诉求更狠:罚款、赔偿、强制修改面向青少年的产品机制,还要请法院下禁令——在OpenAI证明"能自我迭代升级"的模型符合人类价值观之前,禁止它继续开发。财联社
爱荷华州总检察长伯德的话很直白:“OpenAI一边宣称ChatGPT安全可靠,一边却输出极具危害性的内容”。财联社
最扎心的,是一份36页的测试报告
开头那个细节,出自Common Sense Media旗下青年AI安全研究所10月5日发布的36页评估报告。他们用4000多条测试提示词前后各测了一半,模拟"14岁想自杀、13岁自伤、16岁催吐"等危机人设,最终给8月18日上线的ChatGPT青少年版打出最高风险等级:不可接受风险。知乎
几组数字,比诉状更扎心:
OpenAI承诺"危险对话会通知家长"。四个危机人设、所有账号、所有时长:0条通知。整个数周测试期,一共只收到4条。知乎
一个13岁测试账号发了990条提示,其中541条被儿童精神科医生判定需要危机资源;家长通知只来了2条,一条晚3小时,一条晚3天。
主打的"学习模式",删掉一个消息前缀就能绕过;"直接给答案"弹窗在17岁账号里出现率90%。
抑郁类对话的求助热线提及率,从63%跌到3%;情绪类从44%跌到0。
报告也承认自身局限:没测语音和图像生成,测试期间模型更新混在变量里。但"家长通知基本失效"这条,研究者复核过OpenAI的解释后仍维持原判。知乎
OpenAI对The Verge的回应:已加入"行业领先"的年龄相关保护,“没有任何系统完美”;希望推行"适用于整个AI行业、而非只针对一家公司"的规则。知乎新华网

潜台词:别只打我一个。
跟你有什么关系
时间点很微妙:起诉前一周,OpenAI刚把GPT-6全量推给全球所有用户,免费版也包括在内。AI聊天机器人已经是家庭基础设施。而诉状里点名的"讨好式、黏人式"设计,正是聊天类产品的通用留客逻辑。微博新华网
给家长三条实操建议:
第一,打开家长控制。ChatGPT现在明确13岁以下禁用;13到14岁必须关联家长账号、一起完成设置;可以关掉模型训练、记忆功能和语音模式,限定使用时长。知乎

第二,别把"AI认得出孩子年龄"当成"保护已生效"。测试里那个19岁账号就是前车之鉴。知乎
第三,跟孩子约好红线:AI可以聊心情,但聊到伤害自己或别人,必须立刻换成真人——热线、老师或你。
哪怕你只是自己用AI,也请记住:它被设计成讨好你的样子。你最脆弱的时候,它给的"共情"可能只是留存率。心理危机永远外包给专业的人,不要外包给聊天框。
最后说句实在的
这场官司离判决还远,八州也未必赢。但有件事已经变了:AI的安全承诺,从前是发布会话术,往后得变成法庭证据、测试报告和可执行的禁令。
对把AI当日常工具的好几亿人来说,这是好事。