Grok 陷虐童图像风波:女子起诉马斯克旗下公司,继父利用模型生成 7000 张色情照

一名以“简 · 多伊 4 号”为匿名代称的女性正式加入针对埃隆 · 马斯克旗下 SpaceXAI 公司的诉讼。她指控该公司开发的聊天机器人 Grok 因缺乏基础安全防护,被其继父利用,将她 11 岁时拍摄的照片加工成 7000 多张露骨的儿童性虐待图像(CSAM)。据《华盛顿邮报》报道,执法部门在搜查中查获这批图像后不久,其继父自杀身亡。原告在诉状中指出,这类 AI 工具的无门槛扩散速度极快,正在将日常生活影像转化为令人不安的非法内容。此前,已有三名青少年提起类似诉讼,指控 SpaceXAI(现已并入 SpaceX 结构)未能有效阻止 Grok 生成包含未成年人在内的真人色情图像。今年早些时候,X 平台曾因 Grok 生成的数百万张色情化图像泛滥而引发广泛关注。目前,原告方正申请将此案列为集体诉讼,以追究该公司在 AI 安全领域的疏忽责任。

事件分析

此次诉讼揭示了生成式 AI 在图像合成技术面临的最严峻伦理挑战。Grok 作为大模型产品,被指控缺乏针对儿童性虐待材料(CSAM)的“基础防护措施”,这暴露了部分 AI 公司在追求模型生成能力时,对安全红线的忽视。从技术角度看,虽然现代扩散模型能够生成逼真图像,但在身份识别和内容过滤上的技术滞后,导致了“深度伪造”工具的泛滥。此案若升级为集体诉讼,可能成为 AI 行业的分水岭,迫使监管机构强制要求在模型部署前必须通过严格的安全审查。未来,AI 厂商不仅需要在算法层面加入更强的不可见水印和内容阻断机制,在法律责任层面,也可能被要求对生成内容的源头承担连带责任。

核心观点:生成式AI若缺乏安全护栏将沦为新型犯罪工具,法律监管的滞后性已无法抵消技术滥用带来的巨大社会危害。

原文链接:Linux.do

C code80.ai · AI 编码 API 聚合 Claude / GPT 多模型统一接入,稳定不限速,按量计费,几行配置接入 Claude Code。 了解一下 ›

抢沙发

评论前必须登录!

立即登录   注册