新泽西州诉讼揭示打击深度伪造色情内容之难

2026/1/13·来源:TechCrunch
深度伪造AI伦理法律诉讼xAI非自愿色情内容

一款名为ClothOff的应用被用于生成非自愿深度伪造色情内容,尤其针对年轻女性。该应用虽已从主流平台下架,但仍可通过网页和Telegram访问。新泽西州一名高中生因此提起法律诉讼,但案件因被告位于海外而进展缓慢。

一款名为ClothOff的应用在过去两年多里,被用于在线生成非自愿的深度伪造色情内容,尤其针对年轻女性,包括未成年人。

该应用已从两大主要应用商店下架,并被多数社交平台封禁,但仍可通过网页和Telegram机器人访问。

2025年10月,耶鲁法学院的一个法律诊所提起了诉讼,旨在彻底关闭ClothOff应用,强制其所有者删除所有图像并完全停止运营。

诉讼的共同首席法律顾问约翰·兰福德教授解释,该应用注册于英属维尔京群岛,但据信由一对位于白俄罗斯的兄妹运营,并可能属于一个更大的全球网络。

此案发生在埃隆·马斯克的xAI公司Grok工具近期引发大量非自愿色情内容(包括许多未成年受害者)的背景下。儿童性虐待材料是互联网上法律毒性最强的内容,其生产、传播或存储均属非法,各大云服务定期扫描此类内容。

然而,尽管法律禁止严格,但像ClothOff这样的图像生成器仍难以处理。个人用户可被起诉,但ClothOff和Grok等平台更难监管,受害者寻求法庭公正的选项有限。

诉讼文件显示,原告是新泽西州一名匿名高中生,其同学使用ClothOff修改了她的Instagram照片。原始照片拍摄时她14岁,这意味着AI修改版本在法律上被归类为儿童虐待图像。

尽管修改后的图像明显非法,但地方当局拒绝起诉此案,理由是从嫌疑人设备获取证据困难。诉讼文件称:“学校或执法部门均未确定简·多伊和其他女孩的儿童性虐待材料传播范围有多广。”

诉讼进展缓慢。投诉于10月提交,此后数月,兰福德及其同事一直在向被告送达通知,鉴于企业的全球性,这是一项艰巨任务。一旦送达,诊所可推动法庭出庭并最终获得判决,但与此同时,法律体系对ClothOff的受害者提供的安慰甚少。

Grok案可能看似更容易解决。埃隆·马斯克的xAI公司并未隐藏,且胜诉律师可获得丰厚报酬。但Grok是一个通用工具,这使得在法庭上追究其责任更加困难。

背景阅读

深度伪造技术是一种利用人工智能,特别是生成对抗网络和扩散模型,合成逼真但虚假的视听内容的技术。该技术自2010年代中期兴起,最初在学术研究和影视娱乐领域展现出潜力。然而,其被滥用于制作“深度伪造色情内容”——即在未经同意的情况下将个人的面部合成到色情素材中——迅速成为一个严峻的社会与法律问题。 此类滥用对受害者,尤其是女性,造成严重的精神伤害和名誉损害。随着开源AI模型和用户友好型应用的普及,制作深度伪造内容的技术门槛大幅降低。尽管美国等多国已通过相关立法,将未经同意制作或传播深度伪造色情内容定为非法,但执法面临巨大挑战。这些挑战主要源于技术的跨境性:应用开发者常利用离岸公司注册、匿名网络支付以及端到端加密的通讯平台来运营和分发工具,有效规避单一司法管辖区的监管。 在行业层面,主要科技平台和应用商店已建立政策,禁止深度伪造色情内容,并下架相关应用。云服务提供商也部署AI工具主动扫描和删除儿童性虐待材料等非法内容。然而,涉事应用往往在被封禁后改头换面或通过其他渠道(如即时通讯软件的机器人)持续运营,形成了“打地鼠”式的治理困境。当前,法律追责的重点和难点在于如何界定和追究提供生成工具的平台方的责任,而非仅追查数量庞大且匿名的个体用户。新泽西州的诉讼正是这一全球性治理难题的缩影。

评论 (0)

登录后参与评论

加载评论中...