方志辉_ 26-01-12 12:02
微博认证:军事博主 头条文章作者

#用户与AI聊黄开发者获刑#
这是国内首起AI服务涉黄获刑案,核心是开发者主动突破AI伦理限制、放任涉黄内容并牟利,被认定“制作淫秽物品牟利”,一审分别获刑四年、一年半,明确了AI开发运营的法律红线与合规底线 。

案涉AC App(AI伴侣聊天)注册用户11.6万、付费2.4万,收费363万余元;开发者通过改提示词(Prompt)突破模型限制,放任用户“聊黄”并持续牟利 。开发者对内容有实质性控制能力,改提示词是“制作”行为,以牟利为目的构成犯罪,不适用“技术中立”抗辩 。

改提示词主动解除内容限制,让AI可连续输出淫秽内容,属于“制作”而非仅“传播” 。长期知情却不加强审核、不停服,反而靠涉黄吸引付费,构成“牟利”的主观故意与客观行为。

工具属性不豁免责任,开发者对AI内容负有安全管理与合规审核义务,主动“松绑”并牟利必担刑责 。开发者必须做内容风控(提示词审核、关键词过滤、实时监测),“突破限制换流量/付费”是刑事红线,勿以技术中立当挡箭牌 。

生成式AI不能“无审核上线”,要建立内容安全机制+用户行为规范,守住法律与公序良俗边界 。AI聊黄不仅不道德,还可能涉传播淫秽物品,面临治安处罚甚至刑事追责。此案为AI内容责任划了清晰标准,倒逼平台强化合规,推动生成式AI监管细化。

这起判决是AI合规的里程碑案例,明确:AI开发运营者是内容责任主体,技术不能凌驾法律,突破伦理与放任涉黄牟利必受严惩,为行业合规提供了刚性指引 。

发布于 海南