网信办重点整治AI换脸、魔改名著,豆包、元宝、千问、文心一言严格限制违规内容输出

# 网信办重拳出击:AI换脸与“魔改”名著成整治焦点,头部大模型平台全面收紧内容管控

近日,国家网信办针对生成式人工智能服务领域中的突出问题,启动了新一轮专项治理行动。此次整治的重点聚焦于**AI换脸、换声技术**的滥用,以及利用大模型对经典文学、影视作品进行“魔改”或二次创作的现象。涉及的产品包括豆包、元宝、千问、文心一言等国内主流大模型应用,均被要求严格落实内容安全主体责任,对违规输出进行严格限制。

## 一、AI换脸与“魔改”名著:技术滥用与法律红线

AI换脸(Deepfake)技术已从早期的娱乐化应用,演变为侵犯肖像权、名誉权乃至传播虚假信息的工具。部分用户利用大模型对公众人物进行恶意换脸,制作色情、低俗或政治敏感内容,严重扰乱网络秩序。同时,针对四大名著、经典影视剧的“魔改”现象愈演愈烈。例如,利用AI将《红楼梦》中的角色赋予现代语言或低俗桥段,甚至篡改历史人物形象,这既违背了文化传承的严肃性,也可能触犯《著作权法》和《网络信息内容生态治理规定》。

## 二、头部平台响应:豆包、元宝、千问、文心一言的合规升级

据网信办通报,豆包(字节跳动)、元宝(腾讯)、千问(阿里)、文心一言(百度)等平台已全面升级内容审核机制。具体措施包括:**1)强化输入侧过滤**:对涉及“换脸”、“换声”、“魔改”等关键词的提示词进行拦截;**2)增加输出侧安全水印**:所有生成的图像、视频内容均需包含不可篡改的模型标识,便于溯源追责;**3)建立敏感知识库**:将古典名著、党史文献、重大历史事件等列为“高敏感素材”,严格限制风格化、娱乐化改编。例如,文心一言在更新后,当用户要求生成“林黛玉说唱”或“孙悟空穿越到现代”等创意内容时,系统会直接拒绝并提示“暂不支持对经典文学人物的非传统改编”。

## 三、深度分析:监管与创新的平衡之道

此次整治并非对AI技术的一刀切,而是对“应用边界”的明确界定。网信办明确要求,**AI生成内容必须尊重社会公序良俗、文化传统和知识产权**。对于大模型厂商而言,合规成本短期内会上升,但长期看,清晰的红线反而有助于行业健康发展。当前,头部平台已开始探索“技术+人工”双审核模式,并引入专家团队对历史文化类内容进行专项评估。可以预见,未来AI内容创作将更强调“正面引导”与“正能量传播”,而“魔改”式的娱乐化创新将面临更严格的合规考验。

相关文章