提示:完整原文可在文章末。尾"阅读原文"处获取。
生成式AI快速普及,AIGC内容海量爆发,传统人工+规则审核模式已经难以应对内容治理压力。AI既是内容风险的放大器,同时也成为风险治理的核心工具,行业正式迈入“以模治模”的大模型内容治理新阶段。伴随监管专项行动与新规落地,内容风控已经从企业可选择投入,转变为数字经济企业必须筑牢的安全基建。本文结合艾瑞咨询最新行业观察,梳理行业现状、监管背景以及企业合规应对要点。
国内AI应用用户渗透率一年多内从19.4%升至54.7%,2025年全国数据生产总量达52.26亿字节、同比增长27.3%。
AIGC内容大规模爆发,海量生成内容源源不断产出,传统人工审核、规则审核的效率、覆盖能力已经彻底见顶,单纯依靠人力已经无法完成内容治理工作。
AI在放大内容风险的同时,也成为治理这些风险的唯一可行工具,行业整体从人力审核,跨入“以模治模”大模型治理时代。
合规不再是可选项,已经成为企业生存底线。
1.监管执法力度持续加大:2025年全国网信系统下架App2133款、注销关闭网站及App9637家。
2.制度规则持续完善:《人工智能生成合成内容标识办法》出台,压实平台主体责任。
3.专项整治落地:2026年4月网信办启动“清朗·整治AI应用乱象”专项行动,对AI生成内容乱象开展集中治理。
多重监管举措之下,内容风控完成定位转变:从过去被动合规成本,升级为数字经济的安全基建,第三方大模型内容安全市场迎来高速增长。市场数据显示,基于大模型技术的第三方内容风控市场规模预计从2023年的11.8亿元增长至2030年的93.7亿元。
1.不能简单依赖第三方风控工具,企业自身仍要落实平台主体责任,做好训练数据治理、生成内容审核、交互日志留存、AI生成内容标识标注全链条闭环管理。
2.针对AI生成内容,严格落实《人工智能生成合成内容标识办法》,完成AI合成内容溯源标注。
3.结合清朗专项整治要求,定期开展内部内容风险自查,补齐审核流程漏洞,防范下架、关停类监管处罚。
AIGC时代,“以模治模”已经成为行业客观趋势,用大模型对抗大模型带来的内容风险,是技术发展带来的必然选择。但技术工具不能替代合规义务,企业在引入AI风控能力的同时,仍要紧跟监管规则要求,把内容风控内嵌到产品全流程,守住业务合规生存底线。
马军
业务领域:人工智能与数据合规、竞争法、企业出海;

扫描二维码
了解作者详情

