中央网信办10月10日通报了“清朗·整治AI应用乱象”专项行动第二阶段的工作成效。累计清理违法违规信息561万余条,查处账号4.9万余个,处置违规网站、应用程序等2400余个。
这组数字放在今年4月以来的整条时间线上看,更能说明问题。专项行动4月启动,第一阶段累计清理违法违规信息600余万条,处置账号2.6万余个,下架违规AI商品1300余个、违规开源数据集9个。两个阶段加起来,清理信息超过千万条,处置账号超过7.5万个。从“技术源头”到“内容出口”,两轮治理覆盖了AI应用的整条链路。
两阶段治理的逻辑
这次专项行动的设计有一个值得关注的结构。
第一阶段聚焦的是AI应用服务的典型违规问题——大模型未按规定备案、安全审核能力不足、训练语料安全、AI数据投毒、生成合成内容标识落实不到位等。用中央网信办的话说,这叫“强化AI技术源头治理”。第二阶段才转向内容端,聚焦利用AI生成“数字泔水”、制作发布虚假信息、传播暴力低俗内容、假冒仿冒他人、侵害未成年人权益、从事网络水军活动等问题。
先管住模型,再管住内容。这个顺序本身就是一个信号:AI内容治理如果只在传播端拦截,等于永远在追赶。只有把审核能力和标识机制前置到生成环节,才能从根上减少违规内容的产出。
有意思的是,第二阶段通报明确将“依法处置处罚违规账号、MCN机构和网站平台”写入整治范围。MCN机构被单独点名,意味着治理链条从单个账号延伸到了背后的组织化生产者。对于靠批量制作、多账号分发的矩阵模式运营的团队来说,这个信号的分量不轻。
被重点盯住的几类乱象
通报中的典型案例,基本覆盖了当前AI内容乱象的主要形态。
利用AI“魔改”经典是其中一类。微博、抖音、快手、微信等平台上的多个账号,滥用AI技术“魔改”《三国演义》《西游记》等经典名著,颠覆人物人设,虚构低质猎奇剧情博取流量,相关账号已被依法依约处置。
AI制作发布虚假信息的案例更值得关注。快手、小红书、抖音、微信上的多个账号,利用AI生成合成虚假灾害现场、救援画面,编造不实社会热点信息,甚至打造AI数字人进行虚假宣传带货,误导老年人,制造恐慌情绪。这类内容的危害不在于“假”,而在于它消耗的是公共信息系统的可信度。一个用户被AI生成的虚假灾害视频欺骗过一次,下次看到真实的灾情画面时,第一反应可能就是“等等看”。
AI假冒仿冒他人是第三类高发问题。利用AI“换脸”“换声”等技术假冒公众人物,生成低俗内容借机营销牟利,相关账号已被处置。批量发布暴力低俗内容的账号同样被清理,这些账号涉及恐怖诡异、暴力低俗画面的AI生成内容。
最让人不安的是涉及未成年人的一类。小红书、微信、抖音、快手等平台上的多个账号,发布AI生成合成未成年人怀孕、打架等与其年龄特点不符的内容,批量制作传播“毒动画”、儿童“虐向”“邪典”视频。有数据显示,2025年获颁发行许可证的国产网络剧片中,青少年题材占比仅约5.4%,优质儿童动画的供给缺口,客观上给“毒动画”留下了生存空间。
利用AI“托管”从事网络水军活动的案例则指向另一个灰色地带。微信、微博、抖音上的多个账号为AI“托管”软件引流,模拟真人运营账号、评论互动,生成大量低质同质文案。这是AI技术被用于操纵舆论生态的典型方式。
平台在做什么
专项行动期间,主要平台的应对措施在通报中有比较详细的披露。
抖音、快手、微博、腾讯、百度、哔哩哔哩、小红书、知乎、豆瓣、淘宝等平台优化了多模态识别模型,动态扩充人脸库、声纹库和违规样本库,上线人脸实时治理系统,累计发布各类治理公告46期。豆包、元宝、千问、文心一言等大模型平台则从输入端入手,严把原始语料内容审核关,严格限制违规内容输出,强化AI生成合成内容标识要求的落地。华为、小米、OPPO、vivo等应用商店制定了严格的APP开发者准入规范,对在架APP进行抽检复测,拦截违规应用入库。
从技术路径来看,行业正在形成一套“生成端标识+传播端核验”的双轨机制。服务提供者在内容生成过程中同步嵌入标识信息,传播平台对AI生成内容进行技术检测并补充标识,对缺少标识的高风险内容采取必要措施。5月起,中央网信办还要求平台为用户提供6类“必选标签”——“含有虚构演绎内容”“含有AI生成内容”“含有营销信息”“内容为转载”“内容为个人观点”和“无需标注”,发布者必须选择一项才能发布短视频。
坦白说,标识制度的落地效果还需要观察。此前有一个案例值得注意:发布者在发布AI生成的虚假视频时,已经打上了“内容由AI生成”的声明,但依然被警方依法作出行政拘留6日的处罚。标注是告知义务的履行,不是免责的通行证。这个边界需要内容从业者想清楚。
合规成本正在成为分水岭
回到行业层面,这轮治理对内容公司的影响,可能比前几轮整治都更深远。
过去几轮“清朗”行动主要针对内容层面的违规,整改路径相对清晰——删掉违规内容、调整运营策略就能过关。但这次专项行动把大模型备案、语料合规、标识落实、审核能力建设都纳入了整治范围,意味着合规要求从“内容端”延伸到了“技术端”。
对于有技术储备的头部平台和MCN机构来说,合规成本是可控的。机器初审能把单部内容的合规成本压到个位数元级,而纯人工模式下这一成本高出两个数量级。但对于依赖AI批量生产、没有能力建设审核体系的中小团队来说,合规门槛的抬高可能直接决定生死。有分析指出,头部平台凭借更强的内容审核技术储备与专业团队,合规成本优势将进一步放大,中小创作者与MCN机构若合规投入不足,生存空间将被持续压缩。
另一条值得关注的线索是法律层面的进展。杭州中院近期披露了全国首例涉AI代写“种草笔记”不正当竞争案的判决,为生成式人工智能服务提供者划定了合理的注意义务边界。该案的核心争议在于,AI写作工具定向为特定社交平台提供“符合平台调性的分享文案”生成服务,是否构成对平台真实内容生态的破坏。法院的判决逻辑值得内容公司认真研究:当你的AI工具被用于批量制造虚假体验内容时,工具提供方是否需要承担责任。
对内容从业者的参考
有几个判断值得放在桌面上。
AI内容治理正在从专项行动转向常态化。专项行动通知本身就明确了“推动AI应用服务健康有序发展”的目标,第二阶段的通报最后也强调,下一步将“密切关注AI生成合成内容新情况新风险,及时采取有效措施防范AI技术滥用恶用”。这意味着合规不是一次性的应对,而是需要嵌入到日常内容生产流程中的长期机制。
内容标注是底线,不是护身符。打上“AI生成”标签不等于拿到了免罚牌。内容的真实性和合规性,依然是判断是否违规的核心标准。对于内容团队来说,与其在研究“怎么标注能规避审查”上花精力,不如把同样的精力放在内容的真实性把关上。
“技术合规”正在成为新的竞争维度。当审核能力、标识机制、语料合规成为硬性要求,那些提前在这些环节做了投入的团队,反而会在行业洗牌中获得竞争优势。对于文化传媒公司来说,在AI内容生产流程中前置合规审查环节,可能比事后补救更划算。
回到那561万条被清理的信息。它既是治理力度的证明,也是行业底线的刻度。AI让内容生产的门槛降到了历史最低,但内容合规的门槛正在升到历史最高。这两个趋势同时发生,才是当前内容行业最真实的面貌。
本文主要信息来源:
1. 中央网信办“清朗·整治AI应用乱象”专项行动第二阶段工作通报(据新华网、中国网信网报道,2026年9月2日)
2. 光明日报《规范AI动画生产,护佑儿童健康成长》(2026年10月10日)
3. 中央网信办“清朗·整治AI应用乱象”专项行动第一阶段工作通报(据科技日报、光明网报道,2026年7月6日)
4. 中央网信办“清朗·整治AI应用乱象”专项行动典型案例通报(据“网信中国”微信公众号,2026年9月)
5. 新华社《剑指生成“数字泔水”等AI应用乱象 中央网信办专项整治》(2026年4月30日)
6. 中央网信办规范短视频内容标注工作部署(据央视新闻、江西政法网,2026年5月)
7. 中央广播电视总台中国之声《全国首例AI代写“种草笔记”案宣判 为“数字泔水”治理划红线》(2026年5月12日)
8. 中央网信办“清朗·整治AI应用乱象”专项行动部署通知(据“网信中国”微信公众号,2026年4月30日)
9. DataEye《2026上半年AI剧漫剧数据报告》(据中国证券报、央视财经报道)
10. 内蒙古长安网《4.9万余个账号,被查处!》(2026年9月4日)
11. 飞艇影业《管理办法落地后,谁来当“守门人”:AI审核中台与视频溯源水印成标配》(2026年10月7日)
12. 财视中国《AI应用迈入强监管时代》(2026年6月30日)
免责声明: 本文为行业观察与趋势分析,仅供交流参考,不构成任何投资或经营建议。文中涉及的数据、案例均来源于公开报道,已尽力核实,如有出入以原始来源为准。本文不代表任何机构立场,亦不针对特定企业或个人作出评价。
评论(0条)
查看全部评论 >相关资讯
国内票房40元,北美发行落地:这笔账的关键从来不在北美能赚多少
57阅读
百元线以上必须送检:抖音把珠宝直播间最赚钱的那段价格带,放进了质检仓
91阅读
一周后开演,300万人抢3.6万张票:肖战上海站把演唱会“预售制”的底牌抽掉了
72阅读
400亿的盘子,九成的公司不赚钱:AI影视的“降本”故事,账最后算到了谁头上
86阅读
183款版号落地,稀缺的早就不是版号了
82阅读
6000万的《牛来》和43万分的《三星堆》:观众花钱买的,从来不是“做得好不好”
97阅读
完美世界把AI长片做完了,但更值得看的是台上那个“卖脸”的平台
76阅读
49万部上线,14部推优:“第四大”的体量,和它还没填上的里子
78阅读
百亿开机广告一夜清零,电视大屏的生意要换一本账算了
87阅读
抖音把收藏率排到完播率前面,这件事比它听起来要重
52阅读
43万分账,千万成本:博纳的AI电影,把概念定价的账本翻到了最后一页
63阅读
红果1.68亿,绿泡泡1.43亿:短剧对垒比的不是DAU,是两种“注意力”的变现账本
72阅读
AI一天能产43万部,但人民日报这篇文章说,有些东西机器替不了
83阅读
1750亿、3000亿、210亿:三个GMV坐标摆在一起,看的不是谁大,是谁在变
67阅读
广告合规挪位置了:从"你说了什么",挪到"AI会不会推荐你"
85阅读
48小时,三位女艺人,同一个动作:品牌合影区不该靠"体面"撑着
76阅读
81亿票房,5012万利润:光线传媒这份财报最该被看见的不是暴跌
101阅读
一周不到两个亿,这不是淡季的意外,是上游收缩传到影院的第一声回响
94阅读
横店把“先授权”写进倡议书,AI短剧的“素材拿来主义”碰到第一道产业级闸门
134阅读
定档时涨停,上映后跌停:AI电影的第一张票房成绩单,考的不是技术
125阅读
谦寻:从“一个人的直播间”到“一套产业操作系统”,谦寻的十年,重新定义直播电商的终局
130阅读
笑咖传媒:沈阳这家MCN的三个东北人靠“讲故事”圈粉1.2亿,拿下抖音“好内容穿越周期奖”
114阅读
西优:从“告趣子品牌”到2552位达人的生态底盘,正在做MCN行业的“隐形基建”
109阅读
陈泽:从绥棱网吧少年到4000万粉的“最强NPC”,一个把“OK了老铁们”做成超级符号的草根逆袭者
188阅读
天赋星球:从流量到资产,正在重写MCN的终局逻辑
137阅读
一数:从北大保送生到2588万粉的“B站掌管数学的神”,一个用免费网课让年轻人“不愿毕业”的数学UP主
151阅读
睿吉诺文化:3000位达人、年变现过亿,这家从重庆起家的MCN把“帮达人赚钱”做成了一门系统生意
117阅读
从“程十安an”到“姜乘澜”:一个美妆顶流的“消失”与“重生”,停更三年,归来仍是无数女生的“化妆启蒙老师”
126阅读
小约翰可汗:从“新人up主”到知识区首位千万粉UP主,“通辽宇宙”让1090万人笑着学历史
121阅读
侵尘文化:近4000位博主、4亿粉丝,这家宁波MCN靠一套“数据系统”重构了种草逻辑
131阅读
章小蕙:从“香港第一败家女”到200万人的“审美导师”,一个把“花钱”变成印钞机的传奇女人
191阅读
乾派文化:签约超2000名创作者、B站内容影响力榜榜首,这家深圳MCN把“数据工具”做成了内容底盘
115阅读
影视飓风Tim:从“网瘾少年”到1733万粉的“技术狂人”,一个把“无限进步”做成信仰的95后
130阅读
汪帅:从电视剧“枪手”到金鹰奖导演,一个“轴人”用长剧思维做短剧
137阅读
李玺威:做过甲方也做过乙方的编剧,最在意的是“把人物写好”
117阅读
华张一:她用五年画一首诗,把《聊斋志异》画成了另一种“人间”
136阅读
小河:一个说“我是田巧云和何萍所的第三个儿子”的人,九年捡回了一千首童谣
113阅读
何必:一个在真人短剧赛道打赢过的人,为什么在2024年All in AI
111阅读
志鸟村:写了20年行业文,他把“冷门”变成了“爆款”
111阅读














