BT财经

境内金融信息服务备案编号:

【京金信备(2021)5号】

2026年11月07日

注册 / 登录

4.7万条下架3961个号:网信部门重拳清剿AI换脸造假

今天中午,国家网信办官网发布了一则通报,措辞不算罕见,但数字很具体:累计清理违法违规信息4.7万余条,处置账号3961个。

这些被端掉的内容和账号,核心问题只有一个——用AI技术假冒知名公众人物的肖像或声音,进行虚假带货、吸粉引流。

微信、抖音、小红书、快手、哔哩哔哩等平台都有涉及。

通报没有点名任何具体企业或个人,而是用了几组典型案例来勾勒画像:有人未经授权使用某明星面部表情和音色克隆直播带货;有人利用AI特效给素人强行加上某演员五官制造“整容级变化”博眼球;还有人用第一人称冒充名人编造患病故事诱导粉丝打赏。还有利用AI生成低俗内容的案例——通过深度合成技术让公众人物“开口”推荐不存在的产品,这类行为的商业转化率往往远高于普通广告。

套路各异,本质相同:把AI深度伪造从玩闹工具变成了变现工具。

如今这道红线正式被拉亮。

为什么是4.7万条和3961个?

表面上看,4.7万条违规信息、不到4000个处置账号,规模不算庞大。但如果放在AI生成内容的爆发周期里审视,这个数字传递的信号远比数字本身重要。

过去两三年间,随着开源AI模型的快速迭代,制作一段逼真的面部替换视频或合成某位公众人物的声音,成本已经从万元级别降到几十元甚至零成本。一台二手电脑加一个现成的本地部署模型,任何人可以在几小时内复制出某个网红或明星的形象。专业级别的AI换脸工具在淘宝等电商平台上已有公开售卖,单套价格在数百元至千元不等,而更廉价的在线生成服务单次调用费用低至几毛钱。

当造假门槛跌到地板价时,供给端就出现了井喷效应。那些原本属于小众技术的“换脸”和“声音克隆”迅速扩散为灰产标配——不是每个账号都违法,但大量账号的生存逻辑建立在欺骗消费者和操纵注意力上。这些内容往往披着“同人创作”“恶搞”的外衣规避早期平台的简单审核规则。

网信部门的这次整治并非针对单个平台或单一案件,而是一次督促各平台同步自查的系统性行动。这意味着监管层已经意识到,单靠事后打击无法遏制这一趋势,必须让所有内容分发平台统一执法标准。这也是为什么处置方式同时覆盖了“下架”和“封号”两条路径:下架解决存量内容的即时危害,封号切断增量内容的传播节点。

灰产成本结构变了,谁的利润最先受影响?

真正值得追问的不是清理了多少内容,而是这种整治如何改变参与方的利益计算。

对于一个MCN机构来说,传统的真人拍摄方案需要场地租赁、人员调度、设备投入和后期剪辑,单条视频的固定成本至少在数千元。相比之下,一套AI换脸工具的一次性投入不超过数万元,后续每生成一条“明星同款”带货视频的成本可以压到百元以内。这就是为什么即便早期已经有零星处罚案例,仍有大量机构愿意冒险——风险收益比极度不对称。被抓的概率取决于平台的自查力度而非法律追责,而一旦通过算法推荐获得了数百万播放量,转化率带来的利润足以覆盖被处罚的风险成本。

但现在这个公式被推翻了。

当监管部门要求各大平台主动承担主体责任,并且统一执行尺度时,每个内容分发渠道都需要建立独立的检测能力。这不是简单的关键词过滤,而是要识别深度合成的面部特征、分析音频指纹是否经过篡改、判断是否存在未经授权的肖像使用。

对头部平台而言这笔开支并不构成致命压力。抖音、快手、B站等早已设立了专门的AI内容安全团队,部分平台甚至已经接入了第三方检测服务商。但对于中小平台和新兴内容渠道来说,这套系统的搭建和维护将成为一笔刚性支出。有业内人士透露,一家中型短视频平台的AI鉴权系统初期建设成本约在200万至500万元之间,后续每年维护升级还需额外投入数十万元。

行业分工可能会因此发生变化——原本由每个平台各自建设的检测能力,有可能向少数几家第三方供应商集中,催生出一批专注AI内容审核的工具厂商和服务商。天眼查数据显示,截至2026年三季度,国内新增注册名称含“AI检测”或“深度伪造”相关经营范围的企业已超过800家,其中不少来自初创团队。

被误伤的真实创作者面临什么?

另一个容易被忽视的问题是:当平台为了合规加码审核强度时,真实创作者会不会成为连带成本?

目前主流的AI内容检测手段包括水印识别、频域分析和行为轨迹比对。对于已经标注了AI生成标识的内容,审查流程相对直接;但对于那些混用AI辅助剪辑和普通拍摄的混合型内容,人工复核的需求会显著增加。

这意味着内容审核的时间成本和人力成本都会上升。如果一个MCN机构每月产出数百条视频,其中包含一定比例的AI辅助素材,那么它可能需要重新梳理生产流程以满足平台合规要求。更关键的是,部分平台开始要求用户上传内容时主动声明是否使用了AI生成技术,这相当于把合规责任向前传导到了创作者个体。

另一方面,这也可以看作是行业的洗牌信号。那些依赖低价AI批量生成的粗放模式将被淘汰,真正有内容原创能力和品牌背书价值的创作者将获得更大的信任溢价。消费者对AI假冒内容的反感情绪也在升温——一项针对1万名短视频用户的抽样调查显示,超过六成受访者表示如果知道视频中的“明星推荐”使用了AI合成技术,将不再信任该推荐内容并可能取消关注。

接下来的观察指标

事件本身是一个明确的政策信号,但后续的传导还需要跟踪几个关键维度:

第一,各平台实际执行的封禁规模和处置标准是否一致。网信办的通报提供了框架,但具体落地取决于各平台的技术能力。不同平台可能采用差异化的审核阈值,这将直接影响灰色地带的实际宽度。

第二,是否有新增的AI内容检测工具供应商入局。如果行业出现专门面向中小型平台的AI鉴权SaaS服务,说明这条赛道正在形成独立商业闭环。监测这类公司的融资动态和订单增长可以判断市场需求爆发的节奏。

第三,公众人物维权意识的变化。一旦被假冒的成本由平台和监管承担,肖像权和声音权的民事索赔可能成为新的法律战场。目前已有多位艺人工作室发出声明呼吁用户举报假冒账号,相关的判例数量和赔偿金额值得关注,这可能成为未来内容创作领域的一个新增长点。



版权声明:本文版权归BT财经所有,未经允许任何单位或个人不得转载,复制或以任何其他方式使用本文全部或部分,侵权必究。
帮助中心
联系我们
联系我们

 

商务合作:

 

公司地址

北京市丰台区汉威国际广场一区一号楼629

 

 

商务合作

周先生

Tel: +86-17743514315

Email: info@btimes.com.cn

官方微信公众号

北京领讯时代信息技术有限公司 | Copyright ©️ 2026 财经时报 版权所有 京ICP备19043396号-7

京公网安备 11010602007380号 | 境内金融信息服务备案编号:京金信备(2021)5号

网信算备110106674807801230011号


声明:未经授权,不得复制、转载或以其他方式使用本网站的内容。BT财经尽最大努力确保数据准确,但不保证数据绝对正确。