查处4.9万个账号、数字人被点名:数字人创作者的红线与安全区自查

源自81位全网作者

09:03

昨天(9月2日),中央网信办通报"清朗·整治AI应用乱象"专项行动第二阶段结果:累计清理违法违规信息561万余条,查处账号4.9万余个,处置违规网站、应用程序等2400余个。中国新闻网如果你正在做数字人口播、数字人直播或者AI漫剧,这份通报不是看个热闹——被点名的七类典型案例里,有好几类直接对着数字人创作者的日常来的。

先看通报点了谁

第一类,AI换脸、换声假冒他人。通报写明,利用AI"换脸"“换声"等技术假冒仿冒公众人物形象、生成合成图片视频借机营销牟利的账号已被依法依约处置。央视新闻关键词是"假冒”:不管对象是明星、企业家还是网红,没拿到授权就拿别人的脸和声音商用,就是红线。

第二类,用AI数字人虚假宣传带货。通报里的账号生成合成虚假灾害现场、编造不实热点,打造AI数字人进行虚假宣传带货、误导老年人,已被依法依约处置。中国新闻网信号很明确:数字人带货本身不违规,违规的是让数字人说的那些假话。保健品、理财这类类目里,让数字人喊"稳赚""神效"的,正是重点关照对象。

第三类,用AI"托管"做网络水军。通报的账号为AI"托管"软件引流,模拟真人运营账号、评论互动,生成大量低质同质文案。央视新闻市面上流传的"数字人矩阵号"“无人直播一键包”,不少本质就是这套玩法,这次被点名,值得格外警惕。这类灰色交易其实早有苗头,新华社此前调查中,记者以学习AI起号为由咨询博主,就录到了售卖"AI起号教程"的对话。新华网

查处4.9万个账号、数字人被点名:数字人创作者的红线与安全区自查

第四类,AI"魔改"经典生成"数字泔水"。滥用AI技术"魔改"《三国演义》《西游记》等经典名著、颠覆人物人设博取流量的账号也被处置。中国新闻网做AI二创、AI漫剧的记住:"经典IP+AI猎奇蹭流量"这条路,已经走不通了。

真正收紧的,是三层规则网

对数字人创作者来说,通报只是表层,真正要消化的是三层已经生效的规则。

第一层是标识。去年9月1日,《人工智能生成合成内容标识办法》正式施行,要求AI生成合成内容解决"哪些是生成的"“谁生成的”"从哪里生成的"问题。人民网今年4月,“剪映”"猫箱"App和"即梦AI"网站就因为未有效落实AI生成合成内容标识要求,被网信部门约谈处罚。新华网通报还提到,各平台正在动态扩充人脸库、声纹库,上线人脸实时治理系统。央视新闻也就是说,"没标AI"这件事,平台识别能力正在持续补上。

第二层是微短剧。9月1日起,《微短剧发展管理办法》正式施行。新华网《办法》明确要求,使用AI技术生成、制作的微短剧,要在每集明显位置添加提示标识,并按投资额度和题材实行三级分类备案管理。AI短剧的盘子已经非常大:上半年各平台共上线微短剧36.7万部,平均每天有超过1500部AI新剧涌入市场,占比超过74%。新华网平台也已经动手:红果宣布启动高频AI脸、同质化治理专项,抖音的短剧预检工具8月3日上线,能在成片上线前做肖像权、版权预检。做AI漫剧的,"上线前自查"必须进流程了。

查处4.9万个账号、数字人被点名:数字人创作者的红线与安全区自查

第三层是平台执行规则。8月中旬,小红书发布AI违规直播治理公告,把违规分成三类:AI身份造假——用换脸、声音克隆、数字人伪装成明星、企业家、头部网红等公众人物的,无法声明豁免,一经查实关停并处12小时禁播;AI低质直播——穿模、声音失真的,限流;使用AI但未声明的,停推,但开启"AI声明"可实时豁免。小红书注意,这个"AI声明"开关默认关闭、不保留历史状态,每次开播都得重新打开,开启后观众端会看到"含AI生成内容"标签。平台的处置也不是纸面文章:2025年今日头条累计处置超260万条低质AIGC内容和1.1万个相关账号,红果短剧今年一季度已累计下架违反平台治理规范的漫剧1718部。新华网

一个授权,一个没授权,结局完全不同

这次通报前后,刚好有一个对照案例值得看。8月初,戚薇官宣AI数字分身"韩清夏"并主演AI漫剧《末日盛夏》,角色长着和她一样的面孔,但她说这是由合法授权的数字分身制作的,用她的话讲,与其被别人"拿走"自己的脸,不如主动出击。中国新闻周刊

查处4.9万个账号、数字人被点名:数字人创作者的红线与安全区自查

把通报和这个案例放在一起看,分界线其实很清楚:同样是数字人技术,先授权再使用,是正常的商业案例;先换脸再变现,就是通报里的典型案例。区别就在"授权"和"声明"四个字上。

自查清单:红线、声明、安全区

红线,别碰:

  • 换脸、换声假冒明星、企业家、网红开播或发视频

  • 让数字人在保健品、理财、灾情等高风险类目里说虚假宣传话术

  • 用AI托管工具跑矩阵号、模拟真人点赞评论

  • 恶意删除、篡改AI标识,伪装成真人内容

要声明、要手续:

  • 直播用数字人形象或AI声音,每次开播打开平台"AI声明"

  • AI短剧、AI漫剧每集加显著位置标识,上线前跑一遍肖像权、版权预检

  • 使用真人形象(包括合作方、网红),先拿书面授权

安全区,放心做:

  • 克隆自己的形象和声音做口播,你是自己肖像权的主人

  • 纯虚拟角色、Vtuber,平台已明确不属于违规

  • AI换装、滤镜等辅助制作

最后说两句

社区里流传"数字人直播封号率8%"的说法,我查了下,这个数据出自某开源项目的推广帖,不是任何平台的官方口径,不必恐慌。但它指向的底层逻辑是真的:录播循环、零互动的直播间,会被平台判定为虚假直播,这类处置在平台治理公告里已经有明确条款。

技术方向也值得继续盯。今年世界人工智能大会上,从AI智能体手机到实时多模态数字人,内容生产能力还在快速迭代——“给它一张静态照片,它还你一个能实时说话、实时聆听、实时反应的虚拟人”,每一帧都在线生成。新华网

查处4.9万个账号、数字人被点名:数字人创作者的红线与安全区自查

监管在滚动跟进,技术也在滚动迭代。对数字人创作者来说,与其赌"查不到我",不如把"声明+标识+授权"做成标准流程——这是今天就能完成的低成本动作。

内容由AI生成
0
扫一下,分享更方便,购买更轻松
0评论

当前文章无评论,是时候发表评论了
提示信息

取消
确认
评论举报

最新文章 热门文章