中央网信办违法和不良信息举报中心最近上线了"AI 应用乱象举报专区”,专门用来整治人工智能产品里的那些猫腻。这次一共列了 14 条具体的违规清单,把以前那些模糊地带给划清楚了。
到底管了什么?
这 14 条违规项分成了两拨,挺有意思:
第一拨是“造出来的东西”有问题(技术侧)
主要是管那些做 AI 的公司,别乱来:
- 没办户口:用的大模型没去备案,直接用。
- 看门狗太懒:平台该有的安全审核功能没装,或者装了不灵光。
- 喂坏料:训练 AI 的数据本身就有安全隐患。
- 下毒手:有人故意往训练数据里掺假,坏 AI 的模型。
- 不贴标签:AI 生成的内容,不给个显著的“我是 AI 做的”标记,让人以为是真人写的。
- 乱用技术:拿 AI 去干非法勾当。
- 开源模型不管:对开源的 AI 模型不管不顾,出了事找不到人。
第二拨是“生成的内容”有问题(内容侧)
这招是盯着 AI 产出的东西看,主要是防着它去祸害普通人:
- 篡改历史:拿 AI 去歪曲经典作品或者瞎编历史事实。
- 生产垃圾:批量制造没营养的垃圾信息。
- 造谣生事:编假新闻到处传。
- 换张脸:用深度伪造技术,把 A 的脸 P 到 B 身上,冒充别人。
- 搞黄搞暴:生成色情、暴力内容。
- 欺负小孩:专门生成或传播针对未成年人的不良内容。
- 网络水军:利用 AI 产品去带节奏、炒假热度。
- 其他:还有别的违规情况。
这背后到底想干啥?
这么细的分法,其实透着一股子“长牙齿”的狠劲:
-
两头都卡死:以前可能只盯着内容看,现在连底层的“技术侧”和上层的“内容侧”一起抓。
- 技术侧上,那些还没备案就敢拿“野路子”模型上手的公司,直接就是法律风险。
- 内容侧上,特别是“深度伪造”和“欺负小孩”这两条,明显是冲着咱们社会最敏感的神经去的,尤其是保护孩子这块,态度很坚决。
-
行业要“动真格”了:
- 成本要涨:以前随便搞搞就能上线,现在得把“备案 – 训练 – 生成 – 审核”这一整套流程跑通。特别是用开源模型的,如果管不好,出了事就得背锅。
- 真假难辨是常态:以后网上内容,你得时刻准备着看有没有那个“我是 AI 生成”的标记。这对做新闻、搞营销的来说,商业模式估计得大洗牌。
- 数据就是命:既然强调训练数据的风险和投毒,那说明以后 AI 模型好不好使,全看数据是不是干净、来路正不正。
咱普通老百姓能咋办?
官方这次没打算单打独斗,而是喊来了咱们:
- 全民监督:官方号召大家去举报。毕竟 AI 技术更新太快,监管部门不可能 24 小时盯着每一个新出来的违规手段,靠大家随手举报,能省不少力气,也能把那些偷偷摸摸的坏东西抓出来。
- 逼企业整改:举报通道一开,那些搞“害群之马”的企业就藏不住了,压力一大,估计得赶紧自查自纠。
最后说两句
中央网信办这一手,把 AI 治理从“大概齐”推到了“精细化”。以前可能只是定个大方向,现在直接给你列了 14 条红线,连怎么罚都划得清清楚楚。
说实话,这既是给行业吃了一颗定心丸,也是泼了一盆冷水。AI 发展太快,总得有人来踩踩刹车,不然真怕到时候连人都认不出自己。至于怎么在“创新”和“安全”之间找平衡,估计还得看后面行业怎么折腾了。
(注:内容整理自中央网信办官方通报)
