中央网信办部署开展"清朗 · 整治 AI 应用乱象"专项行动,重点整治"数字泔水"等问题
阅读原文· ithome.com中央网信办近日部署开展为期4个月的“清朗·整治AI应用乱象”专项行动。行动分为两个阶段:第一阶段聚焦AI技术源头治理,重点整治大模型未备案、安全审核不足、训练语料安全、数据投毒、生成内容标识不到位等7类问题;第二阶段聚焦信息内容乱象,重点打击利用AI生成“数字泔水”、制作虚假信息、假冒他人、发布不良信息、侵害未成年人权益、从事网络水军活动及违规提供AI服务等7类突出问题。旨在规范AI服务与应用,清理违法不良信息,依法处置违规账号和平台。
IT之家 4 月 30 日消息,据“网信中国”微信公众号,为规范 AI 服务和应用,促进行业健康有序发展,保障公民合法权益,近日,中央网信办印发通知,在全国范围内部署开展为期 4 个月的“清朗 · 整治 AI 应用乱象”专项行动。
中央网信办有关负责人表示,本次专项行动分两个阶段开展。
第一阶段为“清朗 ·AI 应用服务典型违规问题”专项治理行动,重点整治未按规定履行大模型备案登记义务、安全审核能力不足、大模型训练语料安全、AI 数据投毒、生成合成内容标识落实不到位等问题,强化 AI 技术源头治理。
第二阶段为“清朗 · 整治 AI 信息内容乱象”专项行动,聚焦利用 AI 技术生成“数字泔水”、制作发布虚假信息、散播暴力低俗等不良信息、假冒仿冒他人、侵害未成年人权益、从事网络水军活动等问题,坚决清理违法不良信息,依法处置处罚违规账号、MCN 机构和网站平台。
据IT之家了解,第一阶段重点整治 7 类突出问题。
一是未按规定履行大模型备案登记义务。未按照《生成式人工智能服务管理暂行办法》规定,向网信部门履行备案登记程序,存在“应备未备”情形。
二是 AI 平台安全和审核过滤能力不足。模型底层安全能力缺失,在设计训练及部署应用阶段,价值导向存在偏差、纠偏能力不足。缺乏安全围栏机制、审核过滤能力不足,生成违法不良信息,或在生成内容中包含违法不良信息的云盘及网站链接。
三是大模型训练语料安全问题。训练语料审核把关不严,模型训练数据存在违法不良信息。训练数据来源合规性存在问题,模型训练过程中使用未经授权的文字、图片、音视频等数据。训练数据覆盖面不足、高质量语料缺乏。