最新资讯
“一秒生成制服照”? AI岂能如此换装
来源:经济参考报 | 作者: 部编 | 发布时间 :2025-10-13 | 351 次浏览: | 🔊 点击朗读正文 ❚❚ | 分享到:
AI换装功能在短视频平台流行,用户可上传生活照生成军装或警服照。然而,不法分子利用此技术伪造军警身份进行诈骗,如合成虚假证件、冒充军官骗取钱财,甚至恐吓老人缴纳保证金。平台审核缺位,用户可轻易获取军装模板并生成未标识的AI内容,易误导公众并损害军警形象。专家指出,此类行为违反相关法规,建议加强算法审查、落实内容标识,并加快立法以明确责任,同时提高公众意识,抵制违规应用。

  9月1日起施行的《人工智能生成合成内容标识办法》要求AI合成内容必须明确标注,但记者在使用多款AI换装应用后发现,用户合成发布的视频并未标注,容易让人产生混淆。

  AI变装技术,降低了伪造身份的技术门槛。在某购物平台上,记者以“AI+军装照”为关键词,搜索到有商家公开出售佩戴军衔的各军种和警察服装模板素材。店家表示,只需要花不到一元钱的价格就可拍下所有这些素材。

  记者拍下后,店家很快发来一个网盘链接,内部有数十款供P图的军装模板文件,用户可根据需要的款式和级别,通过PS或AI等方式将自己的头部肖像替换上去。记者尝试将AI生成的军装照和肖像照用于多款社交平台账号,发现并无审核难度,均可正常替换。

  北京市炜衡律师事务所律师汪高峰说,一些内容平台和第三方软件疏于审核,纵容虚假内容传播,可能会降低公众对军人、警察职业的信任度和敬畏感。

  江苏省政府参事室特约研究员丁宏表示,AI降低了伪造身份的技术门槛,网络上曾出现AI合成的警察抓人视频并配上所谓警情通报,涉嫌传播违法有害信息。这些内容可能误导公众,引发不必要恐慌,扰乱正常社会秩序。

  国家网信办不久前发布了一起执法典型案例:浙江某公司运营的App提供视频换脸、图片换脸、照片舞动配音等图片处理功能,用户可对上传图片、视频中的人物进行换脸,但未按规定落实安全评估要求,相关深度合成内容也未作显著标识,存在较大安全风险,违反《互联网信息服务深度合成管理规定》《生成式人工智能服务管理暂行办法》等规定。网信部门责令平台对该App予以下架处置。

  加强审查审核 防止滥用“AI换装”

  《人工智能生成合成内容标识办法》明确,服务提供者提供生成合成内容下载、复制、导出等功能时,应当确保文件中含有满足要求的显式标识;任何组织和个人不得恶意删除、篡改、伪造、隐匿办法规定的生成合成内容标识。

  国家网信办等十部门今年印发的《互联网军事信息传播管理办法》规定,互联网军事信息服务提供者和用户使用深度合成、生成式人工智能等新技术新应用,不得损害人民军队形象。

  汪高峰等法律人士建议,AI开发者在算法设计中应加强合规性审查,对警察和军队标识等敏感信息内容的使用,应在相关部门指导下,严格把关审核。平台方应该严格落实《人工智能生成合成内容标识办法》,对“AI换装”类产品添加明显标识,并建立审核机制,对违规内容及时下架封禁。

  丁宏建议,加快相关立法进程,强化刑事司法衔接。相关部门尽快明确AI涉军涉警等图像的使用边界、责任划分及法律后果,特别是对刻意丑化军人警察形象、借机实施招摇撞骗等行为,要依法依规严肃处理,形成法律震慑;对可能影响国家安全、造成社会危害的行为,追究AI工具开发者和内容平台的连带责任。

特别推荐