点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:一键“变脸”背后暗藏诸多风险 AI换脸技术滥用乱象调查
首页> 法治频道> 法治要闻 > 正文

一键“变脸”背后暗藏诸多风险 AI换脸技术滥用乱象调查

来源:法治日报2025-11-24 10:30

漫画/李晓军

  本报记者 赵丽

  本报实习生 王艺霏

  “你是温峥嵘,那我是谁?”

  演员温峥嵘本人浏览短视频时,意外发现“自己”正在直播。她在评论区提出质疑后,被拉黑并踢出直播间。而对方仍在用“她的脸”直播带货。

  温峥嵘近期遭遇的“冒牌直播”事件,是AI换脸技术滥用的典型写照。多个直播间出现冒用温峥嵘形象的AI换脸带货行为。其团队日均举报50个假冒账号并发出律师函,可造假账号仍屡禁不止,令她陷入“很难证明我是我”的困境。

  这一现象并非孤例。《法治日报》记者近日调查发现,AI换脸与声音克隆技术已形成一条涵盖教程传播与定制服务的完整灰色产业链,对个人权益、平台监管等均构成严重威胁。

  换脸技术被用于违法犯罪

  11月5日,温峥嵘在短视频账号进行3次以“我是真的温峥嵘”为主题的直播,讲述近期被AI伪造、换脸直播带货的经历。

  此前,已有多位名人深受AI换脸困扰。主持人李梓萌的AI伪造形象出现在直播间,虚假宣传深海鱼油“能治病”;奥运冠军全红婵的声音被AI克隆,用于售卖土鸡蛋;医生张文宏被换脸,其形象被用于在直播间售卖某款蛋白棒产品,销量已过千。张文宏自述:“这些假的合成信息就像蝗灾一样,一次又一次发生……”

  11月14日,中央网信办官方账号发文表示,有网络账号利用AI技术仿冒公众人物形象,在直播、短视频等环节发布营销信息,误导网民,涉嫌虚假宣传和网络侵权,严重破坏网络生态,造成不良影响。网信部门严厉处置一批违法违规网络账号。同时,督促网站平台发布治理公告,举一反三,开展集中清理整治,目前已累计清理相关违规信息8700余条,处置仿冒公众人物账号1.1万余个。

  AI换脸技术的滥用甚至延伸至刑事犯罪领域。2024年10月,江苏省南京市玄武区人民法院审理的一起案件中,被告人符某非法获取195万条公民个人信息,利用AI换脸软件生成动态人脸视频,成功突破某金融支付平台的人脸识别认证系统,登录被害人的支付账户,盗刷银行卡进行消费。法院以侵犯公民个人信息罪、信用卡诈骗罪数罪并罚,判处符某有期徒刑4年6个月。

  2024年,内蒙古鄂尔多斯一名消费者遭遇AI换脸诈骗,险些损失40余万元。视频通话中,不法分子利用AI换脸技术冒充该消费者朋友,以资金周转为由,诱骗其转账40余万元。好在警方介入及时,未造成实际损失。

  相关教程和服务遍布网络

  记者调查发现,AI换脸与声音克隆的教程及服务在网络平台流通。记者在各类社交平台以“AI换脸”“声音克隆”等为关键词搜索时,虽然平台会弹出官方提示,提醒用户使用需“合法合规、注意辨别”“切勿轻信、谨防诈骗”,但相关内容仍在网络空间大量存在。

  比如,有相当数量以“AI科普”为标签的账号在各平台公开分享换脸教程。这些视频通常详细列出可访问的网站地址,逐步演示操作流程,并附有技术细节说明,如建议用户“尽量保证替换素材与原素材的人物尺寸一致、画面干净无遮挡”,以保证生成效果。

  根据教程指引,记者登录相关网站验证发现,部分平台确实免费提供AI换脸或声音制作服务,支付几十元购买会员后,还能解锁去水印、高清放大等进阶功能。

  除公开教程外,更为隐蔽的交易正通过网盘渠道进行。

  记者观察到,有一些打包出售的“完整教程”价格低至8元,且卖家声称“没有市面主流软件那么多限制”。这类教程通常包括云端工作流地址资料和详细的操作说明,以及图片去AI化、舞蹈动作模仿、人脸精修等扩展功能与相关的提示词教学。

  声音克隆类的教程售价低至9.9元,并在宣传中强调“支持任何形象和声音”。记者询问商家了解到,只要购买此安装包,无需注册会员即可免费破解使用对口型、克隆音色等功能。据商家描述,只需提供一段音频文件,系统便可以在无身份认证的情况下进行克隆,单次支持30秒音频,且不限次数。

  为验证此类教程的实际应用效果,记者购买了一份标价8元的换脸教程。该教程包含一段5分钟的视频教程和两份文字材料,明确提供了平台访问链接、新用户福利信息和操作步骤,并特别注明“对敏感词限制极少”“生成内容无水印”。

  记者发现,该平台提供多种功能模板,内容涵盖替换视频人物、给人物指定部位更换衣物、对图片中人物身体部位进行放大或动态处理等不同功能。每个模板均配备相应的提示词教学和详细操作步骤,用户只需上传参考图片、视频或待处理素材,等待一段时间即可生成内容。

  记者实测使用一段时长5秒的视频进行换装操作,约3分钟后成功生成视频。画面中,人物动作与神态还原度很高,被遮挡部位的服装贴合效果也较为自然、精准。

  记者注意到,该平台内容生成功能采用运行时长计费模式,每秒收费0.2虚拟币。教程中附有专属邀请码,使用者可凭此免费领取1000虚拟币。平台还设置了虚拟币奖励机制:每天登录赠送100虚拟币,邀请新用户可获500虚拟币。

  更换表述可绕过审核机制

  电商平台上,有商家为AI换脸服务披上伪装售卖。

  在某购物平台,记者直接搜索“AI换脸”,显示无任何结果。但记者观察到,有部分商家会在商品详情页用表情符号隐喻其能提供换脸“服务”;也有商家以“啥都能做”“不限视频内容,懂的都懂”为宣传语,暗示私聊客服了解商品详情。

  记者了解到,10秒换脸视频报价从15元至300元不等。例如,有商家提出,20秒内视频(包括仅生成音频的)统一收费80元;部分商家还推出298元200分钟生成时长、490元年卡等套餐,承诺“一对一教学指导”,宣传语中不乏“让朋友客户难辨真伪”等诱导性表述。多数商家仅核查素材内容,对用途与来源未作甄别。

  为深入了解AI工具自身的内容审核机制,记者对用户使用较多的10款文生图、文生视频AI工具进行实测,以对明星“一键变脸”等指令测试其技术边界与审核能力。

  结果显示,仅一款AI工具明确拒绝生成真实公众人物虚拟图像。部分应用在简单操作后,即可生成高度逼真的明星虚假内容。

  例如,“即×”起初会以“涉及肖像权”为由拒绝明星换脸、变装指令,但记者选择替代选项后仍可生成;“豆×”“文×”等直接执行指令且无显著风险提示;“通×”“天×”等仅在生成内容角落位置标注不清晰的“AI生成”字样。

  值得注意的是,部分AI工具在首次接收到涉及真实人物的指令时会予以拒绝,但通过选择平台的替代选项或更换表述,用户仍可绕过初始限制,实现图片或视频生成。

  有平台方公开回应称,AI内容侵权识别属于行业性技术难题,恶意仿冒账号在持续与平台进行技术对抗,未来会持续加大技术投入,积极应对挑战,维护创作者、商家及消费者的合法权益。

  

[ 责编:孙满桃 ]
阅读剩余全文()

相关阅读

您此时的心情

光明云投
新闻表情排行 日/周
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 我国成功发射探源计划探路者卫星

  • “神州北极”漠河“找北游”升温

独家策划

推荐阅读
绿色算力既是数字基础设施建设的重要方向,也是清洁能源优势转化为发展动能的现实路径。当前,人工智能技术加快迭代,算力在科技创新和产业升级中的基础作用日益凸显,持续增长的计算需求对电力保障能力和能源利用效率提出了更高要求。
2026-11-12 01:30
把两根绳子接起来量一量,总长就出来了,不必先把两段长度换算成数字再相加。模拟计算走的是这条路:不把问题拆成一条条指令,而是让物理规律直接给出结果。北京大学人工智能研究院孙仲团队牵头,联合意大利米兰理工大学、IBM苏黎世研究院和美国一家公司的研究人员,为正在升温的模拟计算研究提出“现代模拟计算”统一框架。相关论文于近日发表。
2026-11-12 01:30
眼下,重庆市彭水苗族土家族自治县的红薯正值采挖时节,一辆辆轻型卡车在通往种植基地的“产业路”上穿梭,将收获的鲜薯运送到县工业园的重庆乐薯农业有限公司,经过严格的品质检测、清洁和一系列加工程序后,便成了人们常见的红薯淀粉。
2026-11-12 02:05
11月10日,记者从山东省泰安市人民政府新闻办举行的发布会获悉,泰安将科学有序、免费开放部分泰山景区等场地,为国内外机器人企业、科研机构提供实景训练测试条件,同时统筹做好场景供需对接、数据算力支撑、落地服务保障等,推动泰安新型工业化强市建设。
2026-11-12 02:05
当前,全球新一轮科技革命和产业变革加速演进,以生成式人工智能为代表的通用目的技术正从生产端加速向消费端传导。餐饮住宿、文旅出行、养老照护、教育培训、家政美容等服务消费,直接关系到千家万户的日常生活品质。推动人工智能在服务领域深度应用,让前沿技术成果惠及更多消费者,已成为各国促进消费、提升服务业竞争力的共同关注点。
2026-11-12 02:15
全透明光伏发电玻璃可使玻璃幕墙建筑成为分布式光伏电站;新一代柔性太阳能电池阵,能为中国空间站提供电力保障。下一步,我们要高水平推进“中国碳谷”建设,形成创新合力,打通基础研究、技术攻关、产业孵化和品牌塑造全链条。
2026-11-11 09:27
国家卫生健康委、国家医保局、国家中医药局、国家疾控局共同制定印发《关于进一步做好创新药安全合理配备使用工作的通知》,满足群众多元化用药需求,提高疾病治疗效果,保障医疗质量安全。
2026-11-11 01:45
培育和发展新质生产力急需高质量创新人才。高校的独特之处,在于教育、科技、人才要素集聚,它处在科技第一生产力、人才第一资源、创新第一动力的结合点上,也承担着将三者统合起来的制度功能。
2026-11-11 01:45
与其说是AI解出了难题,不如说是人类在AI的协助下拓展了边界。这带来的不仅是解题速度的提升,更是一场深刻的科研范式之变。
2026-11-11 01:45
主动对接国家西部战略和甘肃现代产业体系建设
2026-11-11 01:45
“把技术真正用到生产线上,把产品的附加值提上去,为三峡库区的发展出一份力。”11月7日,重庆三峡医药高等专科学校青年教师黎春红,在重庆国际人才交流大会第四届重庆三峡人才节开幕式上的发言,道出了扎根库区青年人才的共同心声。
2026-11-11 01:45
2026文化科技产业发展论坛9日在湖南长沙开幕,在论坛现场,2026文化科技融合十大典型案例以及20个创新案例发布。
2026-11-10 01:40
访客随手拿起一张,掏出手机或用现场扫码器扫一扫二维码,技术亮点、应用场景、项目负责人信息等全部跃然眼前。厚重的专利卷宗、深奥的学术论文,就这样化作产业人士可以快速读懂的内容。
2026-11-10 01:40
镜头这边,是华东政法大学研支团的黄祖维、常秩豪、杨朗;镜头那头,是云南普洱景东华政附属三合麦地小学的小学生,和新疆喀什巴楚县第二中学的初高中生。500多个孩子,隔着屏幕看进博。这是华政研支团连续第五年开展“云端看进博”,3位讲师刚结束一年支教,曾站在这两处山乡讲台,如今是进博会的“小叶子”。
2026-11-10 02:00
事实上,这并不是镜片行业一次偶然的“乱”。这背后,是标准的缺失与监管模糊地带的长久存在。眼镜虽小,却关乎几亿人的明亮“视”界。近视防控镜片行业信任的“标尺”,不仅应尽快立起来,更要立得牢。
2026-11-10 01:40
那时,一封薄薄的书信从江苏昆山寄到钱七虎手中,寄信人叫李珍珍,一个还在读中学的女孩。她不是钱七虎的亲孙女,而是他在家乡昆山资助的第一个孩子。
2026-11-10 01:40
11月10日,第九届进博会将落下帷幕。25年前的11月10日,多哈的一声木槌宣告中国加入世界贸易组织。25年前,中国拥抱世界市场;25年后,世界共享中国市场。这个特殊的日子,标注出中国与世界关系的深刻变迁。
2026-11-10 02:00
美国国家航空航天局(NASA)近日确认,“尼尔·格雷尔斯·斯威夫特天文台”(以下简称“雨燕”)已于美国东部时间11月4日7时39分(北京时间4日20时39分),在印度尼西亚北苏门答腊地区上空再入地球大气层。NASA表示,10月20日,“雨燕”的轨道高度已下降至约275公里,无法再稳定维持科学观测所需的姿态,任务团队随后结束了其运行。
2026-11-09 10:11
携程研究院分析师方泽茜也用“花香自有蝶飞来”作出注解——入境“科技游”火热,正是中国制造与科技创新能力向外溢出,落到旅游消费的直接体现。在方泽茜看来,“科技游”为青少年搭建起连接知识与兴趣的桥梁,“社交打卡+文化沉浸”的科技场景,精准契合他们的偏好。
2026-11-09 10:11
大型邮轮被誉为造船工业“皇冠上的明珠”。继2023年11月“爱达·魔都号”华丽亮相,11月6日,第二艘国产大型邮轮“爱达·花城号”在上海交付,船型体量更大,配套设备更先进,船体也更加秀美。
2026-11-09 10:11
加载更多