点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:你被AI生成的假新闻骗过吗?起底AI造谣乱象
首页> 法治频道> 法治要闻 > 正文

你被AI生成的假新闻骗过吗?起底AI造谣乱象

来源:央广网2024-11-20 10:20

  近年来,人工智能(AI)技术发展迅速,成为全球科技领域的热点。AI已经从单纯的学术研究发展成为改变人类生活方式的重要力量。然而,却有一些别有用心之人将其变为造谣、敛财的工具。

  今年6月,一条“广东省五华县华阳镇一70多岁老人被殴打致昏迷,其孙子为此跳河自杀,打人者一审被判九年十个月”的短视频在互联网平台传播,引发大量网民关注、讨论。经公安网安部门开展调查发现,该视频的图文内容系移花接木、肆意编造的网络谣言。据造谣人员任某供述,这段长达几分钟、声色并茂的视频全是由AI合成的。目前,公安机关已依法对任某追究法律责任。

  此事件并非个案,随着AI技术应用越来越普遍,一些网民为博眼球、蹭热度,将AI技术用以编“伪消息”、造“假新闻”,以此来获得网民关注和点赞量,进而实现流量变现。

  专家表示,AI造谣具有定制化、门槛低、识别难、破坏大等特点,亟须加强监管。同时,可以通过设置AI生成内容提示标识、严格落实网络实名制等技术手段进行治理。

  AI造谣门槛低、危害大

  今年8月,一则“福建南平松溪县遭遇严重大风袭击,造成枣岭街一人死亡”的消息在网络上迅速传播。这则消息图文并茂,甚至还有逼真的视频片段,一时间引得大量网民关注和转发。但经公安机关核查发现,这竟然是用AI编造而成的网络谣言视频。

  “当前AI网络谣言具有仿真性和规模性的特征。根据输入指令的不同,AI在短期内能够批量生成大量内容不同的网络谣言,而且生成的网络谣言信息内容更加贴合人类表达方式,并结合深度伪造技术生成图片、视频、录音,使得社会公众越发难以辨识网络信息的真伪性。”北京航空航天大学法学院副教授赵精武告诉记者。

  记者随机用“AI文案速成”小程序测试,在对话框内输入“火灾”这一主题有关的内容创作指令,便生成了一篇新闻报道,甚至包括现场救援细节,及消防安全提示,让人真假难辨。赵精武指出,AI网络谣言的危害性主要表现为扰乱社会公共秩序,削弱政府公信力、诱发电信网络诈骗等。

  为牟取非法利益造假

  涉嫌构成多种罪名

  赵精武分析,个人或组织利用AI技术造谣背后的动机是复杂多样的,既包括部分网民为了寻求存在感、刺激感,故意编造AI网络谣言,也包括犯罪分子为了牟取非法利益,编造AI网络谣言,以便顺利实施电信网络诈骗等犯罪活动。

  今年6月中旬,一家MCN机构的实际控制人王某某因利用AI软件生成虚假新闻并大肆传播,扰乱公共秩序,被警方行政拘留。据警方通报,王某某共经营5家MCN机构,运营账号842个,自今年1月以来,王某某通过AI软件生成虚假新闻,最高峰一天能生成4000至7000篇。

  近日,浙江温州苍南公安成功打掉一个编传旧案谣言的MCN机构“网络水军”团伙。进一步侦查发现,相关账号和视频由某网络科技有限公司(实为以MCN模式运营的“网络水军”团伙)使用发布,该MCN“网络水军”团伙搜集全网敏感热点,随意设置虚假剧情,利用AI软件根据剧情自动生成多处关键情节虚假的文案,安排真人出镜解说,拼接网络中误导性素材后剪辑成所谓“原创”视频。该团伙明知上述视频充斥大量虚假、挑动群众情绪类信息,为博取流量、不法牟利,在多个平台公开发布,后造成虚假视频信息被大量浏览、传播,从而牟取非法流量返利。

  中国人民大学刑法学博士、北京市京师律师事务所实习律师黄福涛告诉记者,编造虚假的险情、疫情、灾情、警情,在信息网络或者其他媒体上传播,或者明知是上述虚假信息,故意在信息网络或者其他媒体上传播,严重扰乱社会秩序的,处三年以下有期徒刑、拘役或者管制;造成严重后果的,处三年以上七年以下有期徒刑。如果行为人不仅制作、传播虚假信息,而且目的是骗取互联网平台上不特定多数人的财产,则涉嫌诈骗罪。

  如何治理和防范AI网络谣言的产生?

  为治理AI乱象,深化网络生态治理,近年来相关部门出台了多项政策和措施。

  2023年1月10日起施行的《互联网信息服务深度合成管理规定》指出,任何组织和个人不得利用深度合成服务制作、复制、发布、传播法律、行政法规禁止的信息,不得利用深度合成服务从事危害国家安全和利益、损害国家形象、侵害社会公共利益、扰乱经济和社会秩序、侵犯他人合法权益等法律、行政法规禁止的活动。

  2023年8月15日起施行的《生成式人工智能服务管理暂行办法》规定,提供和使用生成式人工智能服务,应当遵守法律、行政法规,尊重社会公德和伦理道德。不得生成煽动颠覆国家政权、推翻社会主义制度,危害国家安全和利益、损害国家形象,煽动分裂国家、破坏国家统一和社会稳定,宣扬恐怖主义、极端主义,宣扬民族仇恨、民族歧视,暴力、淫秽色情,以及虚假有害信息等法律、行政法规禁止的内容。

  “加强AI领域的司法治理,需要立足于‘安全与发展并重’和‘分级分类监管’的基本原则,针对诸如生成网络谣言等技术滥用现象,既需要在事前阶段明确研发者、服务提供者以及网络平台的主体责任,还需要在事后阶段严格追究违法行为人的刑事责任、行政责任。”赵精武强调。

  同时,他表示,也可通过技术手段进行治理,譬如设置敏感关键词,禁止生成显著违法的信息内容;严格落实网络实名制,并配合水印技术,实现对生成内容的有效溯源;或者平台设置AI生成内容提示标识等。

[ 责编:刁慈 ]
阅读剩余全文()

相关阅读

您此时的心情

光明云投
新闻表情排行 日/周
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 来中国科技馆,和科学家击掌!

  • 理响中国·幸福有“理”

独家策划

推荐阅读
当前全球生态环境挑战日益严峻,科技创新是应对可持续发展挑战的核心力量。
2026-10-16 16:29
10月16日是第四十六个世界粮食日,所在周是全国粮食安全宣传周,主题为“创新当下,粮安未来”。从良种选育、智能农机到数字农业、精准储运,创新正成为粮食增产、节粮减损、营养提升的关键引擎。即日起,光明网联合科普中国推出系列科普视频,深入解读科技创新绘就的粮安答卷。
2026-10-16 08:46
在显示技术升级与人工智能赋能的双重驱动下,行业正跳出传统数字阅读的固有边界
2026-10-16 08:45
打造集技术研发、模型训练、系统验证及场景测试于一体的创新基地,推动人形机器人及具身智能技术从实验室研发阶段走向大规模产业应用。
2026-10-16 08:39
工业和信息化部、中央网信办、市场监管总局高度重视,在前期调查工作基础上,成立联合调查组开展核查,并依法依规处理。有关情况将及时公布。
2026-10-16 08:40
大会延续“零碳·科技”永久主题,以“智储新程 绿动全球”为年度主题
2026-10-16 08:35
“戈壁荒滩老风口,飞沙走石雁不留。托里县老风口蝶变的三部曲,为生态脆弱地区推动高质量发展、树立和践行正确政绩观,提供了深刻启示。树立和践行正确政绩观,就要算大账、算长远账、算整体账,既做显功、也做潜功,把生态优势转化为发展优势、民生福祉。
2026-10-15 09:51
常压下,水到0℃会结冰,这就是人们熟悉的相变,0℃即是相变的临界点。两篇论文的共同通讯作者、宁波东方理工大学助理教授余雪佳,把这个难题比作“在沸水中完好保存一件冰雕”。
2026-10-15 09:49
长久以来,古生物学界与教科书普遍认为琥珀皆源自种子植物(裸子或被子植物),最古老的确切记录定格在美国约3.2亿年前的石炭纪晚期。
2026-10-15 09:48
在芯片制造、航空发动机等高端硬核制造领域,技术迭代具有长周期、累积性、阶梯式特征,遵循循序渐进、层层突破的线性攻关规律。新征程上,持续深耕创新生态建设、迭代升级现代化创新体系,必能培育形成扎根中国、联通世界、内生增长、开放共生的创新新格局。
2026-10-15 09:46
受困于“小散弱”的格局,长期以来,我国科技期刊在国际学术传播体系中缺少属于自己的“拳头产品”与平台话语权——“在精品化发展方面,经过70余年积淀,我国已形成以《中国科学》《科学通报》《国家科学评论》等刊群为代表的高水平期刊方阵。
2026-10-15 09:45
AI时代,科研的“源头活水”是什么?不是算力,不是数据,而是人对未知世界的好奇与追问。
2026-10-14 11:28
截至8月末,三家基础电信企业的固定互联网宽带接入用户总数7.04亿户,比上年末净增1365万户;三家基础电信企业及中国广电的移动电话用户总数18.49亿户,其中5G移动电话用户13.11亿户。
2026-10-14 09:34
自然资源部会同国家发展改革委12日发布《矿产资源目录》。自然资源部矿产资源保护监督司负责人表示,矿产资源目录是矿产资源管理制度的重要基础,是制定矿产资源规划、实施矿业权管理、规范矿产资源勘查开采行为、征缴矿产资源税费、制定产业政策等工作的依据。
2026-10-14 09:40
与共康村相邻的巴达村,是第一批参与试种的村,也是西藏首个高海拔水稻实测亩产破千斤的村子,村民把“海拔3175米种水稻”写进村史。一粒水稻种子,不只改写了亩产数字,更改变了“西藏水稻只能在察隅、墨脱海拔1500米以下种植”的历史,为高原水稻纳入地方主粮增添可能。
2026-10-14 09:41
如今,AI正改变许多行业的底层逻辑,固守单一思维模式将面临严峻挑战,文理兼备、跨界融合才是稀缺能力——既有理科生的技术思维和逻辑能力,又有文科生的人文洞察和情感素养。未来更有竞争力的,可能不是最典型的文科生或理科生,而是既有专业深度,又能跨学科解决问题的人。
2026-10-14 09:48
不久前,在海南三亚崖州湾科技城,一场名为“青年π”的海洋主题对话临海开讲。高频下潜试出的不只有装备可靠性,也不断刷新人们对深海的认识。同一园区,由哈尔滨工程大学南海研究院孵化的海南水之声海洋科技有限公司,正给海洋装备搭水下“Wi-Fi”。
2026-10-14 09:49
目前各地正在开展流感疫苗接种。今年开始,国家对农村地区“一老一小”重点人群实施免费接种等相关支持性政策。为什么要接种流感疫苗?去年接种过,今年是否还需要接种?到哪里接种?
2026-10-13 10:03
我国城市盲道总里程以万公里计,公共场所无障碍设施持续铺开。数字世界的“盲道”畅通起来。精神文化的“视界”也在扩大。中国传媒大学师生发起的“光明影院”项目,近十年间每年制作上百部无障碍电影,把电影送到视障朋友耳边,今年还走进联合国教科文组织总部举办专场放映。
2026-10-13 10:01
记者近期从中国互联网络信息中心获悉:截至今年上半年,我国生成式人工智能用户规模超7亿人,普及率超50%。
2026-10-13 09:58
加载更多