图片视频都能造假 AI深度伪造是怎么回事?

分类:5版 民生社会   来源:   作者:   发布时间:2024-06-12

A+  |  a

  AI“换脸”实施诈骗、AI伪造图片传播谣言、AI“复活”逝者引发争议……随着人工智能技术的不断发展,AI深度伪造的例子屡见不鲜。不少网民惊呼,以前总说“有图有真相”,如今我们连图片和视频也不敢轻易相信了。

  今年2月,香港一家公司遭遇“AI变脸”诈骗,损失高达2亿元港币。据悉,这家公司一名员工在视频会议中被首席财务官要求转账。然而,会议中的这位“领导”和其他员工,实际都是深度伪造的AI影像。诈骗者通过公开渠道获取的资料,合成了首席财务官的形象和声音,并制作出多人参与视频会议的虚假场景。

  基于深度合成技术引发的侵权案例,常见的手法是冒充熟人实施电信诈骗。不久前,江苏省句容市的杨女士在收到“女儿”多条要求缴纳报名费的语音后,向骗子账户转账3.5万元。相关办案民警反复提醒:“遇到转账一定要慎重,眼见不一定为实。”

  上海人工智能研究院院长宋海涛给公众应对深度伪造支了三招:一是掌握甄别AI“换脸”的简单技巧,比如要求对方在视频对话时在脸前挥挥手,看是否出现图像扰动等;二是学会使用检测深度伪造的工具和软件;三是保持合理怀疑。“保持谨慎和警惕,是公众应对AI造假的第一道防线。”宋海涛说。

  如何把生成式AI的强大能力用于建立信息安全规范,业界一直在探索“用技术治理技术”的方案。

  瑞莱智慧是清华大学人工智能研究院孵化的企业,专攻人工智能安全领域。瑞莱智慧总裁田天介绍,其公司研发的生成式人工智能内容检测平台,支持多种合成类型的图片、视频、音频、文本的真伪检测,应用场景包括打击网络诈骗和声誉侵害行为、检测网络内容合规性、检测音视频物证真实性等。

  “利用AI技术治理AI犯罪,本身也是一个不断博弈的过程。”田天介绍,“红队测试”是目前生成式AI治理的重要手段,通过模拟攻击者行为,针对性地发现、修补潜在系统漏洞。

  此外,业界也在推动落实AI生成内容标识制度。中国政法大学数据法治研究院教授张凌寒表示,全国信息安全标准化技术委员会在《网络安全标准实践指南——生成式人工智能服务内容标识方法》中给出了内容标识方法:通过在交互界面中添加半透明文字的方式显示水印标识,或通过人类无法直接感知但可通过技术手段从内容中提取的隐式水印标识,提示内容由人工智能生成。

  国际测试委员会创始人、中国科学院计算所研究员詹剑锋建议,应将AI深度伪造纳入监测机制,遇到负面影响较大的造假行为,第一时间快速反应。通过建立针对深度伪造有害内容的群众举报机制,提高公众的判断力、鉴别力。

  如何在释放AI创新活力的同时,有效防范信息安全风险?不少专家表示,尽快建立健全相关治理规范至关重要。对外经济贸易大学数字经济与法律创新研究中心主任张欣表示,“通过立法为AI开发划定基本底线,明确合规义务,可以从源头防范风险。”

  去年国家网信办等部门发布的《生成式人工智能服务管理暂行办法》标志着生成式AI有了专门性行政法规。2023年1月施行的《互联网信息服务深度合成管理规定》明确提出,“任何组织和个人不得利用深度合成服务制作、复制、发布、传播法律、行政法规禁止的信息”“可能导致公众混淆或者误认的,应当在生成或者编辑的信息内容的合理位置、区域进行显著标识”等等。

  在法律层面,虽然已有《中华人民共和国网络安全法》《中华人民共和国数据安全法》《中华人民共和国个人信息保护法》等法律,但针对AI领域的司法治理仍有进一步细化的空间。“现有法律法规对数据权属、保护范围等问题暂无具体规定。在人工智能生成结果的保护方面,民法典的原则性条款具体适用还有一定难度。”北京互联网法院综合审判三庭负责人颜君建议,要进一步加快人工智能方面的法律供给,推动国家层面生成式人工智能规范的确立。

  在伦理层面,AI“复活”等行为引起部分用户的反感和恐惧。对此,科技部等10部门印发《科技伦理审查办法(试行)》,列出了需要开展伦理审查复核的科技活动清单。

  “我们要正确看待新业态带来的可能性,但也不能让其偏离合法性、合理性轨道。无论是技术开发者、使用者还是监管者,都有必要用类似的伦理视角来审视技术发展。在追求科技进步的同时,确保AI技术循着以人为本和技术向善的理念发展。”张凌寒说。 据6月10日《人民日报海外版》

标签:

最新更新

看新疆新闻,关注法制报微信

  • 分享到:

版权和免责申明

新疆法制报网制作的专题内容,所注“中国西部网讯”均为新疆法制报网独家版权所有,未经许可不得转载或镜像;授权转载必须注明来源为“新疆法制报网”并保留“新疆法制报网讯”电头。