图片视频都能造假 AI深度伪造是怎么回事?
AI发展快,图片系紧“安全带”(“融”观中国)
——“人工智能与信息保护”系列报道之二
AI“换脸”实施诈骗、视频深度AI伪造图片传播谣言、造假天龙私服发布网AI“复活”逝者引发争议……随着人工智能技术的伪造不断发展,AI深度伪造的回事例子屡见不鲜。不少网民惊呼,图片以前总说“有图有真相”,视频深度如今我们连图片和视频也不敢轻易相信了。造假
AI深度伪造是伪造怎么回事?该如何防范相关风险?用户、平台、回事监管、图片司法等社会各界该如何形成合力,视频深度建立生成式AI信息安全规范? 我们对此进行了采访。造假
“眼见不一定为实”
关于AI深度伪造的伪造热点事件,正引发全世界广泛关注。回事
今年1月,天龙私服发布网美国一位流行歌手被人用AI恶意生成虚假照片,在社交媒体迅速传播,给歌手本人造成困扰。2月,香港一家公司遭遇“AI变脸”诈骗,损失高达2亿元港币。据悉,这家公司一名员工在视频会议中被首席财务官要求转账。然而,会议中的这位“领导”和其他员工,实际都是深度伪造的AI影像。诈骗者通过公开渠道获取的资料,合成了首席财务官的形象和声音,并制作出多人参与视频会议的虚假场景。
基于深度合成技术引发的侵权案例,常见的手法是冒充熟人实施电信诈骗。不久前,江苏句容的杨女士,在收到自己“女儿”多条要求缴纳报名费的语音后,向骗子账户转账3.5万元。相关办案民警反复提醒:“遇到转账一定要慎之又慎,眼见不一定为实。”
“深度伪造技术利用AI深度学习功能,实现图像、声音、视频的篡改、伪造和自动生成,产生以假乱真的效果。”上海人工智能研究院院长宋海涛给公众应对深度伪造支了三招:一是掌握甄别AI“换脸”的简单技巧,比如要求对方在视频对话时在脸前挥挥手,看是否出现图像扰动等;二是学会使用检测深度伪造的工具和软件;三是保持合理怀疑。“保持谨慎和警惕,是公众应对AI造假的第一道防线。”宋海涛说。
“用技术治理技术”
如何把生成式AI的强大能力用于建立信息安全规范,将制约行业发展的“绊脚石”变为“压舱石”?业界一直在探索“用技术治理技术”的方案。
瑞莱智慧是清华大学人工智能研究院孵化的企业,专攻人工智能安全领域。瑞莱智慧总裁田天介绍,其公司研发的生成式人工智能内容检测平台,支持多种合成类型的图片、视频、音频、文本的真伪检测,应用场景包括打击网络诈骗和声誉侵害行为、检测网络内容合规性、检测音视频物证真实性等。
“利用AI技术治理AI犯罪,本身也是一个不断博弈的过程。”田天介绍,“红队测试”是目前生成式AI治理的重要手段,旨在通过模拟攻击者行为,对目标系统进行全面网络攻击,针对性地发现、修补潜在系统漏洞,使模型在面向公众开放前,充分接受安全技术检验。视频合成AI平台Sora,在上市前就曾邀请数名从事信息安全漏洞研究的专家充当红队进行对抗测试,找出相当数量的安全漏洞。
此外,业界也在推动落实AI生成内容标识制度。中国政法大学数据法治研究院教授张凌寒表示,全国信息安全标准化技术委员会在《网络安全标准实践指南——生成式人工智能服务内容标识方法》中给出了内容标识方法:通过在交互界面中添加半透明文字的方式显示水印标识,或通过人类无法直接感知但可通过技术手段从内容中提取的隐式水印标识,提示内容由人工智能生成。“标识制度可以提升AI信息内容治理能力,减少虚假信息生成,防止虚假信息污染下一代训练数据,营造良好的网络信息生态环境。”张凌寒说。
国际测试委员会创始人、中国科学院计算所研究员詹剑锋建议,应将AI深度伪造纳入监测机制,遇到负面影响较大的造假行为,第一时间快速反应。通过建立针对深度伪造有害内容的群众举报机制,提高公众的判断力、鉴别力。
“制度引导技术向善”
生成式AI技术是一把双刃剑,如何在释放创新活力的同时,有效防范信息安全风险?
不少专家表示,尽快建立健全相关治理规范至关重要。“这一领域的治理不能完全寄希望于企业自治,更需要法律硬性监管。”对外经济贸易大学数字经济与法律创新研究中心主任张欣表示,“通过立法为AI开发划定基本底线,明确合规义务,可以从源头防范风险,避免‘先污染后治理’的被动局面。”
去年国家网信办等部门发布的《生成式人工智能服务管理暂行办法》标志着生成式AI有了专门性行政法规。2023年1月施行的《互联网信息服务深度合成管理规定》明确提出,“任何组织和个人不得利用深度合成服务制作、复制、发布、传播法律、行政法规禁止的信息”“可能导致公众混淆或者误认的,应当在生成或者编辑的信息内容的合理位置、区域进行显著标识”,等等。
在法律层面,中国已经出台了《中华人民共和国网络安全法》《中华人民共和国数据安全法》《中华人民共和国个人信息保护法》等法律,但针对AI领域的司法治理仍有进一步细化的空间。“现有法律法规对数据权属、保护范围等问题暂无具体规定。在人工智能生成结果的保护方面,《民法典》的原则性条款在具体适用方面还有一定难度。”北京互联网法院综合审判三庭负责人颜君建议,要进一步加快人工智能方面的法律供给,推动国家层面生成式人工智能规范的确立。对已有案例出现的疑难法律问题,要通过学术讨论和司法实践,逐步形成共识,总结确立法律适用规则,推动《人工智能法草案》的立法进程。
在伦理层面,AI“复活”等行为引起部分用户的反感和恐惧。对此,科技部等10部门印发《科技伦理审查办法(试行)》,列出了需要开展伦理审查复核的科技活动清单,其中就包括具有社会动员能力和社会意识引导能力的算法模型、应用程序及系统研发等。
“我们要正确看待新业态带来的可能性,但也不能让其偏离合法性、合理性轨道。无论是技术开发者、使用者还是监管者,都有必要用类似的伦理视角来审视技术发展。在追求科技进步的同时,确保AI技术循着以人为本和技术向善的理念发展。”张凌寒说。(人民日报海外版)
(责任编辑:焦点)
-
人民银行等5部委联合发布《金融业标准化体系建设发展规划(2016
【人民银行等5部委联合发布《金融业标准化体系建设发展规划2016-2020年)》】《规划》立足金融业发展中需要多部门协同的领域,提出了5项重点工程:金融风险防控标准化工程、绿色金融标准化工程 ...[详细] -
新酷产品第一时间免费试玩,还有众多优质达人分享独到生活经验,快来新浪众测,体验各领域最前沿、最有趣、最好玩的产品吧~!下载客户端还能获得专享福利哦!【2024年6月1日,杭州】今日,极氪智能科技公布最 ...[详细]
-
文化建设,可能是个长期被CEO忽略的事,当下我们所见的百度的纠结、丁香园的风波、乃至德云社的互撕,都告诉我们重视文化建设的意义。1、创业伊始,你是如何做企业文化建设的?我曾向一些CEO们提出这个问题, ...[详细]
-
光明日报北京2月18日电记者牛梦笛)春节假期,走进影院看电影,成为不少家庭的新年俗。国家电影局发布数据显示,根据国家电影局初步统计,2024年春节假期全国电影票房为80.16亿元,观影人次为1.63亿 ...[详细]
-
股民2000倍杠杆抄底巴菲特反被套近期,纽交所遭遇技术故障,导致伯克希尔-哈撒韦公司A类股票价格骤降,跌幅接近100%,引发了投资者对“股神”巴菲特公司的抄底热情。尽管随后交易所宣布低于特定价格的交易 ...[详细]
-
不符合法定要求 不具备经营资格本报讯 记者曹秀娟)7月24日,太原市食品药品监督管理局通报,山西贝思达商贸有限公司等19家企业,因不符合法定要求、不具备经营资格,被注销《医疗器械经营许可证》,并停止其 ...[详细]
-
快讯:非OPEC产油国将减产约55万桶/日 特朗普向美国能源部发备忘录
市场消息:OPEC代表称哈萨克斯坦将减产2万桶/日;目前尚不清楚哈萨克斯坦将从何种水平开始减产。路透援引消息人士称,非OPEC产油国将减产约55万桶/日。市场消息:OPEC与非OPEC产油国达成十五年 ...[详细] -
以军在拉法的军事行动仍在继续。29日,以军空袭了拉法北部的一栋大楼,造成多名儿童死亡。有幸存者表示,以军此前称这里是所谓的“安全区”,但事实显然不是这样。空袭幸存者伊扎特:我们当时正坐着,突然这栋大楼 ...[详细]
-
法国总统宣布解散国会 7月举行选举新华社快讯:9日欧洲议会选举结束后,法国总统马克龙当晚宣布解散国民议会,并将于6月30日和7月7日举行新的议会选举。 ...[详细]
-
新酷产品第一时间免费试玩,还有众多优质达人分享独到生活经验,快来新浪众测,体验各领域最前沿、最有趣、最好玩的产品吧~!下载客户端还能获得专享福利哦!【2024年6月1日,杭州】今日,极氪智能科技公布最 ...[详细]