实时滚动新闻
当前位置:首页 >

“AI换脸”以假乱真 务必保持防范意识

2023-07-13   中国质量万里行   李颖   点击:

  点开直播间乍一看,卖货的竟是当红女星。再定睛一看,“明星”其实是使用人工智能(AI)实时换脸技术的普通主播……近期,“AI换脸”的应用范围越来越广,但存在滥用之嫌,甚至有人利用AI换脸实施犯罪,“AI诈骗正在全国爆发”冲上微博热搜。

\

  前不久,就有一男子因AI“换脸”,10分钟被骗430万元。如此以假乱真,让人防不胜防。

  老板遭遇换脸诈骗 10分钟被骗430万元

  据“平安包头”消息,内蒙古自治区包头市公安局电信网络犯罪侦查局发布一起使用智能AI技术进行电信诈骗的案件。

  来自福建的郭先生是一家科技公司的法人代表。今年4月,他的好友突然通过微信视频联系他,称自己的朋友在外地竞标,需要430万元保证金,想借用郭先生公司的账户走账。基于对好友的信任,加上已经视频聊天“核实”了身份,郭先生在10分钟内,先后分两笔把430万元转到了对方的银行账户上。

\

漫画:警惕AI换脸诈骗。中新社发 尹正义 摄

  事后,郭先生拨打好友电话才得知被骗,原来骗子通过AI换脸和拟声技术,佯装好友对其实施诈骗。“当时是给我打了视频的,我在视频中也确认了面孔和声音,所以才放松了戒备。”郭先生事后说。

  揭秘“换脸”骗局 “双刃剑”效应明显

  张嘴、摇头,摄像头捕捉到人的动作后,屏幕上原本静态的人像可以动起来,动作幅度和真人一致,还能眨眼和露齿微笑,仿真度颇高,几分钟内就能生成一段视频,脸还能被任意替换。这就是“AI换脸”技术。

\

  据了解,“AI换脸”背后采用的是深度合成技术,利用深度学习、虚拟现实等生成合成类算法,制作图像、音频、视频等信息,目前在社交、影视、广告、医疗等诸多领域不断深化应用,有较大的技术价值和商用潜力,不过也存在着一定的安全隐患,“双刃剑”效应明显。

  全联并购公会信用管理委员会专家安光勇对表示,目前AI换脸技术主要通过深度学习和计算机视觉技术实现。它使用了深度神经网络来分析和识别视频中的人脸,并将一个人的脸部特征映射到另一个人的脸上。

  在微信视频中,犯罪分子可能会通过发送特制的视频或使用特定的换脸应用程序,将自己的脸替换为受害者的脸,以获取对方的信任并实施诈骗行为。

  AI换脸冒充明星带货 律师称或涉嫌侵权

  除了佯装“熟人脸”实施诈骗,AI换脸还可能出现在直播带货中。最近,网上出现了一些“换脸直播”教程,教程发布者声称实时变脸软件可以帮助用户轻松“变脸”,极大地助力引流卖货。

  在一个展示换脸直播效果的视频中,使用者把名为“成龙”的模型载入相关软件后,摄像头前的人在直播画面中就有了与成龙相似的五官,但脸型和发型还保持原样。

  安光勇表示,换脸技术的成熟度随着时间的推移在不断提高,在某些情况下可以产生逼真的结果,但仍然存在一些瑕疵,比如细节不完美或者在某些情况下可能显得不自然。记者发现,使用者歪头或变换表情时,五官动效切换得自然顺滑,只有手掌从脸前划过时,出现了比较明显的破绽。

\

发布者展示换脸为“成龙”的实时效果和软件界面(视频截图)

  北京岳成律师事务所高级合伙人岳屾山表示,换脸直播用于公开传播可能涉嫌侵犯相关明星艺人的肖像权。如果涉及直播带货等商业行为,会成为加重情节。

  岳屾山解释,只要未经肖像权人同意,在直播中通过技术手段把自己的脸换成了明星的脸,就是对明星肖像的侵权。根据不同情况,承担的后果可能不同。即便只是娱乐,不涉及盈利行为,也属于侵权。如果把明星肖像用于带货直播,属于是商业行为,在赔偿数额上一定会给予考虑。如果主观恶性、过错程度比较大,且因此获利,赔偿数额可能会更高。

\

  漫画:“AI换脸”简单好玩但有可能涉及侵权。中新社发 朱慧卿 摄

  记者注意到,一些使用换脸技术的直播并不会直接提到相关明星艺人的名字,但也不会主动声明或者否认。岳屾山认为,该行为涉嫌欺诈或是虚假宣传,让公众误以为就是明星在带货。如果货品本身质量不好,或者主播在带货过程中说的话或行为导致公众对被换脸的明星产生负面评价,明星可以主张名誉权的侵权责任。

  AI技术存在滥用风险 务必保持防范意识

  为规范人工智能发展,去年12月,《互联网信息服务深度合成管理规定》正式发布,明确了合成数据和技术管理规范。其中提到:深度合成服务提供者对使用其服务生成或编辑的信息内容,应当添加不影响使用的标识。提供智能对话、合成人声、人脸生成、沉浸式拟真场景等生成或者显著改变信息内容功能的服务的,应当进行显著标识,避免公众混淆或者误认。

  近期,也有平台和企业发布了“关于人工智能生成内容的平台规范暨行业倡议”,明确禁止利用生成式人工智能技术创作、发布侵权内容,包括但不限于肖像权、知识产权等,一经发现,平台将严格处罚。

  对于个人而言,除了在形形色色的“明星脸”中保持清醒,避免陷入虚假宣传,更重要的是面对花样翻新的AI诈骗,必须保持防范意识。

\

  中国质量万里行提醒,涉及资金转账时,公众要提高安全意识,通过见面、电话等多种方式核验对方身份;可将转账到账时间设定为“24小时到账”,以预留处理时间;针对支付软件以及网银软件,要使用多种登录及转账验证方式。

  针对花样翻新的智能AI诈骗,要提高防范意识,谨慎使用各类“AI换脸”“AI变声”软件;加强个人信息保护意识,避免注册不需要的账号、填写不必要的个人信息,以防个人信息泄露;对不断更新的网络技术和诈骗方式,坚持不轻信、不透露、不点击、不转账。

  如不慎被骗或遇可疑情形,请注意保护证据,并立即拨打96110报警。

扫码投诉

我 要 投 诉

手机扫码

快速投诉

中国质量万里行 | 关于我们 | 联系我们 | 服务声明
Copyright © 2002 - 2022 All Rights Reserved.
中国质量万里行 版权所有,未经许可不得转载
京公网安备11010502034432号    京ICP备13012862号