| 首页  |  资讯  |  评测  |  活动  |  学院  |  专题  |  杂志  |  产服  |  
您现在的位置:硅谷网> 资讯> 智能>

又一次AI 欺骗了人类 超过七成的人无法分辨真假音效

2020-08-13 12:44 作者:Kathy 来源:硅谷网综合 关注: 编辑:GuiGu 【搜索试试

又一次,AI 欺骗了人类。在一次试验中,AI 让 73% 的人相信 AI 合成音效是真实的。这一最新研究成果有望应用于电影、电视剧等影视制作工作中。

想象一下,假如你正在看一部恐怖片:女主战战兢兢地走在黑暗的地下室中,背景音乐十分恐怖,同时一些看不见的邪恶生物也在黑暗中蠕动,然后突然一声巨响,一个物体被撞倒了…… 如果没有这种令人紧张又恰到好处的音效,只通过眼睛看到的场景很难让人产生这种恐惧感。

通常,这些音效是由录音室中的 Foley 艺术家录制的,他们会使用特定的物体来产生特殊的声音。比如,如果导演想要在视频中加入玻璃破碎的声音,可能需要 Foley 艺术家打碎很多块玻璃,直到声音与视频片段匹配起来。(DeepTech 注:Foley,即拟声音效,用于增强电影的听觉体验,是日常声音效果的再现,后期制作中会添加到电影、视频和其他媒体中,以提高音频质量。这些再现的声音以音效艺术家 Jack Foley 的名字命名,可以是从衣服和脚步声,到吱吱作响的门和碎玻璃的任何声音。)

图 | 一位早期 Foley 艺术家(右二)在现场为广播节目添加音效,他手中的效果板可以模拟电话铃响和关门的效果(来源:维基百科)

图 | 一位早期 Foley 艺术家(右二)在现场为广播节目添加音效,他手中的效果板可以模拟电话铃响和关门的效果(来源:维基百科)  

如今,为解决这一问题,来自美国得克萨斯大学圣安东尼奥分校的研究人员创建了一个基于机器学习的自动程序,它可以确定一个视频剪辑中正在发生的动作,并据此创建逼真的音效,而且已经让大多数人相信假的声音效果是真实的。

相关研究成果以论文的形式发表在由 IEEE 计算机协会、IEEE 通信协会等出版的科学期刊《IEEE 多媒体汇刊》(IEEE Transactions on Multimedia)上。

(来源:论文)

(来源:论文)  

对于此项工作,论文通讯作者、得克萨斯大学圣安东尼奥分校教授杰夫 · 普雷沃斯特(Jeff Prevost)表示,“自 20 世纪 30 年代以来,在电影和电视剧的后期制作中,通过使用 Foley 艺术为特定场景添加音效,一直是一个比较复杂的事情。如果没有逼真的 Foley 音效,电影就会显得空洞、不真实,但是 Foley 音效合成增加了电影和电视剧的创作周期和成本。”

在普雷沃斯特和他的博士生桑奇塔 · 高斯(Sanchita Ghose)创建的多层机器学习程序中,他们针对包括识别视频中的动作和确定合适的声音这一步,分别创建了两种不同的模型,来检验音效的合成效果。

第一种模型,可以从快速移动的动作剪辑的帧中提取图像特征(比如,颜色和运动),以确定适当的声音效果;第二种模型,分析一个物体在不同帧中的时间关系,通过使用关系推理来比较不同时间段的不同帧,这一模型可以预测在视频中发生了什么动作。

在最后一步中,通过合成声音来匹配模型预测的活动或运动。目前,他们为 1000 个电影片段创建了声音,并捕捉了一些常见的动作,比如下雨、奔腾的马和滴答作响的钟表。

图 | 涉及应用场景(来源:论文)

图 | 涉及应用场景(来源:论文)  

结果显示,他们的模型最适合用在时间不需要与视频完全一致的场景(比如,下雨声和火的噼啪声)中,但当视频中包含随时间变化的随机动作(比如,打字、雷暴)时,表现得就不太好。

此外,他们也对当地的 57 位大学生进行了调查,看他们是否可以分辨出哪些电影片段中包含了原始音效。在评估第一个模型时,73% 的学生选择了合成音效作为原始音效,在评估第二个模型时,这一数字为 66%。可见,这两个 AI 模型已经骗过了大多数人。

但是,普雷沃斯特表示,该方法还存在一个明显的不足,必须要求分类的主体出现在整个视频帧序列中,而且依赖于具有有限 Foley 类别的数据集。

对此,普雷沃斯特认为,这些不足将会在未来的研究中得以解决。

 

【对“又一次AI 欺骗了人类 超过七成的人无法分辨真假音效”发布评论】

版权及免责声明:
① 本网站部分投稿来源于“网友”,涉及投资、理财、消费等内容,请亲们反复甄别,切勿轻信。本网站部分由赞助商提供的内容属于【广告】性质,仅供阅读,不构成具体实施建议,请谨慎对待。据此操作,风险自担。
② 内容来源注明“硅谷网”及其相关称谓的文字、图片和音视频,版权均属本网站所有,任何媒体、网站或个人需经本网站许可方可复制或转载,并在使用时必须注明来源【硅谷网】或对应来源,违者本网站将依法追究责任。
③ 注明来源为各大报纸、杂志、网站及其他媒体的文章,文章原作者享有著作权,本网站转载其他媒体稿件是为传播更多的信息,并不代表赞同其观点和对其真实性负责,本网站不承担此类稿件侵权行为的连带责任。
④ 本网站不对非自身发布内容的真实性、合法性、准确性作担保。若硅谷网因为自身和转载内容,涉及到侵权、违法等问题,请有关单位或个人速与本网站取得联系(联系电话:01057255600),我们将第一时间核实处理。
广告
相关
·超18万网友引爆AIoT直播间,高质量AI数据成产业
·人工智能现在到底狂到了什么地步?AI逐步改变世
·特斯联入选36氪中国新基建之王榜单,以AI CITY定
·星环科技Show出加速企业AI建设的魅力,亮点逐一
·特斯联AI CITY再落新址!签约沈阳,打造东北区域
·知乎亮相2020世界人工智能大会 首次公开披露AI架
·云天励飞亮相WAIC2020 入选中国人工智能商业落地
·金山、网易等入驻钛灵市场,探索打通AI全产业链
头条
又一次AI 欺骗了人类 超过七成的人无法分辨真假音效 又一次AI 欺骗了人类 超过七成的人无法分辨真
又一次,AI 欺骗了人类。在一次试验中,AI 让 73% 的人相信 AI 合成音效是真实的。这……
·又一次AI 欺骗了人类 超过七成的人无法分辨真
·人脸识别应用场景不断拓展 滥用人脸识别存在
·疫情防控经济复苏全球布局 人工智能当下有为
·100家AI初创公司榜单发布 这几个趋势需要重视
·人工智能助力新冠疫情防控 智能机器人最受欢
图文
又一次AI 欺骗了人类 超过七成的人无法分辨真假音效
又一次AI 欺骗了人类 超过七成的人无法分辨
人脸识别应用场景不断拓展 滥用人脸识别存在信息安全隐忧
人脸识别应用场景不断拓展 滥用人脸识别存
ZAO隐私风险 你的脸已经不仅仅是你的脸了
ZAO隐私风险 你的脸已经不仅仅是你的脸了
九号机器人,这次想用AI运载机器人送快递送外卖
九号机器人,这次想用AI运载机器人送快递送
热点
·AI又出了偏门应用:用算法“脱掉”女性衣服
·ZAO隐私风险 你的脸已经不仅仅是你的脸了
·美的AIR空间站|你用过能管理空气的空调吗?
·新橙派果汁机器人引爆中国独角兽孵化合作大会
·民宿房东的辛酸史 用安伴门锁实现了合规运营
旧闻
·医疗便民惠民 浙江德清推进县域“医共体”建
·屡败屡战的谷歌机器人计划,都交了哪些学费?
·北京儒商云智科技有限公司
·韩国科技公司要建立人工智能联盟增强人工智能
·助力城市智能化发展,2019亚太智慧城市发展论
广告
硅谷精选
又一次AI 欺骗了人类 超过七成的人无法分辨真假音效
又一次AI 欺骗了人类 超过七成的人无法分辨真假音效
人脸识别应用场景不断拓展 滥用人脸识别存在信息安全隐忧
人脸识别应用场景不断拓展 滥用人脸识别存在信息安全
超18万网友引爆AIoT直播间,高质量AI数据成产业落地焦点
超18万网友引爆AIoT直播间,高质量AI数据成产业落地焦
特斯联入选36氪中国新基建之王榜单,以AI CITY定义未来城市
特斯联入选36氪中国新基建之王榜单,以AI CITY定义未
这份通往未来数字城市的路书,请收下(图)
这份通往未来数字城市的路书,请收下(图)
疫情防控经济复苏全球布局 人工智能当下有为
疫情防控经济复苏全球布局 人工智能当下有为
关于我们·About | 联系我们·contact | 加入我们·Join | 关注我们·Invest | Site Map | Tags | RSS Map
电脑版·PC版 移动版·MD版 网站热线:(+86)010-57255600
Copyright © 2007-2020 硅谷网. 版权所有. All Rights Reserved. <京ICP备12003855号-2>