向右滑动:上一篇 向左滑动:下一篇 我知道了
广告

人工智能突破声音障碍

时间:2016-06-16 作者:英国《金融时报》 阅读:
人工智能已经突破了一项声音障碍。麻省理工学院(MIT)的研究人员开发了一款人工智能系统,可以“观看”无声的视频并且生成一段声音,效果十分逼真,以至于多数观众无法分辨出这些声音是否是计算机生成的。

人工智能已经突破了一项声音障碍。麻省理工学院(MIT)的研究人员开发了一款人工智能系统,可以“观看”无声的视频并且生成一段声音,效果十分逼真,以至于多数观众无法分辨出这些声音是否是计算机生成的。KPKEETC-电子工程专辑

MIT计算机科学和人工智能实验室(MIT Computer Science and ArTIficial Intelligence Laboratory)称,其“深度学习算法”是头一个通过“声音图灵测试”的,生成的声音能够以假乱真。KPKEETC-电子工程专辑

这款视觉指示声音系统(Visually Indicated Sounds,简称Vis)受到训练,能够对棍子击打、刮擦或者捅一系列物体(从树叶、水到土壤和钢铁)时发出的声音进行分析。KPKEETC-电子工程专辑

研究人员称,Vis的本领可以延伸至很多其他场景。例如,未来的版本可以为电影和电视生成比传统方法(比如在铝箔上撒盐以模拟雨声)更逼真的声音效果。KPKEETC-电子工程专辑

该项目的负责人安德鲁·欧文斯(Andrew Owens)称,更重要的应用或许是帮助机器人理解物体的物理属性、更好地与它们所在的环境互动。该项目将于本月晚些时候在拉斯维加斯举行的计算机视觉与模式识别大会(CVPR)上展出。KPKEETC-电子工程专辑

“机器人可以看着人行道、本能地知道水泥地是硬的而草地是软的,因此知道如果它踩上两种地面会发生什么,”他说,“能够预测声音,是预测与世界进行物理互动的后果的重要第一步。”KPKEETC-电子工程专辑

该MIT团队“训练”Vis的方法是,向其输入包含4.6万种声音的1000段视频,这些声音是鼓槌在不同坚实度的物体上敲打或划过而产生的。之后,帮计算机在大量数据中找到模式的“深度学习”算法对这些声音进行解构。KPKEETC-电子工程专辑

为了从无声视频片断中预测一种新声音,Vis会查看最可能与每个视频画面相关的音频属性,并把这些音频串在一起编辑成连贯的声音。Vis可以模拟快节奏和舒缓的微妙声音,无论是断断续续拍打岩石的声音,还是穿过常春藤时发出的细小沙沙声。它既可以模拟击打垫子发出的低沉砰砰声,又可以模拟敲击栏杆时发出的刺耳声音。KPKEETC-电子工程专辑

为了测试这些声音在人耳听起来的逼真性,研究人员对400名观众进行了调查。他们观看了两遍视频,其中一遍听的是真实声音,另一遍听的是Vis的模拟版。他们要说出哪一次是真实的声音。KPKEETC-电子工程专辑

如果Vis生成的声音与真实的声音无法区分,Vis版被选择的概率应为50%。结果调查得出的概率为40%,这是一个相当不错的分数。KPKEETC-电子工程专辑

当声音清晰、尖锐时——比如敲木头或金属的声音——该系统的表现最差,在生成由树叶或泥土产生的较轻柔、持续时间较长的声音时,Vis表现最好。有时,如果棍子刚好停在目标物之前,它还会“幻想出”假的敲击声。KPKEETC-电子工程专辑

欧文斯的梦想是在没有明确视觉线索的情况下让Vis模拟声音。“从微风轻抚、到笔记本电脑的嗡嗡作响,任何时候环境中都存在着许多与我们正盯着看的东西无关的声音,”他说。KPKEETC-电子工程专辑

EETC wechat barcode


关注最前沿的电子设计资讯,请关注“电子工程专辑微信公众号”。
KPKEETC-电子工程专辑

KPKEETC-电子工程专辑

本文为EET电子工程专辑 原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
您可能感兴趣的文章
  • 选址澳门,大湾区集成电路创新研究院启动 8月16日,中国科学院集成电路创新(澳门)研究院启动仪式在澳门举行。创新中心计划在3年内总投资200亿元人民币,以“一个中心”定位于广州黄埔区创新基地,侧重于工艺研发、周边配套、产业聚集;同时发挥“二翼支撑”,包含澳门珠海集成电路设计生态支撑,深圳香港产业链应用支撑,倾力打造大湾区国家集成电路技术创新中心。
  • 中国半导体产业的向死而生,一代人的坚持与倔强 从他们身上,映射出中国半导体产业成长之路的极度艰难与中国半导体人的坚持与倔强。即使前行之路荆棘满布,他们也义无反顾,向死而生。
  • 智能手机突围战:发现芯片和5G硬件创新的突破点 2018年对于智能机市场来讲,并不算是一个好年景。原因不难窥见,iPhone诞生后的十余年里,手机厂商遵照定制机的白皮书,制造了大量 “千机一面”的产品, 这使得用户换机周期延长,市场总体需求下降。更强大的处理器、更快的5G、拍得更清楚更远的摄像头、传感器的新应用、更快的充电时间……如何从用户需求角度去做手机创新?这是厂商们需要思考的。
  • IBM:未来5年将改变人们生活的五大科技创新 IBM日前发布了“5 in 5”年度预测,列举了未来5年将改变人们生活的5大创新。
  • 张帆谈专利战:汇顶不惧竞争,只怕创新得不到保护 “我们不怕竞争,良性竞争会促进整个IC(集成电路)设计行业的进步;我们无惧‘无人区’ ,但我们却害怕创新成果得不到保护与尊重。”曾经一心扑在技术研发上的张帆,除了在技术创新道路上加速前行外,也开始思考成为领跑者后如何保护知识产权的问题。
  • 创新的企业一定要做的事 有人问,为什么你要创立一个公司?对于我来说,我在高中时就决心创立一家自己的公司。当时并没有具体的愿景要成立多大的公司,只是希望有机会控制自己的命运。后来发现很多创新、创业者的想法都是一样的。
相关推荐
    广告
    近期热点
    广告
    广告
    广告
    可能感兴趣的话题
    广告