您当前所在位置: 首页 > 科学普及 > 科学博览

日科学家研发全新交互技术 用人工智能给图像配乐

  • 文章来源:科技日报
  • 文章发布时间:2018年06月11日
  • 【字体:大 

  

  新鲜事

  据遇见人工智能报道,近日,日本研究人员通过一款叫“Imaginary Soundscape”的网络应用程序,使用机器学习技术,为用户上传的图片和最符合的音频配对。

  在该项目页面中,用户上传一张图片,然后进入另外一个页面,显示上传的图片的同时,就会播放出经过AI算法匹配后的背景音乐。例如,上传日本的渔船木刻,系统会匹配波浪和水声;加载一幅抽象的夜莺画作,人工智能会为之搭配一首有风铃和鸟叫的背景音乐。更有意思的是,当用户上传的图片是一些稀奇古怪的元素时,系统反馈的配音也会带来惊喜,比如将擎天柱与拖拉机的声音配对。

  该系统是一个相对简单的AI算法的产物。它使用物体识别技术识别出图片中的元素,然后将这些元素与超过52000个声音文件的数据集进行匹配。该系统的研究初衷是让音频与Google街景视图中的图像匹配。不过,该系统并不完美,比如模糊识别会造成错误,而声音数据库尚不完整。但它仍是AI支持新型创意表达的绝佳示例。

  • 上一篇:
  • 下一篇:
中科汇联承办,easysite内容管理系统,portal门户,舆情监测,搜索引擎,政府门户,信息公开,电子政务