【AI产品】听着AI为照片生成的专属轻音乐,你还会失眠吗
欢迎来到《AI产品》专栏,这一个专栏是面向所有对人工智能技术感兴趣的朋友。在这个专栏里,我们会给大家推荐好玩的AI产品,剖析背后的关键技术,并推荐相关学习资料。
今天要推荐的这款产品是melodist,这是一款非常有情怀的app,可以为你的照片自动生成音乐。
作者&编辑 | 言有三
什么是"melodist"
“melodist”是一款音乐应用,可以为每一张照片创作一首60秒的歌,这是一种全新的多媒体艺术形式。
下面是它的主界面,简单清爽,色调饱满又和谐,是我喜欢的风格,两年前玩摄影的时候发现的,今天推荐给大家。
软件界面
话不多说,先来一张图来试试。
app包含3种动画效果,5种高品质音色,可以导出为音频、视频或Midi文件。
听听这个生成的效果,有没有一种跟照片很配的清幽的感觉?
AI创作的音乐
下面我们再试几种其他的风格,大家可以自己尝试更多。
更多的风格
关键技术与推荐学习资料
Melodist目前的功能还是比较单一的,主要是通过分析照片中的色调、饱和度、亮度的变化,从而生成音阶、和声等,涉及到的技术主要包括。
(1) 图像质量基础与摄影美学。
推荐学习资料:公众号的计算机视觉相关的内容,数字图像处理,摄影美学相关的内容。
https://github.com/longpeng2008/yousan.ai
(2) 语音相关的技术以及乐理知识。
推荐学习资料:语音识别相关的技术,乐理相关的知识。
https://github.com/zzw922cn/awesome-speech-recognition-speech-synthesis-papers
(3) 多模态融合。
推荐学习资料:多模态研究方向。
https://github.com/pliang279/awesome-multimodal-ml
最后建议大家关注GAN与语音相关的技术,Melodist的功能目前还不够完美,相信功能更加强大的类似的app应用用不了多久就会出现。
如果想学习图像基础和摄影学相关的知识,那就加入有三AI秋季划图像质量小组吧。