科大讯飞虚拟歌手Luya来了,把AI+音乐玩出花

小时候看科幻电影,里面的机器人说话有个雷打不动的法则,就是把所有的音调都改为一声。这可能是我们对机器人最早的“刻板印象”之一了。

但想不到数十年后的今天,AI机器人模仿人类说话已经能做到真假莫辨——不仅是说话,甚至AI唱起歌来,都能让你深深怀疑自己的分辨能力。

刚好最近,又有一位AI虚拟歌手火了,她就是来自科大讯飞的Luya。

Luya在2022年8月26日正式官宣出道,大眼睛,粉色丸子头,元气可爱的形象搭配科技潮酷的服装造型,很容易激发人们的喜爱之情。

作为一名虚拟歌手,Luya不仅形象可爱俏皮,唱功更是一绝,大家可以感受一下她的最新个人单曲《迷雾之中的微光》:

听这清甜的音色、这饱含情感的唱腔,这流畅自然的换气和转音,如果不提前知道,你是不是很难想象这是AI唱出来的?

和这首全新单曲同步的,是Luya携手上海音乐学院的消息。她将进入上音“音乐工程系讯飞音乐联合研发中心”,参与“AI+音乐”研发和学习,探索AI赋能音乐的更多可能。

这不禁让人对Luya背后的那些故事更加感兴趣。

最近几年,我们身边确实多了很多“虚拟数字人”,他们大多身怀绝技,或者会画画写诗,或者能歌善舞,成为“新生代偶像”。而Luya是科大讯飞的首位AI虚拟歌手。如果论“唱功”的话,Luya在众多虚拟歌姬中绝对是出众、特别的,毕竟她背后的科大讯飞,一直以来就是以强大的AI语音和语言技术而著称的。

除了刚才说到的《迷雾之中的微光》,Luya更早前还推出了另外一首单曲,叫做《北极星与流星雨》,同样做到了可媲美真人歌手的演唱效果,沁人心脾的嗓音搭配轻松灵动的唱法,套用网友们的话:“宛如夏日的冰淇淋,让人心情愉快”。

此外,在Luya的社交账号“LUYA不吃卤鸭”,你还能看到她演唱的其他作品,唱法有古风的高雅唯美,有民谣的清新醇淡,也有电子的灵动搞怪。

当你把Luya的这些作品听完,相信会在惊艳之中发出疑问:

科大讯飞到底施了什么魔法,能够让Luya的歌声如此自然动听,引人共鸣?

这里我们不妨就先探究一下Luya背后先进的AI语音技术。

首先要清楚的一点是,Luya和很多虚拟歌手采用真人配音不同,她的音色完全是由AI创造的,而不是某个真实人的声音。也就是说你听到的清新的嗓音,是真正为Luya特有的,也是Luya独一无二的标签。

那么,AI怎么样让Luya的歌声如此自然、媲美真实歌手呢?

简单来说,就是用AI赋能目标音色系统的调试和确定,以及声音转换等操作,再融入专家经验的调整,Luya就能用独具她个人特点的动听音色“想唱就唱”。

用这样的方法,Luya演绎的歌曲不仅具有强烈的“Luya属性”,声音质量也相当自然、充满情感。

同时还有一个优势,就是真人的声音会有不稳定、且常常难以适配多种音乐风格等问题,而Luya的声音却可以适应各种风格,更加稳定有保障。

所以我们能看到前面在“LUYA不吃卤鸭”账号里,Luya能轻松拿捏各种音乐演唱风格,而且声音演唱、表现力都非常稳,妥妥的“实力唱将”了。

总之,基于这样一套强大的技术支撑,Luya自然能够以其显著的“科技感”和稳定又优质的“演唱实力”赢得更多人的喜爱。

虽然Luya是科大讯飞的第一位AI虚拟歌手,但是用AI赋能音乐这件事,科大讯飞并不是第一次做。

Luya,是讯飞音乐在AI+音乐领域的又一探索尝试,和此前主要做音乐品牌营销、艺人经纪服务、运营等不同,这次Luya的出道,无疑承载着AI赋能音乐的更多使命,也会向音乐更深的领域进行探索和应用。

也就是说,作为AI虚拟歌手,Luya出道的意义和使命不仅仅在于向外界展示她能把歌唱好,更重要的是,她能为音乐领域的发展,作出自己独特的贡献。

比如这次Luya和上海音乐学院合作,就是在AI融合音乐领域的进一步探索尝试。随着Luya在上音的学习和进化,未来她会从唱歌进一步延伸到AI辅助作词、作曲等领域,更会和上音一起,利用她的能力进行不同类型音乐风格的融合实验,比如利用技术手段匹配风格相近的歌曲、拆解和弦和旋律走向、融合曲目等,从而推动音乐在基础理论、创作方面进行创新和拓展。

总之,这样一位虚拟歌手,可以为未来音乐与科技的碰撞提供巨大的可能性与想象空间,音乐艺术插上AI的翅膀,就有了新的创新动力,而Luya背后的技术,也会因为和艺术的深度结合而不断进化,这是彼此碰撞出的火花。

当然,对于Luya来说,拥有美妙动人的歌声,充满元气、清新可人的形象,再加上背后强大的技术以及推动音乐艺术发展的可能性,这些特质也让Luya具备成为新一代虚拟偶像的强大潜力。

而且Luya本身也拥有丰富的“人设”要素,比如她是一个性格爽朗、古灵精怪的天才少女,梦想是造出让大家都变得幸福、快乐的黑科技。她还有一个忠诚的伙伴躺倒鸭。

而Luya的音乐天赋和能力,来自于一次科技实验中的失误,她和躺倒鸭被卷入一个神奇的音乐空间中,这里充满音乐能量,Luya勇敢地去唱歌和跳舞,就可以将音乐能量转化成元气能量,获得幸福和快乐……

了解这些故事,让Luya在普通观众面前显得更加立体,更加具有亲和力。现实中的偶像总是扁平的,我们只能远观,与其说Luya未来会成为新一代偶像,不如说Luya会成为未来我们每个人都可以随时和她交流、和她共享快乐的音乐伙伴。

最后,“元宇宙”几乎已经成为人们关于科技未来的共识,而“虚拟人”是元宇宙的基本要素,Luya的出现,也让我们进一步看到,未来元宇宙时代,“虚拟歌手”应该会是一个怎样的存在方式和形象。元宇宙的时代还很遥远,但Luya已经用虚拟的身份,带给我们真实的快乐和感触。

在故事中,Luya进入了那个被她称作“Lutopia”的神奇音乐空间,从此踏上了用音乐聚集元气,为大家带来幸福和快乐的成长旅程。

就好像我们对AI技术的期望,希望技术能够为人类创造幸福,带来快乐。Luya就是因此而生的。

而她的旅程还在继续,接下来Luya会用怎样的作品带给我们感动,怎样的表现带给我们惊喜?相信认识并喜欢她的歌声的朋友,都会对此充满期待。

IBM报告:近半数供应链管理者通过AI与自动化来应对不确定性

2022.09.21

机构:预计2026年中国人工智能市场IT支出规模将超266亿美元,全球占比约8.9%

THE END
1.你听不出是AI在唱歌!这个日本虚拟歌姬,横扫中英日三种语言目前,国内AI唱歌最知名的还是微软小冰。 自2016年小冰以歌手身份出道以来,已发布了十几首接近人类质量的单曲。2017年9月底,第五代小冰解锁了人工智能歌手深度学习模型,还放下狠话: 我冲击的不是人类,而是传统的虚拟歌手。人类们,忘了漫长辛苦的手工调教吧。 https://36kr.com/p/1723076345857.html
2.AppStore上的“明星变声器【人工智能变声器】 将您的声音变成各种名人的声音。 体验像您最喜欢的明星一样说话的惊心动魄的感觉,并用您新的声乐技巧让您的朋友惊叹不已。 【轻松使用】 只需录制您的声音,从我们庞大的数据库中选择名人,然后让强大的人工智能技术发挥其魔力。 几秒钟之内,您的声音将完美复制您所选择的名人的独特声乐风格。https://apps.apple.com/cn/app/%E6%98%8E%E6%98%9F%E5%8F%98%E5%A3%B0%E5%99%A8-ai%E5%A3%B0%E9%9F%B3%E5%A4%84%E7%90%86%E4%B8%8E%E7%89%B9%E6%95%88-%E5%94%B1%E6%AD%8C%E5%BD%95%E9%9F%B3%E6%9C%BA/id6470000503
3.写春联变魔术模仿马云唱歌,为你揭秘阿里云人工智能ET背后的简介:在云栖社区主办的云栖计算之旅第5期–大数据与人工智能分享中,阿里云数加资深前端工程师昊祯为大家揭秘了阿里云人工智能ET背后的技术。 摘要:在云栖社区主办的云栖计算之旅第5期–大数据与人工智能分享中,阿里云数加资深前端工程师昊祯为大家揭秘了阿里云人工智能ET背后的技术。 https://developer.aliyun.com/article/72542
4.人工智能+音乐的探索:从洛天依到小冰初窥歌唱合成歌唱合成技术是将乐谱信息和歌词转换为歌唱语音的技术。相较于语音合成(TTS),歌唱合成有更丰富的输入(音高、音符持续时间),并要求输出的人声更有感情、变化和起伏,技术上更为困难。与语音合成任务类似,歌唱合成是通过综合多人的评价(MOS)[1],来评判合成的歌声效果好坏。 https://www.jianshu.com/p/e71f4c7a2040
5.竟能让照片人物动起来唱歌!这AI黑科技被玩坏了最近,如果你经常刷视频网站,可能会刷到一些非常神奇却又带感的东西,具体来说就是各种人物,例如孙悟空啊、蒙娜丽莎啊,居然都开口唱歌,就像下面的视频: 这视频自然不可能是原片,显然是加工生成的。那么这种视频是怎么做出来的呢? 其实它用到了一个开源的 AI 项目“Yanderify”。这是一个可以将视频和照片合成、让照https://news.51cto.com/art/202009/626774.htm
6.我把我的声音训练成了AI模型,并让它唱了一首歌(附超全面教程,你奶奶我天生五音不全,对于所有需要唱歌的场合我都是抗拒的,因为只有一片笑声。 我一直有一个梦想,就是用我的声音,唱一首不跑调的歌。 得益于AI的井喷式发展,我的愿望实现了。 我把我的声音,训练成了模型,并让它唱了一首我非常喜欢的《富士山下》。 https://blog.csdn.net/WANGJUNAIJIAO/article/details/139116196
7.体验全球首个AI公园:海淀公园不仅仅只有百度无人车11月1日的百度世界大会上,百度创始人李彦宏宣布,全球首个AI人工智能公园正式开园,根据描述,这个公园是由百度与海淀区政府联合由海淀公园改造而成。如今人工智能公园已经开园一个月,车云菌也去体验了一下,看看全球首个AI人工智能公园有什么新“玩法”。 http://www.cheyun.com/content/25048
8.如何看待音乐人用AI“复活”亲人?当然,AI技术可能造成的问题也是客观存在的。从前几年AI“换脸”等诈骗事件层出不穷,到现在利用AI冒用名人肖像造谣等新现象的出现,都在提醒我们,必须在发展技术的同时加强对它的管理和规制。 今年全国两会期间,多位代表委员就人工智能从不同角度建言献策。可以预见的是,在社会各方的关注下,AI技术绝不会成为“脱缰的http://news.hnr.cn/shxw/article/1/1765525269706915841
9.用开源项目,你也能训练自己的AI语音模型Stable Diffusion 比较火的时候玩过一阵子 AI 绘图,那个时候就感受到了人工智能的巨大潜力。后来刷 B 站的时候一直刷到各种 AI 模型的视频,其中就有许多 AI 翻唱歌曲的内容。出于好奇,去 Github 上搜了一下,发现了不少开源的 AI 语音模型项目,训练门槛也不高,就入坑玩了一阵子。初时只是出于好奇,实际体验过后却https://ios.sspai.com/post/83487
10.音频视频ai非猪ai导航,一起用ai工具集合网站吧!让你秒变飞猪ai导航,是你的指南ai工具箱集和研究所,为你收集整理推荐国内外aigc软件服务,人工智能网址网站,文字写作,视觉,图片,视频,音频,营销,游戏,设计等!https://feizhuke.com/favorites/yinpinshipin-ai