
新闻分类
YuE开源的全歌曲生成基础模型
YuE(乐)是一个开源的全歌曲生成基础模型,通过给定的歌词生成完整的歌曲音频。解决了生成时长达数分钟、同时包含人声和伴奏的全歌曲的困难。
YuE能够在长时序音乐的背景下,保持歌词与音乐的高度一致性,生成旋律流畅且具备音乐性和可控性的歌曲。模型结合了语义增强的音频分词器、双标记技术和歌词思维链等方法,使其能在多个音乐流派和风格中进行多样化的生成,包括重金属、爵士、说唱等。
DEMO
文章里放不了的音频,想看完整版的DEMO可以到这个链接里去看。
https://map-yue.github.io/
1、重金属
2、说唱
3、儿歌
4、粤语歌
技术特点
全歌曲生成:与传统的短音频生成不同,YuE可以生成完整的、数分钟长的歌曲,包含人声和伴奏,确保歌词与旋律的协调性。创新的音频分词器:采用语义增强的音频分词器,有助于更精准地捕捉和生成音乐的细节。
双标记技术:通过双标记的方式,使得生成的歌曲在保持歌词一致性的同时,也能保留高质量的音乐性。
多样化风格生成:YuE支持多种音乐风格的生成,包括金属、爵士、说唱等,具备较强的风格适应性。
歌词思维链:结合歌词思维链技术,有助于在生成过程中更好地理解和表现歌词的情感与主题。
项目链接
https://github.com/multimodal-art-projection/YuE
[超站]友情链接:
四季很好,只要有你,文娱排行榜:https://www.yaopaiming.com/
关注数据与安全,洞悉企业级服务市场:https://www.ijiandao.com/

随时掌握互联网精彩
赞助链接
排名
热点
搜索指数
- 1 重农固本是安民之基、治国之要 7904586
- 2 广东部分商超被搬空 只有辣椒被剩下 7808024
- 3 全球最强台风明日登陆广东 7711804
- 4 和古人一起沉浸式收割晒谷 7618915
- 5 59岁大爷放下百万生意演短剧 7521016
- 6 深圳宣布停工停业停市停课停运 7425348
- 7 护网:社交账号不受控制?木马在作祟 7327640
- 8 台风将至 居民家中“米”字玻璃就位 7231836
- 9 268万翡翠标错价按26.8万卖出 7139940
- 10 美国飞行员大喊美国是大屠杀同谋 7045782