全球首款音乐推理大模型Mureka O1:中国造

大模型向量数据库机器学习

picture.image

picture.image

来自东方的音乐魔盒

去年8月,昆仑万维发布了一款对标Suno的AI音乐生成平台「 Mureka 」。上线后,Mureka凭借优质、稳定的音色在海外收获了大量关注。

体验地址:www.mureka.ai

今天 (3月26日) ,昆仑万维宣布推出全球首款音乐推理大模型 Mureka O1 和 Mureka V6 。

Mureka O1+V6双模联手,带来了全球首款具备CoT思维链的音乐模型,同时还是全球首款开放API服务及模型微调的音乐生成平台。

picture.image

Mureka是什么?

这里,花1分钟给大家介绍下Mureka。

Mureka来自Music+Eureka的组合,

Eureka是希腊语的感叹词,意为我发现了或我找到了,常用于灵感时刻的表达。

Mureka读作[mjuˈriːkə],可以认为是将音乐的灵感时刻记录下来,创作出属于自己风格的音乐。

最新发布的Mureka O1音乐推理

大模型在评测中部分指标已经全面赶超Suno,主攻全球市场,由国内创业板的上市公司昆仑万维打造。对,就是大家熟知的天工AI的母公司。

通过Mureka平台,无论是专业音乐人还是普通爱好者均可创作出专属音乐,并 通过曲库展示、收听、收藏、分享和下载。而且,每首音乐还有创作权证 。

picture.image

Mureka有四大特点:

  • 1)全球化。 同时支持亚美欧10种语言的音乐生成。

  • 2)审美在线。 界面清爽,功能简洁,给人很fashion的舒适感。

  • 3)兼顾小白与专业用户。 既提供了适合音乐小白的简单模式,也提供了适合专业音乐人的高级模式,基础与进阶兼顾。

  • 4)二次编辑。 音轨分离下载,人声、伴奏多轨输出,支持分段修改,非常方便二次创作。

picture.image

这次更新了些什么?

这次,主要上新了Mureka O1和Mureka V6两个模型。

Mureka V6是基座模型,引入了自研ICL (in-context learning,上下文学习) 技术,使得声场更加开阔,人声质感和混音设计进一步强化。相比5.5版本,歌曲品质进一步增强。

Mureka O1是基于Mureka V6的推理优化版,在音乐生成过程中加入了CoT (Chain of Thoughts,思维链) ,大幅提升音乐品质。

Mureka V6适用于日常的音乐创作。Mureka O1则更擅长专业级的音乐制作,且能克隆人声,也就是每个人都能用自己的声音创作歌曲。

picture.image

这里,给大家放一支Mureka官方MV (建议戴上耳机) 。可以听到,新版本的音质有了大幅改善。

《Mureka》AI音乐人MV,歌手:Mureka;该作品由AI生成。其中音乐由Mureka生成,视频由SkyReels技术支持生成。

据悉,本次全新版本创下了多个“全球首次”:

  • 1) Mureka O1是 全球首个引入CoT思维链 的音乐模型,在最新评测中展现了卓越的音乐品质。

  • 听感评测,Mureka O1超过Suno V4。其中乐器演奏法多样性和配器设计方面明显超越Suno V4,在音质、人声质感及BGM质感上有显著提升。

picture.image

  • 客观评测,

Mureka O1在

WhisperX、All-In-One Music、

CLAP、

Meta Audiobox Aesthetics等主流系统上表现卓越。在发音清晰度、生成歌曲的唱词准确率、乐段的精准度、与输入文本的相关性和制作质量上处于行业领先地位。

picture.image

picture.image

  • 另外,

Mureka团队还发布了本次的创新研究成果—— MusiCoT 。

picture.image

  • MusiCoT利用CoT思维链方法,不同于传统自回归模型逐步生成音频,MusiCoT首次在细粒度音频token预测前预生成整体音乐结构,大幅提升生成音乐的结构连贯性与乐器编排精准

度。MusiCoT为高保真AI音乐生成开辟全新路径,推动音乐AI创作迈入结构化时代。

picture.image

  • 2) Mureka V6是 全球首个开放API服务和模型微调

的音乐模型。

无论是开 发者、音乐人、制作人还是媒体公司、游戏开发者,都可以将M ureka无缝接入到自己的产品或应用中,大大拓宽了AI音乐的商业价值和应用场景。

  • API入口:https://platform.mureka.ai

  • 3)全球首个可以指定歌手音色 的音 乐模型。Mureka支持自定义歌手音色,甚至可以上传自己的音色,让AI学习并复刻。

  • 4)一口气开放10种语言。 Mureka音乐制作,支持英语、中文、日语、韩语、法语、西班牙语、葡萄牙语、德语、意大利语和俄语10种语言。

  • 5)支持纯音乐生成。 输入简单提示词,即可生成各种风格BGM,彻底解决BGM版权问题。

picture.image

picture.image

上手实测

下面,我们进入实测环节,给大家展示我通过Mureka制作的一些音乐。

使用Mureka,首先需要访问 www.mureka.ai 网站,通过谷歌/X/YouTube/Discord等任意账户登录即可。

picture.image

登录后,点击“首页”,可以看到很多网友分享的AI歌曲。

picture.image

点击左侧导航栏“创作”,进入制作页面,可以创作歌曲和纯音乐 (BGM) 。

picture.image

这里,我们选择歌曲,选择简单模式,选择Mureka V6模型。然后,输入提示词“ 一首梦幻的浪漫歌曲,讲述霓虹灯下时间仿佛静止,每一刻都令人难忘 ”。

picture.image

再点击“创作”,Mureka就开始生成音乐了。不到30s,生成了2首歌曲。

这是其中一首,大家听下。

前奏、主歌、副歌,是不是觉得还不错?

纯音乐,我们也来一首。输入提示词“ 干净的电子脉冲配以明亮的合成器,非常适合科技产品发布和应用广告。 ”

picture.image

这是生成的作品,大家听下。

还可以吧?有点科技产品发布会的氛围了。

再来一首,提示词“ 科幻合成器氛围带有电子脉冲,完美适合未来场景和太空旅行。 ”

哇,这首更喜欢了。

轻快的听够了,我们来段旅行Vlog放松一下。

在连测的几十首BGM里,这首是我最喜欢的,好有“权游”的味道。

提示词:带有微妙电子元素的神秘钢琴,非常适合悬疑和惊悚序列。

如果想要更专业级音乐,可以在创作模式里选择“高级模式”,然后选择Mureka O1模型,让2者强强联合。

picture.image

比如我们选择主题“

Neon Dreams”,不到1分钟,一首歌曲就诞生了,从歌手到歌词再到音色,Mureka一键搞定。

picture.image

大家可以来听一下,觉得怎么样?

0
0
0
0
关于作者
关于作者

文章

0

获赞

0

收藏

0

相关资源
CV 技术在视频创作中的应用
本次演讲将介绍在拍摄、编辑等场景,我们如何利用 AI 技术赋能创作者;以及基于这些场景,字节跳动积累的领先技术能力。
相关产品
评论
未登录
看完啦,登录分享一下感受吧~
暂无评论