AI

音楽生成AI「YuE2」が無料公開される、有料のSuno 5に近い性能で楽譜から楽曲生成可能&日本語ボーカルも対応


AI研究コミュニティのMultimodal Art Projectionが音楽生成AI「YuE2」を2026年9月10日に公開しました。開発チームは「Suno 5に匹敵するオープンな音楽生成モデル」とアピールしています。

YuE2 · Frontier Music with Symbolic Planning
https://map-yue2.github.io/

GitHub - multimodal-art-projection/YuE: YuE2: frontier music generation with symbolic planning, zero-shot covers, and agentic music editing. · GitHub
https://github.com/multimodal-art-projection/YuE

YuE2はテキストだけでなくABC記譜法で記された楽譜の入力にも対応しているのが特徴。YuE2の公式サイトでは実際の生成例が公開されており、日本語ボーカルを含む楽曲も複数掲載されていました。

音楽生成AI「YuE2」の日本語楽曲の例 - YouTube


以下のグラフは横軸が生成楽曲の品質、縦軸がテキスト理解力を示しています。YuE2はSuno 5に近い性能を示し、「8個の生成楽曲から最良のものを選択(Bo8)」という条件ではSuno 5より高品質です。


YuE2はローカルで実行可能。開発チームの検証ではVRAM容量24GBのNVIDIA GeForce RTX 4090を使って214.85秒の楽曲を71.04秒で生成できたとのこと。メモリ消費量のピークは14.08GiBです。

YuE2は以下のリンク先で配布されています。ライセンスはCC BY-NC 4.0です。

m-a-p/YuE2-3B · Hugging Face
https://huggingface.co/m-a-p/YuE2-3B

・関連記事
歌詞から曲を作れる無料の音楽生成AIモデル「YuE」、日本語にも対応し複数の言語が混ざる楽曲も生成可能 - GIGAZINE

MiniMaxが動画生成AIに続いて音楽生成AI「MiniMax-Music3」を無償公開、ローカルで最大5分の日本語ボーカル付き楽曲を生成可能 - GIGAZINE

Googleが最大3分の日本語ボーカル付き楽曲を作れる音楽生成AI「Lyria 3.5」をリリースしたので使ってみた - GIGAZINE

高品質な歌唱付き楽曲を爆速生成できる音楽生成AI「ACE-Step 1.5」が登場、VRAM容量4GB未満のPCでローカル実行可能でLoRAにも対応 - GIGAZINE

in AI,   動画, Posted by log1o_hf

You can read the machine translated English article The music generation AI 'YuE2' has been ….