はやりのローカル音楽生成AI『HeartMuLa』
オーディオ/ボイスを分離するワークフローつくってみました！
ボイスデータをVocaloidに突っ込めば、ミクちゃんが歌ってくれるのでは…
と、ひそかに考えております！（Vocaloid未所持のため未実行
）
やり方解説
※リンクは追加ポスト参照
1. HeartMuLaのWFを公式からDL(環境構築は公式をGitHubを参照)→ConfyUIに展開
2. Audio分離ノードを追加（MelBandRoFormerがおすすめ！必要なモデルは事前にDL）
3. 添付動画の通りノードを接続
この機能、Sunoだとボーカル分離に10クレジットとられますからね！！
HeartMuLaノードをLoad Audioに変更すれば、
Sunoで生成した曲も無料で分離できますよ
P.S.
今回も動画の絵ずらが地味なので、Little-dragonちゃんに踊ってもらっております～
ボイスデータをVocaloidに突っ込めば、ミクちゃんが歌ってくれるのでは…と、ひそかに考えております！（Vocaloid未所持のため未実行）
やり方解説
※リンクは追加ポスト参照
1. HeartMuLaのWFを公式からDL(環境構築は公式をGitHubを参照)→ConfyUIに展開
2. Audio分離ノードを追加（MelBandRoFormerがおすすめ！必要なモデルは事前にDL）
3. 添付動画の通りノードを接続
この機能、Sunoだとボーカル分離に10クレジットとられますからね！！
HeartMuLaノードをLoad Audioに変更すれば、
Sunoで生成した曲も無料で分離できますよ
P.S.
今回も動画の絵ずらが地味なので、Little-dragonちゃんに踊ってもらっております～
Quote
Genzoh
@Genzoh1
ローカル音楽生成AI”HeartMuLa”試してみました！
生成時間はRTX4080superで5分くらい！これは凄い！！
期待大な技術ですね！！
現在はGitHub上でB3とB7の二つのモデルが公開されていますが、
B7は20GB以上のVRAM要求とのことで、今回はB3で生成しています。
Show more
現在はGitHub上でB3とB7の二つのモデルが公開されていますが、
B7は20GB以上のVRAM要求とのことで、今回はB3で生成しています。