概要
ComfyUI-HeartMuLaは、音楽生成と歌詞転写を目的としたComfyUIの拡張機能です。
HeartMuLaモデルファミリーとheartlibソースコードを基盤とし、最新のComfyUI V3スキーマに完全に移行しています。
主な機能として、最先端の「HeartMuLa-oss-3B-happy-new-year」モデルを含む複数のモデルによる高音質なテキストからの音楽生成や、長尺オーディオに対応した自動音声テキスト変換による歌詞転写が可能です。
また、LLMとCodecローダーを分離したモジュール型アーキテクチャを採用し、Windows環境向けには`torch.compile`による推論最適化が図られています。
モデルパス選択を容易にするカスタムフォルダピッカーUIも提供されており、ComfyUIで高度な音楽制作や音声分析を行いたいユーザー、特にWindows環境での高速処理を求めるユーザーに適しています。
互換性・特徴
- ComfyUI対応
- GPU必須
- Python
- Text-to-Music
- Lyrics Transcription
- Windows
基本情報
| ライセンス | Apache-2.0 |
| Stars | 9 |
| Forks | 4 |
| カテゴリ | ComfyUI |
| アクティビティ | low |
最新のissue
- バグ: music_generation.py内の2つのfrom_pretrained呼び出しでdtype=はtorch_dtype=であるべき (更新: 2026-06-07 / Bug: dtype= should be torch_dtype= in two from_pretrained calls in music_generation.py)
- 特定のセグメントで未定義の効果音が歌詞として歌われていた (更新: 2026-02-18 / The sound effects, which couldn’t be defined for a specific segment, were being sung as lyrics.)
- HeartMuLaCodecLoaderと’H:\\Comfy_SCAIL\\ComfyUI\\custom_nodes\\ComfyUI-HeartMuLa.heartlib’ (更新: 2026-02-13 / HeartMuLaCodecLoader ‘H:\\Comfy_SCAIL\\ComfyUI\\custom_nodes\\ComfyUI-HeartMuLa.heartlib’)
GitHub: https://github.com/BobRandomNumber/ComfyUI-HeartMuLa