ComfyUI ACE-Step: AI音楽生成ワークフロー

ComfyUI ACE-Stepは、ACE-Step音楽生成モデルをComfyUI環境に統合します。ACE-Stepは、拡散ベースの生成とSanaのDeep Compression AutoEncoder（DCAE）、および軽量な線形トランスフォーマーを組み合わせたハイブリッドアーキテクチャを使用しています。これにより、卓越した制御能力を備えた高品質な音楽を迅速に生成できます。ユーザーは、簡単な自然言語プロンプトと歌詞を使用して、さまざまなジャンルやスタイルのオリジナル音楽を作成できます。

ComfyUI ACE-Stepはいくつかの利点を提供します: * **前例のない速度:** わずか20秒で最大4分間の音楽を合成できます。 * **音楽的整合性:** メロディー、ハーモニー、リズム全体で優れた品質を維持します。 * **多言語サポート:** 19言語で音楽を生成します。 * **高度な制御:** ボイスクローニング、歌詞編集、リミックス、および詳細なパラメータによるトラック生成を可能にします。 * **創造的な柔軟性:** さまざまな記述形式で、多様な音楽スタイル、ジャンル、楽器をサポートします。 * **シームレスな統合:** AI支援オーディオ作成のためのComfyUIワークフローに直接接続します。

ComfyUI ACE-Stepワークフローの使用には、ComfyUIインターフェイス内でノードとパラメータを設定することが含まれます。これには、目的の音楽を生成するためにテキストプロンプト、サンプラー設定、およびオーディオ出力オプションの構成が含まれます。

ACE-Stepで音楽を生成するには、いくつかの方法があります。 * **メインACE-Step生成ワークフロー:** テキストの説明と歌詞からオリジナル音楽を作成するのに最適です。 * **Lyric2Vocal:** 歌詞から高品質なボーカルを生成するために調整されています。 * **Text2Samples:** インストゥルメンタルループとサンプルを作成するために特化しています。 * **RapMachine:** さまざまなスタイルのラップ音楽を生成するために最適化されています。

ComfyUI ACE-Stepワークフロー内の主要なパラメータには、以下が含まれます: * **TextEncodeAceStepAudio Node:** * `clip`: スタイル、ジャンル、ムードの説明のためのテキストフィールド。 * `lyrics`: オプションの構造タグ付きの歌詞のためのテキストフィールド。 * `lyrics_strength`: 生成に対する歌詞の影響を制御します。 * **KSampler Node:** * `seed`: ランダム化の初期値を設定します。 * `steps`: 拡散ステップ数。 * `cfg`: 分類子フリーガイダンススケール。 * `sampler_name`: サンプリングアルゴリズム。 * `scheduler`: ノイズスケジュールのタイプ。 * `denoise`: ノイズ除去レベルを制御します。 * **EmptyAceStepLatentAudio Node:** * `seconds`: 生成されるオーディオの長さ。 * `batch_size`: 同時に生成するサンプルの数。 * **VAEDecodeAudio Node:** * `samples`: KSamplerからの入力。 * `vae`: デコードに使用されるVAEモデル。 * **SaveAudio Node:** * `filename_prefix`: 保存されるオーディオファイルのプレフィックス。 * `audio`: 生成されたオーディオをプレビューするためのプレーヤー。

高度なテクニックには以下が含まれます: * **バリエーションの生成:** バリエーションパラメータを調整して、元の生成との類似性を制御します。 * **インペインティング:** 特定のオーディオセクションを選択的に再生成します。 * **歌詞編集:** メロディー、ボーカルの音色、伴奏を維持しながら歌詞を編集します。 * **ボイスクローニング:** 新しいコンテンツを生成する際にボーカルの特徴を維持します。 * **スタイル転送:** 既存の作曲に新しい音楽スタイルを適用します。

一般的な音楽の場合、ジャンル、ムード、楽器編成について具体的に指定してください。インストゥルメンタル音楽の場合、楽器と音楽的特徴を指定してください。ACE-Stepは、英語、中国語、ロシア語、スペイン語、日本語、ドイツ語、フランス語、ポルトガル語、イタリア語、韓国語で最も効果を発揮します。

ACE-StepモデルはACE StudioとStepFunによって開発されました。ComfyUIへの統合により、ComfyUI環境内でのシームレスな音楽生成が可能になります。ACE-Stepに関する革新的な取り組みに対して、元の著者に全責任を帰します。