ComfyUI ACE-Step: AI 음악 생성 워크플로우

ComfyUI ACE-Step는 ACE-Step 음악 생성 모델을 ComfyUI 환경에 통합합니다. ACE-Step는 확산 기반 생성과 Sana의 Deep Compression AutoEncoder(DCAE) 및 경량 선형 트랜스포머를 결합한 하이브리드 아키텍처를 사용합니다. 이를 통해 뛰어난 제어 기능을 갖춘 고품질 음악을 빠르게 생성할 수 있습니다. 사용자는 간단한 자연어 프롬프트와 가사를 사용하여 다양한 장르와 스타일의 독창적인 음악을 만들 수 있습니다.

ComfyUI ACE-Step는 다음과 같은 여러 가지 이점을 제공합니다: * **전례 없는 속도:** 단 20초 만에 최대 4분 길이의 음악을 합성합니다. * **음악적 일관성:** 멜로디, 화음, 리듬 전반에 걸쳐 뛰어난 품질을 유지합니다. * **다국어 지원:** 19개 언어로 음악을 생성합니다. * **고급 제어:** 음성 복제, 가사 편집, 리믹싱, 세밀한 매개변수를 사용한 트랙 생성을 가능하게 합니다. * **창의적 유연성:** 다양한 설명 형식을 사용하여 다양한 음악 스타일, 장르 및 악기를 지원합니다. * **원활한 통합:** AI 지원 오디오 제작을 위해 ComfyUI 워크플로우에 직접 연결됩니다.

ComfyUI ACE-Step 워크플로우를 사용하려면 ComfyUI 인터페이스 내에서 노드와 매개변수를 설정해야 합니다. 여기에는 원하는 음악을 생성하기 위한 텍스트 프롬프트, 샘플러 설정 및 오디오 출력 옵션 구성이 포함됩니다.

ACE-Step로 음악을 생성하는 방법에는 여러 가지가 있습니다: * **주요 ACE-Step 생성 워크플로우:** 텍스트 설명과 가사로 독창적인 음악을 만드는 데 가장 적합합니다. * **Lyric2Vocal:** 가사에서 고품질 보컬을 생성하도록 맞춤 설정되었습니다. * **Text2Samples:** 악기 루프 및 샘플을 만드는 데 특화되어 있습니다. * **RapMachine:** 다양한 스타일의 랩 음악을 생성하도록 최적화되었습니다.

ComfyUI ACE-Step 워크플로우 내의 주요 매개변수는 다음과 같습니다: * **TextEncodeAceStepAudio 노드:** * `clip`: 스타일, 장르 및 분위기 설명을 위한 텍스트 필드입니다. * `lyrics`: 선택적 구조 태그가 있는 가사를 위한 텍스트 필드입니다. * `lyrics_strength`: 생성에 대한 가사의 영향을 제어합니다. * **KSampler 노드:** * `seed`: 무작위화의 초기 값을 설정합니다. * `steps`: 확산 단계 수입니다. * `cfg`: 분류기 없는 안내 스케일입니다. * `sampler_name`: 샘플링 알고리즘입니다. * `scheduler`: 노이즈 스케줄 유형입니다. * `denoise`: 노이즈 제거 수준을 제어합니다. * **EmptyAceStepLatentAudio 노드:** * `seconds`: 생성된 오디오의 길이입니다. * `batch_size`: 동시에 생성할 샘플 수입니다. * **VAEDecodeAudio 노드:** * `samples`: KSampler의 입력입니다. * `vae`: 디코딩에 사용되는 VAE 모델입니다. * **SaveAudio 노드:** * `filename_prefix`: 저장된 오디오 파일의 접두사입니다. * `audio`: 생성된 오디오를 미리 볼 수 있는 플레이어입니다.

고급 기법에는 다음이 포함됩니다: * **변형 생성:** 원본 생성과의 유사성을 제어하기 위해 분산 매개변수를 조정합니다. * **인페인팅:** 특정 오디오 섹션을 선택적으로 다시 생성합니다. * **가사 편집:** 멜로디, 음색 및 반주를 유지하면서 가사를 수정합니다. * **음성 복제:** 새 콘텐츠를 생성할 때 보컬 특성을 유지합니다. * **스타일 전이:** 기존 작곡에 새로운 음악 스타일을 적용합니다.

일반 음악의 경우 장르, 분위기 및 악기를 구체적으로 지정하십시오. 악기 음악의 경우 악기와 음악적 특징을 지정하십시오. ACE-Step는 영어, 중국어, 러시아어, 스페인어, 일본어, 독일어, 프랑스어, 포르투갈어, 이탈리아어 및 한국어에서 가장 잘 작동합니다.

ACE-Step 모델은 ACE Studio와 StepFun에서 개발했습니다. ComfyUI 통합을 통해 ComfyUI 환경 내에서 원활한 음악 생성이 가능합니다. ACE-Step에 대한 혁신적인 작업에 대해 원저자에게 모든 공을 돌립니다.