ComfyUI ACE-Step: Fluxo de Trabalho de Geração de Música por IA

O ComfyUI ACE-Step integra o modelo de geração de música ACE-Step ao ambiente ComfyUI. O ACE-Step utiliza uma arquitetura híbrida que combina geração baseada em difusão com o AutoEncoder de Compressão Profunda (DCAE) de Sana e um transformer linear leve. Isso permite a geração rápida de música de alta qualidade com capacidades de controle excepcionais. Ele permite que os usuários criem música original em vários gêneros e estilos usando prompts simples de linguagem natural e letras.

O ComfyUI ACE-Step oferece várias vantagens: * **Velocidade sem precedentes:** Sintetiza até 4 minutos de música em apenas 20 segundos. * **Coerência Musical:** Mantém excelente qualidade em melodia, harmonia e ritmo. * **Suporte multilíngue:** Gera música em 19 idiomas. * **Controle Avançado:** Permite clonagem de voz, edição de letras, remixagem e geração de faixas com parâmetros granulares. * **Flexibilidade Criativa:** Suporta diversos estilos musicais, gêneros e instrumentos com vários formatos de descrição. * **Integração Perfeita:** Conecta-se diretamente aos fluxos de trabalho do ComfyUI para criação de áudio assistida por IA.

Usar o fluxo de trabalho ComfyUI ACE-Step envolve configurar os nós e parâmetros na interface do ComfyUI. Isso inclui configurar os prompts de texto, as configurações do sampler e as opções de saída de áudio para gerar a música desejada.

Existem vários métodos para gerar música com ACE-Step, incluindo: * **Fluxo de Trabalho Principal de Geração ACE-Step:** Ideal para criar música original a partir de descrições de texto e letras. * **Lyric2Vocal:** Projetado para gerar vocais de alta qualidade a partir de letras. * **Text2Samples:** Especializado na criação de loops e samples instrumentais. * **RapMachine:** Otimizado para gerar música rap em vários estilos.

Os principais parâmetros dentro do fluxo de trabalho ComfyUI ACE-Step incluem: * **Nó TextEncodeAceStepAudio:** * `clip`: Campo de texto para descrições de estilo, gênero e humor. * `lyrics`: Campo de texto para letras com tags opcionais de estrutura. * `lyrics_strength`: Controla a influência das letras na geração. * **Nó KSampler:** * `seed`: Define o valor inicial para aleatorização. * `steps`: Número de passos de difusão. * `cfg`: Escala de orientação livre de classificador. * `sampler_name`: Algoritmo de amostragem. * `scheduler`: Tipo de cronograma de ruído. * `denoise`: Controla o nível de remoção de ruído. * **Nó EmptyAceStepLatentAudio:** * `seconds`: Duração do áudio gerado. * `batch_size`: Número de amostras a serem geradas simultaneamente. * **Nó VAEDecodeAudio:** * `samples`: Entrada do KSampler. * `vae`: Modelo VAE usado para decodificação. * **Nó SaveAudio:** * `filename_prefix`: Prefixo para arquivos de áudio salvos. * `audio`: Player para pré-visualizar o áudio gerado.

Técnicas avançadas incluem: * **Geração de Variações:** Ajuste o parâmetro de variância para controlar a similaridade com as gerações originais. * **Inpainting:** Regenera seletivamente seções de áudio específicas. * **Edição de Letras:** Modifica letras preservando melodia, timbre vocal e acompanhamento. * **Clonagem de Voz:** Preserva características vocais ao gerar novo conteúdo. * **Transferência de Estilo:** Aplica novos estilos musicais a composições existentes.

Para música geral, seja específico sobre gênero, humor e instrumentação. Para música instrumental, especifique instrumentos e características musicais. O ACE-Step tem melhor desempenho em inglês, chinês, russo, espanhol, japonês, alemão, francês, português, italiano e coreano.

O modelo ACE-Step foi desenvolvido pela ACE Studio e StepFun. A integração com o ComfyUI permite a geração de música sem interrupções dentro do ambiente ComfyUI. Crédito total aos autores originais por seu trabalho inovador no ACE-Step.