ComfyUI ACE-Step: AI संगीत जनरेशन वर्कफ़्लो

ComfyUI ACE-Step, ComfyUI वातावरण में ACE-Step संगीत जनरेशन मॉडल को एकीकृत करता है। ACE-Step डिफ्यूजन-आधारित जनरेशन को Sana के डीप कम्प्रेशन ऑटोएनकोडर (DCAE) और एक हल्के लीनियर ट्रांसफार्मर के संयोजन वाले हाइब्रिड आर्किटेक्चर का उपयोग करता है। यह असाधारण नियंत्रण क्षमताओं के साथ उच्च-गुणवत्ता वाले संगीत के तीव्र जनरेशन को सक्षम बनाता है। यह उपयोगकर्ताओं को सरल प्राकृतिक भाषा प्रॉम्प्ट और गीत का उपयोग करके विभिन्न शैलियों और प्रकारों में मूल संगीत बनाने की अनुमति देता है।

ComfyUI ACE-Step कई फायदे प्रदान करता है: * **अभूतपूर्व गति:** केवल 20 सेकंड में 4 मिनट तक का संगीत संश्लेषित करता है। * **संगीत सामंजस्य:** धुन, सामंजस्य और लय में उत्कृष्ट गुणवत्ता बनाए रखता है। * **बहुभाषी समर्थन:** 19 भाषाओं में संगीत उत्पन्न करता है। * **उन्नत नियंत्रण:** वॉयस क्लोनिंग, गीत संपादन, रीमिक्सिंग और फाइन-ग्रेन्ड पैरामीटर्स के साथ ट्रैक जनरेशन को सक्षम बनाता है। * **रचनात्मक लचीलापन:** विभिन्न विवरण प्रारूपों के साथ विविध संगीत शैलियों, प्रकारों और उपकरणों का समर्थन करता है। * **निर्बाध एकीकरण:** AI-सहायता प्राप्त ऑडियो निर्माण के लिए ComfyUI वर्कफ़्लो से सीधे जुड़ता है।

ComfyUI ACE-Step वर्कफ़्लो का उपयोग करने में ComfyUI इंटरफ़ेस के भीतर नोड्स और पैरामीटर्स को सेट करना शामिल है। इसमें वांछित संगीत उत्पन्न करने के लिए टेक्स्ट प्रॉम्प्ट, सैंपलर सेटिंग्स और ऑडियो आउटपुट विकल्पों को कॉन्फ़िगर करना शामिल है।

ACE-Step के साथ संगीत उत्पन्न करने के कई तरीके हैं, जिनमें शामिल हैं: * **मुख्य ACE-Step जनरेशन वर्कफ़्लो:** टेक्स्ट विवरण और गीतों से मूल संगीत बनाने के लिए सबसे अच्छा है। * **Lyric2Vocal:** गीतों से उच्च-गुणवत्ता वाले वोकल्स उत्पन्न करने के लिए तैयार किया गया है। * **Text2Samples:** इंस्ट्रूमेंटल लूप और सैंपल बनाने के लिए विशेष। * **RapMachine:** विभिन्न शैलियों में रैप संगीत उत्पन्न करने के लिए अनुकूलित।

ComfyUI ACE-Step वर्कफ़्लो के भीतर मुख्य पैरामीटर में शामिल हैं: * **TextEncodeAceStepAudio Node:** * `clip`: शैली, प्रकार और मूड विवरण के लिए टेक्स्ट फ़ील्ड। * `lyrics`: वैकल्पिक संरचना टैग के साथ गीतों के लिए टेक्स्ट फ़ील्ड। * `lyrics_strength`: जनरेशन पर गीतों के प्रभाव को नियंत्रित करता है। * **KSampler Node:** * `seed`: रैंडमाइजेशन के लिए प्रारंभिक मान सेट करता है। * `steps`: डिफ्यूजन चरणों की संख्या। * `cfg`: क्लासिफायर-फ्री गाइडेंस स्केल। * `sampler_name`: सैंपलिंग एल्गोरिथम। * `scheduler`: नॉइज़ शेड्यूल प्रकार। * `denoise`: नॉइज़ हटाने के स्तर को नियंत्रित करता है। * **EmptyAceStepLatentAudio Node:** * `seconds`: उत्पन्न ऑडियो की अवधि। * `batch_size`: एक साथ उत्पन्न किए जाने वाले नमूनों की संख्या। * **VAEDecodeAudio Node:** * `samples`: KSampler से इनपुट। * `vae`: डिकोडिंग के लिए उपयोग किया जाने वाला VAE मॉडल। * **SaveAudio Node:** * `filename_prefix`: सहेजे गए ऑडियो फ़ाइलों के लिए उपसर्ग। * `audio`: उत्पन्न ऑडियो का पूर्वावलोकन करने के लिए प्लेयर।

उन्नत तकनीकों में शामिल हैं: * **विविधताएं उत्पन्न करना:** मूल जनरेशन के साथ समानता को नियंत्रित करने के लिए भिन्नता पैरामीटर को समायोजित करें। * **इनपेंटिंग:** विशिष्ट ऑडियो अनुभागों को चुनिंदा रूप से फिर से उत्पन्न करें। * **गीत संपादन:** धुन, आवाज की गुणवत्ता और संगत को बनाए रखते हुए गीतों को संशोधित करें। * **वॉयस क्लोनिंग:** नई सामग्री उत्पन्न करते समय मुखर विशेषताओं को बनाए रखें। * **शैली स्थानांतरण:** मौजूदा रचनाओं पर नई संगीत शैलियों को लागू करें।

सामान्य संगीत के लिए, शैली, मूड और वाद्ययंत्रों के बारे में विशिष्ट रहें। वाद्य संगीत के लिए, वाद्ययंत्रों और संगीत की विशेषताओं को निर्दिष्ट करें। ACE-Step अंग्रेजी, चीनी, रूसी, स्पेनिश, जापानी, जर्मन, फ्रेंच, पुर्तगाली, इतालवी और कोरियाई में सबसे अच्छा प्रदर्शन करता है।

ACE-Step मॉडल ACE Studio और StepFun द्वारा विकसित किया गया था। ComfyUI एकीकरण ComfyUI वातावरण के भीतर निर्बाध संगीत जनरेशन को सक्षम बनाता है। ACE-Step पर उनके अभिनव कार्य के लिए मूल लेखकों को पूरा श्रेय दिया जाता है।