MusicGen Large
मेटा एआई का सबसे बड़ा ओपन सोर्स म्यूजिक जनरेशन मॉडल 3.3 बिलियन मापदंडों के साथ, एक टेक्स्ट विवरण से रचनाएं बनाती हैं या एक अपलोडेड मेलोडी पर आधारित होती हैं।.
अवलोकन
MusicGen Large
MusicGen बड़े तंत्रिका नेटवर्क का विवरण
म्यूजिकजेन लार्ज मेटा एआई द्वारा विकसित सबसे बड़ा ओपन म्यूजिक जनरेशन मॉडल है और जून 2023 में जारी किया गया है। तंत्रिका नेटवर्क में 3.3 बिलियन पैरामीटर हैं और एक पाठ विवरण (टेक्स्ट-टू-म्यूज़िक मोड) दोनों से वाद्य रचनाएं बना सकते हैं और उपयोगकर्ता (मेलोडी-टू-म्यूज़िक मोड) द्वारा अपलोड किए गए एक मेलोडी की व्यवस्था करके।
मॉडल को 20,000 घंटे के लाइसेंस-सफाई डेटासेट पर प्रशिक्षित किया जाता है। MusicGen Large की मुख्य विशेषता इसकी पूर्ण खुलापन है: स्रोत कोड एमआईटी लाइसेंस के तहत वितरित किया जाता है, जिससे तंत्रिका नेटवर्क को किसी भी उद्देश्य के लिए मुफ्त में इस्तेमाल किया जा सकता है, जिसमें वाणिज्यिक लोग शामिल हैं। उसी समय, एक उत्पन्न खंड की अधिकतम लंबाई लगभग 30 सेकंड है, और एक GPU को आरामदायक संचालन के लिए दृढ़ता से अनुशंसित किया जाता है।
MusicGen Large की विशेषताएं
| विशेषता | मूल्य |
|---|---|
| प्रकार | संगीत जनरेटर |
| डेवलपर | मेटा |
| रिलीज़ की तारीख | जून 12, 2023 |
| मापदंडों की संख्या | 3.3 बिलियन |
| प्रशिक्षण डेटासेट का आकार | 20,000 घंटे |
| लाइसेंस | एमआईटी (ओपन सोर्स) |
| ओपन सोर्स | हाँ |
| ऑडियो गुणवत्ता | 32 kHz स्टीरियो |
| अधिकतम उत्पादन लंबाई | 30 सेकंड |
| एपीआई उपलब्धता | हाँ (Replicate, Huggingफेस स्पेस के माध्यम से) |
कौन संगीत के लिए उपयुक्त है?
संगीतकार और संगीतकार
MusicGen Large उन संगीतकारों के लिए उपयोगी हो सकता है जो भविष्य के ट्रैक के लिए एक इंस्ट्रूमेंटल फाउंडेशन को जल्दी से स्केच करना चाहते हैं, एक प्रेरणादायक व्यवस्था ढूंढें, या अप्रत्याशित शैली में मौजूदा मेलोडी जारी रखें। निरंतरता मोड आपको अपना खुद का मेलोडी अपलोड करने देता है और इसे विकसित करने के तरीके के कई रूप प्राप्त करता है।
डेवलपर्स और सामग्री निर्माताओं
गेम डेवलपर्स, वीडियो संपादकों और पॉडकास्ट निर्माताओं के लिए, मॉडल पृष्ठभूमि वाद्य संगीत के मुफ्त जनरेटर के रूप में काम करता है। ओपन एमआईटी लाइसेंस प्राप्त ट्रैक्स को कॉपीराइट धारक को रॉयल्टी भुगतान के बिना वाणिज्यिक परियोजनाओं में इस्तेमाल करने की अनुमति देता है।
शोधकर्ताओं और मशीन सीखने के प्रति उत्साही
स्रोत कोड की उपलब्धता और इसे स्थानीय रूप से चलाने की क्षमता के लिए धन्यवाद, MusicGen Large का सक्रिय रूप से अकादमिक और शौकवादी प्रयोगों में उपयोग किया जाता है। समुदाय विशिष्ट शैलियों और कार्यों के अनुकूल मॉडल के बेहतरीन संस्करणों को जारी करता है।
MusicGen Large का उपयोग कैसे करें?
पाइथन के माध्यम से स्थानीय लॉन्च
MusicGen Large को स्थापित करने और चलाने के लिए, आपको एक पायथन वातावरण की आवश्यकता होगी। कमांड के साथ ऑडियोक्राफ्ट पैकेज स्थापित करें pip install audiocraftफिर, कोड में, संगीत जेन आयात करें, लोड करें facebook/musicgen-large मॉडल, पीढ़ी अवधि निर्दिष्ट करें (उदाहरण के लिए, 30 सेकंड), और कॉल करें generate एक पाठ संकेत के साथ विधि। जीपीयू ऑपरेशन के लिए, सीयूडीए 11.8 या नए और कम से कम 16 जीबी वीडियो मेमोरी की सिफारिश की जाती है।
एपीआई और डेमो संस्करणों के माध्यम से उपयोग करना
यदि स्थानीय लॉन्च संभव नहीं है, तो मॉडल प्रतिकृति प्लेटफॉर्म एपीआई (प्रति रन मूल्य निर्धारण) के माध्यम से और हगिंगफेस स्पेस पर एक मुफ्त डेमो के माध्यम से उपलब्ध है। इन विकल्पों को शक्तिशाली हार्डवेयर की आवश्यकता नहीं है और आपको अपने ब्राउज़र में सीधे मॉडल की क्षमताओं का मूल्यांकन करने दें।
MusicGen Large की मुख्य विशेषताएं
पाठ विवरण से संगीत पीढ़ी
उपयोगकर्ता वांछित शैली, मनोदशा, टेम्पो और उपकरणों को निर्दिष्ट करने के लिए एक प्राकृतिक भाषा पाठ में प्रवेश करता है, और मॉडल एक समान वाद्य खंड बनाता है। लोकप्रिय शैलियों का समर्थन किया जाता है: पॉप, रॉक, जैज़, इलेक्ट्रॉनिक संगीत, ऑर्केस्ट्रल व्यवस्था और कई अन्य।
निरंतरता मोड (मेलोडी व्यवस्था)
MusicGen बड़े आप एक मौजूदा मेलोडी अपलोड करते हैं और इसकी निरंतरता या एक नई व्यवस्था प्राप्त करते हैं। मॉडल मूल ऑडियो की संरचना और शैली का विश्लेषण करता है और एक रचना बनाता है जो सामंजस्यपूर्ण रूप से अपलोड की गई सामग्री विकसित करता है।
निर्धारक
जब एक ही टेक्स्ट प्रॉम्प्ट और उसी बीज का उपयोग किया जाता है, तो तंत्रिका नेटवर्क एक समान परिणाम उत्पन्न करता है। यह उन कार्यों के लिए महत्वपूर्ण है जिनके लिए उत्तरदायित्व की आवश्यकता होती है: समान ट्रैक के उत्पादन कार्य, परीक्षण या धारावाहिक पीढ़ी।
MusicGen Large के फायदे
पूरी तरह से खुला स्रोत कोड
एमआईटी लाइसेंस के लिए धन्यवाद, न्यूरल नेटवर्क का उपयोग किसी भी उद्देश्य के लिए स्वतंत्र रूप से किया जा सकता है, जिसमें वाणिज्यिक लोग शामिल हैं। रॉयल्टी भुगतान की अनुपस्थिति और क्लाउड सर्विस पर कोई निर्भरता उपयोगकर्ताओं को उपकरण पर पूर्ण नियंत्रण देती है।
उच्च ऑडियो गुणवत्ता
32 kHz नमूना दर के साथ MusicGen बड़े आउटपुट स्टीरियो साउंड। डेवलपर्स के अनुसार, ऑडियो में पहले के जीनरेटिव मॉडल के विशिष्ट कलाकृतियों में से कोई भी शामिल नहीं है, जिससे परिणाम अतिरिक्त प्रसंस्करण के बिना परियोजनाओं में उपयोग के लिए उपयुक्त हो जाते हैं।
सक्रिय समुदाय और ठीक-ट्यून संस्करण
डेवलपर्स के एक समुदाय ने MusicGen के आसपास का गठन किया है जो विशिष्ट शैलियों और कार्यों के लिए मॉडल के बेहतरीन संस्करणों को जारी करता है। यह तंत्रिका नेटवर्क की आधार क्षमताओं को बढ़ाता है और संकीर्ण संगीत दिशाओं में बेहतर परिणाम प्राप्त करना संभव बनाता है।
MusicGen Large के नुकसान
सीमित पीढ़ी की लंबाई
मूल रूप से, मॉडल टुकड़े बनाता है प्रति अनुरोध 30 सेकंड तक। पूर्ण-लंबाई ट्रैक बनाने के लिए कई उत्पन्न क्षेत्रों को एक साथ सिलाई की आवश्यकता हो सकती है, जो हमेशा एक चिकनी परिणाम उत्पन्न नहीं करता है।
कोई स्वर नहीं
म्यूजिकजेन लार्ज विशेष रूप से वाद्य संगीत उत्पन्न करता है। यदि आपकी परियोजना को स्वर की जरूरत है, तो आपको उन्हें अलग से जोड़ना होगा या अन्य तंत्रिका नेटवर्क का उपयोग करना होगा।
मांग हार्डवेयर आवश्यकताओं
एक उचित समय में उत्पन्न होने के लिए कम से कम 16 जीबी वीडियो मेमोरी (उदाहरण के लिए, RTX 3080 या बेहतर) के साथ GPU की आवश्यकता होती है। सीपीयू या पुराने ग्राफिक्स कार्ड पर, प्रक्रिया बहुत धीमी हो सकती है।
वाणिज्यिक सेवाओं की तुलना में कम गुणवत्ता
हालांकि संगीतजेन बड़े सभ्य परिणाम प्रदान करता है, ऐसे Suno और Udio के रूप में वाणिज्यिक विकल्प उच्च समग्र पीढ़ी की गुणवत्ता और स्वर समर्थन प्रदान करते हैं।
क्या कार्य करता है MusicGen बड़े हल?
पाठ विवरण से वाद्य रचनाओं का निर्माण
तंत्रिका नेटवर्क, वांछित शैली, टेम्पो और मनोदशा में जल्दी से वाद्य ट्रैक प्राप्त करना संभव बनाता है ताकि यह पता लगाया जा सके कि संगीत वाद्ययंत्र कैसे खेला जाए।
अपलोड किए गए मेलोडी को जारी रखने और व्यवस्थित करना
उपयोगकर्ता अपने स्वयं के मेलोडी को अपलोड कर सकते हैं और एक अलग शैली में इसके विकास या पुनर्विक्रय के कई रूप प्राप्त कर सकते हैं।
उत्पादन के लिए पुन: प्रयोज्य पीढ़ी
निश्चित उत्पादन के लिए धन्यवाद, MusicGen Large उन कार्यों के लिए उपयुक्त है जिन्हें स्थिर और दोहराए जाने योग्य परिणाम की आवश्यकता होती है, जैसे कि बड़े सॉफ्टवेयर उत्पादों या समान स्थितियों के तहत सीरियल संगीत निर्माण में एकीकरण।
MusicGen बड़े मूल्य निर्धारण
MusicGen Large पूरी तरह से मुक्त है। मॉडल को एमआईटी लाइसेंस के तहत ओपन सोर्स के रूप में वितरित किया जाता है, जो उपयोगकर्ताओं पर कोई वित्तीय दायित्व नहीं रखता है। एपीआई रीप्लिकेट प्लेटफॉर्म के माध्यम से प्रति रन लागत पर उपलब्ध है। इसके अलावा, स्थापना के बिना मूल्यांकन के लिए हगिंगफेस स्पेस पर एक मुफ्त डेमो उपलब्ध है।
संगीत के लिए उपयोग की शर्तेंGen Large
मॉडल को एमआईटी लाइसेंस के तहत वितरित किया जाता है, जो अतिरिक्त भुगतान के बिना वाणिज्यिक उपयोग सहित किसी भी उपयोग की अनुमति देता है। प्रशिक्षण डेटासेट में लाइसेंस प्राप्त ट्रैक होते हैं, लेकिन डेवलपर्स कॉपीराइट किए गए कार्यों के साथ मैचों के लिए आउटपुट रचनाओं की जांच करने की सलाह देते हैं, क्योंकि मॉडल गलती से पहचाने जाने योग्य संगीत खंडों को पुन: उत्पन्न कर सकता है।
MusicGen Large की उपलब्धता
तंत्रिका नेटवर्क हगिंगफेस ट्रांसफॉर्मर लाइब्रेरी और आधिकारिक मेटा एआई रिपोजिटरी, ऑडियोक्राफ्ट के माध्यम से उपलब्ध है। स्थानीय लॉन्च के लिए एक GPU के साथ एक कंप्यूटर की आवश्यकता होती है; RTX 3080 या उससे अधिक की सिफारिश की जाती है। मॉडल को हगिंगफेस स्पेस डेमो स्पेस और प्रतिकृति एपीआई के माध्यम से ऑनलाइन भी कोशिश की जा सकती है।
कैसे MusicGen बड़े विकल्प से अलग है
MusicGen Large एक खुला मॉडल है जिसे क्लाउड सर्विस के आधार पर स्थानीय रूप से चलाया जा सकता है। यह केवल वाद्य संगीत उत्पन्न करता है। इसके विपरीत, Suno और Udio बंद वाणिज्यिक सेवाएं हैं: वे स्वर का समर्थन करते हैं और उच्च गुणवत्ता वाले परिणाम देते हैं, लेकिन उनका स्रोत कोड उपलब्ध नहीं है, वे स्थानीय रूप से नहीं चलाते हैं और उन्हें सदस्यता या व्यक्तिगत रन के लिए भुगतान की आवश्यकता होती है। MusicGen Large का मुख्य लाभ उपयोग की पूरी स्वतंत्रता और किसी भी भुगतान की अनुपस्थिति है।
निष्कर्ष
म्यूजिकजेन लार्ज, मेटा एआई से एक शक्तिशाली ओपन न्यूरल नेटवर्क है जो इंस्ट्रूमेंटल संगीत उत्पन्न करता है। यह दो ऑपरेटिंग मोड प्रदान करता है (एक पाठ विवरण से और अपलोड किए गए मेलोडी पर आधारित) उच्च गुणवत्ता वाले स्टीरियो ऑडियो का उत्पादन करता है, और एमआईटी लाइसेंस के लिए रॉयल्टी भुगतान की आवश्यकता नहीं होती है। मुख्य सीमाएं स्वरों की कमी, एक समय में अधिकतम 30 सेकंड पीढ़ी और GPU की आवश्यकता है। उन कार्यों के लिए जिन्हें इंस्ट्रूमेंटल संगीत की मुफ्त स्थानीय पीढ़ी की आवश्यकता होती है, MusicGen Large बाजार पर सबसे अच्छा खुला समाधान है।
शुल्क
अक्सर पूछे जाने वाले प्रश्न
समान न्यूरल नेटवर्क
यह भी देखें

चीनी AI-एग्रीगेटर प्लेटफ़ॉर्म, जो AI टूल्स, कोर्स और प्रतियोगिताओं को एक साथ जोड़ता है।

एआई-आधारित आभासी पात्रों के साथ बातचीत का मंच, जिसमें संवाद के दौरान छवि निर्माण की सुविधा शामिल है।

चार्ट और ग्राफ़ जनरेटर जो अपलोड किए गए डेटा से प्राकृतिक भाषा के टेक्स्ट विवरण के आधार पर बनाता है।

संगीत और गाने उत्पन्न करने के लिए AI-आधारित प्लेटफ़ॉर्म, जो टेक्स्ट विवरण के आधार पर काम करता है।

AI टूल्स और भाषा मॉडल्स को एक साथ जोड़ने वाला प्लेटफ़ॉर्म, जहाँ केवल वास्तविक उपयोग के लिए भुगतान करना होता है।

एआई एनीमे छवि जनरेटर जो टेक्स्ट विवरण के आधार पर टेम्पलेट चुनने की सुविधा देता है।

बहुउद्देशीय प्लेटफ़ॉर्म जो कृत्रिम बुद्धिमत्ता की मदद से मीडिया सामग्री बनाने और संपादित करने की सुविधा देता है।
बिंग खोज इंजन और एज ब्राउज़र में GPT-4 पर आधारित Microsoft का बुद्धिमान सहायक।
