الوصف
MusicGen Large هو نموذج متقدم للذكاء الاصطناعي مصمم لتوليد الموسيقى من النصوص، تم تطويره بواسطة فريق FAIR من Meta AI. يستفيد من نموذج Transformer آلي ذاتي التكرار من مرحلة واحدة تم تدريبه باستخدام مُرمز EnCodec بتردد 32 كيلو هرتز مع أربعة كتب رمزية تم أخذ عينات منها عند 50 هرتز. على عكس النماذج الأخرى مثل MusicLM، لا يتطلب MusicGen تمثيلًا دلاليًا ذاتيًا، مما يسمح له بتوليد جميع الكتب الرمزية الأربعة في تمريرة واحدة. يقدم هذا النهج المبتكر تأخيرًا صغيرًا بين الكتب الرمزية، مما يمكّن من التنبؤ المتوازي ويقلل من خطوات التكرار الذاتي إلى 50 فقط في الثانية من الصوت.
قراءة المزيد
تم تدريب النموذج بين أبريل 2023 ومايو 2023 وهو متاح بأحجام مختلفة، بما في ذلك النسخة الكبيرة التي تحتوي على 3.3 مليار معلمة. يهدف MusicGen بشكل أساسي إلى الأغراض البحثية، مع التركيز على توليد الموسيقى المعتمد على الذكاء الاصطناعي. يهدف إلى تعزيز الفهم للنماذج التوليدية وتحسين حالة العلم في هذا المجال. المستخدمون الرئيسيون هم الباحثون في الصوت، وتعلم الآلة، والذكاء الاصطناعي، بالإضافة إلى الهواة المهتمين باستكشاف نماذج الذكاء الاصطناعي.
تم تقييم MusicGen Large باستخدام مقاييس موضوعية مثل مسافة فريشيت الصوت واختلاف كولباك-ليبلر، مما يوضح أدائه على معايير الموسيقى القياسية. ومع ذلك، يحتوي النموذج على قيود، بما في ذلك عدم قدرته على توليد أصوات واقعية وأدائه المنخفض مع الأوصاف غير الإنجليزية. كما يعكس أيضًا التحيزات من بيانات التدريب، والتي قد لا تمثل جميع ثقافات الموسيقى بشكل متساوٍ.
تم إصدار النموذج بموجب ترخيص MIT للشفرة وCC-BY-NC 4.0 لأوزان النموذج. يُشجع المستخدمون على استكشاف قدراته من خلال مكتبات Hugging Face وAudiocraft، مع توفر وثائق مفصلة لمزيد من الإرشادات.
- الفئةنماذج الذكاء الاصطناعي ونماذج اللغة الكبيرة
- نموذج التسعيرمفتوح المصدر
- النشرسحابي
- المنصاتالويب
أبرز ملامح MusicGen Large
توليد الموسيقى من النصوص
نموذج Transformer آلي ذاتي التكرار
مُرمز EnCodec بتردد 32 كيلو هرتز
أربعة كتب رمزية تم أخذ عينات منها عند 50 هرتز
التنبؤ المتوازي للكتب الرمزية
3.3 مليار معلمة
تطبيق يركز على البحث
مقاييس أداء موضوعية
البدء مع MusicGen Large
الوصول إلى الصفحة: زيارة موقع Hugging Face
تحميل النموذج: اختيار نقطة تفتيش MusicGen Large
تكوين البيئة: تثبيت المكتبات اللازمة
التكامل: استخدام مكتبة Transformers أو Audiocraft
التعديل الدقيق: ضبط معلمات النموذج لمهام محددة
حالات استخدام MusicGen Large
- بحث الموسيقى بالذكاء الاصطناعي
- إنشاء الموسيقى من النصوص
- توليد موجه باللحن
- تقييم النموذج
- هندسة المطالبات
