الوصف
Cosmos3-Edge، الذي تم تطويره بواسطة NVIDIA، هو نموذج ذكاء اصطناعي متقدم يشكل جزءًا من مجموعة Cosmos3. تم تصميمه لتسهيل تطوير الذكاء الاصطناعي الفيزيائي من خلال تمكين الآلات من فهم ومحاكاة والتفاعل مع العالم الفيزيائي. هذا النموذج مفيد بشكل خاص في مجالات مثل الروبوتات، القيادة الذاتية، وبيئات الفضاء الذكي، بما في ذلك التطبيقات الصناعية وعلى نطاق المصانع.
قراءة المزيد
النموذج مبني على بنية مزيج المحولات (MoT)، والتي تشمل محولًا ذاتيًا للتوليد التوكنات المنفصلة ومحول انتشار للتوليد المتعدد الأنماط المستمر. تتيح هذه البنية لـ Cosmos3-Edge التعامل مع الأنماط المتنوعة ضمن إطار عمل واحد، مما يضمن أن يتم توليد كل نمط باستخدام الآلية الأكثر ملاءمة.
يستطيع Cosmos3-Edge توليد نصوص وصور ومقاطع فيديو ومخرجات فعلية متماسكة من مدخلات متعددة الأنماط، بما في ذلك النصوص والصور ومقاطع الفيديو ومسارات الأفعال. مما يجعله أداة أساسية لمجموعة واسعة من التطبيقات، بما في ذلك فهم العالم، توليد العالم، المحاكاة، وتعلم السياسات المجسدة.
يدعم النموذج مجموعة متنوعة من تنسيقات المدخلات والمخرجات، مع معلمات محددة للنصوص والصور ومقاطع الفيديو ومدخلات الأفعال. تم تحسينه للعمل على أنظمة معززة بوحدات معالجة الرسوميات من NVIDIA، مستفيدًا من الأجهزة والأطر البرمجية الخاصة بـ NVIDIA لتحقيق أوقات تدريب واستدلال أسرع مقارنة بالحلول المعتمدة على وحدة المعالجة المركزية فقط.
تم إصدار Cosmos3-Edge بموجب ترخيص OpenMDW1.1 وهو متاح للنشر العالمي. وهو مناسب للاستخدام التجاري وغير التجاري، مما يجعله متاحًا لمجموعة واسعة من المستخدمين والتطبيقات. يتم تعزيز قدرات النموذج بشكل أكبر من خلال تكامله مع برمجيات مثل vLLM-Omni وPyTorch وHugging Face Diffusers.
- الفئةنماذج الذكاء الاصطناعي ونماذج اللغة الكبيرة
- نموذج التسعيرمفتوح المصدر
- النشرسحابي
- المنصاتLinux
أبرز ملامح Cosmos3-Edge
نموذج عالمي متعدد الأنماط
بنية مزيج المحولات
يدعم مدخلات النصوص والصور ومقاطع الفيديو والأفعال
يولد مخرجات متعددة الأنماط متماسكة
محسن لأنظمة معززة بوحدات معالجة الرسوميات من NVIDIA
ترخيص OpenMDW1.1
نشر عالمي
استخدام تجاري وغير تجاري
البدء مع Cosmos3-Edge
الوصول إلى النموذج: زيارة Hugging Face
المصادقة: استخدام بيانات الاعتماد الخاصة بك
إعداد البيئة: تكوين وحدة معالجة الرسوميات من NVIDIA
التكامل عبر API: استخدام vLLM-Omni أو PyTorch
تحسين: الاستفادة من مكتبات CUDA
حالات استخدام Cosmos3-Edge
- الروبوتات
- القيادة الذاتية
- الفضاءات الذكية
- التطبيقات الصناعية
- محاكاة العالم
