الوصف
Hy-Nomas هو نموذج متقدم لتوليد عوالم الفيديو مصمم لتسهيل التفاعل الحر والمتعدد الأدوار من خلال تعليمات نصية والتحكم في الكاميرا. يقوم هذا النموذج بتوليد مقاطع الفيديو واحدة تلو الأخرى، مما يسمح للمستخدمين بإدخال كائنات، وتغيير الأنماط، والتحكم في المشاهد وزوايا الكاميرا أثناء تقدم التوليد. تتكامل بنية النموذج مع محول انتشار تلقائي القطع (DiT)، ومشفّر نص Qwen، ووحدات تحكم الكاميرا، ومفكك تشفير الفيديو PixelUMM. يحافظ ذاكرة مفتاح/قيمة دائمة على السياق بين المقاطع، مما يضمن الاستمرارية في توليد العوالم.
قراءة المزيد
يدعم النموذج خيارات نشر مرنة، بما في ذلك تكوين تسلسل متوازي قياسي وتكوين GPU واحد، مما يجعله متاحًا لمجموعة متنوعة من إعدادات الأجهزة. يمكن للمستخدمين التفاعل مع النموذج من خلال عرض ويب، والذي يعرض قدراته في الوقت الحقيقي. يتضمن Hy-Nomas أيضًا Hy-Nomas-Bench، مجموعة من المعايير المصممة لتقييم القابلية للتحكم التفاعلي والاتساق أثناء توليد العوالم المستمرة.
يؤدي Hy-Nomas الانتشار في مساحة الفيديو الكامنة المضغوطة والتراجع التلقائي عبر مقاطع الفيديو. يشترط النص، وحركة الكاميرا، والتاريخ المخزن توليد كل مقطع جديد، مما يسمح بإنشاء فيديو ديناميكي وتفاعلي. تتميز بنية النموذج بـ 54 كتلة MMDiT ذات تدفق مزدوج، حيث يتفاعل النص والفيديو من خلال الانتباه المشترك السببي على مستوى المقاطع.
تمثل الكامنة الفيديو الخاصة بالنموذج ككامنة DCAE-V، وتقوم أنبوب الاستدلال الافتراضي بفك تشفيرها باستخدام مفكك تشفير PixelUMM المعدل. يسمح هذا الإعداد بتوليد فيديو فعال مع مخرجات عالية الجودة. Hy-Nomas مرخص بموجب Apache-2.0، ويمكن للمستخدمين الوصول إلى النموذج ومكوناته من خلال منصة Hugging Face.
- الفئةنماذج الذكاء الاصطناعي ونماذج اللغة الكبيرة
- نموذج التسعيرمفتوح المصدر
- النشرسحابي, استضافة ذاتية
- المنصاتالويب
أبرز ملامح Hy-Nomas
تفاعل حر من خلال النص والتحكم في الكاميرا
بنية محول انتشار تلقائي القطع
ذاكرة مفتاح/قيمة دائمة للاحتفاظ بالسياق
نشر مرن مع تكوينات قياسية وGPU واحد
Hy-Nomas-Bench لتقييم القابلية للتحكم التفاعلي
انتشار في مساحة الفيديو الكامنة المضغوطة
54 كتلة MMDiT ذات تدفق مزدوج
مفكك تشفير فيديو PixelUMM المعدل
البدء مع Hy-Nomas
الوصول إلى النموذج: زيارة Hugging Face
المصادقة: إعداد الحساب
إعداد البيئة: تحضير الأجهزة والبرامج
التكامل عبر API: استخدام النقاط النهائية المقدمة
تحسين: ضبط الإعدادات للحصول على المخرجات المرغوبة
حالات استخدام Hy-Nomas
- إنشاء فيديو تفاعلي
- تطوير الألعاب
- الواقع الافتراضي
- إنتاج الأفلام
- المحتوى التعليمي










