الوصف
Sand.ai هي شركة ذكاء اصطناعي متخصصة في تكنولوجيا ومنتجات توليد الفيديو. لقد طورت بشكل مستقل Magi-1، وهو نموذج فيديو تلقائي الانحدار، وGAGA-1 لتوليد الصوت والصورة بشكل متزامن، وأصدرت MAGI-2 Preview، الذي يوصف بأنه نموذج توليد فيديو مفتوح المصدر على نطاق واسع يعتمد على Mixture-of-Experts.
قراءة المزيد
MAGI-2 Preview هو نموذج موحد لتوليد الصوت والفيديو يحتوي على 114 مليار معلمة، ويقوم بتفعيل 6 مليارات معلمة لكل رمز. تم بناؤه على MagiMoE وتم تصميمه بشكل مشترك عبر الهندسة المعمارية والأنظمة والبيانات، ويولد حوارًا، وغناءً، وتحولات عاطفية مع تنسيق طبيعي لحركات الشفاه، وتعبيرات الوجه، وحركات العين، ولغة الجسد. نظرًا لأن المرئيات والصوت يتم توليدهما بشكل مشترك بواسطة نموذج واحد، فإن الحوار وحركات الشفاه، والأفعال وتأثيرات الصوت، والتغيرات البيئية والتعليقات الصوتية تبقى متوافقة بدقة. كما يفهم النموذج مقياس اللقطة، والتكوين، ووجهة نظر الكاميرا، ونية حركة الكاميرا، مما ينتج عنه حركات مثل التكبير، والتتبع، والدوران لإنتاج إيقاع بصري يشبه التصوير.
يمكن للمطورين الوصول إلى قدرات Sand.ai من خلال منصة API الخاصة بها. بعد تسجيل الدخول باستخدام حساب Magi، يمكن للمستخدمين شراء أرصدة، وإنشاء مفاتيح API، والمصادقة على المكالمات عبر رأس التفويض. يتم الاحتفاظ بالفوترة الخاصة بالمنصة وMagi بشكل منفصل، لذا فإن استخدام API لا يستهلك أرصدة حساب Magi.
- الفئةمولّدات الفيديو بالذكاء الاصطناعي
- نموذج التسعيرحسب الاستخدام
- النشرسحابي
- المنصاتالويب
الميزات الأساسية لـ Sand.ai
MAGI-2 Preview، نموذج موحد لتوليد الصوت والفيديو يحتوي على 114 مليار معلمة
توليد الصوت والفيديو بشكل مشترك مع محاذاة دقيقة لحركات الشفاه
أداء الشخصيات: حوار، غناء، وتحولات عاطفية
تحكم في التصوير السينمائي على مقياس اللقطة، والتكوين، وحركة الكاميرا
نموذج الفيديو التلقائي الانحدار Magi-1 ونموذج الصوت والصورة GAGA-1
منصة API للمطورين مع إدارة الأرصدة ومفاتيح API
كيفية استخدام Sand.ai؟
إنشاء حساب: تسجيل الدخول إلى المنصة باستخدام حساب Magi الخاص بك.
شراء أرصدة: شراء حزمة أرصدة لاستخدام API.
إنشاء مفتاح API: توليد مفتاح في صفحة إدارة مفاتيح API وحفظه بشكل آمن.
استدعاء API: المصادقة باستخدام المفتاح عبر رأس التفويض لتوليد محتوى صوتي ومرئي.
حالات استخدام Sand.ai
- فيديو شخصية تتحدث
- توليد فيديو سينمائي
- إنشاء محتوى صوتي ومرئي
- تكامل المطورين
