الوصف
DepthPro2 هو نموذج ذكاء اصطناعي متقدم من Apple مصمم لتقدير العمق الأحادي المتر بدقة. يمكن لهذا النموذج معالجة مدخلات بصرية متنوعة، بما في ذلك الصور الفردية، وتسلسلات الفيديو الكاملة، وبث الكاميرات المباشرة، مما ينتج معلومات العمق لكل بكسل بدقة الإدخال الأصلية. تكمن القوة الرئيسية لـ DepthPro2 في قدرته على تقديم تقديرات عمق حادة، خاصة حول حواف الأجسام، والحفاظ على اتساق زمني ممتاز، مما يضمن قياسات عمق ثابتة من إطار إلى آخر في محتوى الفيديو.
قراءة المزيد
النموذج متاح بأحجام متعددة، كل منها يحتوي على مستودع وأوزان خاصة به، مما يسمح للمستخدمين بالاختيار بناءً على احتياجاتهم المحددة من حيث السرعة والدقة. توفر النماذج الأكبر (L، H+) نتائج عمق أكثر حدة وثباتًا، بينما تعطي النسخ الأصغر (S، B) الأولوية للمعالجة الأسرع. جميع نماذج DepthPro2 تتضمن مُقدّر طول بؤري مشترك، `apple/DepthPro2-focal`، الذي يتنبأ تلقائيًا بطول البؤري عندما لا يتم توفيره، مما يعزز من مرونة النموذج.
في العمق، يستخدم DepthPro2 بنية محول متعددة الرؤى تعالج إطارًا واحدًا أو أكثر بشكل مشترك. يتناوب هذا المحول آليات الانتباه داخل الإطارات الفردية وعبر الإطارات بعد كتلته الأولية. ثم يتنبأ مُفكك تشفير DPT بخريطة عمق عكسية لكل إطار من خلال تجميع الرموز من كتل مختلفة إلى خرائط ميزات بدقة مختلفة (1/32 إلى 1/4 من دقة الإدخال). تمكن هذه المنهجية المتقدمة DepthPro2 من التفوق على الأعمال السابقة في كل من الحدة (المقاسة بواسطة درجة Boundary F1) والاتساق الزمني (المقاس بواسطة Jitter) عبر مجموعات بيانات مثل Sintel وSpring.
تم إصدار DepthPro2 بموجب ترخيص نموذج أبحاث التعلم الآلي من Apple، الذي يسمح باستخدامه لأغراض البحث العلمي غير التجاري والتطوير الأكاديمي. وهذا يجعله موردًا قيمًا للباحثين والمطورين الذين يستكشفون تقنيات تقدير العمق المتقدمة. يتم استضافة النموذج على Hugging Face، حيث يمكن للمستخدمين تنزيله واستكشاف ملفاته وتشغيله، مع توفير أمثلة سريعة للبدء لكل من معالجة الصور والفيديو. من المهم ملاحظة أن العمق يعتبر لانهائيًا للمشاهد البعيدة بشكل لا نهائي، مثل السماء.
- الفئةنماذج الذكاء الاصطناعي ونماذج اللغة الكبيرة
- نموذج التسعيرمفتوح المصدر
- النشرسحابي
- المنصاتHugging Face
أبرز ملامح DepthPro2
تقدير العمق الأحادي المتر
معالجة الصور الفردية، ومقاطع الفيديو، والبث المباشر
إخراج عمق بدقة كاملة
عمق حاد عند حواف الأجسام
عمق متسق زمنيًا عبر الإطارات
متاح بأحجام نماذج متعددة (S، B، L، H+)
مُقدّر طول بؤري مدمج
بنية محول متعددة الرؤى
مُفكك تشفير DPT لتنبؤ بخريطة العمق العكسية
يتفوق على الأعمال السابقة في الحدة والاتساق الزمني
ترخيص للاستخدام البحثي فقط
أمثلة سطر الأوامر والبث المباشر متاحة
مستضاف على Hugging Face لسهولة الوصول
البدء مع DepthPro2
الوصول إلى النموذج: زيارة صفحة DepthPro2 على Hugging Face.
اختيار حجم النموذج: اختيار الحجم المطلوب للنموذج (S، B، L، H+) بناءً على احتياجات الأداء.
تنزيل الأوزان: تنزيل أوزان النموذج المحدد من مستودعه.
إعداد البيئة: إعداد بيئة التطوير الخاصة بك مع الاعتماديات اللازمة.
التكامل عبر الكود: استخدام أمثلة الكود المقدمة لمعالجة الصور أو الفيديو.
تشغيل الاستدلال: تنفيذ النموذج على بيانات الإدخال الخاصة بك لتوليد خرائط العمق.
حالات استخدام DepthPro2
- تنقل الروبوتات
- الواقع المعزز (AR)
- إعادة بناء ثلاثية الأبعاد
- المركبات الذاتية القيادة
- تحليل التصوير الطبي
- مراقبة الفيديو
- إنشاء المحتوى








