نموذج فلورنس-2

الوصف

فلورنس-2 هو نموذج متقدم للرؤية تم تطويره بواسطة مايكروسوفت، مستضاف على هاغينغ فيس. تم تصميمه لتعزيز تمثيل موحد لمجموعة متنوعة من مهام الرؤية. يستخدم النموذج نهجًا قائمًا على المطالبات للتعامل بكفاءة مع مجموعة واسعة من مهام الرؤية والرؤية-اللغة، مثل التسمية، واكتشاف الكائنات، والتجزئة. يستفيد فلورنس-2 من مجموعة بيانات FLD-5B، التي تحتوي على 5.4 مليار تعليق عبر 126 مليون صورة، للتفوق في التعلم متعدد المهام.

معمارية النموذج هي من نوع تسلسل إلى تسلسل، مما يمكّنه من الأداء الجيد في كل من الإعدادات بدون تدريب مسبق والإعدادات المعدلة. إنه نموذج متقدم للرؤية، قادر على تفسير المطالبات النصية البسيطة لتنفيذ مهام متنوعة. تم تدريب فلورنس-2 مسبقًا بطول سياق 4k، باستخدام 0.1 مليار عينة فقط للتدريب المستمر، مما قد يؤثر على جودة تدريبه.

تشمل قدرات فلورنس-2 التعامل مع مهام مثل ربط التسمية بالعبارات، واكتشاف الكائنات، والتسمية في المناطق الكثيفة، والتعرف الضوئي على الحروف مع مخرجات المناطق. أداء النموذج في الإعدادات بدون تدريب مسبق ملحوظ، مع درجات CIDEr عالية على مجموعات بيانات COCO وNoCaps. بالإضافة إلى ذلك، تم تعديل فلورنس-2 على مجموعة من المهام اللاحقة، مما أدى إلى نماذج مثل فلورنس-2-base-ft وفلورنس-2-large-ft، التي تؤدي بشكل جيد عبر مهام التسمية المختلفة وVQA.

النموذج متاح بأحجام مختلفة، بما في ذلك فلورنس-2-base مع 0.23 مليار معلمة وفلورنس-2-large مع 0.77 مليار معلمة. تتوفر موارد مثل التقارير الفنية ودفاتر Jupyter للمستخدمين للبدء في استخدام النموذج. فلورنس-2 هو أداة قيمة للباحثين والمطورين الذين يعملون على مهام الرؤية والرؤية-اللغة، حيث يوفر أساسًا قويًا لمزيد من التطوير والتطبيق.

أبرز ملامح نموذج فلورنس-2

• نموذج متقدم للرؤية

• نهج قائم على المطالبات

• يتعامل مع مهام الرؤية-اللغة

• معمارية تسلسل إلى تسلسل

• إعدادات بدون تدريب مسبق ومعدلة

• يستخدم مجموعة بيانات FLD-5B

• يدعم التسمية واكتشاف الكائنات

• التعرف الضوئي على الحروف مع مخرجات المناطق

البدء مع نموذج فلورنس-2

1. 1

   الوصول إلى الصفحة: زيارة صفحة نموذج هاغينغ فيس

2. 2

   تحميل النموذج: تنزيل نموذج فلورنس-2

3. 3

   تكوين البيئة: إعداد الاعتماديات اللازمة

4. 4

   التكامل: استخدام النموذج في التطبيقات

5. 5

   التعديل: ضبط النموذج لمهام محددة

حالات استخدام نموذج فلورنس-2

• تسمية الصور
• اكتشاف الكائنات
• مهام الرؤية-اللغة
• التعرف الضوئي على الحروف مع المنطقة
• تسمية المناطق الكثيفة

الأسئلة الشائعة من نموذج فلورنس-2

• ما هو فلورنس-2؟

  فلورنس-2 هو نموذج متقدم للرؤية من مايكروسوفت، مصمم لمجموعة متنوعة من مهام الرؤية والرؤية-اللغة.

• ما المهام التي يمكن أن يؤديها فلورنس-2؟

  يمكن لفلورنس-2 أداء مهام مثل التسمية، واكتشاف الكائنات، والتجزئة، والتعرف الضوئي على الحروف مع مخرجات المناطق.

• ما مجموعة البيانات التي يستخدمها فلورنس-2؟

  يستخدم فلورنس-2 مجموعة بيانات FLD-5B، التي تحتوي على 5.4 مليار تعليق عبر 126 مليون صورة.

• كيف يتم تدريب فلورنس-2؟

  تم تدريب فلورنس-2 مسبقًا بطول سياق 4k ويستخدم 0.1 مليار عينة فقط للتدريب المستمر.

• ما هي معمارية فلورنس-2؟

  يستخدم فلورنس-2 معمارية تسلسل إلى تسلسل، مما يمكّنه من التفوق في الإعدادات بدون تدريب مسبق والإعدادات المعدلة.

• ما هي أحجام النموذج المتاحة لفلورنس-2؟

  يتوفر فلورنس-2 بأحجام أساسية (0.23 مليار معلمة) وكبيرة (0.77 مليار معلمة).

• هل فلورنس-2 مناسب للتعلم بدون تدريب مسبق؟

  نعم، فلورنس-2 يؤدي بشكل جيد في الإعدادات بدون تدريب مسبق، مع درجات CIDEr عالية على مجموعات بيانات COCO وNoCaps.

• ما الموارد المتاحة لفلورنس-2؟

  تتوفر تقارير فنية ودفاتر Jupyter للمستخدمين للبدء في استخدام فلورنس-2.