الوصف
Diorama هي أداة مبتكرة تحول رسمًا بسيطًا أو جملة واحدة إلى عالم ديوراما ورقي قابل للعب. تم تطويرها خلال هاكاثون ميتا AI العالمي، تستفيد هذه التطبيق من نماذج ميتا Muse وSAM لإنشاء بيئات تفاعلية غامرة مباشرة من مدخلات المستخدم. تبدأ العملية برسم شمعي أو وصف نصي، والذي تقوم Diorama بتفسيره لبناء عالم مفصل متعدد الطبقات.
قراءة المزيد
تتضمن الوظيفة الأساسية Muse Spark، التي تقرأ المدخلات، وتخطط لتخطيط العالم، وMuse Image، التي ترسمه بأسلوب الورق المقصوص والكرتون. تلعب SAM 3.1 دورًا حاسمًا من خلال قطع الصورة المرسومة إلى بطاقات ورقية فردية، باستخدام خريطة عمق لوضع كل بطاقة على مسافة خاصة بها، مما يخلق إحساسًا بالعمق الثلاثي الأبعاد. هذا يسمح لعناصر مثل أعمدة الإنارة، والأمواج، والقوارب بالظهور كمكونات تفاعلية متميزة داخل المشهد.
كل عالم يتم إنشاؤه ليس مجرد صورة ثابتة بل مسرح ديناميكي حيث يمكن لشخصية البطل المشي، والتفاعل مع الأشياء، والانخراط مع البيئة. على سبيل المثال، تصبح أعمدة الإنارة مصابيح ورقية متوهجة، والأمواج المتعرجة تتحول إلى بحار ورقية مطوية، والقوارب تتأرجح على الماء. حتى التفاصيل المعقدة مثل جسر الحبال يمكن أن تكون قابلة للمشي، والشلالات تتدفق، والأسماك الفردية هي قطع مقطوعة تسبح، مما يحيي المشهد. تضمن الأداة أن كل عنصر، من الحارس الذي ينتظر في باب المنارة إلى شعاع الضوء المتأرجح، يتم تقديمه كما هو مرسوم في الرسم الأولي.
تكون عملية إنشاء Diorama مؤتمتة للغاية، حيث تتعامل نماذج ميتا مع الجوانب الإبداعية بينما تقيس الشيفرة وتتحقق من كل نتيجة لضمان إمكانية اللعب. يستغرق بناء عالم نموذجي مكون من أربعة أماكن حوالي 17 دقيقة، ويتضمن حوالي 200 استدعاء لنموذج ميتا. يتضمن النظام أيضًا Muse Spark لتصميم العالم والقصة، وMuse Image للرسم وإعادة رسم المناطق، وSAM 3.1 لقص العناصر مثل الأشياء، والأرضيات، والسلالم، والماء. تُستخدم نماذج إضافية مثل Muse Voice Transcribe وMuse Code (وكيل الاستوديو) لإدخال الصوت وتحرير العالم التفاعلي.
يمكن للمستخدمين بناء العوالم باستخدام أداة سطر الأوامر أو تطبيق الاستوديو في المتصفح. العوالم التي تم إنشاؤها قابلة للعب مباشرة في المتصفح على أجهزة الكمبيوتر أو الهواتف، دون الحاجة إلى تثبيت أو تسجيل. يمكن للاعبين النقر للمشي، والتفاعل مع الأشياء، والتحدث إلى الشخصيات. كما تتيح Diorama للمستخدمين تصدير إبداعاتهم كصفحات ويب ثابتة، مما يجعلها قابلة للمشاركة على منصات مثل GitHub Pages أو itch.io. تم بدء المشروع خلال هاكاثون ميتا AI العالمي في 26 أكتوبر 2026، ويعمل محليًا، مما يقدم مزيجًا فريدًا من الإبداع المدفوع بالذكاء الاصطناعي وسرد القصص التفاعلي.
- الفئةأدوات تطوير الألعاب بالذكاء الاصطناعي
- نموذج التسعيرمجاني
- النشرLocal CLI + Studio App
- المنصاتWeb Browser (Computer, Phone)
الميزات الأساسية لـ Diorama
توليد من الرسم إلى العالم: تحول الرسومات الشمعية أو الجمل الفردية إلى عوالم ديوراما قابلة للعب.
قابلية اللعب عبر المتصفح: العوالم قابلة للعب مباشرة في متصفح الويب على أجهزة الكمبيوتر والهواتف.
بيئات تفاعلية: تتيح للشخصيات المشي، والتفاعل مع الأشياء، والانخراط مع المشهد.
إنشاء بطاقات قائمة على العمق: تستخدم SAM 3.1 وخرائط العمق لقص الرسومات إلى بطاقات ورقية متعددة المسافات.
بناء عالم مؤتمت: تستفيد من Muse Spark وMuse Image للتخطيط والرسم.
عناصر ديناميكية: تشمل المياه الجارية، والأسماك السابحة، والهياكل القابلة للمشي مثل جسور الحبال.
دمج الشخصيات: ترسم وتدمج نماذج الشخصيات ثلاثية الأبعاد كرموز داخل العالم.
الصوت والأصوات: تضيف أجواء، وخطوات، وموسيقى، وأصوات شخصيات باستخدام ElevenLabs وMusicGen.
التحقق الآلي من قابلية اللعب: الروبوتات تمشي وتستخدم كل مكان لضمان أنه قابل للعب.
تطبيق الاستوديو: يوفر واجهة قائمة على المتصفح لوصف وبناء وإصلاح العوالم.
أداة سطر الأوامر: تقدم واجهة سطر أوامر محلية لإنشاء العوالم.
تصدير صفحة ويب ثابتة: يسمح بتصدير العوالم كصفحات ويب ثابتة لتسهيل المشاركة والاستضافة.
تحرير في الوقت الحقيقي: وكيل Muse Code يمكّن التغييرات التفاعلية على العالم داخل الاستوديو.
مرونة الإدخال: يقبل كل من الرسومات المرئية ووصف القصة النصية.
نظام النقد وإعادة الرسم: ينتقد Muse Spark الرسومات، ويتم إعادة رسم المناطق المميزة فقط بواسطة Muse Image.
كيفية استخدام Diorama؟
إعداد Diorama: قم بتهيئة مجلد فارغ وتشغيل `npx -y @gtanczyk/diorama setup` لتكوين بيئتك ومفاتيح API الخاصة بك.
وصف عالمك: استخدم تطبيق الاستوديو أو سطر الأوامر لتقديم جملة واحدة أو إدخال رسومات لرسم عالمك المطلوب.
بناء الديوراما: شاهد كيف تقوم Diorama ببناء عالمك مكانًا بمكان، مستفيدة من نماذج AI الخاصة بميتا.
العب وتفاعل: تجول في عالمك الجديد المبني في المتصفح، وانقر للتحرك، والتفاعل مع الأشياء، والتحدث إلى الشخصيات.
تحسين مع الوكيل: استخدم وكيل الاستوديو لإجراء تغييرات أو إصلاح عناصر في عالمك بشكل تفاعلي.
تصدير عالمك: قم بتصدير العالم المكتمل كصفحة ويب ثابتة باستخدام `npx -y @gtanczyk/diorama export <world>` للمشاركة.
حالات استخدام Diorama
- سرد القصص التفاعلي
- نمذجة الألعاب
- التصور الإبداعي
- إنشاء محتوى تعليمي
- فن رقمي مخصص
- استكشاف فن المفهوم
- تجارب قائمة على الويب
