يمكن للذكاء الاصطناعي الجديد لـ الفيسبوك استخراج الشخصيات من مقاطع فيديو اليوتيوب للحصول على تجربة ألعاب أفضل

Share:

يمكن للذكاء الاصطناعي الجديد لـ الفيسبوك استخراج الشخصيات من مقاطع فيديو اليوتيوب للحصول على تجربة ألعاب أفضل


تم إنشاء Vid2Game ، وهي عبارة عن ذكاء اصطناعي (AI) من قِبل فريق الأبحاث على الفيسبوك والذي سيتيح استخراج الشخصيات القابلة للتشغيل من مقاطع فيديو لأشخاص حقيقيين. تعتبر نسخة عالية التقنية من ألعاب الفيديو بالحركة الكاملة (FMV) في الثمانينات.

سيتم تحليل مقاطع الفيديو التي يقوم فيها الأشخاص ببعض الإجراءات المحددة بواسطة الشبكات العصبية ، والتي ستعيد إنشاء تلك الشخصية وإجراءاتها في بيئة جديدة وتتيح للمستخدم التحكم في تصرفاته باستخدام عصا التحكم.

تم استخدام شبكتين عصبيتين ، Pose2Pose و Pose2Frame ، من قبل الفريق. في المرحلة الأولى ، يتم تغذية الفيديو إلى شبكة عصبية Pose2Pose ، والتي تم إعدادها للقيام ببعض الإجراءات مثل الرقص أو التنس أو المبارزة. يحدد النظام ويميز الشخص عن خلفيته ويعزله ويشكله. في المرحلة الثانية ، تقوم Pose2Frame بإدراج الشخص مع تحركاته وأي شيء يحمله ، في مشهد جديد به القليل من القطع الأثرية. ثم ، يتم استخدام عصا التحكم أو لوحة المفاتيح للتحكم في حركة الشخصية.

في تدريب النظام ، تم استخدام عدد قليل من مقاطع الفيديو القصيرة لتحليل الأنشطة مثل المبارزة والرقص والتنس ، وبعد ذلك كان قادرًا على تصفية الأشخاص غير المرغوب فيهم ودمج زوايا الكاميرا المختلفة.

يشبه هذا البحث إلى حد كبير ميزة "ملء المحتوى المدرك" لبرنامج Adobe Premier Pro الذي يزيل عناصر مختلفة من الفيديو باستخدام الذكاء الاصطناعي. أيضا ، عملت NVIDIA وعدد قليل من الشركات الأخرى أيضا على AI التي هي قادرة على تحويل أشرطة الفيديو الحقيقية إلى المناظر الطبيعية الافتراضية ، مما يجعلها مناسبة للألعاب.

نظرًا لأن البحث لا يزال في مستوى البداية ، فقد تم تحديد مشكلة في الرسوم المتحركة ثلاثية الأبعاد ، والتي يطلق عليها "Foot slide" والتي تبدو وكأنها شخصية تلعب على الجليد. أيضا ، هناك مجموعة محدودة من الحركة. على الرغم من كل هذا ، فإن جهود استخراج الشخصية الجديدة أفضل وأكثر واقعية من سابقاتها. من المتوقع أنه مع مرور الوقت ، سيكون الفريق قادرًا على حل المشكلات المتعلقة بالحركة.

سيتم تخصيص تجربة الألعاب بإدخال توليف Vid2Games على الفيسبوك ، مما يتيح لك الحصول على شخصيات من اختيارك ، سواء أكانت شخصية على اليوتيوب .

قال الفريق العامل في البحث إنه تمت معالجة مشاكل حسابية جديدة وأن حقبة جديدة من ألعاب الفيديو ذات الرسومات الواقعية على وشك البدء. بالإضافة إلى ذلك ، ستصبح الأحرف المستخرجة من مقاطع فيديو اليوتيوب قريبًا جزءًا من العالم الافتراضي والواقع المعزز.

ليست هناك تعليقات