Ego-Exo4D: مجموعة بيانات الفيديو الجديدة من Meta ستحدث ثورة في إنشاء الفيديو

Ego-Exo4D: Meta’s new video dataset is going to change video creation forever تم تتبعه بواسطة BTW Media لأن الأدلة المنشورة تربطه بالبنية التحتية للإنترنت أو الحوكمة أو التبعيات التشغيلية أو رؤية السوق.

• Ego-Exo4D، الذي طورته Meta وشركاؤها، هو مجموعة بيانات رائدة تدمج وجهات نظر الشخص الأول ووجهات نظر خارجية لأبحاث الذكاء الاصطناعي.
• تتضمن مجموعة البيانات أكثر من 1400 ساعة من الفيديو من 800 كيان ماهر، مما يوفر تنوعًا في المهارات البشرية.
• تم تصميمه لتطوير الذكاء الاصطناعي في تعلم الفيديو والواقع المعزز والتعلم الآلي، مع تحدي عام مرجعي مخطط له في عام 2024.

فريق أبحاث الذكاء الاصطناعي الأساسي (FAIR) التابع لشركة Meta، إلى جانب Project Aria و15 شريكًا جامعيًا،أطلق Ego-Exo4D. هذه المجموعة المبتكرة من البيانات والمعايير على وشك إحداث ثورة في فهم الذكاء الاصطناعي للمهارات البشرية من خلال تعلم الفيديو والإدراك متعدد الوسائط.

Ego-Exo4Dيدمج بشكل فريد وجهات النظر « الأنانية » من الشخص الأول من كاميرات محمولة مع عدة وجهات نظر « خارجية » من كاميرات محيطة. يوفر هذا المزيج فهمًا شاملاً لكل من منظور الكيان وبيئته.

التعاون العالمي وجمع البيانات

شارك في تطوير Ego-Exo4D اتحاد يضم أكثر من 800 كيان ماهر من ست دول، يساهم بأكثر من 1400 ساعة من الفيديو. هذه مجموعة البيانات، التي سيتم فتح مصدرها في ديسمبر، تتضمن تعليقات توضيحية لمهام مرجعية جديدة وتم تفصيلها بشكل أكبر في مقالة تقنية.

يركز Ego-Exo4D على الأنشطة الماهرة مثل الرياضة والموسيقى والطهي وغيرها. تتراوح تطبيقاته من أنظمة الواقع المعزز والتعلم الآلي إلى الشبكات الاجتماعية، حيث يمكنه تحسين تعلم المهارات وفهمها.

من خلال دمج وجهات نظر الشخص الأول والثالث في مجموعة بيانات فيديو واسعة، يفتح آفاقًا جديدة لفهم وتفسير المهارات والسلوكيات البشرية. لا يوسع هذا الابتكار مجال أبحاث الذكاء الاصطناعي فحسب، بل يعد أيضًا بتطبيقات عملية في الواقع المعزز والروبوتات وما بعدها. يضمن الجهد التعاوني الذي يشمل مجموعة واسعة من الكيانات الماهرة ومجموعة متنوعة من السيناريوهات الواقعية مجموعة بيانات غنية ومتنوعة يمكن أن تؤدي إلى أنظمة ذكاء اصطناعي أكثر دقة ووعيًا بالسياق. يشهد هذا التطور على التقدم المحرز في التكنولوجيا، مما يوفر آفاقًا مثيرة للبحث المستقبلي والتطبيقات العملية.

اقرأ أيضًا:مولد الصور الذكي المستقل من Meta: ميزة للإبداع البشري

خصائص وموارد مجموعة البيانات

كأكبر مجموعة بيانات عامة للفيديوهات المتزامنة من الشخص الأول والثالث، يضم Ego-Exo4D خبراء متنوعين مثل الرياضيين والراقصين والطهاة. إنه ليس متعدد الرؤى فحسب، بل متعدد الوسائط أيضًا، تم التقاطه بتقنية متقدمة تشمل نظارات Aria من Meta، مما يوفر بيانات شاملة مثل الصوت والقياسات بالقصور الذاتي ولقطات الكاميرا ذات الزاوية الواسعة.

تتضمن مجموعة البيانات موارد فيديو-لغوية غنية مثل السرد والأوصاف وتعليقات الخبراء. هذه الموارد مختومة بالوقت بالنسبة للفيديو، مما يوفر لنماذج الذكاء الاصطناعي معلومات مفصلة حول الأنشطة البشرية الماهرة.

تقدم Meta أربع مهام أساسية لأبحاث الفيديو ego-exo وتوفر تعليقات توضيحية معمقة، ثمرة أكثر من 200000 ساعة من جهد التعليق. تم التخطيط لتحدي مرجعي عام في عام 2024 لتحفيز البحث في هذا المجال الناشئ.

يمثل اتحاد Ego-Exo4D تعاونًا عالميًا، يشمل مواهب متنوعة في الذكاء الاصطناعي وسياقات جغرافية. يمثل هذا المشروع نشرًا مهمًا لنظارات Aria في مجتمع الأبحاث الجامعية.

اقرأ أيضًا:نظارات Meta Ray-Ban: هل تنتهك الخصوصية؟

يمثل إطلاق مجموعة بيانات Ego-Exo4D من Meta تقدمًا كبيرًا في مجال الذكاء الاصطناعي والتعلم الآلي.

من خلال دمج وجهات نظر الشخص الأول والثالث في مجموعة بيانات فيديو واسعة، يفتح آفاقًا جديدة لفهم وتفسير المهارات والسلوكيات البشرية. لا يوسع هذا الابتكار مجال أبحاث الذكاء الاصطناعي فحسب، بل يعد أيضًا بتطبيقات عملية في الواقع المعزز والروبوتات وما بعدها. يضمن الجهد التعاوني الذي يشمل مجموعة واسعة من الكيانات الماهرة ومجموعة متنوعة من السيناريوهات الواقعية مجموعة بيانات غنية ومتنوعة يمكن أن تؤدي إلى أنظمة ذكاء اصطناعي أكثر دقة ووعيًا بالسياق. يشهد هذا التطور على التقدم المحرز في التكنولوجيا، مما يوفر آفاقًا مثيرة للبحث المستقبلي والتطبيقات العملية.

باستخدام Ego-Exo4D، تهدف Meta وشركاؤها إلى تسريع أبحاث تعلم الفيديو بالذكاء الاصطناعي. التطبيقات المحتملة واسعة، تتراوح من تجارب التعلم في الواقع المعزز إلى الروبوتات التي تتعلم من الخبرة البشرية. Ego-Exo4D خطوة مهمة نحو هذا المستقبل، مما يثير الحماس في مجتمع الأبحاث للإمكانيات التي يفتحها.