العلامة التقنية

موقع تقني عربي متخصص في أخبار التكنولوجيا والذكاء الاصطناعي

ميتا تطلق TRIBE v2: نموذج ترميز دماغي يتنبأ باستجابات fMRI

بقلم: فريق تحرير العلامة التقنية التصنيف: الذكاء الاصطناعي
ميتا تطلق TRIBE v2: نموذج ترميز دماغي يتنبأ باستجابات fMRI

ميتا تطلق TRIBE v2، نموذج ترميز دماغي يتنبأ باستجابات fMRI عبر الفيديو، الصوت، والنصوص.

في عالم علم الأعصاب، غالبًا ما يتم تقسيم الأبحاث إلى مجالات متخصصة، حيث يركز الباحثون على ربط وظائف معرفية محددة بمناطق معينة في الدماغ. ومع ذلك، هذا النهج يؤدي إلى مشهد مجزأ يفتقر إلى إطار موحد يفسر كيف يدمج الدماغ البشري المعلومات متعددة الحواس. لمواجهة هذه التحديات، قدمت ميتا نموذج TRIBE v2، وهو نموذج أساسي ثلاثي النمط يهدف إلى سد هذه الفجوة.

هيكلية النموذج: التكامل متعدد الحواس

لا يتعلم TRIBE v2 "الرؤية" أو "السمع" من الصفر. بدلاً من ذلك، يستفيد من التوافق التمثيلي بين الشبكات العصبية العميقة ودماغ الرئيسيات. يتكون النموذج من ثلاثة نماذج أساسية مجمدة تعمل كمستخلصات للميزات، بالإضافة إلى محول زمني وكتلة توقع تخصيصية.

استخراج الميزات

  • النص: يتم استخراج التضمينات السياقية من نموذج LLaMA 3.2-3B، حيث يتم إضافة الكلمات السابقة لتوفير سياق زمني.
  • الفيديو: يستخدم النموذج V-JEPA2-Giant لمعالجة مقاطع فيديو تتكون من 64 إطارًا.
  • الصوت: تتم معالجة الصوت باستخدام Wav2Vec-BERT 2.0.

التجميع الزمني وتوقعات خاصة بالفرد

تتم معالجة التضمينات الناتجة لتكوين سلسلة زمنية متعددة الأنماط، والتي تُغذي إلى مشفر محول يقوم بتبادل المعلومات عبر نافذة زمنية تصل إلى 100 ثانية. ثم تُستخدم مخرجات المحول لتوقع نشاط الدماغ، حيث يتم تقليلها إلى تردد fMRI.

التعامل مع نقص البيانات

تواجه نماذج ترميز الدماغ تحديًا كبيرًا وهو نقص البيانات. عالج TRIBE v2 هذه المشكلة من خلال الاستفادة من مجموعات بيانات "عميقة" للتدريب، حيث تم تسجيل عدد قليل من المشاركين لساعات عديدة، ومجموعات بيانات "عريضة" للتقييم. تم تدريب النموذج على 451.6 ساعة من بيانات fMRI من 25 مشاركًا.

نتائج واختبارات الأداء

أثبت TRIBE v2 تفوقه على النماذج التقليدية. من أبرز ميزاته هو القدرة على التعميم دون الحاجة إلى تدريب إضافي على مشاركين جدد، حيث يمكنه التنبؤ بدقة باستجابات الدماغ الجماعية لمجموعات جديدة بشكل أفضل من التسجيلات الفردية.

التجارب الافتراضية والقدرة على التفسير البيولوجي

يمكن أن يكون TRIBE v2 مفيدًا في إجراء تجارب افتراضية في علم الأعصاب، حيث تمكن من تحديد مناطق وظيفية معروفة مثل منطقة الوجه وملكة اللغة. على الرغم من كونه نموذج تعلم عميق "صندوق أسود"، إلا أن التمثيلات الداخلية له نظمت نفسها بشكل طبيعي في خمس شبكات وظيفية معروفة.

خلاصة

بفضل TRIBE v2، اقتربنا خطوة نحو تحقيق تجربة علم الأعصاب "في السيليكو"، مما يسمح للباحثين بإجراء اختبارات رقمية متقدمة. يمثل هذا النموذج تطورًا كبيرًا في كيفية فهمنا لتفاعل الدماغ مع المعلومات متعددة الحواس.

المصدر: MarkTechPost

أحدث في الذكاء الاصطناعي

مقالات سابقة في الذكاء الاصطناعي