أداة الذكاء الاصطناعي تنشئ فيديو من نشاط الدماغ
فك تشفير الدماغ وإعادة بناء الفيديو. نقترح نهج التعلم التدريجي لاستعادة التجربة البصرية المستمرة من الرنين المغناطيسي الوظيفي.
يتم إعادة بناء مقاطع فيديو عالية الجودة مع دلالات وحركات دقيقة. الائتمان: arXiv (2023). دوى: 10.48550 / arxiv.2305.11675
“Alexa ، أعد تشغيل هذا الحلم الذي حلمت به بخصوص Kirsten الأسبوع الماضي.” قد لا يكون هذا أمرًا بعيد المنال في المستقبل، حيث يقترب الباحثون من التكنولوجيا التي يمكنها الاستفادة من أذهاننا واستعادة صور أفكارنا.
أفاد باحثون في جامعة سنغافورة الوطنية وجامعة هونغ كونغ الصينية الأسبوع الماضي أنهم طوروا عملية قادرة على إنتاج فيديو من عمليات مسح الدماغ. تم نشر البحث على خادم arXiv preprint.
باستخدام عملية تسمى التصوير بالرنين المغناطيسي الوظيفي (fMRI)، قام الباحثون Jiaxin Qing و Zijiao Chen و Juan Helen Zhou بربط البيانات المسترجعة من خلال التصوير باستخدام نموذج التعلم العميق Stable Diffusion لإنشاء مقاطع فيديو سلسة وعالية الجودة.
تم الإبلاغ عن عمليات إعادة ناجحة للصور الثابتة المستقاة من نشاط الدماغ من خلال الانتشار المستقر بمساعدة الذكاء الاصطناعي، والمستخدمة بشكل شائع لتوليد الصور، في الأشهر الأخيرة.
ولكن، كما أفاد كينج وفريقه، فإن استعادة الصور المرئية المستمرة يمثل تحديًا خاصًا.
تعمل عملية التصوير بالرنين المغناطيسي الوظيفي بشكل عام على النقر على الإشارات المعتمدة على مستوى أكسجة الدم (BOLD) والتقاط صور لنشاط الدماغ مرة كل بضع ثوانٍ.
قد ينتج عن ذلك صور فيديو رديئة الجودة. معدل التقاط الفيديو القياسي هو 30 إطارًا في الثانية.
قال تشينغ: “إن فهم المعلومات المخبأة داخل أنشطة دماغنا المعقدة يمثل لغزًا كبيرًا في علم الأعصاب الإدراكي “. “مهمة إعادة تكوين الرؤية البشرية من تسجيلات الدماغ، وخاصة باستخدام أدوات غير جراحية مثل الرنين المغناطيسي الوظيفي، هي مهمة مثيرة ولكنها صعبة.”
حقق فريقه فيديو عالي الجودة باستخدام نموذج Mind-Video الخاص بهم.
يوصف بأنه “خط أنابيب مكون من وحدتين مصمم لسد الفجوة بين فك تشفير الدماغ بالصور والفيديو”، يتعلم جهاز فك تشفير الرنين المغناطيسي الوظيفي الخاص به تدريجيًا من إشارات الدماغ المكتسبة، والتدريب باستخدام قواعد بيانات الصور والضبط الدقيق.
وقالوا إن النتائج كانت مقاطع فيديو عالية الجودة، كاملة مع ديناميكيات الحركة والمشهد بمعدل دقة 85٪.
يقول كينج إن عملهم يظهر وعدًا لتطبيقات النماذج الكبيرة في المستقبل “من علم الأعصاب إلى واجهات الدماغ والحاسوب”.
إن استخدام الذكاء الاصطناعي مع التصوير بالرنين المغناطيسي وEGM (مخطط كهربية العضل) لدراسة الصور ونشاط الدماغ وحركة العضلات يفتح آفاقًا جديدة في طريقة عمل العقل.
يقول شينجي نيشيموتو ، عالم الأعصاب بجامعة أوساكا، إن هذه العمليات قد تُستخدم يومًا ما لالتقاط الأفكار والأحلام.
يعمل الباحث في مجال الأحلام دانيال أولديس ، الذي يعمل مع زميل في مختبر علم الأعصاب الإدراكي بجامعة تكساس، أوستن، على تقنية التصوير بالرنين المغناطيسي لتسجيل الأحلام التي تتعقب نشاط الدماغ والنبضات العصبية في العضلات لتحديد الصور والكلام والحركة في الأحلام.
قال مؤخرًا: “هذه مثل السنوات الأولى لسباق الفضاء”. “لكن في هذه الحالة، سنذهب إلى مساحة الأحلام.”
الشخص العادي لديه ما يصل إلى ستة أحلام في الليلة، لكنه ينسى 90٪ منها في غضون دقائق بعد الاستيقاظ. إن احتمال الحصول على سجل دائم للأحلام أمر مبهج.
لقد حيرتنا الأحلام لعدة قرون. في الثقافات المبكرة، كان يعتقد أن الأحلام هي رسائل من الله. في القرن العشرين، قدم فرويد فكرة الدوافع الجنسية والعاطفية المكبوتة وراء أحلامنا.
تأتي بعض أعظم إلهامنا من تلك الرحلات الليلية التي نأخذها جميعًا في كل ليلة من حياتنا.
لحن أغنية “البارحة” لفرقة البيتلز، التي حازت على لقب أفضل أغنية في القرن العشرين في استطلاع إذاعة بي بي سي، جاءت إلى بول مكارتني في المنام.
جاء الغناء الافتتاحي الشهير المكون من ثلاث ورقات عن أغنية رولينج ستونز العملاقة “الرضا” إلى كيث ريتشاردز في منتصف الليل؛ استيقظ ليسجل نسخة تقريبية من الأغنية، وغمغم بنعاس “لا أستطيع أن أشعر بالرضا”، وعاد إلى النوم، وأدرك فقط ما دوّنه عندما استمع إلى الشريط في ذلك الصباح.
أشار سالفاتور دالي إلى الأعمال السريالية الخيالية مثل “ثبات الذاكرة” على أنها “صور أحلام مرسومة يدويًا”.
والطالب المتوتر الذي يخشى أن يكون قبوله في جامعة ستانفورد كان خطأ كان لديه حلم القلق الذي قام فيه بتنزيل الويب بالكامل على جهاز الكمبيوتر الخاص به.
عندما استيقظ، شرع في مشروع سيجذب يومًا ما 89 مليار مشاهد شهريًا ويجيب على 99000 استفسار في الثانية. اسمه: لاري بيدج. إنشائه: جوجل.
قد يكون تسجيل وتدفق أحلامنا – من الكوابيس إلى الأفكار الملهمة التي تغير قواعد اللعبة – مجرد حلم في الوقت الحالي.
ولكن كما تشير أعمال تشينغ وأولدس وآخرون، ليس لفترة طويلة.
المصدر: techxplore
قد يهمك:
