ارتديت المستقبل مع سماعة رأس AR-VR متصلة بالدماغ

ارتديت المستقبل مع سماعة رأس AR-VR متصلة بالدماغ


قبل بضعة أسابيع ، رأيت أفضل سماعات الواقع المختلط ذات الجودة الأفضل بواجهة يتم التحكم فيها باستخدام أصابعي وعيني: آبل فيجن برو. لكن قبل أشهر قليلة من إعلانها ، رأيت شيئًا ربما يكون أكثر وحشية. مشابك على أذني ، تاج من أجهزة استشعار ذات رؤوس مطاطية موضوعة في شعري وقناع وجه أمام عينيّ. فجأة كنت أنظر إلى موجات دماغي في الواقع الافتراضي وأقوم بتحريك الأشياء بحركات صغيرة لعضلات وجهي. كنت أختبر قيادة جاليا OpenBCI.

230630-موقع-الدماغ-الكمبيوتر-واجهة-تجريبي

شاهد هذا: ارتديت المستقبل مع نظارة الواقع الافتراضي التي تستشعر الدماغ من OpenBCI ، Galea

يتقدم مستقبل VR و AR بشكل مطرد ، لكن المدخلات لا تزال تمثل تحديًا. في الوقت الحالي ، إنها منطقة تنتقل من أدوات التحكم المادية إلى تتبع اليد والعين. لكن هناك احتمالات أعمق أبعد من ذلك ، وهي عصبية.

لا أعرف حتى كيف أصف تجربتي في تجربة سماعة الرأس Galea ، لأنها ، حسناً ، منصة لاستكشاف ما سيحدث بعد ذلك. ولا تزال تجربتي في التكنولوجيا العصبية في بدايتها.

تقوم شركة OpenBCI ، وهي شركة مقرها بروكلين لبناء أدوات بحثية لتكنولوجيا واجهة الدماغ والحاسوب غير الغازية ، بتكييف أنظمتها الحسية في سماعة واقع مختلط تسمى Galea ، والتي ستتوفر في وقت لاحق من هذا العام. لقد جربت إصدارًا أوليًا من Galea في مكاتب OpenBCI في بروكلين ، وكان لدي فضول حول كيفية عمل واجهات الدماغ والحاسوب في الواقع الافتراضي والواقع المعزز. كنت أتساءل أيضًا عما يمكن أن يحمله المستقبل لتفاعلاتنا مع أجهزة الكمبيوتر بشكل عام.

شخص يرتدي نموذجًا أوليًا لسماعة رأس VR ويمسك بوحدات تحكم أمام مكتب

صورة التقطتها لأحد أعضاء فريق OpenBCI وهو يقدم عرضًا توضيحيًا لـ Galea: تعمل سماعة الرأس على Steam VR. (لرؤيتي في سماعة الرأس ، شاهد الفيديو.)

سكوت شتاين / سي نت

منصة مستشعر جديدة للواقع الافتراضي والواقع المعزز

لقد جربت مجموعات أكثر بساطة من مستشعرات EEG تركز على مهمة بصرية معينة. سمح لي NextMind بالتركيز على نقاط معينة لتحريك الإجراءات ، على سبيل المثال. (استحوذت Snap العام الماضي على NextMind.) شعرت وكأنها نقرة بالماوس تقريبًا ولكن بعقلي. لكن Galea من OpenBCI عبارة عن مزيج كامل من جميع أنواع المستشعرات: EEG و EMG و EDA و PPG وتتبع العين. إنه مهرجان مختصر.

مخطط كهربية الدماغ، أو تخطيط كهربية الدماغ ، يقيس النشاط الكهربائي لإشارات الدماغ. يقيس OpenBCI هذا باستخدام مستشعرات ذات رؤوس مطاطية تدفع بالقرب من فروة رأسي ، مثل أجهزة NextMind التي جربتها مرة أخرى في عام 2021. تعمل الأقطاب الكهربائية عندما تجف ، ولكن يجب أن تبقى خالية من الشعر الزائد للحصول على إشارة جيدة.

مخطط كهربية العضل، أو تخطيط كهربية العضل ، يقيس النشاط الكهربائي للأعصاب والعضلات. هنا ، توجد المستشعرات حول قناع الوجه على سماعة الرأس ، وتدفع حول جبهتي وعيني ووجنتي. عندما أقوم بحركات صغيرة لعضلات وجهي ، يتم قياس القراءات. ولكن على عكس كاميرات الوجه الموجودة على سماعات رأس الواقع الافتراضي مثل Quest Pro ، والتي تبحث عن حركة جسدية معينة ، فإن القراءات هنا كلها تعتمد على الكهرباء. يمكنك نظريًا جعل الحركات صغيرة جدًا بحيث تكون أشبه بنبضات عصبية بسيطة. ميتا تتطور أيضا تقنية EMG لأساور المعصم التي يمكن استخدامها مع سماعات الرأس المستقبلية. لكن تقنية المعصم هذه تقيس فقط حركة الأصابع عبر المعصم. مستشعرات OpenBCI تنظر إلى الوجه.

مستشعرات ذات رؤوس مطاطية في عصابة رأس بلاستيكية بيضاء ، تُرى على طاولة

نظرة على عصابة رأس نموذج Galea: يتم وضع أقطاب تخطيط كهربية الدماغ ذات الأطراف المطاطية بالقرب من فروة الرأس للحصول على قراءات أفضل.

سكوت شتاين / سي نت

EDAهو قياس كهربائي للعرق على الجلد. غالبًا ما يتم استخدامه لاستشعار الإجهاد: صممت Fitbit مستشعرات EDA الخاصة بها في ساعة Fitbit Sense الذكية لقياسات الإجهاد. توجد مستشعرات OpenBCI’s EDA على الجزء الأمامي من سماعة الرأس.

PPG هو استشعار بصري لمعدل ضربات القلب (التصوير الضوئي) ، مشابه لما هو موجود بالفعل في معظم الساعات الذكية. يتم قياس PPG على الجبهة وكذلك على سماعة الرأس Galea النهائية. لكن في العرض التوضيحي الخاص بي ، كنت أرتدي مشابك أذن تقيس PPG.

مصفوفة المستشعرات مرتبطة بسماعة رأس VR-AR موجودة ، وهي فارجو XR-3 (أو Varjo Aero منخفض التكلفة) ، ويتصل بجهاز كمبيوتر لتشغيل البرنامج وتحليل البيانات. تمنح شاشة Varjo عالية الدقة والواقع المختلط للفيديو العابر مستشعرات OpenBCI الكثير من إمكانيات البرامج للعمل بها في سيناريوهات الواقع الافتراضي والواقع المعزز. لكن مجموعة مستشعرات OpenBCI يمكنها العمل بشكل مستقل عن سماعة رأس VR ، أو الاتصال بالآخرين.

يمكن أن تكون Apple Vision Pro أيضًا منصة مثالية لـ OpenBCI نظرًا لقدرتها على المعالجة ووظيفتها المستقلة. وفقًا للمدير التنفيذي والمؤسس المشارك لـ OpenBCI ، Conor Russomanno ، فإن العمل على شيء مثل Vision Pro ، أو منصات AR و VR المستقبلية ، أمر ممكن تمامًا. ويشبه تحركات Apple الأخيرة بأنها تؤكد على جوانب الكمبيوتر للواقع المختلط ، وهو بالضبط ما يفكر به OpenBCI في الفرص أيضًا.

شخص جالس على كرسي متحرك يعمل على سماعة رأس مزودة بمستشعر VR

تعلم كريستيان بايرلين استخدام Galea للتحكم في طائرة بدون طيار باستخدام مستشعرات مخطط كهربية العضل لقياس حركات عضلات الوجه.

OpenBCI

أهداف الوصول

يمكن للمصفوفة الحسية لـ OpenBCI متابعة إمكانيات متعددة في وقت واحد. لا يتعلق الأمر بهدف واحد معين ، ولكن كيف يمكن لأجهزة استشعار النظام تمكين البحث وكذلك فتح الأبواب للتفاعل مع أجهزة الكمبيوتر. في الآونة الأخيرة ، عمل OpenBCI مع Christian Beyerlein ، أحد المتسللين المصابين بضمور عضلي في العمود الفقري ، والذي استخدم مجموعة OpenBCI الحسية للتحكم في طائرة بدون طيار باستخدام نبضات عضلات الوجه. كان هذا العرض التقديمي ، الذي تم تقديمه كمحادثة TED ، عرضًا للكيفية التي يمكن بها لواجهات الدماغ والحاسوب أن تفتح أبوابًا جديدة لإمكانية الوصول والتحكم في التكنولوجيا الافتراضية والواقعية.

تضمنت عروضي التوضيحية لعبة تحكم واحدة قائمة على EMG تسمى Cat Runner. قمت بتحريك شخصية كرتونية ذهابًا وإيابًا بحركات صغيرة لعضلات وجهي ، والتي تم التعرف عليها بواسطة مستشعرات مخطط كهربية العضل في غطاء الوجه Galea. هذه هي نفس اللعبة التي استخدمتها Meta لاختبار وإثبات تقنية سوار معصمه للإدخال العصبي ، والتي أنا شهد الخريف الماضي في مقر Meta Reality Labs Research في ريدموند. لكن Meta تبحث في استشعار الحركة على المعصم ، بينما يرى OpenBCI’a Russomanno فرصًا أفضل عند استخدامها على الرأس ، حيث لن تتداخل المستشعرات مع الجهود الحالية في تتبع اليد المستند إلى الكاميرا.

تهدف تقنية EMG إلى استشعار النبضات الكهربائية الدقيقة لدرجة أنه ربما لا يبدو أن أي عضلات تتحرك على الإطلاق ، ولكن هذا المستوى من العلاقة بين أجهزة الاستشعار والخوارزميات والمدخلات البشرية قد يستغرق بعض الوقت حتى يتم إتقانه. يمكن أن توفر أنواع أجهزة الاستشعار المتعددة لـ OpenBCI الكثير من البيانات التي يمكن أن تشير إلى الاتجاهات المستقبلية للبحث ، أو الواجهات الجديدة. يمكنهم أيضًا تقديم ملاحظات حول كيفية تأثير استخدام الواقع الافتراضي والواقع المعزز على الدماغ أو الانتباه. كانت هناك بالفعل جهود سابقة لاستخدام أجهزة الاستشعار على سماعات الرأس VR لدراسة العمليات الإدراكية ، بما في ذلك HP Omnicept ، الذي يحتوي على مستشعر معدل ضربات القلب ، أو معظم سماعات الرأس التي تدعم تتبع العين.

عرض توضيحي آخر لأجهزة استشعار EEG ، أنشأ “غرفة الحس المواكب” التأملية حيث تحولت حالات موجات الدماغ المختلفة إلى ألوان من الضوء المحيط. يبدو أن موجات دماغي غيرت الألوان التي رأيتها. بدأت أحاول معرفة ما إذا كان بإمكاني التركيز بطرق معينة لإخراج ألوان مختلفة. يبدو أنها تعمل؟ تعد التعليقات جزءًا أساسيًا من الكثير من مستشعرات OpenBCI ، وكيف يمكن استخدامها في النهاية لتدريب وتحسين كيفية التحكم في الأشياء من خلال نبضاتنا العصبية.

سماعتا رأس VR جنبًا إلى جنب على طاولة

تصميم النسخة النهائية من Galea (يسار) مقابل النموذج الأولي الذي جربته (يمين). يمكنك رؤية أقطاب تخطيط كهربية الدماغ ذات الأطراف المطاطية في عصابة رأس النموذج الأولي.

سكوت شتاين / سي نت

يرى روسومانو ما يفعله Beyerlain بالتحكم في الطائرات بدون طيار ، حيث يقوم نظام بتمديد وظائف دماغه وجسمه باستخدام مخطط كهربية العضل ، كعلامة على كيف سيغير الارتجاع العصبي كيفية تفاعلنا مع أجهزة الكمبيوتر تمامًا مثل الذكاء الاصطناعي.

قال روسوماننو: “لا يعني ذلك أن الذكاء الاصطناعي ليس مفيدًا ، إنه ليس مجرد نهاية كل شيء ، وليس الحل الوحيد الذي سيغير العالم”. “نحن في الواقع نحب الارتجاع العصبي ، وواجهة المستخدم الذكية حقًا ، والتصميم الذكي حقًا ، والذي يعمل على تحسين الاتجاه الآخر للحلقة. استخدام التقنيات لجعل أجهزة الكمبيوتر تعلم البشر بشكل أفضل هي هذه الثورة الرائعة الأخرى التي سنمر بها.”

إنه يذكرني بمسار تقنية الساعات الذكية ، حيث بدأت مستشعرات معدل ضربات القلب الضوئية في فتح تدفقات البيانات التي أدت إلى ميزات صحية جديدة على الساعات بمرور الوقت. وضعت Fitbit عدة مستشعرات جديدة على ساعتها Sense ، والتي تضمنت أيضًا مستشعر ضغط EDA. هل ستفتح Galea من OpenBCI وجهود مثلها أبوابًا جديدة لأجهزة الاستشعار القابلة للارتداء في المستقبل والتي تتفاعل مع ما نراه ونسمعه ، وما تتفاعل معه أيدينا؟

روسوماننو متأكد من ذلك. يرى وصول أفضل سماعات رأس VR و AR ، بما في ذلك Apple ، كمسار لمدخلات وأجهزة طرفية جديدة.

قال روسومانو لي عبر الدردشة المرئية بعد أشهر من عرضنا التجريبي ، في إشارة إلى الواقع المعزز الأكثر تقدمًا والمختلط أجهزة الواقع القادمة. “الشيء الرائع في سماعات الرأس AR هو أنها تحتوي على كل مستشعر للعالم الخارجي تريد أن تعرفه عن بيئتك المحلية. وبعد ذلك ، فإن ما نفعله يشبه العالم الداخلي. عندما تجمع مجموعتي البيانات معًا ، لا نزال فقط لا أعرف ما الذي سيكون ممكنًا “.

بينما يذكر Russomanno الارتجاع العصبي مقارنةً بالذكاء الاصطناعي ، إلا أنني أفكر أيضًا في توافق كليهما. يحتاج الذكاء الاصطناعي إلى مجموعات بيانات لتعمل بسحرها ؛ لذلك ، أيضًا ، تفعل أنظمة التكنولوجيا الحسية المستقبلية. مع تطور التكنولوجيا العصبية ، تتطور إمكانيات الذكاء الاصطناعي معها أيضًا.

نظارة الواقع الافتراضي النموذجية على طاولة بيضاء ، مع انقلاب القناع لأعلى.

Galea عبارة عن منصة مستشعر مدمجة مع سماعة رأس VR / AR ، ولكن يمكن أن تعمل مجموعة المستشعرات أيضًا بدون VR و AR. يمكن أن تظهر احتمالات الحوسبة المحيطة المستقبلية.

سكوت شتاين / سي نت

منصة استشعار يمكن أن تتوسع إلى ما وراء سماعات الرأس

Galea من OpenBCI هي في الواقع سماعة رأس VR و AR ، لكن واجهتها مع أجهزة Varjo هي جزء من المعادلة. يمكن أيضًا استخدام مجموعة أجهزة الاستشعار بمفردها. هذا يثير اهتمامي أكثر عندما أفكر في عالم من الأجهزة القابلة للارتداء في المستقبل والتي يمكن أن تتفاعل في النهاية مع الأجهزة الأخرى القابلة للارتداء على أجسادنا. عالم يمكن أن تتعزز فيه تفاعلاتنا اليومية بواسطة أجهزة استشعار أكثر تقدمًا. كل هذا بعيد المنال ، لكن بدايات ذلك المستقبل تبدو وكأنها تتجذر في بعض المستشعرات التي وضعها OpenBCI معًا في Galea.

في الوقت الحالي ، يكفي إقناع الناس بقيمة VR و AR والتكنولوجيا المرئية القابلة للارتداء. لكن تحسين الطرق التي يمكننا بها التفاعل في النهاية مع الحوسبة المكانية أو العالم الحقيقي قد يكون جزءًا من الإجابة عن كيفية تطور الواقع الافتراضي / الواقع المعزز إلى شيء أكثر وضوحًا … وربما يكون مقلقًا. يبدو بالفعل أن التكنولوجيا الشخصية تطور علاقة أعمق مع حواسنا وأدمغتنا. لكن ما رأيته يشير إلى أننا لم نبدأ حتى الآن.




اكتشاف المزيد من موقع شبرون

اشترك للحصول على أحدث التدوينات المرسلة إلى بريدك الإلكتروني.

Comments

No comments yet. Why don’t you start the discussion?

اترك تعليقاً

لن يتم نشر عنوان بريدك الإلكتروني. الحقول الإلزامية مشار إليها بـ *