الأجهزة القابلة للارتداء تعطي الرؤية الحاسوبية للمكفوفين

من نظارة Google Glass إلى سماعة رأس تشبه VR ، فهذه هي الأجهزة التي تساعد المكفوفين.
عندما كان مايكل هينجسون في المدرسة ، أنشأ محطة كمبيوتر برايل حتى يتمكن من الدراسة مثل جميع الطلاب الآخرين. بعد تخرجه من الكلية ، عمل على تطوير آلة قراءة كورزويل للمكفوفين ، وهي أول آلة تجارية لتحويل النص إلى كلام للمكفوفين. لقد استخدم العصا البيضاء وكلاب الإرشاد وأدوات التحكم الصوتي على هاتفه الذكي ومساعدين افتراضيين مثل Alexa ، كل ذلك باسم القيام بالأشياء بمفرده على الرغم من كونه أعمى منذ الولادة. لكن شيئًا بسيطًا مثل قراءة كتاب فكاهي ، أو العثور على حساء البازلاء المنقسم بين جميع العلب في المخزن؟ حتى وقت قريب ، كان هذا يبدو مستحيلًا.

لذلك عندما يتحدث Hingson عن الوقت الذي قام فيه بتجميع قطعة أثاث ذات اتجاهات مصورة على طراز Ikea ، يبدو الأمر كما لو أنه تسلق جبلًا. لقد فعل ذلك مرتديًا Aira ، وهي مجموعة من النظارات المزودة بكاميرا تضيء مجال رؤيته لشخص يمكنه الرؤية ، كما لو كان يستعير بصره للحظات. يقول هينغسون: “لم يكن بإمكاني فعل ذلك بمفردي ، أو الفترة الزمنية ، أو بأي طريقة أخرى”.

تم إطلاق Aira قبل ستة أشهر ويبلغ عدد المشتركين فيها حوالي 400 من المكفوفين وضعاف البصر. يستخدمون الخدمة في الغالب للمساعدة في المهام العادية – قراءة ملاحظة مكتوبة بخط اليد ، والتنقل في متجر البقالة ، والتحقق من وقت انتهاء صلاحية الحليب الموجود في الثلاجة – وأحيانًا تلك المهام الاستثنائية ، كما هو الحال في شهر أبريل من هذا العام ، عندما قام رجل أعمى بالدخول إلى Aira لتشغيل بوسطن ماراثون. تتصل إحدى النساء بانتظام لقراءة الكتب المصورة لابنها بصوت عالٍ ؛ يستخدم الآخرون الخدمة لالتقاط صور جيدة بما يكفي لمشاركتها مع الأصدقاء. يقول هينغسون: “إنها طريقة لإتاحة أي معلومات مرئية لم تكن متاحة من قبل”.

في الوقت الحالي ، يشارك عملاء Aira مقاطع الفيديو الخاصة بهم مع أشخاص – تطلق عليهم Aira اسم “الوكلاء” – الذين يعملون على نموذج مثل Uber ، مع القدرة على تسجيل الدخول ، والرد على مكالمة المستخدم ، والحصول على أموال مقابل ساعات العمل. ولكن في المستقبل ، يأمل سومان كانوجانتي ، مؤسس شركة Aira ، أن يفرغ معظم هذا العمل في الذكاء الاصطناعي. يمكن للتكنولوجيا نفسها التي تشغل مشاريع رؤية الكمبيوتر في Google و Facebook و Pinterest أن تخبر Hingson يومًا ما عن المكان الذي ترك فيه مفاتيح منزله ، أو يقرأ لافتات الشوارع عند التقاطع ، أو يتعرف على أي من أصدقائه موجود في الغرفة. في يوم من الأيام ، يمكن للرؤية الحاسوبية أن تمنح المكفوفين معلومات عن بيئتهم أكثر مما يمكن لأي شخص مبصر رؤيته بالعين المجردة. وكل ذلك قادم بفضل فئة جديدة من الأجهزة القابلة للارتداء.

الآن أنت تراني
تبدو سماعة Aira نوعًا ما مثل نظارة Google Glass المخادعة ، لأنها كذلك في الأساس. جرب Kanuganti الجهاز كجزء من برنامج Glass Explorers في عام 2013 ، ولم يسعه سوى التفكير في صديقه Matt Brock ، الذي فقد بصره من التهاب الشبكية الصباغي في عام 2006. جاء Glass بكاميرا مدمجة بدقة 5 ميجابكسل ، قادرة على تصوير فيديو بدقة 720 بكسل. إذا كان بإمكان Kanuganti استخدام الكاميرا لالتقاط الصور وبث الفيديو ، فهل يمكن لشخص مثل Brock استخدامها لرؤية ذلك؟

أرسل Kanuganti مجموعته بالبريد إلى Brock ، ودعاه إلى مكالمة Google Hangouts ، وبدأ محادثة فيديو. عندما تم التركيز على كاميرا بروك ، شعر كانوجانتي وكأنه ينظر مباشرة من خلال عيني صديقه.

مُستَحسَن

ربما تحتوي الصورة على: نظارات ، ملحقات ، ملحق ، وجه ، إنسان ، شخص ، نظارات واقية ، ولحية
Google Glass 2.0 هو قانون ثانٍ مذهل
ستيفن ليفي

ربما تحتوي الصورة على: لوحة النتائج
الذكاء الاصطناعي
يمكن للذكاء الاصطناعي على Facebook أن يعلق على صور المكفوفين بنفسه
كادي ميتز

ربما تحتوي الصورة على: إنسان ، وشخص ، ومركبة ، ووسائل نقل ، وسيارة ، وسيارة ، وعجلة ، وآلة ، وإطارات ، وشاحنة ، ومكبر صوت ، ومبنى
سيارة عالية التقنية تسمح للمكفوفين بالقيادة
كيث باري

ربما تحتوي الصورة على: ربطة عنق ، إكسسوارات ، ملحق ، إنسان ، شخص ، نظارات شمسية ، بدلة ، معطف ، ملابس ، معطف ، وملابس
جهاز جديد يمكن ارتداؤه يساعد المرضى المكفوفين على رؤية الأشكال والألوان
دانييلا هيرنانديز

لقد كانت “لحظة تغير قواعد اللعبة” بالنسبة لبروك ، الذي نادرًا ما يغادر المنزل بدون زوجته. كان لديه كلب إرشاد ، لكن الكلب لا يمكنه إخبارك بكيفية الانتقال من منزلك إلى متجر البقالة ، أو أي ممر يخزن الخبز ، أو التأكد من استرداد المبلغ المناسب من المال. مع كانوجانتي هناك للحصول على الدعم ، تجول بروك في الشارع إلى متجر في الحي واشترى باقة من الزهور لزوجته. لم يفعل شيئًا كهذا من قبل.

يقول كانوجانتي: “كان هناك الكثير من التطبيقات الموجودة لتحديد العناصر واللون والنصوص وما إلى ذلك ، ولكن لم يكن هناك تطبيق للمكفوفين وضعاف البصر لمجرد النهوض والذهاب”. يبدو أن هذا منح بروك مزيدًا من الاستقلالية أكثر مما عاشه منذ سنوات.

بالتعاون مع المؤسس المشارك Yuja Chang ، وضع Kanuganti نموذجًا أوليًا لما سيصبح فيما بعد Aira. يتم إقران الجهاز ، الذي يتم ارتداؤه مثل النظارات ، بالهاتف الذكي للمستخدم للاتصال بوكيل Aira. تعمل الخدمة على نموذج اشتراك ، مثل خطة الهاتف المحمول المدفوعة مسبقًا: مقابل 129 دولارًا في الشهر ، أعمى

يحصل العميل على 200 دقيقة مع وكيل ؛ 199 دولارًا تحصل عليها 400 دقيقة مع ضمان أن الوكيل سوف يستلمها في غضون 10 ثوانٍ.

شغل الطاقة في أي مكان مع الشواحن المحمولة المفضلة لدينا
سكوت جيلبرتسون

يستقر الهاتف الذكي Samsung Galaxy Note 20 Ultra على طاولة بيضاء على خلفية برتقالية
19 من إعدادات Android قد لا تعرفها
أفضل 12 دراجة كهربائية لكل نوع من أنواع الركوب
أفضل حافظات iPhone 14 وملحقاتها

في الوقت الحالي ، لا تعد Aira بديلاً عن أدوات إمكانية الوصول مثل العصي البيضاء. لكن كريس دانيلسن ، مدير العلاقات العامة في الاتحاد الوطني للمكفوفين ، يقول إنه يمكن أن يمنح المستخدمين المكفوفين مزيدًا من الاستقلالية ويساعد في حل “مشكلة آخر 50 قدمًا” – يمكن للمكفوفين استخدام نظام تحديد المواقع العالمي (GPS) للعثور على طريقهم ، ولكن ثم تتعثر في محاولة العثور على مدخل مبنى. سواء كان الوكيل بشريًا أم ذكاءً اصطناعيًا ، كما يقول ، يمكن أن يكون هذا النوع من المعرفة ضخمًا. (كدليل على ثقته ، وقع الاتحاد الوطني للمكفوفين كمستثمر في Aira.) “نحن حذرون بشأن القول إن [التكنولوجيا] ستحل جميع مشاكلنا” ، كما يقول دانيلسن ، “لكنني أتوقع أن هذا نوع التكنولوجيا سيصبح أكثر فأكثر جزءًا لا يتجزأ من حياة المكفوفين “.

من برايل إلى العيون الآلية
تم اختراع أول تقنية حديثة للمكفوفين ، وهي طريقة برايل ، في عام 1819. سمح نظام النقاط المرتفعة للمكفوفين بالقراءة والكتابة لأول مرة ، وأصبح معيارًا في أوائل القرن العشرين. بعد فترة وجيزة ، قدمت العصي البيضاء وكلاب الإرشاد طرقًا جديدة للمكفوفين للتنقل في العالم المادي ؛ الأدوات السمعية ، مثل آلة القراءة Kurzweil وبرامج تحويل النص إلى كلام ، ستتبعها قريبًا.

لكن التقنيات الحديثة تستكشف كيف يمكن للمكفوفين تلقي المعلومات المرئية بطرق أخرى ، وتجنب حاسة السمع واللمس. في عام 2007 ، قدمت مجموعة من الباحثين في كاليفورنيا نموذجًا أوليًا لـ “العين الإلكترونية” يُدعى Argus II. يقوم النظام بترجمة المعلومات المرئية من كاميرا صغيرة مثبتة على نظارات شمسية إلى جهاز شبكي مزروع جراحيًا ، مما ينتج عنه نبضات كهربائية داخل العين. إنه لا يكرر الرؤية في حد ذاته ، لكن أولئك الذين يستخدمون Argus II يمكنهم التعرف على ومضات الضوء التي تسمح لهم بتحديد الأشياء والأشخاص وحتى النصوص الكبيرة. قال أحد مستخدمي Argus II لمجلة Wired UK: “بدون النظارات لا يمكنك رؤية أي شيء ، ضع النظارات عليها بحيث يمكنك رؤيتها فجأة”. “تحصل على هذا العامل المبهر في كل مرة تفعل ذلك.”

تمت الموافقة على Argus II من قبل إدارة الغذاء والدواء الأمريكية في عام 2013 ، لكنها بالكاد أصبحت سائدة. يكلف النظام 150 ألف دولار ، قبل رسوم الجراحة والتدريب. وعلى الرغم من أن التأثيرات يمكن أن تكون ملحوظة ، إلا أنها لا تعمل على الجميع – خلال التجارب السريرية ، عانى 30 بالمائة من الأشخاص من آثار ضارة من الزرع ، بما في ذلك انفصال الشبكية.

لكن مفهوم استخدام الكاميرا مثل العين البديلة؟ مهد ذلك الطريق لفئة جديدة من الأجهزة القابلة للارتداء ، والتي توفر درجة من سحر رؤية الكمبيوتر دون تكلفة أو التزام بجهاز مزروع.

يقوم أحد هذه الأجهزة ، MyEye by Orcam ، بترجمة المعلومات المرئية من كاميرا صغيرة إلى سماعة أذن صوتية. على عكس Aira ، يعمل MyEye بالكامل على برنامج AI. اضغط على زر ويمكن للجهاز إملاء نص أو تحديد كائن في العرض. يمكن للبرنامج أيضًا حفظ وجوه 100 شخص و 150 شيئًا — لذلك عندما تبحث عن وجه مألوف وسط حشد من الناس أو تحاول تذكر المكان الذي وضعت فيه محفظتك ، يبحث MyEye عنك. يؤدي التخلص من العنصر البشري أيضًا إلى إرجاع الاستقلالية والخصوصية للمستخدمين. لا حاجة للاتصال بوكيل لقراءة مستند شخصي بصوت عالٍ ، أو لمجرد رؤية ما هو موجود في قائمة المطعم. يقوم الكمبيوتر بكل ذلك بمفرده.

الأكثر شهرة

هيأ
شغل الطاقة في أي مكان مع الشواحن المحمولة المفضلة لدينا
سكوت جيلبرتسون

يستقر الهاتف الذكي Samsung Galaxy Note 20 Ultra على طاولة بيضاء على خلفية برتقالية
هيأ
19 من إعدادات Android قد لا تعرفها
ديفيد نيلد

هيأ
أفضل 12 دراجة كهربائية لكل نوع من أنواع الركوب
أدرين سو

هيأ
أفضل حافظات iPhone 14 وملحقاتها
جوليان تشوككاتو

الإعلانات

تستخدم الأجهزة الأخرى القابلة للارتداء الضوء والتكبير لمساعدة الأشخاص ذوي الرؤية المحدودة. يستخدم جهاز يسمى eSight ، يرتديه المستخدمون مثل سماعة رأس VR ، كاميرا عالية الدقة لتكبير الصور وعرضها على شاشة OLED أمام أعين المستخدم. يقول بريان ميك ، الرئيس التنفيذي لشركة eSight ، إن حوالي 15 بالمائة فقط من الأشخاص المعاقين بصريًا مصابون بالعمى تمامًا. بالنسبة لأي شخص آخر ، تساعد الأجهزة مثل eSight في تحسين بعض الرؤية المتبقية. ولأنه يمكن ارتداؤه ، كما يقول Mech ، فإنك تقضي على تكلفة الجراحة ومخاطرها. يقول Mech: “كل ما عليك فعله هو ارتدائه ، وستعرف في غضون ثوان ما إذا كان يعمل من أجلك أم لا”.

والأمر الأكثر أهمية هو أن مجموعة من علماء الأعصاب في ولاية ويسكونسن صممت نظامًا يمكن من خلاله للمكفوفين تلقي الأحاسيس البصرية من خلال ألسنتهم. الجهاز ، المسمى BrainPort ، يلتقط الإشارات الضوئية من الكاميرا المثبتة على مجموعة

من النظارات الشمسية ويترجمها إلى نبضات كهربائية على “مصاصة” كهربائية صغيرة. مع القليل من التدريب ، يمكن استخدام تلك النبضات – التي وصفها بعض المستخدمين على أنها تشبه الانفجارات الصغيرة لبوب روكس على اللسان – للتنقل أو فهم تصميم الغرفة.

بسعر 10000 دولار ، فإن BrainPort ليس رخيصًا. يتم تسعير الأجهزة الأخرى بالمثل بالآلاف: eSight للبيع بالتجزئة مقابل 10000 دولار ؛ MyEye مقابل 3500 دولار. (المزيد من الأدوات الأساسية ، مثل جهاز مثبت بالأصابع يقوم بمسح النص وقراءته بصوت عالٍ ، يكلف أقل ؛ وبعض التطبيقات ، مثل Seeing AI ، توفر تقنية رؤية الكمبيوتر الذكي للمكفوفين مجانًا.) قد يحتاج إلى التحسين قبل أن يسجل الأشخاص الدخول للتجول كل يوم مرتديًا شيئًا يشبه Oculus Rift. لكن النتائج يمكن أن تكون عميقة: إريك وينماير ، الذي أصبح الشخص الأعمى الأول والوحيد الذي يتسلق جبل إيفرست في عام 2001 ، استخدم BrainPort للتنقل عبر التسلق. استخدم Marc Muszynski ، وهو رجل يعاني من الضمور البقعي ، eSight لقيادة طائرة.

تنمو إمكانات هذه الأجهزة فقط مع قيام شركات مثل Google و Pinterest و Uber والعديد من الشركات الأخرى بتحسين رؤية الكمبيوتر للأغراض التجارية. يمكن للبرنامج الذي يعلم السيارات ذاتية القيادة كيفية التنقل في قواعد الطريق أن يساعد الشخص الكفيف على المرور عبر تقاطع مزدحم دون الحاجة إلى كلب إرشاد. يمكن أيضًا استخدام الذكاء الاصطناعي الذي تستخدمه Pinterest للتعرف على وجبة الإفطار وإرسال الدبابيس ذات الصلة إليك للتعرف على أن تلك الفطائر تحتوي على فراولة ، والتي لا يجب عليك تناولها لأنك تعاني من الحساسية. وبرنامج الرؤية الحاسوبية من Google ، والذي يمكنه تمييز ما إذا كان شخص ما يقوم بالتعبير عن المشاعر حقًا أو مجرد تزويرها ، يمكن أن يخبرك ما إذا كان الناس يبتسمون أو يتشاجرون في نكتة رهيبة.

رؤى المستقبل
في الوقت الحالي ، لا تزال هذه الزاوية من صناعة الأجهزة القابلة للارتداء حديثة العهد. أولئك الذين يستخدمون Aira يجدون أن المكالمات تنخفض أحيانًا وأن الكاميرا المدمجة لا تلتقط الصور بدقة تامة. هناك قيود أخلاقية وقانونية أيضًا: يتخذ الوكلاء خطًا دقيقًا بين إخبار عملاء Aira بما يرونه وإخبارهم بما يجب عليهم فعله. لا يستطيع الوكيل ، على سبيل المثال ، إخبار شخص ما بأنه من الآمن عبور الشارع ؛ المسؤولية عالية جدًا. بدلاً من ذلك ، تم توجيههم لقول أشياء مثل ، “هناك ممر مشاة على بعد بضعة أقدام إلى يسارك” و “إشارة المرور خضراء”. ومثله مثل Google Glass ، فإن الجهاز لا يكاد يكون في خطر أن يصبح عصريًا.

لكن هذا الآن. يقول كانوجانتي إنه في غضون ثلاث سنوات ، لن تتحسن أجهزة الجهاز فحسب ، بل ستتم أتمتة أكثر من نصف مكالمات Aira.

أفضل حافظات iPhone 14 وملحقاتها
يقول كانوجانتي ، مشيرًا إلى النظام الأساسي لرؤية الكمبيوتر من Google: “هناك الكثير من عناصر رؤية الكمبيوتر الموجودة بالفعل: منصات مثل Google Cloud Vision”. “ولدينا البيانات التي تأتي إلينا من النظارات.”

يقول إن Aira سيظل يعمل بالبشر ، مما يميز منتجه عن أدوات الذكاء الاصطناعي فقط مثل MyEye. ترقى بعض الطلبات إلى أكثر من مجرد فهم ماهية الشيء أو ما يقوله ، ويرى Kanuganti القدرة على التعامل مع هذه المهام كسبب لاختيار Aira على الأجهزة المماثلة. ذات مرة ، طلب أحد العملاء من وكيل Aira تقديم تعليق مرئي قيد التشغيل في رحلة إلى ديزني لاند. هذا هو نوع الأشياء التي لا يمكنك تفريغها على جهاز الكمبيوتر.

لكن بالنسبة لبقية ذلك ، يمكن للذكاء الاصطناعي أن يمهد طريقًا جديدًا إلى الأمام. تخيل عالماً تفحص فيه Aira وجوه الأشخاص في غرفة ويخبرك عند وصول أحد أصدقائك ، بناءً على جهات الاتصال الموجودة في هاتفك أو قائمة أصدقائك على Facebook. أو عالم تتصل فيه Aira بأجهزة خارج هاتفك ، وتتزامن مع المساعد الافتراضي الموجود بالفعل في هاتفك ومكبر الصوت الذكي الخاص بك. يعتمد Hingson ، مثل الكثيرين في مجتمع المكفوفين ، بالفعل على Amazon Echo لمهام إملاء الصوت مثل إعداد قوائم البقالة. قال لي ، ألن يكون رائعًا ، إذا كان بإمكانه مشاركة إحدى هذه القوائم مع Aira ثم استخدام النظارات – سواء كانت مدعومة بالذكاء الاصطناعي أو بواسطة الإنسان – لإرشاده خلال متجر البقالة ، وإخباره بمكان العثور على كل عنصر في كل ممر؟

إنه مستقبل منظور. في الوقت الحالي ، على الرغم من ذلك ، يتحدث Hingson عن كل الأشياء التي يمكنه فعلها بالفعل – مثل مسح المعلومات الموجودة على بطاقة العمل ، أو إيجاد طريقه حول قاعة مؤتمرات مزدحمة – بفضل التكنولوجيا المساعدة. إذا كان الذكاء الاصطناعي ، في السنوات القادمة ، يجعل من السهل عليه التنقل في العالم من حوله ، فهذا أفضل.