Незрячий египтянин создал ИИ-приложение ScribeMe, помогающее незрячим видеть мир

ScribeMe устанавливается в умные очки Meta и непрерывно рассказывает, какие животные находятся рядом, на каком расстоянии и чем они заняты. Керен мысленно собирает полную картину и ощущает атмосферу сафари. «Я раньше думала, что такое невозможно, но это произошло — я действительно вижу», — призналась девушка.

Приложение предназначено для полностью незрячих людей, уже доступно в 140 странах и имеет тысячи пользователей. ScribeMe работает не только с очками Meta, но и на iOS и Android.

Марк, как и сестра, тоже незрячий. В 2018 году у него диагностировали редкое неизлечимое заболевание зрительного нерва. К концу 2021 года оба полностью ослепли: Керен за шесть месяцев, Марк почти за три года.

Учёба стала серьёзным испытанием: программы чтения с экрана не работали с графиками, схемами и уравнениями. Марк писал разработчикам подобных вспомогательных инструментов, но ответа не получил. Тогда он начал сам учиться программированию по видеоурокам на YouTube, и к 2023 году создал рабочий прототип ScribeMe.

В 2024 году развитию помог хакатон Vodafone, посвящённый вспомогательным технологиям для людей с инвалидностью. Марк нашёл сооснователя, а ScribeMe из сканера документов превратилось в полноценное визуальное приложение. Сейчас оно отвечает на вопросы через камеру смартфона и поддерживает 20 языков. Интеграция с очками Meta позволяет незрячим освободить руки и пользоваться тростью. Приложение бесплатно, расширенная версия стоит 20 долларов в месяц или 200 долларов в год.

Керен использует ScribeMe, чтобы находить учебные аудитории, узнавать магазины, выбирать одежду и заниматься. Отец Морад Седки говорит: если бы четыре года назад ему сказали, что дети достигнут такого, он бы не поверил. «Мечты продолжают расти, и в нашей семье больше никто не говорит, что что-то невозможно».