Умные очки на основе ИИ

Envision Glasses — это очки со встроенной камерой и электронным модулем. Они используют технологии машинного обучения, в частности компьютерное зрение и обработку естественного языка, чтобы помогать пользователям читать текст, находить объекты в пространстве, понимать детали окружения.

Ещё очки умеют преобразовывать текст в речь. Так пользователи могут прочитать документы, вывески, надписи на упаковках. В очках есть функции «Поиск объектов» и «Описание окружения», чтобы незрячий пользователь мог сформировать более полное и точное представление об окружающей обстановке. В очки также интегрирован голосовой помощник на основе ChatGPT. Благодаря этому можно «взглянуть» на документ, создав его цифровую копию, и запросить краткое изложение текста.

Мне нравится формфактор: очки оставляют руки пользователя свободными. В то же время есть извечные вопросы: речь нечётко слышно в шумных местах и не каждому захочется озвучивать всё, на чём он хочет сфокусироваться.

Можно было бы использовать наушники, но незрячему человеку важно оставлять уши открытыми для получения всей возможной информации об окружающем пространстве. Одно из решений в такой ситуации — наушники с костной проводимостью.

Кроме чистой эргономики есть вопросы к алгоритмам ИИ: как они выбирают объекты для фокусировки? Зрячий человек, проходя мимо банального автомобиля, обращает внимание на миллион разных особенностей — от марки и цвета до собачки на заднем сиденье. Как указать искусственному интеллекту, на чём именно сосредоточиться и что описать пользователю?

Впрочем, за такими технологиями будущее. Я верю, что скоро они расширят возможности незрячих людей.

Анатолий Попко, руководитель группы невизуального тестирования Яндекса и один из разработчиков национального стандарта по доступности цифрового контента

Робот-трость Glide

Glide — это технологичная белая трость на базе искусственного интеллекта. Она позволяет отказаться от собак-поводырей или сопровождающих волонтёров. Это первое в мире самоуправляемое техническое средство реабилитации, в котором технологии навигационной робототехники и искусственного интеллекта сочетаются с интуитивно понятным и удобным интерфейсом.

Основатель компании Glidance Амос Миллер потерял зрение в 20 лет и с опытом понял, что независимое передвижение — один из принципиальных моментов для незрячих и слабовидящих людей. Команда инженеров, исследователей, дизайнеров и технологов разработала и совершенствует Glide при участии и на основе идей и убеждений Миллера.

При помощи встроенного ИИ-маршрутизатора и камеры с компьютерным зрением пользователь может самостоятельно ориентироваться в пространстве, обходить препятствия, следовать по заданному им пути. Можно предварительно запрограммировать наиболее частые маршруты или просто спонтанно прогуляться. Важно, что не трость «ведёт» пользователя, а он сам толкает ручку и может двигаться в собственном темпе, лишь следуя за ненавязчиво поворачивающимися колёсами, корректирующими путь.

Встроенная камера с компьютерным зрением и специальные датчики могут обнаружить ключевые точки маршрута и объекты, находящиеся в пределах прямой видимости. По прибытии гаджет задействует тактильную ручку и систему автоматического торможения. Также в ручку встроен динамик, через который ИИ оповещает пользователя об окружающих деталях.

Конечно, чтобы высказывать обоснованное мнение, такое устройство необходимо «пощупать», а точнее — всесторонне протестировать. Было много разработок в рамках апгрейда традиционной «белой» трости за счёт ультразвуковых «фонариков», датчиков спутниковой навигации, систем видеорегистрирования и распознавания препятствий. Это полезное направление научно-исследовательских и конструкторских разработок, но мне пока не известно ни об одном случае массового внедрения таких гаджетов в жизнь. Пока никто из моих знакомых не пользуется такими технологиями, предпочитая стандартную белую трость.

Надо изучать целевую аудиторию, чтобы понять и объективно оценить преимущества и ограничения от упаковки спутниковой навигации и ИИ в такой гаджет. Тут важна не только эргономика и интерфейс, но и стоимость.

Важно подчеркнуть: тот факт, что исследования в этой области ведутся и основаны на личном опыте людей с инвалидностью по зрению, заслуживает не только интереса, но и общественной поддержки.

Анатолий Попко, руководитель группы невизуального тестирования Яндекса и один из разработчиков национального стандарта по доступности цифрового контента

Планшет BrailleNote Touch Plus 32

Это сенсорный планшет с брайлевским дисплеем от компании HumanWare. Экран упрощает общение между учеником и преподавателем, поэтому такой гаджет идеален для незрячих или слабовидящих школьников и студентов.

Планшет работает на базе Android. Он совместим с большинством приложений, можно загружать туда книги, смотреть YouTube, пользоваться электронной почтой, а также читать и делать заметки при помощи системы Брайля. Ещё на планшете есть доступ к облачным сервисам, например Dropbox и Google Drive.

Это устройство относится к классу органайзеров для незрячих пользователей. Их правильнее называть компьютерами для слепых или тифлокомпьютерами. Конкретно это может быть полезным для незрячих школьников и студентов, поскольку оно синхронизирует работу между зрячим и незрячим. Например, зрячий преподаватель получит точное представление, с каким фрагментом документа работает его незрячий или слепоглухой ученик.

Этот гаджет, как и все предыдущие, можно смело отнести к категории «тифлотехника». Со временем необходимость в таких устройствах сокращается, поскольку незрячим, слепоглухим и слабовидящим пользователям уже доступны смартфоны на iOS и Android, компьютеры на Microsoft Windows, Apple macOS и разных редакциях операционных систем на базе GNU и Linux.

Главный вопрос возможностей незрячих пользователей лежит в обеспечении цифровой доступности массовых устройств и сервисов, а это область скорее социальная, чем техническая.

Анатолий Попко, руководитель группы невизуального тестирования Яндекса и один из разработчиков национального стандарта по доступности цифрового контента

Анатолий, а какие гаджеты или разработки были бы полезны?

Если говорить о передовом крае научно-технического прогресса, одна из интересных разработок — мозг-компьютер Neuralink. Сейчас эта технология уже на стадии тестирования. Но это нишевая разработка, из чего следует высокая стоимость производства и медленное обновление ПО.

Я считаю актуальным повышение инклюзивности цифровой среды. Никакая техническая инновация не позволит незрячему или слепоглухому школьнику создать, к примеру, текстовый документ, если операционная система не поддерживает вспомогательные технологии. Незрячие люди могут самостоятельно приобрести смартфон или компьютер. А сделать доступным банковское приложение, онлайн-магазин или современную CRM-систему может только её разработчик.

Путь к инклюзивной среде лежит через сотрудничество с людьми с ограниченными возможностями здоровья. Мы отчётливо понимаем свои потребности и хотим внести вклад в повышение доступности цифровой среды и расширение наших возможностей. Поэтому коммуникация разработчиков с нами — это лучший путь к инклюзивности.