Система "Пойнтер" по управлению компьютером с помощью взгляда для людей с ОВЗ
Первый регион реализации г. Москва
Команда
Описание
Задачи:
Повышение качества жизни людей с ограниченными возможностями здоровья (ОВЗ) через их социализацию и обучение навыкам, необходимым для трудоустройства;
Создание для людей с ОВЗ условий для работы на компьютере и в сети Интернет;
Создание для детей с нарушениями моторики и речи условий для общения в темпе, сопоставимом с темпом общения здорового человека;
Организация системы дистанционного обучения в школах и вузах для людей с ОВЗ.
Система «Пойнтер» — интерфейс ввода-вывода, который способен полностью заменить клавиатуру и мышь. Это разработка резидента «Сколково» «Нейрокогнитивные технологии», позволяющая людям с ограниченными возможностями здоровья набирать текст на компьютере с помощью взгляда, не задействуя при этом руки. Технология позволяет повысить качество жизни людей с инвалидностью: обучить их работе на компьютере, общению в темпе здорового человека и организовать получение ими образования в дистанционном формате.
Проект реализуется с 2019 года.
Целевая аудитория практики — люди с ограниченными возможностями здоровья, имеющие следующие подтвержденные диагнозы и заболевания:
детский церебральный паралич (ДЦП);
травмы шейного отдела позвоночника, травмы обеих рук;
мышечная атрофия;
боковой амиотрофический склероз (БАС);
рассеянный склероз;
синдром Веддинга-Гофмана;
синдром Ретта;
псевдокома.
Система «Пойнтер» позволяет людям с ОВЗ:
общаться с помощью компьютера в социальных сетях и мессенджерах в темпе, сопоставимом с темпом общения здорового человека;
удаленно получать образование в школе и вузе, проходить домашнее обучение;
трудоустроиться и работать на компьютере в офисе или удаленно до 6 часов в день.
Механика работы системы «Пойнтер»
Система включает в себя аппаратную часть (ай-трекер, специальную кнопку, ключ с лицензией на запуск программы после установки) и программную часть (экранную клавиатуру и эмулятор мыши). Пользователи системы «Пойнтер» получают доступ к специально адаптированному интерфейсу для ввода-вывода данных на персональный компьютер. Все команды пользователь передает через зрительный контакт с интерфейсом без использования обычной клавиатуры и рук.
На экран компьютера выводится виртуальная клавиатура, аналогичная применяемой для Android. Перемещение взгляда пользователя по клавиатуре (взгляд здесь заменяет функции обычного курсора компьютерной мыши) фиксируется специальным устройством — ай-трекером. Также на экран компьютера выводится виртуальная специальная кнопка, аналогичная по своему функционалу кнопке Enter на физической клавиатуре. Фиксация взгляда на ней дает команду нажатия на кнопку. Также щелчок по кнопке может осуществляться автоматически по таймеру — через заданное время.
Система имеет автоматическое обновление. Все дополнительно разрабатываемые программы, утилиты и методики приходят пользователю бесплатно вместе с обновлениями и автоматически устанавливаются на его компьютер. Компания-разработчик проводит обучение пользователей работе с системой и предоставляет регулярное сервисное обслуживание.
Скриншот занятия с инструктором (полное видео см. в разделе «Материалы»)

Апробация системы
С июля 2018 по июль 2019 годов в Москве и Московской области прошел цикл пилотных запусков системы, в которых приняли участие более 40 детей с ограниченными возможностями здоровья. В ходе испытаний были определены:
оптимальное время для обучения пользователей;
уровень полученных ими навыков;
специфика обучения пользователей разных возрастных групп, с разными диагнозами.
Сайт практики
Результат
Для детей с нарушениями моторики и речи созданы условия для общения в темпе, сопоставимом с темпом общения здорового человека. Здоровый человек набирает за минуту на компьютере более 40 знаков; пишущий от руки — 30-50 знаков в минуту. С помощью системы «Пойнтер» ребенок с ОВЗ печатает 25-45 знаков в минуту.
Система «Пойнтер» позволяет организовать дистанционное обучение в школах, вузах, на дому, работать в офисе. Длительность непрерывной работы на компьютере при этом составляет 4-8 часов. Для сравнения, технологии, применяемые в коррекционных школах, могут обеспечить работу людей с ОВЗ на компьютере не дольше 1-2 часов.
Пользователи с ОВЗ могут общаться в социальных сетях, мессенджерах, на форумах в сети Интернет: скорость работы с эмулятором мыши лишь незначительно уступает скорости работы с обычной мышью.
Стоимость реализации: До 500 тыс ₽
Этапы реализации
1 месяц
- Закупка системы «Пойнтер» и обучение пользователя:
Длительность этапа определяется продолжительностью проведения тендерных процедур при закупке системы «Пойнтер». Максимальный срок обучения пользователя — 1 месяц.
Алгоритм внедрения системы:
Потенциальный пользователь в течение 15 минут проходит тестирование, которое позволяет определить, сможет ли он работать с Системой.
Компания-разработчик консультирует родителей или представителей организации-заказчика: объясняет особенности технологии и содержание учебного курса, разбирает типичные ошибки при обучении.
Если человек/организация решает приобрести «Пойнтер», то заключается сделка.
После этого представитель компании в течение 3 дней проводит обучение на дому, а также организует дома и в коррекционной школе рабочее место (дает рекомендации по расположению мебели, освещению, креслам, подголовникам), организует двустороннюю видеосвязь, ставит ПО на домашний и школьный компьютеры пользователя. Обучение проводится как для пользователя, так и для тех, кто ему помогает: родителей, тьюторов, сиделок. За три дня ребенок/взрослый с ОВЗ получает первичные навыки работы с Системой.
В течение последующих двух недель проводит 5 занятий удалённо (через Интернет), в ходе которых пользователь закрепляет полученные навыки, отслеживается работа родителей/тьюторов.
Первое время обученный родитель вместе с ребенком посещает коррекционную школу, возит с собой на занятия ай-трекер и лицензионный ключ (небольшие по размеру) в сумке, следит за тем, чтобы на занятиях ребенок набирал текст с помощью взгляда и работал с эмулятором мыши. Когда ребенок полностью осваивает систему «Пойнтер», необходимость в присутствии родителя отпадает.
В случае необходимости можно заказать дополнительные занятия или учебный курс для подготовки инструкторов для школ, хосписов или реабилитационных центров.
- Использование системы «Пойнтер» (бессрочно):
Для установки системы «Пойнтер» не требуется специального программного обеспечения ПК. Она работает с ОС Windows 7 / 8 / 8.1 / 10. В комплект оборудования входят: видеоокулограф (ай-трекер) Tobii 4 °C; диск с дистрибутивом программы «Пойнтер»; диск с утилитами и драйверами ай-трекера; спецкнопка и электронный ключ для защиты от подделки ПО.
По аналогичной схеме можно организовать дистанционное обучение в коррекционных школах/вузах. При необходимости ПК можно заменить на ноутбук, а монитор 17 дюймов возить в кейсе. От школ/вузов для организации дистанционного обучения не требуется ничего — комплект оборудования уже находится дома у пользователя с ОВЗ, система «Пойнтер» совместима с любым сторонним программным обеспечением.
Лицензия на ПО бессрочная, гарантия на ай-трекинговый контроллер — 1 год.
