Исследователи из Санкт-Петербургского Федерального исследовательского центра РАН и СПбГУ разработали нейросеть, способную распознавать утомление человека по движениям его глаз.
Технология предназначена для систем контроля состояния операторов транспорта, промышленного оборудования и критической инфраструктуры.
«Мы обучили нейросеть по движению глаз человека определять состояние оператора транспорта и любой другой техники — бодр он или утомлен», — рассказал старший научный сотрудник лаборатории интегрированных систем автоматизации СПб ФИЦ РАН Алексей Кашевник.
Для создания системы ученые собрали данные с помощью айтрекера — устройства, фиксирующего направление взгляда. Специалисты сформировали обширную базу информации о стратегиях движения глаз операторов компьютеров во время выполнения различных задач: чтения, письма, работы в течение рабочего дня. Положения глаз регистрировались через закрепленный на голове айтрекер.
Нейросеть обучалась распознаванию характерных для усталого и бодрого состояний паттернов глазных движений.
«В перспективе наше решение может быть интегрировано в системы, которые контролируют действия операторов различной техники и критической инфраструктуры», — отметил Кашевник.
Библиотека с открытым исходным кодом доступна всем пользователям и разработчикам программного обеспечения. Исследование получило поддержку гранта Фонда содействия инновациям.