Российские ученые научили искусственный интеллект определять переутомление по глазам

Сотрудники Санкт-Петербургского федерального исследовательского центра (СПб ФИЦ) РАН, Санкт-Петербургского и Новосибирского госуниверситетов создали программное обеспечение, получившее название «Компьютерное зрение». Это ПО с помощью нейросети анализирует такие состояния человека, как усталость, сонливость и голод, и помогает в выявлении случаев переутомления диспетчеров, что повышает безопасность на промышленных и транспортных объектах.

«Для работы «Компьютерного зрения» используются нейросети openpose и selflow, которые ищут человека в кадре и строят оптический поток. На основе этого создаются графики движения ключевых точек на теле человека, затем оно анализируется. По сути, компьютерное зрение распознает объекты на видеоматериалах, при этом способно замечать признаки, которые соответствуют определенному поведению (например, когда человек утомился)», – рассказали о разработке в Минобрнауке России.

В ведомстве также отметили, что в СПб ФИЦ РАН в последние годы уже ведут проект по разработке и внедрению системы Drive Safely, которая с помощью компьютерного зрения предотвращает аварийные ситуации, контролируя состояние находящегося за рулем человека по таким параметрам, как сонливость, прием пищи, непристегнутый ремень и агрессивность манеры вождения. В новом же проекте исследователи увеличили набор параметров для выявления усталости оператора. К ранее использовавшимся зевоте, частоте вдохов и выдохов и доле времени, в течение которого глаза водителя закрыты в единицу времени, добавились скорость перемещения взгляда, кривизна его траектории и др. Новые параметры движения глазного яблока исследователи определили при помощи специального датчика-трекера.

«Мы научили программу распознавать стратегии по данным с трекера. И сейчас система работает так: мы загружаем в нее собранную информацию. Затем программа ее размечает и анализирует. На выходе получаем суммарную оценку и рекомендации о том, насколько сильно оператор нуждается в отдыхе. В ближайшее время мы оптимизируем разработку таким образом, чтобы она могла анализировать данные в режиме реального времени», – прокомментировал старший научный сотрудник СПб ФИЦ РАН Алексей Кашевник.

Сейчас группа ученых ищет индустриальных партнеров для внедрения системы.

Ранее iot.ru рассказывал об искусственном интеллекте, который следит за усталостью и вниманием диспетчеров на пермском предприятии «Уралхима».

Чтобы оперативно получать наши новости в удобном формате, подписывайтесь на наш Telegram-канал.

Источник изображения: Минобрнауки России