В США ученые разработали наушники, способные распознать мимику человека

21:53 15/10/2020

Ученые из Корнеллского университета разработали наушники, которые способны не только проигрывать аудиодорожку, но и распознать мимику человека. При помощи этой технологии можно делиться с интернет-собеседниками эмоциями и управлять музыкальными приложениями, сообщается на сайте Cornell University.

Наушники C-Face оснащены специальными RGB-камерами, которые расположены под каждым ухом. Они фиксируют сокращения лицевых мышц по контурам щек. Данные с камер обрабатываются при помощи искусственного интеллекта. Затем нейронная сеть преобразует полученное изображение в 42 ключевые точки на лице, по которым и распознается мимика. Технология может считать выражение лица человека даже тогда, когда на нем надета маска.

Доцент кафедры информатики и главный разработчик C-Face Чэн Чжан рассказал, что большинство существующих на данный момент технологий распознавания мимики предполагает закрепление на лице датчиков, но все равно результат их работы неидеален, так как они могут определить только ограниченный набор выражений. Создатели наушников поняли, что данные лицевых мышц очень информативные, поэтому внедрили именно их в свою технологию.

Авторы проекта утверждают, что при помощи C-Face можно передавать эмоции игроков на их аватары в компьютерных играх, преподаватели смогут видеть вовлеченность студентов во время онлайн-лекций, а также эту технологию можно настроить на управление лицевыми сигналами некоторых функций компьютера, например аудиоплеера.

В феврале 2019 года телеканал «МИР 24» рассказывал о китайском инженере, который построил приют для кошек с системой распознавания мордочек. Технология заранее определяла приближение к домику кошек и открывала двери помещения, где животные могли поесть, погреться и отдохнуть. В мае прошлого года в Китае разработали приложение для распознавания лиц панд, это позволило получать больше данных об этих животных.