Компьютерный персонаж копирует мимику человека (видео)

Важнейшей ценностью современных компьютеров является открытый простор для творчества, простые любители теперь могут писать масштабные симфонические произведения, монтировать собственное кино со спецэффектами или даже рисовать мультфильмы. Но заставить компьютерного персонажа двигаться или менять выражение лица очень и очень непросто.

Альтернативное решение предложили ученые из университета Кэйо (Япония), исследовательскую группу возглавил профессор Ясуэ Мицукура (Yasue Mitsukura). Инженеры разработали программную платформу, которая работает с обычными персональными компьютерами и веб-камерами. Когда программа запускается, и веб-камера обнаруживает человека, система начинает следить за его лицом, опираясь на 14 контрольных точек на бровях, глазах, на носу и на линии рта. Эти точки поставлены в соответствие точкам на лице компьютерного персонажа, а значит, когда пользователь в кадре меняет выражение своего лица, такую же гримасу повторяет и аватар на компьютере.

Система контролирует не только мимику пользователя, но также повторяет повороты его головы, аналогичным образом отслеживая изменения на картинке с веб-камеры. Но главным достоинством алгоритма является его работа в режиме реального времени. Это значит, что система подходит и для создания компьютерной анимации при съемке мультфильмов, и для общения в чатах в интерактивном формате. А вот к недостаткам платформы можно отнести то, что ее действие распространяется только на лицо и голову, другими частями тела ученые, надо полагать, займутся позже. Зато никаких сенсоров на лице и никаких ультрадорогих рабочих станций, системе хватает простого персонального компьютера (десктопа или ноутбука) и простой видеокамеры, даже встроенной!