Live Face — это новейшее решение Malkap для лица без маркеров в Reallusion для iClone 7. Это приложение специально для iPhone X, использующее датчик глубины и отслеживания телефона. программное обеспечение для отслеживания лица пользователя и потоковой передачи данных в iClone с помощью плагина Reallusion Motion LIVE для создания реалистично анимированных трехмерных изображений.
Анимацию лица можно предварительно просмотреть и записать в режиме реального времени на одном или нескольких персонажах. Это также может быть выполнено во время захвата анимации (для тела и рук, а также лица) из других систем mocap.
За прошедшие годы я использовал много разных систем mocap для лица, на основе маркеров и без маркеров, и хотя ни одна из них не идеальна, подход iPhone X / Live Face удивительно стабилен и его легко использовать сразу. Подход с использованием датчика глубины означает, что он терпим к неравномерным и слабым условиям освещения, а тот факт, что сам захват выполняется на телефоне, а не на ПК, означает, что он эффективен и не требует ресурсов.
Live Face: эффективный слежение
Отслеживание головы, глаз и общего в приложении Reallusion является эффективным, и хотя искажения выражения могут возникать, когда голова пользователя поворачивается в сторону от камеры, они менее заметны, чем при использовании других безкамерных однокамерных систем. Существуют некоторые ограничения выражения из-за точности отслеживания — особенно с асимметричными формами рта, такими как рычащие движения, а также с дифференцировкой бровей, что означает, что в настоящее время поднять отдельную бровь с Live Face невозможно. Помимо ограничений, отслеживание является довольно надежным и даже охватывает расширение щек — чего я не видел в других безмаркерных системах.
Lipsync с Live Face по умолчанию работает хорошо, хотя пользователи также могут изменять качества синхронизации губ, калибруя их слегка приоткрытый рот (чтобы подчеркнуть закрытие рта), а также с помощью ползунков силы на пользовательском интерфейсе Motion LIVE.
Live Face для iClone 7: стоит цена?
Нет никаких сомнений, что
стоит дорого, и, если у вас уже есть iClone 7 и встроенный плагин mocap для Motion LIVE, программное обеспечение будет использовать телефон для лицевого мокапа в iClone примерно за £ 230. Даже с учетом стоимости самого iPhone, это хорошая цена для надежного решения mocap для лица. На самом деле совокупная стоимость телефона и программного обеспечения примерно такая же, как и для существующей системы Faceware iClone.iPhone X / Live Face — это стабильный, эффективный и простой в использовании подход mocap для лица. практическое дополнение к инструментарию аниматора. Хотя он не идеален (Apple, пожалуйста, исправьте отдельное отслеживание бровей!), Он может дать приличные результаты быстро и с минимальной последующей очисткой.
Эта статья была первоначально опубликована в выпуске 240 из 3D World самый продаваемый в мире журнал для художников компьютерной графики. Купите выпуск 240 здесь или подпишитесь на 3D World здесь .