Render.ru
Поддержать
10.0 KЗаписей
68.3 KСледят
31.9 MЗаходов

VooDoo — мокап лица с помощью мобильника

Софт

Разработчики из Hot Knife представили новое приложение Voodoo для смартфона, которое позволяет захватывать и записывать выражение лица и голос прямо на устройство. Кроме того, разработчики добавили скрипты 3ds Max, чтобы синхронизировать записанные данные с ригом лицевой анимации персонажа в редакторе.

Voodoo_Header.jpg

Перед записью необходимо настроить приложение: задать частоту кадров и продолжительность записи на экране настроек (в правом верхнем углу), после чего достаточно нажать кнопку записи на главном экране и начать "действовать". Приложение разбивает запись на аудио и видео потоки, сохраняя их в файлах .wav и .vdr, которые затем можно перенести на компьютер, например путем перетаскивания в локальную папку через itunes.

После переноса файлов необходимо запустить Voodoo, выбрать сетку персонажа и загрузите .vdf. Персонаж должен иметь модификатор Morpher, также нужно будет сопоставить morph-каналы с формами лица в окне Mapping, которое находится в разделе Track / Mapping на выдвижной панели Voodoo. Для настройки синхронизации необходимо указать IP-адрес устройства в локальной сети в параметрах приложения.

Скрипты HK_MirrorMorph.mcg и HK_MirrorVertColour.mcg устанавливаются вместе с пакетом Scripting/Install Max Creation Graph .MCG.
Скрипт HK_Poser.V11.mse необходимо разместить в папке C:\Program Files\Autodesk\3ds Max 2020\scripts\Startup или другой настроенной папки запуска скриптов.

Настройки приложения
AppArtboard-1.png

App_scriptArtboard-1.png

MappingArtboard-1.png

669
Комментарии:17
по поступлению
0
Андрей Шелков
26.08.2019 16:36
Олег, через Г
0
Артем Иванов
26.08.2019 17:16
ну нельзя одной камерой нормально захватить лицо. соберите хоть приблуду из 3-4 вебок и через проги специальные обработайте. и то лучше будет
0
Сырое наверно, пока что?
0
Holden Caulfield
26.08.2019 17:52
Артем, а если лицо миниатюрное?)
0
Артем Иванов
26.08.2019 17:53
Holden, никак не связанно. одна камера по аналогии с одним глазом не может измерить глубину.
14
0
Данил, https://youtu.be/i51CizUXd7A
0
Артем Иванов
26.08.2019 18:00
Александр, у 10 яблока две камеры как раз потому что разблокировка по лицу там производится по 3д модели. но ты уверен что 10 так распостранен? и что в приложении есть поддержка двух камер?
14
0
Артем, сейчас больше смартфонов появляется с поддержкой большего количества камер. Так что рано или поздно это распространится. Для распознавания лица нужен сейчас только софт.
0
Артем Иванов
26.08.2019 18:35
Александр, отмаза. да и все равно через ПК лучше и удобнее. Телефон никогда не был и не будет машинкой для работы. только для потребления контента.
14
0
Артем, ну, грубо говоря опять же, с нужным софтом вместо айфончика достаточно будет повесить на голову хорошую камеру и *без маркеров* делать мокап. С ML это вполне возможно сейчас.
0
Артем Иванов
26.08.2019 18:38
не относится к теме поста
14
0
Артем, ну и к чему ты начал тогда писать про ПК?
0
Anya Kolebanova
27.08.2019 7:22
Артем, а как так организовать " связать" вебки, для единой командной работы ?
0
Not avalible on App Store (
0
Иван Иванов
28.08.2019 12:19
Артем, ммм ну вот ты 1 глазом не можешь распознать мимику лица? Я могу, значит это исключительно проблема DataScience
0
Артем Иванов
28.08.2019 12:38
Иван, ты воспринимаешь картинку мозгом и уже он достраивает твое впечатление от лица и соответственно его мимику. а камера интеллектом не обладает
0
Иван Иванов
28.08.2019 12:39
Артем, А по твоему что написал?