Render.ru
Поддержать

Помогите, пожалуйста, сделать липсинг персонажу.

Рейтинг
62
Мне нужно сделать простую сцену с персонажем через секвенсор. В UE 5.8 есть metahuman. судя по видеоурокам, штука офигенная. Но, во первых, у меня персонаж стилизованный. И анатомическая точность произнесения звуков мне не нужна.

И, второе, самое главное - скелет персонажа mixamo. Я использую скаченные анимации mixamo, потом их смешиваю, для получения нужной последовательности движений. Соответственно, metahuman мне уже не подходит, как я понимаю. у персонажа настроены лицевые морфы.
Есть расширение Oculus Lipsync. Но просто так у меня его установить не получилось. ИИ подсказывал, что надо visual studio устанавливать для этого. Но это уже какие-то дебри. Да и когда поставила UE 5.8, он уже не подходит. metahuman runtime платный.

Если делать в Blender, то тоже нифига. Есть аддон lip sync. Только он не работает автономно. А это уже проблемы с КВН-ами, которые у меня на компе почему-то не работают. Спасибо, хоть на телефоне работают. Только здесь он мне не поможет.

В беседе с нейронкой всякий раз приходим к ее совету делать липсинг при помощи Audio Synesthesia. В общих чертах ИИ объяснил, что он мне предлагает делать. Типа, Audio Synesthesia будет анализировать звучащие частоты. И, в соответствии со звуковым тоном, будут включаться соответствующие морфы. Попросила найти видеоуроки по данному способу - ничего нет. Так как никто так не делает.

Ну и самый последний метод - вручную в секвенсоре вставлять соответствующие изменения мимики в такт речи. Ну, это как пахать землю мотыгой, когда под рукой есть, по идее, беспилотный комбайн....