Цифровые, но настоящие: как мы делаем танцевальные mocap-анимации
Когда мы решили сделать это видео, вопрос был не в том, что показать - а зачем. За годы работы с захватом движения мы хорошо усвоили: mocap - это вовсе не «надеть костюм и нажать запись». Это не кнопка, не магия, не автоматизация. Это постоянный поиск, живая работа, творчество, в котором технология - лишь средство, а не замена.
Формат making of даёт шанс показать не глянцевый результат, а сам процесс: сомнения, эксперименты, попытки и находки. Мы часто сталкиваемся с тем, что mocap воспринимают как технологию, которая делает всё сама. Но это не так. Mocap - это инструмент. Без артиста он мёртв. Он не заменяет выразительность - он помогает её раскрыть.
Мы постоянно экспериментируем: с движением, стилями, техниками. И делаем это открыто - чтобы было видно, как цифра и реальное движение могут сосуществовать. Это видео - ещё один шаг в нашем большом проекте, где мы соединяем digital-эстетику с настоящей, «живой» хореографией. Здесь у нас была особая цель: показать, что персонажи могут быть реальнее, чем просто цифровые аватары. Realer than more - как мы это назвали.
Нам иногда задают вопрос: «А зачем всё это, если есть ИИ и генерация движений?» Ответ простой: ИИ может копировать. Повторять. Собирать. Но он не чувствует музыку. Не проживает эмоции. Он не танцует. Это делает артист. В нашем случае - Лесси. Её многолетний опыт в танце и работе с mocap, плюс мои часы ручной анимации - это и есть та разница, которая делает результат живым. Настоящим. Тем, чем можно гордиться.
Вот почему мы собрали это видео. Оно не про эффект и не про технодемку. Оно про поиск. Про движение. Про точность. Про ощущение.
Про то, как из цифры рождается что-то живое.
Концепция и идея
Обычно, когда мы начинаем новый проект, вдохновение приходит из самых разных мест - иногда это музыка, иногда какой-то конкретный стиль танца, иногда просто эмоция, настроение или культурный вайб. В этом случае всё совпало сразу. Нам хотелось создать что-то особенное, современное и в то же время искреннее, чтобы сразу было видно: здесь важен не просто набор движений, а именно их подача и характер.
Почему именно танец? Мы много раз убеждались, что танец - один из самых честных и прямых способов выразить эмоцию. В нем сразу видно неискренность или недостаток подготовки. И наоборот - если движение отточено и наполнено личным отношением, оно сразу цепляет зрителя, даже если он далёк от танцевальной культуры.
Выбор стиля тоже неслучайный. Нам всегда были близки направления, где есть и сила, и чувственность, и свобода - то, что мы условно называем «латинским вайбом». Именно такие движения прекрасно смотрятся в mocap-анимации: они пластичны, выразительны и наполнены энергией. Но самое главное - они реальны. В них легко поверить, и за ними интересно наблюдать.
Помимо творческой задачи, это видео для нас было и поводом поздравить Xsens с важной годовщиной. Мы используем их технологии уже много лет, и можем уверенно сказать - это одна из немногих систем, которые позволяют точно передавать нюансы движений и ощущение реальности танца. Нам хотелось на деле показать, насколько мощным и точным инструментом является mocap-система Xsens, когда за ней стоит опыт и живой артистизм.
Наша главная идея при создании этого видео звучит как «Digital? Maybe. But realer than more». Мы верим, что даже цифровые персонажи могут выглядеть настолько живыми, что зритель забывает о технологиях и видит перед собой реального человека, его чувства и эмоции. Для нас это не просто слоган, а принцип работы: каждый раз создавать не просто красивые движения, а движения, которые говорят, выражают что-то настоящее.
Именно это и стало отправной точкой всей концепции этого ролика. Мы хотели продемонстрировать, что сочетание mocap-технологий и реального, честного танца способно создавать что-то уникальное. Вроде бы и digital, но по-настоящему живое и настоящее.
Рабочий процесс
Когда мы начинали запись этого видео, мы уже знали, что перед нами стоит интересная, но непростая задача. Обычно, если нужно показать выступление нескольких танцоров, в mocap записывается несколько человек одновременно. Но в нашем случае артист был всего один - Лесси, и вся ответственность легла на неё и на меня, уже на этапе постобработки. Нам предстояло не просто записать движения, но и передать индивидуальную харизму и подачу каждого из трёх персонажей, которых вы видите на экране.
Мы разделили запись на несколько частей. Для каждого танцора нужно было создать 4 отдельных анимации, чтобы в итоге получить полноценное и разнообразное выступление. В общей сложности мы получили 12 mocap-файлов: для каждого из персонажей - по одной индивидуальной проходке с яркими финальными точками, один танцевальный легкий вайб, одну совместную синхронную проходку и, конечно, общий танцевальный синхрон. Всё это Лесси придумывала самостоятельно, разрабатывая хореографию, подбирая позы и акценты в движениях.
Небольшие перестановки танцоров и их взаимодействие между собой стали одной из ключевых творческих задач. Нам хотелось, чтобы каждый персонаж отличался не только визуально, но и пластикой, характером и настроением. Это требовало от Лесси постоянно переключаться и адаптировать движения - одна холодная и строгая, другая милая и юная, и третья уверенная и слегка дерзкая. А я уже после записи отвечал за то, чтобы эти различия стали максимально чёткими и ощутимыми.
Обычно в таких проектах мы используем и mocap-перчатки, чтобы максимально точно передать движения кистей рук. Но в этот раз перчаток у нас не было. Вместо этого я заранее подготовил собственную библиотеку поз для рук, чтобы потом вручную смешивать их с основной анимацией тела. Это была не самая простая часть работы, потому что движения кистей очень важны для полной передачи характера танца, и мне приходилось буквально вручную создавать правильное настроение каждой позы.
Что касается музыки, то здесь нам хотелось создать что-то своё, что-то тематическое и отражающее идею проекта. Мы создали композицию, которая стала дополнительным инструментом, помогая передать эмоциональный настрой каждого танцора и подчеркнуть переходы между ними. Музыка тут точно не была фоном,а стала неотъемлемой частью хореографии, подстраивалась под движения и подчёркивала их, делая картинку более живой и выразительной.
Это была огромная, кропотливая работа, но именно в таких задачах мы и раскрываемся полностью. В итоге, после всех трудностей, правок и доработок, получилось именно то, к чему мы стремились: показать настоящую хореографию, настоящий танец, живой и выразительный, но созданный через mocap-технологии.
От mocap к анимации
Очень часто можно встретить мнение, что mocap - это что-то вроде «волшебной палочки», после взмаха которой персонажи оживают сами по себе. В действительности же запись движений - это лишь половина всей работы, а иногда даже меньше. Основной этап начинается после того, как мы снимаем костюм и садимся за компьютер. Здесь mocap превращается в полноценную анимацию, которая и будет выглядеть по-настоящему живой.
Почему это важно? Всё просто. Mocap - технология, которая фиксирует реальные движения артиста, но она не способна понять замысел, режиссуру и все мельчайшие нюансы, которые так важны для конечного восприятия анимации. Идеальный mocap без ручной доработки не существует, потому что человек - не робот, и ни один захват движения не способен полностью избежать небольших неточностей или искажений. Иногда это просто лёгкие сбои траектории, иногда - неидеальные точки контакта с поверхностью, а иногда и вовсе моменты, которые невозможно записать идеально с первого раза, особенно если танцор один, а персонажей несколько.
В нашем конкретном случае таких моментов хватало. Например, отдельная задача - точно передать контакты персонажей друг с другом или с окружением. Так как записывали мы только одного актёра (Лесси), то многие точки контакта и финальные позы мне приходилось дорабатывать вручную, буквально покадрово, чтобы всё выглядело точно и естественно.
Именно поэтому чистка и ретаргет - это неотъемлемый этап работы с mocap-анимацией. Каждый кадр просматривается и дорабатывается: здесь поправить траекторию ноги, здесь скорректировать положение рук, здесь добавить выразительность движения головы и взгляда. Всё это - мелочи, но именно из них и складывается общее ощущение живого, качественного танца.
Также важно отметить, почему мы принципиально не доверяем эту работу AI или автоматизированным решениям. Дело не только в том, что автоматизация не видит художественного замысла. Искусственный интеллект пока не понимает, какие эмоции мы хотим вложить в каждое движение, какие акценты важны именно в этом конкретном моменте музыки или сцены. Автоматическая очистка движения может стереть именно те небольшие «несовершенства» и «неточности», которые делают танец живым и естественным.
В нашем подходе к работе с mocap есть важный принцип: сохранить баланс между технической точностью и живостью артистического исполнения. И на сегодняшний день только ручная доработка анимации позволяет добиться этого на 100%. Да, это трудоёмко, да, это занимает много времени, но именно это и делает нашу работу уникальной и ценной.
И каждый раз, когда мы заканчиваем очередной этап обработки, я убеждаюсь: несмотря на все технические достижения, анимация - это всегда про внимание, мастерство и, конечно же, живого человека за экраном, который придаёт движениям настоящую глубину и смысл.
Отдельным и важным этапом стала симуляция одежды для каждого персонажа. Мы решили дать каждому танцору собственное похожее, но уникальное платье, чтобы подчеркнуть их индивидуальный стиль и характер движений. Все персонажи хоть и похожи, но все таки немного отличаются, кто то выше, у кого-то ягодицы крупнее, и другеи части тела. Теоретически, можно было бы использовать анимацию одного персонажа для всех симуляций, но хотелось больше уникальности, которую, возможно, почти никто не заметил.
Для симуляции ткани я использую Marvelous Designer - и в этот раз особенно оценил обновлённый режим GPU-симуляции, который недавно стал стабильно работать. Теперь, если во время работы что-то нужно поправить - например, изменить длину, форму платья или его поведение в движении - я могу сделать это за считанные минуты и сразу увидеть результат. Раньше подобные изменения занимали немало времени, но теперь каждая новая итерация симуляции занимает всего 10–15 минут. Это позволяет пробовать разные варианты и добиваться идеального сочетания движения тела и ткани.
Одежда, на мой взгляд, один из ключевых элементов, который добавляет персонажу живости и реализма. Даже самый точный mocap будет выглядеть неполным, если одежда ведёт себя неправдоподобно. Поэтому мы уделяем симуляции ткани не меньше внимания, чем движению персонажей.
Стиль и визуал
Когда дело касается визуального стиля наших проектов, мы всегда стараемся найти тот баланс, при котором персонажи выглядят ярко, выразительно, и в то же время не теряют ощущения реальности. В этом проекте мы сразу остановились на направлении, которое условно можно назвать стилизованным реализмом. Это такой визуальный язык, где персонажи имеют пропорции немного утрированные, усиленные, но не настолько, чтобы это превратилось в карикатуру или мультяшность.
Наши персонажи имеют слегка удлинённые ноги, более выразительные черты лица с большими глазами, но это совсем не аниме-эстетика. Скорее, это намеренная игра с пропорциями, благодаря которой движения и позы выглядят более выигрышно и эффектно, особенно когда речь идёт о танце, подиумных проходках или моде. Мы намеренно выбирали такие пропорции, потому что именно они позволяют подчеркнуть красоту и выразительность движений, сделав каждый жест и каждую позу ещё ярче и запоминающейся.
Текстуры и материалы персонажей при этом будут максимально естественными и приближёнными к реальным, без лишнего глянца или "пластиковости". Мы считаем, что даже стилизованные персонажи должны выглядеть так, чтобы зритель мог поверить в их существование. Это важно не только для красоты картинки, но и для более глубокого восприятия движения и эмоций.
Сочетание такого визуального стиля с качественной mocap-анимацией становится особенно мощным инструментом. Когда персонажи выглядят одновременно чуть-чуть фантастично и вполне реально, их танец и движения воспринимаются гораздо глубже. Эта небольшая стилизация в пропорциях позволяет усилить определённые моменты танца: движения становятся выразительнее, позы - чётче, акценты - заметнее. В результате получается картинка, на которую хочется смотреть снова и снова, потому что она одновременно и реальна, и по-хорошему «другая».
Именно это настроение мы и хотели передать нашим видео: баланс между фантазией и реализмом, современным танцем и качественной стилизацией. Это та самая грань, на которой наши персонажи становятся не просто техническим воплощением движений, а живыми героями со своей харизмой и характером.
Конечно, пришлось столкнуться с физическими ограниченимями. Например папять видеокарты. RTX 3090 24 GB с трудом хватает на трех персонажей, с алембиками платьев, динамическим грумом, и окружением. Часто Unreal Engine просто вылетал. Ну и плюс большое разрешение, большое количество сэплов на пиксель так же являлись потолком, либо тратили огромное количество времени. Поэтому пришлось ограничиться 720p, до 256 сэмплов, в общих сценах отключить динамику волос у двух персонажей, чтоб все-таки получить результат. Я пока не нашел способа оптимизировать этот момент.
В итоге я портатил дня трех или четырех суток на весь рендер. Ипользовал Neat Video и Topaz Video AI для улучшения качества и увеличения разрешения. Да, идельного результата я пока не получил в этом проекте, но я не мог его не закончить. В первую очередь, я хотел показать анимацию. А рендер мы добьем.
Итоги и размышления
Каждый раз, заканчивая очередной этап работы, мы с Лесси невольно задумываемся о том, зачем мы всё это делаем. И каждый раз ответ приходит сам собой: это важно, потому что это по-настоящему наше. Потому что в этом нет компромиссов, нет попыток "сделать на скорую руку". В каждом таком видео есть наши собственные эмоции, взгляды, поиски и даже ошибки, из которых мы потом делаем выводы.
Мы верим, что именно такой подход - искренний, внимательный к деталям, не пытающийся найти лёгких путей - и делает результат по-настоящему живым и значимым. Каждая наша работа - это попытка выйти за пределы просто «цифрового продукта». Это стремление создать что-то, что останется не только у нас в портфолио, но и в памяти тех, кто это увидит.
Кроме того, этот проект для нас стал отличной возможностью показать, на что действительно способна технология mocap от Xsens. В этом году компания празднует свою 25-ю годовщину, и нам было особенно важно не просто поздравить их на словах, а показать конкретными действиями, насколько сильно их технология способна раскрыть потенциал цифровых персонажей. Именно поэтому мы вложили в это видео не только профессионализм, но и эмоции, опыт, энергию, и свой собственный взгляд на то, каким должен быть современный mocap-танец.
Конечно, этот проект - это не финал, а очередной шаг вперёд. Мы уже ясно представляем, куда хотим двигаться дальше. И хотя пока мы не называем это прямо, наш взгляд всё чаще обращается к культуре и эстетике, где движение - это язык общения, где музыка и танец живут буквально на улицах, где солнце и энергия чувствуются в каждом движении. Мы думаем, что именно такое направление позволит нам не просто создавать контент, а делать нечто большее: живые истории, которые можно почувствовать через экран.
Для нас mocap-анимация - это не про технологии сами по себе. Это про возможность говорить через движение, быть честными в своих выражениях, создавать то, что останется. Именно поэтому мы продолжаем работать, искать, учиться и двигаться вперёд. И мы очень надеемся, что вы останетесь с нами на этом пути - потому что впереди ещё много интересного, нового и настоящего.
А сейчас - ваш ход. Что вы думаете о подходе к mocap, который требует ручной работы и творческого подхода? Согласны ли вы с тем, что настоящая анимация должна быть больше, чем просто технология? Поделитесь своими мыслями и давайте вместе двигаться дальше!