Ai видео создаю
Привет всем!
Еще в прошлом 2023-м году я активно увлекался созданием видеороликов в нейросетях. Пробовал разные, Runway Gen-2 на тот период была сырая, но сразу цепляющая функционалом управления и качеством генераций (резкость, относительно минимальная странность, реалистичность). Но тут - смотря какие ваши цели и заказчики. Я нарабатывал опыт и постил ролики в социальные сети.
Например, для преобразования реального видео в мультипликацию - хорошо подходит нейросеть Kaiber - сразу замечу, как и в ситуации с нейросетями text to image, так и в ИИ (искусственный интеллект) видео - чем крупнее портрет - тем четче и с минимумом странности и помех сгенерируется видео. Но нейросети развиваются и это временно.
Если интересно какие нейросети я испытывал, какие платные, какие условно платные или просто платные - пишите в комментариях, подскажу.
Крайние пару месяцев я увлекся нейросетью Runway Gen-3, которая пока работает в альфа режиме, без инструментов управления, но качество генераиций гораздо лучше, чем в предыдущей версии. И в нейросети появился новый turbo режим генераций (быстрее генерирует) - который стоит дешевле - 25 кредитов. Пополняя счет на 10 долларов - вы получаете 1000 кредитов. Используя turbo режим я не увидел отличий от обычного альфа режима.
Для лучших манипуляций и более предсказуемого видео я пришел к схеме - генерирую картинки в нейросети Midjourney V6.1 по заданному стилю и сюжету - затем оживляю в Runway Gen-3. Замечу, что попыток может уйти больше, чем вы этого хотите, получать вы будете не всегда предсказуемый результат и это чистой воды правда. И ваши кредиты будут быстро иссякать, нейросеть не из дешевых. Но результаты меня очень радуют!
Мой новый видеоролик я сделал на тему диджея на рейв вечеринке. Сгенерировал нужные картинки в Midjourney.
Далее в нейросети Runway Gen-3 оживил изображения по своему не хитрому сюжету. Смонтировал ролик в Adobe Premiere. Музыку предварительно сгенерировал в бесплатной нейросети Udio в стиле rave.
Ai видео / Rave + Midjourney V6.1 + Runway Gen-3 творю. Музыку сгенерировал в Udio from Станислав Старченко on Vimeo.
При генерации видео - использовал часть prompts из описания к своим изображениям для Midjourney, дополнив словами движения камеры и действий. Например - FPV камера идеально облетает вокруг сцены, люди танцуют rave, диджей динамично двигается в сцене и тд.
Монтаж имеет важное значение, чтобы музыка и видео синхронизировались.
Есть нюансы как и всегда пока в ИИ генерциях - проблемы с частями тела, объектами и тд. Но смотря какие у вас цели - могут быть видео и попроще и сложнее. Вижу как активно развиваются нейросети и это становится частью моей работы вплотную. Иначе бы я оплатил пару раз нейросети, поигрался и забросил ) А это не так.
Всем продуктивного бытия!