Нейросети — конец эпохи художников? Разбираемся!

Недавно я обратился с просьбой к редакции Рендер.ру, взять мою статью в ближайший номер журнала Render Magazine, было получено согласие, при условии, что статья появится эксклюзивом и нигде, до появления в журнале, опубликована не будет. Тема выбрана актуальная и наболевшая, так что приглашаю к прочтению.

Нейросети — бомба с часовым механизмом или просто очередной инструмент, задача которого облегчить работу художникам? Художники уже пальцы в кровь стерли споря в интернете друг с другом, одни обвиняют оппонентов в истерии, другие в ответ в глупости и недальновидности, кто прав? Давайте попробуем разобраться.

Определим для себя, что такое нейросеть и что можно делать с ее помощью?

Нейросеть — математическая модель, разновидность машинного обучения, при котором программа работает по принципу человеческого мозга. Человеческий мозг состоит из нейронов, связанных между собой синапсами и передающих электрохимические импульсы. Среди основных областей применения нейронных сетей — прогнозирование, принятие решений, распознавание образов, оптимизация, анализ данных.

Мы можем поставить перед такой сетью определенную задачу, обучить ее на нужных нам примерах, это может быть все, что угодно — текст, изображения, звук. Чем более сложные и гибкие алгоритмы использует нейросеть, тем ближе выдаваемый ею продукт к тому, что может делать человек, но есть пара моментов о которых нужно знать. Нейросеть может делать свою работу невероятно быстро и в невероятных количествах, хочешь иллюстрацию, получи десятки вариантов почти моментально, для этого не нужно платить 10 художникам и ждать несколько недель.

Но с другой стороны выдаваемые сетью варианты зачастую далеки от идеала и могут содержать массу логических проблем, например с освещением или событиями в кадре, хотя нужно отдать ей должное, 1-2 из десятка вариантов вполне годятся для дальнейшей работы иллюстратора или концепт-артиста, такие изображения могут помочь найти художнику новый взгляд на вещи, помочь разработать концепцию в дизайне чего либо (перебором идей), либо вообще сделать большую часть работы за иллюстратора (если стоят достаточно абстрактные задачи), ему придется только доработать, убрать косяки, докинуть деталей, подмазать местам и все готово.

Работа нейросети Midjourney, победившей на конкурсе художников "Colorado State Fair" в США.

Может ли такая нейросеть заменить специалиста?

И да, и нет, все зависит от конкретных зач, но не нужно забывать, что работа нейронок не ограничивается картинками, она прекрасно работает со звуком, пишет музыку и многое другое, а самое страшное, что нейронки развиваются невероятно быстро и что нейросеть сможет делать через год никто точно сказать не сможет.

Результат текстового запроса — «Пещерные люди делают групповое селфи».

Что уже сейчас может нейросеть?

• Заменить актеров озвучки для второстепенных персонажей в играх, а при необходимости и всех персонажей, если стоит задача задача сэкономить деньги, получив вполне не стыдные варианты.
• Написать музыку, да пока только в определенных направлениях, но то, что выдает нейронка от Яндекса смотрится очень недурно.
• Нарисовать скажем обложку для альбома (лишив потенциального дизайнера заказа), сделать аватарку, обработать фото, сделать большие объемы однотипной работы и т.д. Главное, что для этого больше не требуется специалист и музыкант может сделать это сам, по текстовому запросу, пока это не очень удобно, но в будущем сервисы предоставят возможность делать это максимально просто и не вдумываясь в процесс.
• Заменить иллюстратора при работе над оформлением книги, если писателя устраивает абстрактное «видение» нейросетей, а зная как оформляются книги, у меня складывается впечатление, что этим уже не один десяток лет занимаются нейросети. :-)
• Возможность не только подготавливать разные варианты, давая выбор человеку над каким вариантом продолжить работу, но и вносить правки в результат используя текстовый интерфейс.
• Уже сейчас нейронки активно лезут в 3д моделирование с текстурированием, где модель делается по текстовому запросу, да пока результаты не очень, но дайте время, 2 года назад это было чистой фантастикой.
• Помните таких специалистов, которые вырезали зеленые/синие фоны и покадрово обрабатывали картинки (ротоскопинг)? Так вот такой специальности больше нет, это уже давно делают нейросети (в рамках профильного ПО). Не скажу, что это были великие специалисты, но тем не менее была такая профессия, а теперь ее нет. Нейронки уже очень плотно подкрадываются к целому спектру специальностей, пока прямой угрозы специалистам нет, но некотором людям уже тревожно.
• Сократить штат концепт художников с 10 до 2-3 человек, которые будут работать с нейронкой и на базе получаемых изображений быстро создавать большой поток концептов для проекта.
• Написание примитивных текстов диалогов для NPC персонажей в играх с последующей озвучкой нейросетью, без фактического участия человека (только на стадии контроля), как вам такой вариант?

Новые примеры появляются чуть ли не каждый день, но уже этого хватает, чтобы задуматься, как скоро нейронки начнут сокращать потребность в специалистах и снижать з/п для начального и среднего уровня художников.

Результат текстового запроса — "Портал в прошлое".

Работы без души?

Есть мнение, что работы художников имеют душу, авторский посыл и т.д., а работа нейронок это не более чем бестолковая компоновка кусков чужих изображений. Учитывая, что принцип работы нейронок идентичен принципам работы человеческого мозга и все мы просто компонуем то, что ранее где-то видели, это не более чем наивное лицемерие.

Берем зрителей, берем две абстрактные иллюстрации, одну авторскую, другую нейросети, но зрителям не говорим ничего, а просто просим рассказать о чем на их взгляд хотел сказать автор каждой из работ. Поверьте, там столько напридумывают, столько души увидят и авторских посылов, в двух руках не унести.

Задача для Midjourney была сделать реалистичный портрет девушки.

Два лагеря

Есть два лагеря, это «всепропальщики» и так называемые «близорукие оптимисты», люди которые в упор не видят проблемы, попробуем рассмотреть каждый лагерь по отдельности и понять как смотрят на ситуацию его представители. Сразу обозначу, что лично я не сторонник крайностей, но разобраться в вопросе хочется.

Всепропальщики — это люди которые с параноидальной уверенностью говорят, нам всем конец, нейросети оставят нас без работы, а профессий иллюстраторов, концепт-артистов и ряда других не будет уже в ближайшее время. Так ли это?

Нет, это не так, как бы хорошо не работали нейросети, они не смогут оставить людей без работы, по крайней мере в данный момент. Но это не значит, что уже в ближайшее время не отпадет нужда в таком большом количестве специалистов, вероятно, что специалистов с годами будет требоваться меньше и зарплаты рядовых сотрудников также будут уменьшаться, можно смело говорить о частичном вытеснении нейросетями специалистов отраслей уже в ближайшем будущем.

Несмотря на значительные успехи нейросетей в направлении того же концепт-арта, они всегда будет нуждаться в человеческом контроле, но для людей это может значить, что огромный процент художников задействованных в индустрии будет уже не нужен. Нейросети движутся к тому, что нужны будут люди для контроля и корректировки, там где был нужен целый отдел, можно будет обойтись узкоспециализированной нейросетью, одним-двумя художниками и одним лидом на контроле. Но это в будущем, пусть и ближайшем, но не прямо сейчас.

Профессии никуда не исчезнут, но людей потребуется меньше, платить им тоже будут меньше, нейросети обесценят труд многих специалистов. Благодаря нейросетям, для работы с большим списком задач понадобятся менее квалифицированные работники и обучать таких работников будет значительно проще и быстрее.

Профессии концепт-артиста или иллюстратора никуда не исчезнут по щелчку пальцев, будет происходить плавное вытеснение и переучивание специалистов, через 5 лет, будут другие требования, другие задачи, это будет очень плавный процесс, никто не придет и не выгонит художников на улицу, сказав, что их работу теперь будет делать нейронка. Просто где-то ослабнет спрос, где-то уменьшится численность, зарплаты, требования и люди сами перераспределятся и переучатся.

Перед нейросетью Crayon поставили задачу дорисовать изображение.

Убивает ли это профессии? В каком-то смысле да, кузнецы живы до сих пор, но если раньше кузнец был объективно нужен в каждой деревне, то сейчас это очень редкая и специфическая профессия, например мертвые языки, да на них кто-то говорит, где-то даже учат этому, но время этих языков прошло.

Где специалисты по ротоскопингу? Их нет, нейросети решают эти задачи быстрее и лучше. Где дизайнеры сайтов? Они на месте, просто 90% задач теперь можно решить через сервис который предложит самому собрать сайт в удобном конструкторе, используя массу шаблонов и сделать это может человек который никогда этим не занимался, через этот сервис зарегистрировать сайт и там же его разместить, такие сервисы плавно и незаметно выкорчевали массу профессий, но опять же не моментально, просто люди поняли, что на этом больше нельзя заработать хороших денег, переучились и ушли. Это негативный процесс для специалистов, но неизбежный и достаточно медленный, он займет годы и уверен не будет травматичным.

Нейросеть от WomboArt — она может делать изображения по текстовому запросу в выбранном вами стеле — синтвейв, фэнтэзи, стимпанк, психоделика, студия «Гибли» Хаяо Миядзаки и другие.

Близорукие оптимисты — это люди уверенные, что нейросети станут еще одним инструментом который возьмет их за ручку и поведет в светлое будущее, где работать нужно меньше, платить будут больше, а нейронки возьмут на себя всю рутину, оставив людям только творчество. Их основной аргумент, это то, что с приходом технологий и роботов на производство, специалисты никуда не исчезли и сверщики по прежнему нужны.

Все эти доводы выеденного яйца не стоят, если излечиться от близорукости и попытаться видеть хотя бы немного дальше собственного носа. Помните такую специальность как кабрюраторщик? Это хлебная работа, которая по словам наших отцов будет кормить не одно поколение людей…вот только они не знали про инжектор, да, сейчас еще можно найти людей разбирающихся в вопросе, техника еще есть и какое-то время будет, но что будет через 10 лет? Когда карбюраторные решения тихо догниют в гаражах? Вы вдумайтесь, половина читающих этот материал никогда не ездила на карбюраторной технике и у 99% читающих такой техники уже никогда не будет.

Арт-дир одного из офисов Ubisoft, Эрик Белльфель, создал с помощью нейросети звездолёты сочитающие в себе стилистику Да Винчи и современные технологий.

Нейросети занимаются обзвонами и спамят людям звонками, даже в моем телефоне трубку поднимает нейросеть «Олег» от Тинькова, потому, что я устал бороться с рекламой и мошенниками и вы знаете что? Она хорошо справляется, уверен так же как и другие варианты ассистентов от других сервисов.

Это эволюция, это нормально, вот только все процессы в IT индустрии протекают значительно быстрее, чем в мире за окном и если некоторым специальностям нужны десятки лет, чтобы исчезнуть или потерять привлекательность, то в IT этот процесс может сократиться до десятилетия или даже нескольких лет.

Рынок определяет, что будет жить, а что нет и он не выбирает лучшие решения, он выбирает самые удобные и дешевые, как только нейросети предоставят возможность экономить на людях, это будет незамедлительно сделано. Нейросети нашего времени не конкуренты людям, их конкуренты узкоспециализированные нейросети завтрашнего дня.

Коты рыцари от нейросети Stabble Diffusion.

Узкоспециализированные нейросети и их операторы

Здесь в обсуждениях я встретил такую хорошую формулировку, как оператор нейросети — специалист который сам по себе не имеет хороших навыков к рисованию, но имеет общие понятия о цвете/свете, перспективе, анатомии и т.д., может работать с нейросетью, правильно формулировать запросы и корректировать результат.
Вероятно обучить такого специалиста будет значительно дешевле быстрее, конечно при условии, что он обладает нужным изначальными данными, это будет тот же художник с развитым чувством стиля, творческая личность, но на минималках, возможно даже не умеющая рисовать. Порог вхождения в такую специальность будет очень низким, как и ценность этих специалистов, а следственно и заработная плата. Но, Лиды и Сеньоры будут нужны всегда и будут получать свои большие деньги, хотя вероятно так много специалистов этого класса нужно уже не будет.

Собаки рыцари от нейросети Stabble Diffusion.

Да, пока нет нейросетей которые смогут обеспечить нужный уровень контроля над изображением и удобства взаимодействия с ними, но это вопрос времени. Постепенно разработчики сервисов на базе нейросетей придут к выводу, что невозможно создать универсальный инструмент и будут использовать специализированные нейросети для определенных задач, которые будут по разному обучаться и иметь различный набор алгоритмов для своей работы. Отдельная нейросеть для работы с концептами, отдельная для иллюстраций, для различных задач моделирования, анимации и т.д.

Появятся экосистемы и специализированные интерфейсы для удобной работы с нейросетями, возможно на базе VR и AR и все это не в запредельно далеком будущем, а уже совсем скоро. Важно не забывать, что нейросети наступают по всем фронтам, а не только на художников. Правда Алиса?

Что говорит бизнес?

Я готовил интервью, где собирался пообщаться не с художниками, а с руководителями студий, чтобы узнать, что на этот счет думают те, кто зарабатывает на работе художников. К сожалению, большинство покинуло страну и им сейчас не до общения на тему нейросетей, но кое какие наработки остались и выводы не утешительные.

Вкратце ситуация такова (текст расшифрован с аудиозаписи) — "Я как бизнесмен с огромным удовольствием избавлюсь от большого числа людей, люди это проблема, они болеют, они увольняются, у них рождаются дети, они переезжают, им нужно платить зарплаты, с них платить налоги, взносы, обеспечивать им комфорт в офисе, их нужно искать и держать целый отдел HR специалистов. Сплю и вижу, когда я смогу сократить студию до небольшого офиса, где я буду платить аренду за облачные вычисления и за доступ к сервисам нейросетей, которыми будет заниматься штат в 5-10 раз меньше чем сейчас. Идеально если еще и на удаленке, а на выходе я будут получать результат аналогичный тому, что сейчас, только значительно быстрее. Смогу брать больше проектов, а тратить на офис и сотрудников значительно меньше. Жду когда это наконец будет возможно.
Думаю как только нам смогут предложить что-то стоящее, процесс перехода будет стремительный, но пока сам рынок не готов, те требования которые он выдвигает, особенно в плане бесконечных правок труднореализуемы, но я уже сейчас рассматриваю нейросети для работы, на мой взгляд должен вот-вот произойти какой-то качественный скачек и все пойдет как нужно."

Вот кто будет решать нашу судьбу, не разработчики, не нейросети, а люди которым выгодно, люди которые держат бизнес, которые владеют деньгами и платят их нам. Эти люди сделают все, чтобы приумножить деньги, рынок порешает.

Нейросеть midjourney рисует в стилистике "Звездных войн".

Shutterstock — гром среди ясного неба!

Как только в голове что-то упорядочивается и ты понимаешь, как все это вероятно будет работать и где в этом мире твое место, на глаза попадается очередная новость, щедро подливающая бензина в огонь.

Согласно сообщению Gizmodo , Shutterstock — "один из самых популярных веб-сайтов с изображениями — планирует продавать изображения, созданные искусственным интеллектом. Shutterstock будет генерировать изображения с помощью DALLE-2 и компания заявляет, что компенсирует создателям, чьи изображения используются для создания изображений."

Да, вероятно будет, если вы через суд докажите, что там ваша работа, вам скинут 10$. Вот пример очередного вытеснения и удара по художникам, наша проблема в том, что мы не знаем откуда поступит очередной удар, а вся фишка в том, что с очередным развитием нейросетей, удар поступит сразу со всех сторон, потому, что нейросети везде.

Нейросеть midjourney.

Кто мог придумать такое, кто ожидал таких выходок от Shutterstock? Просто рынок порешал, мне бы в голову не пришло, а если реализация станет удачной? Это тут же подхватят остальные, возможно уже в ближайшем будущем появится такая профессия, как «художник шаблонов для нейросетей», нарисуйте изображения рук, поз, мимики в разных стилях, для обучения нейросети, получите свою копейку, а обученная на них нейросеть закроет все остальные потребности. Как вам реальность где не нейросеть служит художнику инструментом, а художник случит ей как инструмент для рисования шаблонов?

Что, нужно успокоиться и выдохнуть? Нужно вспомнить, что сварщики никуда не исчезли и все еще нужны, несмотря на то, что заводской "сварщик-автомат" придуман много десятилетий назад? Кого еще нам вспомнить, чтобы стало спокойнее? Кузнецов, гончарных дел мастеров?

Magic3d текстовому описанию создает текстурированную 3д модель и позволяет при помощи текста изменять часть сгенерированной модели на другую.

Нейросеть eDiffi, превращает мазню (с текстовым описанием) слева в то, что мы видим справа.

Выводы

На самом деле действительно нужно успокоиться, это прогресс и его не остановить, можно только успеть подготовиться и выбрать нужную позу, в которой он будет пользовать тебя наименее травматично.

Кто читал фантастов Питера Уоттса и Пелевина над нейросетями не смеется. Для тех кто хочет понимать будущее нейросетей и их место в мире, я подготовил список книг к прочтению:

- «Ложная слепота» (Питер Уоттс),
- «Морские звезды» (Питер Уоттс),
- «Transhumanism Inc.» (Пелевин),
- «KGBT+» - продолжение трансгуманизма (Пелевин),
- «iPhuck 10» (Пелевин).

Всем спасибо, делитесь своими мыслями и взглядами в комментариях.