Бесплатное дополнение AI Render для Blender
Модель Stability,ai Stable Diffusion, открытая в начале этого года и являющаяся частью новой волны художественных инструментов ИИ, генерирует 2D изображения на основе текстовых подсказок пользователя.
AI Render связывает Stable Diffusion с Blender — в самом простом случае, позволяя вводить текстовые подсказки внутри Blender, а не через веб интерфейс.
Однако, гораздо более интересным способом использования плагина является работа с 3D сценой в Blender для управления изображением, которое генерирует Stable Diffusion, в дополнение к самой текстовой подсказке.
Blender рендерит сцену, после чего использует полученный рендер для управления изображением, которое генерирует Stable Diffusion.
Как продемонстрировано ниже, это позволяет быстро набросать сцену при помощи простой геометрии, а после при помощи Stable Diffusion создать подробную иллюстрацию или стилизованное изображение.
AI Render также предоставляет простой набор элементов управления для руководства процессом генерации изображения.
Сходство изображения определяет сходство сгенерированного AI рендером изображения с оригинальным рендером, а уровень данных определяет влияние рендера на конечное изображение относительно текстовой подсказки.
Настройки Seed, Steps и Sampler регулируют соответствующие параметры в самой модели Stable Diffusion.
В своём нынешнем виде AI Render генерирует только статичные изображения, а не анимацию и также ограничен теми же разрешениями изображений, что и сам Stable Diffusion, то есть от 512 пикселей до 1024 по обеим осям.
Для его использования требуется учётная запись DreamStudio с Stability,ai, хотя в будущих релизах должна поддерживаться локальная установка.
Регистрация аккаунта бесплатна и даёт 200 кредитов для создания изображений - при стандартных настройках DreamStudio использует один кредит на создаваемое изображение, однако дополнительные кредиты стоят 10$ за одну тысячу.
DreamStudio также генерирует изображения под лицензией CC0, что ограничивает их использование в коммерческих проектах.
AI Render совместим с Blenderа на Windows, Linux и macOS. Имеется возможность бесплатно скачать скомпилированные двоичные файлы через Gumroad. Исходный код доступен под лицензией MIT с открытым исходным кодом.
Чтобы использовать его, необходимо зарегистрировать бесплатный аккаунт DreamStudio на Stability.ai.