Выпущенный в апреле этого года онлайн-сервис, работающий на основе искусственного интеллекта, который генерирует 3D-модели из загруженных видеороликов с реальными объектами теперь стал доступен на iOS в виде приложения. Полученные модели можно загрузить в формате OBJ или GLB для использования в приложениях DCC и игровых движках.

Несмотря на то, что существует множество инструментов для воссоздания 3D-моделей по фотографиям реальных объектов, причем некоторые из них
доступны бесплатно, 3Dpresso отличается от них по нескольким параметрам. Во-первых, его движок MetaRECON сочетает традиционную фотограмметрию
с "нейронными полями сияния" (NeRF) для создания и оптимизации объемного представления 3D-объекта из набора исходных изображений. Движок генерирует «более точные и стабильные реконструкции», чем обычные инструменты, особенно для поверхностей без текстуры или отражающих поверхностей, которые фотограмметрия не в состоянии воссоздать с высокой точностью. Во-вторых, 3Dpresso использует генеративный искусственный интеллект для создания различных текстурных карт для 3D-моделей, при этом пользователи могут вводить текстовые подсказки для определения внешнего вида текстур.

Процесс создания 3D-модели с помощью 3Dpresso начинается с загрузки видео 3D-объекта, снятого на смартфон или цифровую камеру, которая перемещается вокруг объекта, чтобы показать его со всех сторон. Для этого требуется около минуты видео, на котором показаны два полных 360-градусных обзора объекта: один снят лицом вперед, а другой - под углом, чтобы показать верхнюю часть объекта. Видео с более высоким разрешением дает лучшие
результаты - Recon Labs рекомендует загружать кадры в формате 4K, а на YouTube-канале 3Dpresso есть примеры подходящих роликов для реконструкции
реквизита, мебели и одежды. Затем видео обрабатывается на серверах Recon Labs, что в среднем занимает «менее 30 минут», после чего 3Dpresso высылает
по электронной почте ссылку на скачивание после завершения обработки. Полученную модель можно загрузить в формате GLB или OBJ с диффузной текстурой 1 024 x 1 024px.

Качество выглядит подходящим для использования в приложениях реального времени, включая игры и проекты дополненной реальности, после некоторой ручной очистки: видео, встроенное выше, показывает рабочий процесс в Blender. В 3Dpresso также есть функция искусственного интеллекта для текстурирования, которая позволяет генерировать различные карты текстур, вводя подсказки на простом языке, например «голубой кристалл» или «гиперреализм», чтобы определить визуальный стиль результата.

Новое приложение позволяет снимать видео объекта на iPhone и загружать его непосредственно на серверы Recon Labs для обработки.

Веб-приложение 3Dpresso основано на браузере, поэтому оно должно работать с любым стандартным веб-браузером для настольных компьютеров. В настоящее время цены основаны на кредитах, а обработка запросов на более быстрых серверах или загрузка сгенерированных моделей или текстур требует больших затрат. Бесплатные аккаунты получают 30 кредитов в месяц, что достаточно для одной загрузки видео в 3D. Подписка Lite обычно стоит 12$ в месяц и включает 150 кредитов в месяц; подписка Pro обычно стоит 28$ в месяц и включает 500 кредитов в месяц.

Приложение для iOS совместимо с iOS 16.0. Цены на подписки в приложении выше: подписка Lite стоит 17$ в месяц, а подписка Pro - 40$ в месяц. Политика авторского права дает Recon Labs не эксклюзивную лицензию на использование всего, что загружено в 3Dpresso, в своих рекламных материалах, так что это не подходит для чего-то коммерчески важного.

2024-07-22

"ди-прессо"... уже прям ощущаю.