Новый AI алгоритм позволяет создавать 3D-модели из 2D-изображений за несколько секунд

Исследователи из компании Adobe и Австралийского национального университета создали технологию, которая демонстрирует значительные результаты в области создания 3D-моделей. Они создали LRM - Large Reconstruction Model - AI модель, способную предсказывать форму 3D-объекта по одному двухмерному изображению.

Примеры изображений и финальных 3D моделей.

Предыдущие модели 3D-генерации обучались на небольших наборах данных, ориентированных на одну категорию изображений, поясняют исследователи в своей работе. Модель LRM имеет масштабируемую архитектуру и была обучена примерно на 1 млн. 3D-объектов, из наборов данных Objaverse и MVImgNet.

Сочетание высокой производительности модели и большого объема обучающих данных обеспечивает алгоритму LRM способность к созданию контента любого содержания, поясняют исследователи.

Модель способна создавать высококачественные 3D-реконструкции из различных тестовых изображений, включая реальные фотографии. Кроме того, в качестве входных данных LRM может использовать как "обычные" изображения, так и визуальные фрагменты, созданные такими AI сервисами, как DALL-E или Stable Diffusion.

По мнению ведущего автора исследования Йиконг Хонга, LRM является значительным прорывом в области 3D-реконструкции. Алгоритм искусственного интеллекта может создавать детальную геометрию из видео или фигурного изображения, сохраняя при этом сложные текстуры.

LRM может использоваться в самых разных отраслях, включая дизайн, создание развлекательного контента, видеоигр. Дизайнеры или художники смогут упростить процесс создания 3D моделей, значительно сократив временные затраты. Создание 3D-контента в быстро развивающейся индустрии стало сложной задачей, и компании, занимающиеся разработкой AI, спешат предложить потенциальные решения, такие как сервис Stable 3D, недавно представленный компанией Stability AI.

Источник: Techspot, Yicong Hong

Переведено автоматически DeepL.

13
394

Комментарии

Кружки плохие получились.

Кружки плохие получились.
mafbot
Кружки плохие получились.

ага, нужно больше чашечек, чтобы улучшить датасет и результаты :)

ага, нужно больше чашечек, чтобы улучшить датасет и результаты :)
Артем
ага, нужно больше чашечек, чтобы улучшить датасет и результаты :)

Ну или просто ещё пара фоток с других ракурсов

ага, нужно больше чашечек, чтобы улучшить датасет и результаты :)
Артем
ага, нужно больше чашечек, чтобы улучшить датасет и результаты :)

Фотограмметрия + ии будут творить чудеса скоро. Они и текстуры смогут почистить и материалы настроить. Но это не будет иметь значения, так как дешевле моделлить 3д болванки и генерировать изображение поверх них.

Фотограмметрия + ии будут творить чудеса скоро. Они и текстуры смогут почистить и материалы настроить. Но это не будет иметь значения, так как дешевл…
medusa219
Фотограмметрия + ии будут творить чудеса скоро. Они и текстуры смогут почистить и материалы настроить. Но это не будет иметь значения, так как дешевл…

Жду игры, которые используют Gaussian Splatting https://youtu.be/KaAxG...

Нахуй пусть идут)

Нахуй пусть идут)
medusa219
Нахуй пусть идут)

вижу злого 3дшника :D

Ну шо остались свободные места полы мыть, а творить будет ии

Ну и иди ебись со своим абобом!

Ну и иди ебись со своим абобом!
Hesko
Ну и иди ебись со своим абобом!