Реалистичный 3D-контент из текста: ИИ от INTEL

LDM3D- это модель латентной диффузии для 3D, которая работает за счет наличия генеративного искусственного интеллекта и создает очень реалистичный 3D-контент. Это первая в своей отрасли модель, которая может генерировать показатель глубины с использованием диффузии, что позволяет ей создавать 3D-изображения с видом на 360 градусов. Blockade Labs также принял участие в разработке.

Особенностью такой модели является то, что она позволяет генерировать 3D-изображение из текстового описания. LDM3D обеспечивает более точную относительную глубину для каждого пикселя изображения по сравнению с базовыми методами постобработки. Это помогает разработчикам значительно сэкономить время в процессе разработки сцен.

LDM3D, первая в отрасли генеративная модель искусственного интеллекта, разработана с использованием TouchDesigner - визуального языка программирования, специально предназначенного для создания интерактивного мультимедийного контента в режиме реального времени. Эта модель позволяет создавать и редактировать изображения на основе шаблона, а также проецировать результат на сферу, что создает окружающую среду, и создавать видео, основанное на движении виртуальной камеры.

Intel стремится демократизировать искусственный интеллект, чтобы сделать его преимущества доступными более широкой аудитории через открытую экосистему. В отличие от многих существующих генеративных моделей искусственного интеллекта, которые ограничены созданием только 2D-изображений, LDM3D от Intel позволяет генерировать как изображения, так и карты глубины по текстовым подсказкам.

Это исследование может вывести наше взаимодействие с цифровым контентом на новый уровень, предоставляя пользователям новые возможности для работы с текстовыми подсказками. Возможность захвата информации о глубине может существенно повысить реалистичность и погружение, что полезно для применения в различных отраслях, включая развлечения, игры, дизайн интерьера, недвижимость, виртуальные музеи и виртуальную реальность (VR).

ИИ использует все больше специалистов в разных сферах. Ранее мы рассказывали, что архитектор провел эксперимент с использованием ChatGPT. Чат-бот при помощи текстовых подсказок помог ему спроектировать 24-этажное многофункциональное здание.