Команда ComfyUI добавила поддержку модели оценки геометрии MoGe

Разработчики MoGe представили адаптированную версию модели монокулярной оценки геометрии для интеграции в экосистему ComfyUI. Инструмент позволяет пользователям генерировать карты глубины и восстанавливать 3D-структуру сцены непосредственно в рабочем процессе генеративного дизайна.

Для корректной работы расширения необходимо разместить веса модели в директории geometry_estimation внутри папки с установленным софтом. Модель выполняет оценку геометрии на основе одного входного изображения, преобразуя его в данные о пространственном расположении объектов. Это решение ориентировано на автоматизацию создания карт нормалей и глубины для последующего использования в 3D-рендеринге.

Интеграция MoGe в ComfyUI упрощает пайплайны, требующие точного понимания объема сцены, без необходимости использования внешних скриптов или стороннего ПО. Модель демонстрирует высокую скорость обработки, что позволяет использовать её в интерактивных сессиях генерации контента. Исходный код и веса доступны для загрузки в репозитории проекта на платформе Hugging Face.

Появление подобных инструментов в ComfyUI расширяет возможности локального инференса для задач компьютерного зрения. Теперь пользователи могут внедрять сложные геометрические вычисления в свои графы узлов, сокращая время на подготовку ассетов для 3D-сцен и визуальных эффектов.