ComfyUI в версиях 0.34.0 и новее встроила в ядро две открытые 3D-модели — Trellis.2 от Microsoft и Pixal3D от Tsinghua University и Tencent ARC Lab. Генерация 3D-модели с PBR-материалами из одного изображения стала штатной функцией инструмента: без кастомных нод, ручной сборки CUDA-расширений и лицензионных ограничений для коммерческого использования.
Что произошло
В ядро ComfyUI 0.34.0+ включены нативные ноды для двух моделей. Trellis.2 от Microsoft содержит 4 млрд параметров, генерирует геометрию и PBR-материалы из одного изображения, поддерживает эффективное разрешение до 1536³ и использует представление O-Voxel; её код и веса распространяются под лицензией MIT. Pixal3D от Tsinghua University и Tencent ARC Lab принят на SIGGRAPH 2026, построен на бэкбоне Trellis.2 и обеспечивает pixel-aligned генерацию, при которой 3D-модель строго совпадает со входным изображением. Вместе с моделями в ComfyUI вошли переработанные ноды Load, Preview и Save 3D, инструменты постобработки меша — ремеш, декация, сглаживание, заливка дыр, покраска, слияние — и полный PBR-набор: base color, roughness, metallic, UV-развёртка плюс запечённые карты normal и ambient occlusion.
Контекст
Ранее аналогичный image-to-3D пайплайн в ComfyUI собирался вручную: требовались кастомные ноды, скомпилированные CUDA-расширения — flash-attention, FlexGEMM, O-Voxel kernels, CuMesh, nvdiffrast — и точный даунгрейд окружения до PyTorch 2.6.0 и CUDA 12.4. Компоненты NVIDIA, прежде всего nvdiffrast и nvdiffrec, распространялись под некоммерической Source Code License, из-за чего коммерческое использование результатов генерации находилось в лицензионной серой зоне. Trellis.2 ранее уже выпускался Microsoft с открытым кодом и весами, а то, что Pixal3D построен на его бэкбоне, указывает на формирующуюся вокруг модели экосистему. Ключевое изменение в этом релизе — не новый научный результат, а упаковка открытых 3D-моделей в мейнстримный node-based инструмент.
Почему это важно для индустрии
Для отрасли image-to-3D перестаёт быть экспериментальной нишей с хрупкой инфраструктурой. Работающий пайплайн с PBR-материалами теперь устанавливается вместе с самим ComfyUI, а MIT-лицензия Trellis.2 и уход от компонентов NVIDIA с некоммерческой лицензией снимают два главных барьера: ручную сборку CUDA-зависимостей и лицензионную серую зону для коммерческого производства ассетов. Это сразу открывает монетизацию — каталоги товаров, игровые прототипы, библиотеки ассетов — и повышает вероятность, что нативные ноды ComfyUI станут де-факто стандартом для 3D в рабочих файлах, вокруг которого появятся новые модели на бэкбоне Trellis.2, маркетплейсы 3D-воркфлоу и SaaS-обёртки.
Почему это важно для пользователей
Читателю достаточно обновить ComfyUI до 0.34.0+, скачать веса и рабочие файлы из официальной библиотеки шаблонов — одна картинка превращается в готовый 3D-меш с PBR-материалами, UV-развёрткой и запечёнными картами normal и ambient occlusion. Исчезает необходимость ставить кастомные ноды, компилировать CUDA-расширения и подбирать окружение под конкретные версии Python, PyTorch и CUDA. Официальные туториалы по обеим моделям опубликованы на docs.comfy.org.
Что пока неизвестно / ограничения
Исходный источник не содержит бенчмарков: отсутствуют метрики качества геометрии и текстур, сравнение с другими моделями, замеры скорости генерации и требований к VRAM, поэтому выражения «две лучшие открытые 3D-модели» и «самый сильный открытый пайплайн» остаются оценкой автора публикации, а не подтверждённым фактом. Реальное качество мешей на заявленном разрешении 1536³ будет верифицировано только после независимых количественных сравнений.
Источники
- Trellis.2 and Pixal3D Are Now Native in ComfyUI (ComfyUI Newsletter, Alexis Rolland)
- ComfyUI Docs: Trellis.2 3D tutorial
- ComfyUI Docs: Pixal3D 3D tutorial
Автор
Look at AI, редакция