Как сделать 3D-модель по промпту локально: Qwen Image 2.1 и TRELLIS.2
Как сделать 3D-модель по промпту локально: Qwen Image 2.1 и TRELLIS.2

Как сделать 3D-модель по промпту локально: Qwen Image 2.1 и TRELLIS.2

Сделать 3D-модель по текстовому промпту можно локально: в Blender ставится бесплатный open-source аддон StableGen 0.4.0, который через ComfyUI гоняет локальные модели. TRELLIS.2 строит меш из выбранного превью, Qwen Image 2.1 текстурирует его по камерам, а Marigold V2 собирает PBR-карты. Ниже — как это работает и в каком порядке запускать.

Как сделать 3D-модель по промпту: что это и какую задачу решает

Как сделать 3D-модель по промпту — это пайплайн, где текст превращается в геометрию, а потом в текстуры, без ручной лепки и без облачных сервисов. В StableGen 0.4.0 весь цикл идёт внутри Blender: аддон бесплатный и с открытым кодом, модели работают локально через ComfyUI.

Ключевое отличие от «просто генератора картинок»: на выходе не изображение, а объект в сцене — его можно вращать, риговать и переносить в игровой движок. В демо автор доводит одного персонажа до текстурированной модели с ригом, а потом собирает из таких объектов целую деревню в Unreal.

Пайплайн состоит из трёх звеньев:

  1. Промпт → меш. Аддон показывает Preview-галерею кандидатов-изображений, вы выбираете одно, и TRELLIS.2 строит по нему меш.
  2. Текстурирование. Qwen Image 2.1 генерирует вид с каждой камеры и проецирует его на меш.
  3. PBR-карты. Marigold V2 делает из проекций albedo, roughness, metallic и normal.

Виды работы с 3D-моделью по промпту: генерация, текстуры, Masked Edit

Внутри одного пайплайна есть разные режимы, и их стоит различать, чтобы не гонять полный цикл там, где хватит правки. В 0.4.0 три рабочих сценария.

  • Генерация меша по промпту. Берёте изображение из Preview-галереи, TRELLIS.2 собирает геометрию. Это стартовая точка для любого персонажа или пропса.
  • Текстурирование по камерам. Qwen Image 2.1 рисует вид с каждой камеры, проекция ложится на меш, Marigold V2 переводит результат в PBR — получаются четыре карты: albedo, roughness, metallic, normal.
  • Masked Edit (новое в 0.4.0). Красите область на модели, описываете изменение словами — меняется только эта зона, остальная текстура остаётся нетронутой.

Masked Edit — самый практичный режим, когда базовая модель уже устроила, но нужно поправить деталь: цвет брони, надпись, материал. Полный регенерации меша при этом не требуется.

Как начать делать 3D-модель по промпту: шаги в StableGen

Старт укладывается в пять шагов, все — в Blender с установленным ComfyUI. Порядок важен: сначала выбираете картинку, только потом строите геометрию.

  1. Поставьте аддон StableGen 0.4.0 в Blender и подключите его к локальному ComfyUI.
  2. Введите промпт и откройте Preview-галерею кандидатов — выберите изображение, которое станет основой.
  3. Запустите TRELLIS.2: он построит меш по выбранному превью.
  4. Запустите текстурирование: Qwen Image 2.1 сгенерирует виды по камерам, Marigold V2 соберёт PBR-карты.
  5. Для правок используйте Masked Edit — закрасьте область и опишите изменение.
Больше разборов по ИИ и автоматизации — в канале @il_chum

Пример с цифрами: от промпта до деревни в Unreal

Пример из демо 0.4.0 показывает масштаб: один и тот же пайплайн выдаёт и отдельного персонажа, и массовку для сцены. В видео всё — реальный прогон в аддоне, а не смонтированные вставки.

Цепочка выглядит так: промпт → выбор превью → меш от TRELLIS.2 → текстуры от Qwen Image 2.1 → четыре PBR-карты от Marigold V2 → риг персонажа → перенос в Unreal → сборка деревни. То есть 3D-модель по промпту здесь не конечный артефакт, а заготовка для игровой сцены.

Такой подход экономит время именно на массовых объектах: деревня — это десятки однотипных построек и персонажей, и каждый можно собрать по той же схеме без ручной текстуризации. Если планируете гонять пайплайн на своей машине, заранее посчитайте память под локальные модели — методика есть в разборе сколько VRAM нужно для локальной LLM.

Плюсы, минусы и ограничения локальной генерации 3D по промпту

Главный плюс — контроль и отсутствие подписки: StableGen бесплатный и с открытым кодом, модели локальные, сцена не уходит в облако. Плюс интеграция с Blender и Unreal — не нужно перекидывать ассеты между сервисами вручную.

Ограничения тоже конкретные:

  • Нужен ComfyUI и локальные модели. Без настроенного окружения аддон не заработает — это не кнопка в браузере.
  • Качество зависит от выбранного превью. Меш строится по картинке из галереи, поэтому неудачный кандидат испортит геометрию.
  • Текстуры — проекция по камерам. Сложные формы и скрытые области могут потребовать Masked Edit или ручной доводки.
  • Риг не автоматический по умолчанию. В демо персонаж доводится до рига, но это отдельный этап после текстурирования.

Если сравниваете локальный и облачный путь, логика та же, что с моделями: смотрите на железо и на приватность — разбор критериев в статье локальная LLM или облачная: как выбрать по бенчмаркам.

Частые вопросы

Можно ли сделать 3D-модель по промпту бесплатно? Да. StableGen — бесплатный open-source аддон для Blender, модели TRELLIS.2, Qwen Image 2.1 и Marigold V2 работают локально через ComfyUI, платить за генерацию не нужно.

Какие модели нужны для текстурирования 3D-модели по промпту? Qwen Image 2.1 генерирует виды по камерам и проецирует их на меш, Marigold V2 превращает проекции в PBR-карты: albedo, roughness, metallic, normal.

Что нового в StableGen 0.4.0? Режим Masked Edit: закрашиваете область на модели, описываете изменение — правится только эта зона, остальная текстура не меняется.


Больше разборов по ИИ и автоматизации — в канале: @il_chum