Что такое FLUX Dev ControlNet для ComfyUI?
FLUX Dev ControlNet — это универсальный воркфлоу для генерации изображений, работающий на модели FLUX.1-dev-ControlNet-Union-Pro-2.0. Этот специализированный воркфлоу FLUX Dev ControlNet поддерживает множество режимов кондиционирования, включая Canny, Depth, Pose, Soft Edge и Recolor, позволяя художникам направлять генерацию изображений с улучшенной структурой, потоком и стилизацией.
Интегрированный в ComfyUI, воркфлоу FLUX Dev ControlNet позволяет пользователям вводить как промпт, так и референсное изображение для точного влияния на композицию или позу результирующего изображения. Это особенно полезно для концепт-арта, дизайна персонажей и креативного прототипирования, где важно сохранение структуры или жеста.
Зачем использовать FLUX Dev ControlNet?
FLUX Dev ControlNet предоставляет:
- Мультирежимный ControlNet: Используйте Canny, Depth, Pose, Soft Edge или Recolor в качестве направляющих
- Генерация на основе промптов: Сочетание структурного контроля с творчеством естественного языка
- Работает с другими ControlNet: Может комбинироваться с другими моделями ControlNet для мультимодального воздействия
- Быстрая модульная настройка: Быстро настраивайте промпты, управляющие входы и параметры вывода через сгруппированные узлы в ComfyUI
Это делает FLUX Dev ControlNet идеальным для воркфлоу, требующих как художественного контроля, так и творческой свободы.
1 - Модели FLUX Dev
Первый раздел обрабатывает загрузку моделей для вашей настройки FLUX Dev ControlNet:
- Модель FLUX Dev: Загружает
FLUX.1-dev-ControlNet-Union-Pro-2.0 - Текстовые энкодеры: CLIP-L и опциональные варианты T5
- VAE: Стандартный автоэнкодер (например,
ae.safetensors)
Вы можете настроить текстовый энкодер или использовать различные варианты VAE в зависимости от желаемой точности вывода с FLUX Dev ControlNet.
2 - Промпты
Введите ваш промпт в этой группе для FLUX Dev ControlNet:
- Позитивный промпт: Опишите, что хотите сгенерировать (например, «Научно-фантастический городской пейзаж на закате»)
- Негативный промпт: Опишите, чего следует избегать (например, «размытое, низкое качество, артефакты»)
3 - ControlNet
Эта группа позволяет контролировать композицию или структуру выходного изображения с помощью референса в FLUX Dev ControlNet:
- Загрузите изображение в качестве референсного входа
- Выберите препроцессор: Depth, Canny, Pose или Recolor
- Установите Вес управления:
0.7хорошо подходит для большинства задач - При необходимости настройте параметры препроцессора (например, пороги краёв или сглаживание глубины)
Вы также можете использовать стек с другим ControlNet, если требуется двойное кондиционирование с FLUX Dev ControlNet.
4 - KSampler и Вывод
- Настройки сэмплера: Выберите тип сэмплера (например, DPM++, Euler и др.), шаги и сид.
- Вывод: Сгенерированное изображение появится в средстве просмотра вывода и будет сохранено в папке вывода.
На этом этапе вы можете точно настроить финальный вывод и легко просматривать итерации с FLUX Dev ControlNet.
Благодарности
Воркфлоу FLUX Dev ControlNet использует открытую модель FLUX.1-dev-ControlNet-Union-Pro-2.0, разработанную Shakker-Labs.
Ссылка на модель: https://huggingface.co/Shakker-Labs/FLUX.1-dev-ControlNet-Union-Pro-2.0
Настройка и дизайн воркфлоу являются нативными для ComfyUI и полностью модульными.
Информация о модели
- Название модели: FLUX.1-dev-ControlNet-Union-Pro-2.0
- Архитектура: Мультиусловная (поддерживает Depth, Canny, Pose, Recolor и др.)
- Диапазон веса управления: Рекомендуется
0.6–0.8 - Путь к папке:
models/controlnet/FLUX.1-dev-ControlNet-Union-Pro-2.0-fp8.safetensors - URL для скачивания: FLUX.1-dev-ControlNet-Union-Pro-2.0
- URL для скачивания FP8 : FLUX.1-dev-ControlNet-Union-Pro-2.0(fp8)
