FLUX.2 [klein] 4B и 9B | Ультрабыстрый генератор изображений Flux

FLUX.2 [klein] 4B и 9B — быстрый, унифицированный текст в изображение и редактирование изображений в ComfyUI

Этот рабочий процесс объединяет FLUX.2 [klein] 4B и 9B в единый, готовый к производству граф ComfyUI для быстрого создания и точных правок. Он предназначен для интерактивной работы: напишите подсказку для создания с нуля, добавьте одно или два эталонных изображения для изменения стиля или содержания и повторяйте с низкой задержкой. Включены как базовые, так и дистиллированные варианты, чтобы вы могли балансировать максимальную точность и скорость.

Если вы работаете над разработкой внешнего вида, визуализацией продукта или креативным направлением, FLUX.2 [klein] 4B и 9B предоставляют вам чистое преобразование текста в изображение, редактирование с одной ссылкой и композитинг с несколькими ссылками в одном последовательном интерфейсе. Подграфики инкапсулируют модельные коммуникации, чтобы вы могли сосредоточиться на подсказках и ссылках, пока график управляет планированием, управлением и декодированием.

Основные модели в рабочем процессе Comfyui FLUX.2 [klein] 4B и 9B

• Black Forest Labs FLUX.2 klein 4B FP8. Основной UNet для компактного, быстрого создания и редактирования. Используйте базу для преобразования текста в изображение или редактирования, когда вам нужно сбалансировать качество и скорость 4B. black-forest-labs/FLUX.2-klein-base-4b-fp8
• Black Forest Labs FLUX.2 klein 4B FP8 дистиллирован. Дистиллированная контрольная точка, оптимизированная для еще более низкой задержки при преобразовании текста в изображение и редактировании. black-forest-labs/FLUX.2-klein-4b-fp8
• Black Forest Labs FLUX.2 klein 9B FP8 базовая. UNet с большей емкостью, который улучшает глобальную согласованность и надежность редактирования. Идеально подходит, когда сцены сложные или необходимо сохранить идентичность/геометрию. black-forest-labs/FLUX.2-klein-base-9b-fp8
• Black Forest Labs FLUX.2 klein 9B FP8 дистиллирован. Дистиллированный 9B для более быстрого выполнения при сохранении большинства преимуществ 9B для редактирования и стилизации. black-forest-labs/FLUX.2-klein-9b-fp8
• Comfy VAE для FLUX.2. Общий VAE, используемый для кодирования ссылок и декодирования выводов. Comfy-Org/flux2-dev
• Кодировщики текста Qwen для подсказок. Меньший кодировщик для маршрутов 4B и кодировщик с большей емкостью для маршрутов 9B, чтобы соответствовать масштабу модели. Comfy-Org/flux2-klein и Comfy-Org/flux2-klein-9B

Как использовать рабочий процесс Comfyui FLUX.2 [klein] 4B и 9B

Рабочий процесс организован в четкие группы, которые вы можете запускать независимо. Каждая группа оборачивает подграф, так что основная логика остается неизменной, независимо от того, используете ли вы 4B или 9B, базовый или дистиллированный. Подсказки управляют изменениями, которые вы хотите, в то время как одно или два эталонных изображения направляют сохранение содержания, стиля или компоновки.

Текст в изображение – 4B

• Используйте Текст в изображение (Flux.2 Klein 4B) (#75), когда вам нужно быстрое создание идей из подсказки. Подграф кодирует ваш текст, создает подходящее латентное полотно и выполняет выборку с планировщиком FLUX.2 перед декодированием в RGB. Начните здесь для первоначальных идей или когда у вас еще нет ссылок. Сохраните результаты с узлом сохранения ниже по потоку.
• Переключитесь на Текст в изображение (Flux.2 Klein 4B Distilled) (#77), чтобы приоритизировать скорость. Этот путь повторяет базовый маршрут, но использует дистиллированную контрольную точку для снижения задержки. Он хорошо подходит для быстрых исследований подсказок или пакетного создания идей.

Редактирование изображения – 4B базовое

• Редактирование изображения (Flux.2 Klein 4B) (#81) принимает одно эталонное изображение плюс подсказку. Внутри эталонное изображение кодируется в VAE и превращается в условие, чтобы редактирование учитывало композицию и идентичность. Подсказка описывает изменения, которые вы хотите, например, замену фона, изменение освещения или замену аксессуаров. График автоматически подстраивает латент под ваш эталон и декодирует согласованное редактирование, готовое к сохранению.
• В той же группе предоставлен пример с несколькими ссылками. Подайте две ссылки, когда вы хотите перенести цвет, логотипы или текстуры из одного изображения, сохраняя содержание другого. Подграф смешивает оба условия для управляемой инъекции стиля.

Редактирование изображения – 4B дистиллированное

• Редактирование изображения (Flux.2 Klein 4B Distilled) (#84) повторяет путь редактирования 4B базы, но использует дистиллированную модель 4B для снижения задержки. Это полезно для быстрых итераций "что если", когда вы ожидаете подталкивать подсказки и сравнивать несколько вариантов.
• Дополнительные дистиллированные подграфы редактирования 4B (#92, #93) демонстрируют стилизацию с одной и несколькими ссылками. Используйте их, когда вам нужна быстрая обратная связь с надежным сохранением позы и кадрирования субъекта.

Редактирование изображения – 9B базовое

• Редактирование изображения (Flux.2 Klein 9B) (#100) – это маршрут редактирования с большей емкостью. Он следует той же схеме кодирования-условия-выборки-декодирования, но использует базовый UNet 9B и связанный текстовый кодировщик для улучшения глобальной согласованности в сложных сценах. Это рекомендуемый путь для сложных структурных правок или точного сохранения идентичности.
• Вариант с несколькими ссылками 9B базы Редактирование изображения (Flux.2 Klein 9B) (#101) позволяет сохранить компоновку из эталонного изображения 1, одновременно перенося брендинг или материалы из эталонного изображения 2. Используйте его для перекрашивания продукта, размещения логотипа или гармонизации стиля.

Редактирование изображения – 9B дистиллированное

• Редактирование изображения (Flux.2 Klein 9B Distilled) (#109) обеспечивает более быстрый цикл редактирования 9B, идеально подходящий для интерактивного художественного направления. Вы сохраняете большую часть согласованности 9B с более коротким временем выполнения.
• Вариант с несколькими ссылками дистиллированного Редактирование изображения (Flux.2 Klein 9B Distilled) (#110) позволяет композитные рабочие процессы, где содержание и стиль поступают из отдельных ссылок. Это особенно эффективно для последовательного перекрашивания и контролируемой передачи стиля.

Сохранение результатов

• Каждый маршрут заканчивается узлом SaveImage, уже помеченным в зависимости от пути, чтобы вы могли запускать несколько групп и сохранять результаты организованными.

Основные узлы в рабочем процессе Comfyui FLUX.2 [klein] 4B и 9B

Текст в изображение (Flux.2 Klein 4B) (#75)

• Роль: Генерирует изображения исключительно из текста на компактной модели 4B. Внутренне сочетает планировщик FLUX.2 с управлением CFG и декодирует с общим VAE.
• Настройка: Отрегулируйте подсказку и noise_seed для исследования. Если вы увеличиваете размеры полотна, рассмотрите возможность переключения на маршруты редактирования 9B для дальнейших улучшений.

Редактирование изображения (Flux.2 Klein 4B) (#81)

• Роль: Редактирование с одной ссылкой, сохраняющее компоновку и идентичность при применении изменений, управляемых подсказкой. Кодирует ссылку в латентное условие и автоматически подстраивает размер латента под ввод.
• Настройка: Используйте краткие, целенаправленные подсказки, которые указывают, что изменяется, а что должно остаться неизменным. Для агрессивных изменений стиля добавьте негативную подсказку, чтобы защитить нежелательные области или артефакты.

Редактирование изображения (Flux.2 Klein 4B Distilled) (#84)

• Роль: Более быстрая версия маршрута редактирования 4B для быстрой итерации. Хорошо подходит для тестирования формулировки подсказок или выбора лучшего направления перед окончательной обработкой базой или 9B.
• Настройка: Зафиксируйте noise_seed при A/B тестировании небольших изменений подсказок, чтобы изолировать эффекты подсказок от случайности.

Редактирование изображения (Flux.2 Klein 9B) (#100)

• Роль: Путь редактирования с высокой емкостью, который улучшает глобальную согласованность и сложные преобразования. Рекомендуется для изменений угла камеры, больших замен фона или интеграций бренда.
• Настройка: При смешивании двух ссылок убедитесь, что обе хорошо кадрированы и имеют схожий масштаб. Используйте подсказку, чтобы объяснить отношение между image1 и image2, например, "примените логотип из image2 к объекту в image1".

Редактирование изображения (Flux.2 Klein 9B Distilled) (#109)

• Роль: Интерактивное редактирование 9B с низкой задержкой. Балансирует качество и скорость, когда вам нужны частые обновления во время сеансов художественного направления.
• Настройка: Если результаты слишком сильно отклоняются от ссылки, усилите ограничения в подсказке фразами типа "сохранить позу, кадрирование и освещение без изменений" и перезапустите с тем же noise_seed.

Дополнительные опции

• Когда выбирать 4B против 9B: предпочтите 4B для скорости и концептуализации, переходите к 9B, когда сцены сложные или идентичность и геометрия должны сохраняться при сильных правках.
• База против дистиллированного: используйте базу для финальных качественных проходов, дистиллированное для быстрой итерации. Вы можете сделать грубую работу на дистиллированном, а затем повторно запустить ту же подсказку на базе.
• Одна против нескольких ссылок: одна лучше сохраняет оригинальный объект, изменяя фон, освещение или небольшие детали. Несколько ссылок предназначены для переноса цветов, логотипов или текстур из второго изображения.
• Держите подсказки конкретными: четко указывайте, что изменяется и что должно остаться без изменений. Это улучшает детерминированность редактирования с FLUX.2 [klein] 4B и 9B.
• Контроль вариации: фиксируйте noise_seed, чтобы сравнивать подсказки "яблоки с яблоками", или рандомизируйте его, чтобы исследовать более широкие образы.
• Примечания к активам: некоторые файлы моделей на Hugging Face требуют принятия лицензионного соглашения на странице репозитория перед загрузкой. См. страницы Black Forest Labs FLUX.2 klein, на которые даны ссылки выше.

Благодарности

Этот рабочий процесс реализует и основывается на следующих работах и ресурсах. Мы искренне благодарим Black Forest Labs за FLUX.2 [klein] 4B и 9B за их вклад и поддержку. Для получения авторитетных подробностей, пожалуйста, обратитесь к оригинальной документации и репозиториям, на которые даны ссылки ниже.

Ресурсы

• Black Forest Labs/FLUX.2 [klein] 4B и 9B
  • GitHub: black-forest-labs/flux2
  • Hugging Face: black-forest-labs/FLUX.2-klein-4B • black-forest-labs/FLUX.2-klein-9B
  • Документация / Примечания к выпуску: [FLUX.2 [klein] 4B и 9B — Быстрое локальное редактирование и создание изображений](https://blog.comfy.org/p/flux2-klein-4b-fast-local-image-editing)

Примечание: Использование упомянутых моделей, наборов данных и кода подлежит условиям и лицензиям, предоставленным их авторами и поддерживающими.