Описание ComfyUI UNO
1. Что такое ComfyUI UNO?
Рабочий процесс ComfyUI UNO интегрирует модель Universal aNd cOntrollable (UNO) от ByteDance в среду ComfyUI. Разработанная командой Intelligent Creation компании ByteDance, UNO представляет собой значительный шаг вперед в технологии генерации изображений, основанной на объекте, базирующейся на инновационной парадигме обобщения "Less-to-More". Рабочий процесс ComfyUI UNO обеспечивает гибкую и высококачественную генерацию изображений, сохраняя идентичность характеристик ссылочных объектов с замечательной последовательностью в различных контекстах и сценариях.
2. Преимущества ComfyUI UNO:
- Превосходная последовательность объектов: ComfyUI UNO сохраняет исключительное сходство объекта в разных контекстах.
- Контроль объект-субъект: В отличие от многих альтернатив, ComfyUI UNO превосходно справляется с обработкой как ссылок на объекты, так и на субъекты одновременно, без путаницы в идентичности.
- Универсальная совместимость: ComfyUI UNO работает с различными типами объектов - людьми, предметами, игрушками, логотипами и многими другими.
- Эффективность ресурсов: ComfyUI UNO обеспечивает результаты профессионального качества даже при ограниченных ресурсах VRAM (хорошо работает с 24GB).
- Гибкая реализация: ComfyUI UNO включает рабочие процессы как для генерации одного объекта, так и для объектно-субъектной генерации.
3. Как использовать ComfyUI UNO
3.1 Настройка рабочего процесса
Рабочий процесс ComfyUI UNO имеет две основные конфигурации:
Верхняя группа - Генерация объект-субъект:
- Эта конфигурация позволяет вводить изображение ссылочного объекта и изображение ссылочного субъекта, которые будут объединены в сгенерированной сцене в соответствии с вашим текстовым запросом.
Нижняя группа - Генерация одного объекта:
- Эта конфигурация использует одно ссылочное изображение и генерирует новые изображения этого объекта в разных контекстах.
3.2 Процесс генерации с ComfyUI UNO
Основная настройка:
- Загрузите ссылочные изображения:
- Для рабочего процесса объект-субъект (верхняя группа): загрузите одно изображение ссылочного объекта и одно изображение ссылочного субъекта
- Для рабочего процесса с одним объектом (нижняя группа): загрузите одно ссылочное изображение
- Установите текстовый запрос для ComfyUI UNO:
- Напишите описательный запрос для вашей желаемой сцены, включая, как должны выглядеть ссылочные объект/субъект
- Настройте параметры ComfyUI UNO:
Width/Height: определяет разрешение вывода (рекомендуется 768×1024 или 1024×1024)Guidance: управляет тем, насколько точно генерация ComfyUI UNO следует вашему текстовому запросу (рекомендуется 3.5-4.0)Num_steps: более высокие значения (20+) дают более последовательные результаты с ComfyUI UNO, особенно для лицSeed: установите конкретное значение для воспроизводимости или случайное для разнообразия в результатах ComfyUI UNO
- Создайте изображение с ComfyUI UNO:
- Нажмите "Queue Prompt" для запуска рабочего процесса ComfyUI UNO
- Просмотрите результат в узле "Save Image"
3.3 Справочник параметров для ComfyUI UNO
UNO Loadmodel Node:
model_type: определяет, какой вариант модели ComfyUI UNO использовать
flux-dev: стандартная модель ComfyUI UNO с хорошим балансом качества и производительностиflux-schnell: более быстрая версия модели ComfyUI UNO с немного более низким качеством
3.4 Советы для достижения лучших результатов с ComfyUI UNO
Выбор объекта для ComfyUI UNO:
- Выбирайте четкие, хорошо освещенные ссылочные изображения, где объект заметен
- Для лиц/людей лучше всего подходят изображения анфас с нейтральными выражениями для ComfyUI UNO
- Для предметов идеальны четкие изображения с минимальными фоновыми помехами для обработки ComfyUI UNO
Разработка запросов для ComfyUI UNO:
- Будьте конкретны в описании объектов, соответствующих вашим ссылочным изображениям
- Опишите желаемую сцену, освещение и композицию, которую должен сгенерировать ComfyUI UNO
- Укажите ссылки на конкретные объекты (например, "молодой человек", "винтажный велосипед")
- Держите запросы краткими, но детальными для оптимальных результатов ComfyUI UNO
4. Техническая информация о ComfyUI UNO
Технология ComfyUI UNO основана на моделях FLUX и использует архитектуру DiT (Diffusion Transformer) с несколькими ключевыми улучшениями:
- Универсальное поворотное позиционное встраивание (UnoPE): специализированный механизм в ComfyUI UNO, который помогает модели различать ссылочные объекты и субъекты, значительно снижая путаницу в атрибутах.
- Прогрессивное кросс-модальное выравнивание: методология обучения, позволяющая ComfyUI UNO справляться с все более сложными многоконтекстными условиями.
- Универсальная настройка: ComfyUI UNO способен обрабатывать разнообразные типы объектов без специального обучения.
5. Благодарности
Этот рабочий процесс ComfyUI основан на UNO, разработанном командой Intelligent Creation компании ByteDance (Шаоцзинь Ву, Менци Хуан, Вэньсю Ву, Юфэн Чэн, Фэй Дин и Цянь Хэ). Интеграция UNO компании ByteDance в ComfyUI предоставлена участниками сообщества, адаптировавшими передовые исследования в доступный рабочий процесс.
Для дополнительной информации о UNO посетите репозиторий ByteDance UNO на GitHub.
