UNO | Генерация последовательных объектов и субъектов

Описание ComfyUI UNO#

1. Что такое ComfyUI UNO?#

Рабочий процесс ComfyUI UNO интегрирует модель Universal aNd cOntrollable (UNO) от ByteDance в среду ComfyUI. Разработанная командой Intelligent Creation компании ByteDance, UNO представляет собой значительный шаг вперед в технологии генерации изображений, основанной на объекте, базирующейся на инновационной парадигме обобщения "Less-to-More". Рабочий процесс ComfyUI UNO обеспечивает гибкую и высококачественную генерацию изображений, сохраняя идентичность характеристик ссылочных объектов с замечательной последовательностью в различных контекстах и сценариях.

2. Преимущества ComfyUI UNO:#

• Превосходная последовательность объектов: ComfyUI UNO сохраняет исключительное сходство объекта в разных контекстах.
• Контроль объект-субъект: В отличие от многих альтернатив, ComfyUI UNO превосходно справляется с обработкой как ссылок на объекты, так и на субъекты одновременно, без путаницы в идентичности.
• Универсальная совместимость: ComfyUI UNO работает с различными типами объектов - людьми, предметами, игрушками, логотипами и многими другими.
• Эффективность ресурсов: ComfyUI UNO обеспечивает результаты профессионального качества даже при ограниченных ресурсах VRAM (хорошо работает с 24GB).
• Гибкая реализация: ComfyUI UNO включает рабочие процессы как для генерации одного объекта, так и для объектно-субъектной генерации.

3. Как использовать ComfyUI UNO#

3.1 Настройка рабочего процесса#

Рабочий процесс ComfyUI UNO имеет две основные конфигурации:

Верхняя группа - Генерация объект-субъект:

• Эта конфигурация позволяет вводить изображение ссылочного объекта и изображение ссылочного субъекта, которые будут объединены в сгенерированной сцене в соответствии с вашим текстовым запросом.

Нижняя группа - Генерация одного объекта:

• Эта конфигурация использует одно ссылочное изображение и генерирует новые изображения этого объекта в разных контекстах.

3.2 Процесс генерации с ComfyUI UNO#

Основная настройка:

1. Загрузите ссылочные изображения:
   • Для рабочего процесса объект-субъект (верхняя группа): загрузите одно изображение ссылочного объекта и одно изображение ссылочного субъекта
   • Для рабочего процесса с одним объектом (нижняя группа): загрузите одно ссылочное изображение
2. Установите текстовый запрос для ComfyUI UNO:
   • Напишите описательный запрос для вашей желаемой сцены, включая, как должны выглядеть ссылочные объект/субъект
3. Настройте параметры ComfyUI UNO:
   • Width/Height: определяет разрешение вывода (рекомендуется 768×1024 или 1024×1024)
   • Guidance: управляет тем, насколько точно генерация ComfyUI UNO следует вашему текстовому запросу (рекомендуется 3.5-4.0)
   • Num_steps: более высокие значения (20+) дают более последовательные результаты с ComfyUI UNO, особенно для лиц
   • Seed: установите конкретное значение для воспроизводимости или случайное для разнообразия в результатах ComfyUI UNO
4. Создайте изображение с ComfyUI UNO:
   • Нажмите "Queue Prompt" для запуска рабочего процесса ComfyUI UNO
   • Просмотрите результат в узле "Save Image"

3.3 Справочник параметров для ComfyUI UNO#

UNO Loadmodel Node:

• model_type: определяет, какой вариант модели ComfyUI UNO использовать
  • flux-dev: стандартная модель ComfyUI UNO с хорошим балансом качества и производительности
  • flux-schnell: более быстрая версия модели ComfyUI UNO с немного более низким качеством

3.4 Советы для достижения лучших результатов с ComfyUI UNO#

Выбор объекта для ComfyUI UNO:

• Выбирайте четкие, хорошо освещенные ссылочные изображения, где объект заметен
• Для лиц/людей лучше всего подходят изображения анфас с нейтральными выражениями для ComfyUI UNO
• Для предметов идеальны четкие изображения с минимальными фоновыми помехами для обработки ComfyUI UNO

Разработка запросов для ComfyUI UNO:

• Будьте конкретны в описании объектов, соответствующих вашим ссылочным изображениям
• Опишите желаемую сцену, освещение и композицию, которую должен сгенерировать ComfyUI UNO
• Укажите ссылки на конкретные объекты (например, "молодой человек", "винтажный велосипед")
• Держите запросы краткими, но детальными для оптимальных результатов ComfyUI UNO

4. Техническая информация о ComfyUI UNO#

Технология ComfyUI UNO основана на моделях FLUX и использует архитектуру DiT (Diffusion Transformer) с несколькими ключевыми улучшениями:

• Универсальное поворотное позиционное встраивание (UnoPE): специализированный механизм в ComfyUI UNO, который помогает модели различать ссылочные объекты и субъекты, значительно снижая путаницу в атрибутах.
• Прогрессивное кросс-модальное выравнивание: методология обучения, позволяющая ComfyUI UNO справляться с все более сложными многоконтекстными условиями.
• Универсальная настройка: ComfyUI UNO способен обрабатывать разнообразные типы объектов без специального обучения.

5. Благодарности#

Этот рабочий процесс ComfyUI основан на UNO, разработанном командой Intelligent Creation компании ByteDance (Шаоцзинь Ву, Менци Хуан, Вэньсю Ву, Юфэн Чэн, Фэй Дин и Цянь Хэ). Интеграция UNO компании ByteDance в ComfyUI предоставлена участниками сообщества, адаптировавшими передовые исследования в доступный рабочий процесс.

Для дополнительной информации о UNO посетите репозиторий ByteDance UNO на GitHub.