UNO ByteDance | Генерация согласованных объектов и предметов

Описание ComfyUI UNO

1. Что такое ComfyUI UNO от ByteDance?

Рабочий процесс ComfyUI UNO интегрирует модель ByteDance Universal aNd cOntrollable (UNO) в среду ComfyUI. Разработанная командой Intelligent Creation ByteDance, UNO представляет собой значительный прорыв в технологии генерации изображений на основе объектов, основанную на инновационной парадигме обобщения "Less-to-More". UNO позволяет гибко и с высоким качеством генерировать изображения, сохраняя идентификационные особенности ссылочных объектов с замечательной согласованностью в различных контекстах и сценариях.

2. Преимущества ComfyUI UNO от ByteDance:

• Превосходная согласованность объектов: UNO сохраняет исключительное сходство объектов в разных контекстах.
• Управление объект-предмет: В отличие от многих альтернатив, UNO отлично справляется с обработкой как ссылок на объекты, так и на предметы одновременно без путаницы идентичности.
• Универсальная совместимость: UNO работает с различными типами объектов - людьми, предметами, игрушками, логотипами и другими.
• Эффективность ресурсов: UNO обеспечивает профессиональное качество результатов даже с ограниченными ресурсами VRAM (эффективно работает с 24GB).
• Гибкая реализация: UNO включает рабочие процессы для как генерации одного объекта, так и объекта-предмета.

3. Как использовать ComfyUI UNO от ByteDance

3.1 Настройка рабочего процесса

Рабочий процесс UNO имеет две основные конфигурации:

Верхняя группа - Генерация объекта-предмета:

• Эта конфигурация позволяет вводить изображение ссылочного объекта и изображение ссылочного предмета, которые будут совмещены в сгенерированной сцене согласно вашему текстовому запросу.

Нижняя группа - Генерация одного объекта:

• Эта конфигурация использует одно ссылочное изображение и генерирует новые изображения этого объекта в разных контекстах.

3.2 Процесс генерации с UNO от ByteDance

Базовая настройка:

1. Загрузите ссылочные изображения:
   • Для рабочего процесса объект-предмет (верхняя группа): Загрузите одно изображение ссылочного объекта и одно изображение ссылочного предмета
   • Для рабочего процесса одного объекта (нижняя группа): Загрузите одно ссылочное изображение
2. Установите текстовый запрос для UNO от ByteDance:
   • Напишите описательный запрос для вашей желаемой сцены, включая, как должны выглядеть ссылочные объект/предмет
3. Настройте параметры UNO от ByteDance:
   • Width/Height: Определите разрешение вывода (рекомендуется 768×1024 или 1024×1024)
   • Guidance: Управляет тем, насколько точно генерация UNO от ByteDance следует вашему текстовому запросу (рекомендуется 3.5-4.0)
   • Num_steps: Более высокие значения (20+) дают более согласованные результаты с UNO от ByteDance, особенно для лиц
   • Seed: Установите конкретное значение для воспроизводимости или случайно для разнообразия в выводах UNO от ByteDance
4. Создайте изображение с UNO от ByteDance:
   • Нажмите "Queue Prompt", чтобы запустить рабочий процесс UNO от ByteDance
   • Проверьте результат в узле "Save Image"

3.3 Справочник параметров для UNO от ByteDance

UNO Loadmodel Node:

• model_type: Определяет, какой вариант модели UNO от ByteDance использовать
  • flux-dev: Стандартная модель UNO от ByteDance с хорошим балансом качества и производительности
  • flux-schnell: Быстрее вариант модели UNO от ByteDance с немного более низким качеством

3.4 Советы для наилучших результатов с UNO от ByteDance

Выбор объекта для UNO:

• Выбирайте четкие, хорошо освещенные ссылочные изображения, где объект явно выделяется
• Для лиц/людей лучше всего работают изображения с фронтальным видом и нейтральными выражениями с UNO от ByteDance
• Для предметов идеальны четкие изображения с минимальным отвлекающим фоном для обработки UNO от ByteDance

Инженерия запросов для UNO:

• Будьте конкретны в описаниях объектов, которые соответствуют вашим ссылочным изображениям
• Опишите желаемую сцену, освещение и композицию для генерации UNO от ByteDance
• Включите ссылки на конкретные объекты (например, "молодой человек", "винтажный велосипед")
• Держите запросы краткими, но детальными для оптимальных результатов UNO от ByteDance

4. Техническая информация о UNO от ByteDance

Технология UNO от ByteDance построена на моделях FLUX и использует архитектуру DiT (Diffusion Transformer) с несколькими ключевыми улучшениями:

• Universal Rotary Position Embedding (UnoPE): Специализированный механизм в UNO от ByteDance, который помогает модели различать ссылочные объекты и предметы, значительно снижая путаницу атрибутов.
• Progressive Cross-Modal Alignment: Методология обучения, которая позволяет UNO от ByteDance обрабатывать все более сложные многосоставные условия.
• Universal Customization: UNO от ByteDance способен обрабатывать различные типы объектов без специального обучения.

5. Благодарности

Этот рабочий процесс реализован с использованием UNO, разработанного Intelligent Creation Team at ByteDance (Shaojin Wu, Mengqi Huang, Wenxu Wu, Yufeng Cheng, Fei Ding и Qian He). Интеграция ComfyUI с UNO от ByteDance предоставлена участниками сообщества, адаптирующими прорывные исследования ByteDance в доступный рабочий процесс.

Для получения дополнительной информации о UNO от ByteDance посетите .