MOSS-Image Base с управлением макетом для текста в изображение

MOSS-Image Base с управлением макетом для текста в изображение#

Этот рабочий процесс ComfyUI превращает текст и ограничивающие рамки в точные изображения, осведомленные о макете, с использованием контрольной точки MOSS-Image Base. Вы создаете композицию, рисуя рамки, обозначаете каждую область как объект или текст, и рабочий процесс преобразует эту структуру в макетный запрос, который направляет генерацию. Оставьте включенным улучшение запроса для более выразительных формулировок или отключите его, чтобы сохранить точное формулирование, основанное на рамках.

MOSS-Image Base с управлением макетом для текста в изображение идеально подходит для концепций постеров, ключевых изображений продукции и любого дизайна, который должен учитывать, где размещены объекты и типографика. Начните с официального шаблона базового макета, затем быстро итеративно изменяйте размеры рамок, метки и глобальный запрос, чтобы уточнить как внешний вид, так и макет.

• Стартовый шаблон: Шаблон базового макета на GitHub
• Проект модели: OpenMOSS MOSS-Image на GitHub
• Веса и активы: MOSS-Image на Hugging Face

Ключевые модели в рабочем процессе ComfyUI MOSS-Image Base с управлением макетом для текста в изображение#

• MOSS-Image Base. Основной генератор текста в изображение, используемый в рабочем процессе. Он обучается следовать структурированному описанию, осведомленному о рамках, чтобы объекты и текст появлялись там, где вы намереваетесь, сохраняя общее визуальное качество. Подробнее о проекте смотрите в репозитории: OpenMOSS MOSS-Image и хаб весов Comfy-Org: Comfy-Org/MOSS-Image.
• Автоэнкодер (VAE). Декодер изображений, который преобразует денойзированные латенты в пиксели и обратно. Используйте автоэнкодер, включенный или рекомендованный с MOSS-Image Base для сохранения цветопередачи и четкости.
• Модель улучшения запроса (опционально). Легкий переписыватель текста, используемый в рабочем процессе для обогащения запроса, основанного на рамках. Отключите его, если хотите строгий контроль макета с минимальными изменениями формулировок.

Как использовать рабочий процесс ComfyUI MOSS-Image Base с управлением макетом для текста в изображение#

На высоком уровне вы определяете холст, рисуете рамки для каждого элемента, описываете эти элементы, затем генерируете. Рабочий процесс преобразует ваши рамки и метки в структурированный макетный запрос, настраивает модель MOSS-Image Base, запускает семплер для удаления шума из латентов, декодирует в RGB и сохраняет ваш результат.

Подготовьте ваш холст и рамки#

Создайте или загрузите холст с нужным соотношением сторон. Нарисуйте ограничивающую рамку для каждого основного объекта и каждой текстовой области, которую вы планируете включить. Используйте четкие, конкретные метки, такие как "красная винтажная камера", "глянцевая бутылка" или "заголовок: Жирное без засечек название продукта". Размещение, размер и перекрытие рамок передают модели композицию и иерархию.

Опишите объекты и текстовые области#

Каждая рамка получает краткое описание. Для текстовых областей включите предполагаемую формулировку, чтобы модель воспринимала область как типографику. Держите формулировки краткими и конкретными. Если рамка предназначена исключительно для пространства или негативного пространства, обозначьте это соответствующим образом, чтобы генератор научился оставлять ее легкой или пустой.

Постройте структурированный макетный запрос#

Рабочий процесс преобразует ваши рамки в структурированный макетный запрос, который кодирует позицию и семантику. Этот шаг сохраняет пространственное намерение для объектов и типов. Если хотите, чтобы модель развивала стиль, оставьте улучшение запроса включенным. Если хотите, чтобы сгенерированное изображение строго соответствовало вашим описаниям рамок, отключите улучшение запроса, чтобы сохранить оригинальный макетный запрос.

Добавьте глобальные указания и негативы#

Предоставьте краткий глобальный запрос, чтобы задать стиль, настроение или брендовые подсказки, которые применяются ко всем рамкам, например "студийное освещение, высокий контраст, чистый фон". Добавьте негативный запрос, чтобы избежать нежелательных артефактов, таких как "размытый, искаженный текст, лишние конечности". Макетный запрос из рамок остается основой, в то время как глобальный текст подталкивает общую эстетику.

Генерируйте и итеративно изменяйте#

Запустите семплер, чтобы создать изображение. Если объект смещается, слегка увеличьте или переместите эту рамку, или усилите ее метку более четким существительным или материальной подсказкой. Если размещение текста правильно, но формы букв выглядят слишком живописно, уточните описание и подумайте об отключении улучшения запроса. Используйте одно и то же семя для контролируемых A-B тестов, затем измените семя, чтобы исследовать альтернативы.

Декодируйте, предварительно просмотрите и сохраните#

Рабочий процесс декодирует окончательный латент в изображение RGB для предварительного просмотра. Сохраняйте результаты с отметками времени или описательными именами, чтобы вы могли отслеживать, какой макет и формулировка дали лучший результат. Когда вы достигнете сильной композиции, экспортируйте в нужный размер и уточните типографику, если вам нужно четкое, векторное оформление.

Дополнительные возможности для MOSS-Image Base с управлением макетом для текста в изображение#

• Начните с официального шаблона и изменяйте только несколько рамок за раз, чтобы узнать, как макет влияет на размещение.
• Оставляйте щедрые поля вокруг текстовых рамок для лучшей читаемости и меньшего количества артефактов формы.
• Используйте негативные запросы, чтобы подавить отвлекающие факторы рядом с ключевыми объектами, когда рамки расположены близко друг к другу.
• Закрепите семя, пока настраиваете макет, затем разблокируйте его, чтобы исследовать стилистическое разнообразие без изменения композиции.
• Для продуктовой работы добавьте слова о материале и отделке к меткам рамок, например "матовое стекло", "шлифованный алюминий" или "матовый бумажный постер", чтобы улучшить реализм.

Признание заслуг#

Этот рабочий процесс реализует и развивает следующие работы и ресурсы. Мы с благодарностью признаем Comfy-Org за официальный учебник ComfyUI, рабочий процесс шаблона базового макета и веса модели ComfyUI MOSS-Image, а также OpenMOSS за проект MOSS-Image за их вклад и поддержку. Для получения авторитетных деталей, пожалуйста, обратитесь к оригинальной документации и репозиториям, указанным ниже.

Ресурсы#

• Comfy-Org/Официальный учебник ComfyUI
  • Документация / Примечания к выпуску: Официальный учебник ComfyUI
• Comfy-Org/Официальный шаблон базового макета
  • GitHub: Comfy-Org/workflow_templates
• OpenMOSS/Проект MOSS-Image
  • GitHub: OpenMOSS/MOSS-Image
• Comfy-Org/Веса модели ComfyUI
  • Hugging Face: Comfy-Org/MOSS-Image

Примечание: Использование указанных моделей, наборов данных и кода подчиняется соответствующим лицензиям и условиям, предоставленным их авторами и поддерживающими.