LTX 2.3 Редактируй Всё | Умный Видео Редактор

LTX 2.3 Редактируй Всё: рабочий процесс редактирования видео на основе подсказок для ComfyUI#

Этот рабочий процесс преобразует запрос на редактирование на простом английском языке в временно согласованное видео-редактирование с использованием LTX-2.3 и LTX 2.3 Edit Anything LoRA. Вместо повторной генерации сцены он закрепляется на вашем исходном клипе и применяет локальные или глобальные изменения, сохраняя движение, идентичности и тайминг. Типичные использования включают вставку или удаление объектов, очистку фона, целевые замены и творческое изменение стиля.

График объединяет нормализацию подсказок, кондиционирование направляющих кадров и однопроходный путь генерации с последующей опциональной интерполяцией кадров и антиалиасингом. Вы можете экспортировать отредактированный клип и сравнение бок о бок с исходником. LTX 2.3 Редактируй Всё является центром этого рабочего процесса: он предоставляет широкие возможности редактирования на основе подсказок, сохраняя при этом высокую точность LTX-2.3.

Ключевые модели в рабочем процессе Comfyui LTX 2.3 Edit Anything#

• LTX-2.3 базовый видео-диффузионный трансформер от Lightricks. Основной каркас генерации видео, предсказывающий временно согласованные кадры из текста и направляющих. Model card • Repo
• LTX 2.3 Edit Anything LoRA. Специализированный LoRA для редактирования, позволяющий добавлять/удалять/заменять/стилизовать операции без потери структуры сцены. Model
• LTX-2.3 Distilled LoRA 384. Дистилляция, которая позволяет сокращённые графики выборки, сохраняя качество; полезно, когда вам нужны более быстрые редактирования. Model
• Gemma 3 12B Instruct текстовый энкодер + LTX-2.3 текстовая проекция. Кодирует нормализованную подпись в кондиционирующие векторы для LTX-2.3. Files
• LTX-2.3 Video VAE и Audio VAE. Сжимают и декодируют видео и аудио латенты, используемые в течение всего процесса. Files
• LTX-2.3 Spatial и Temporal Upscalers. Опциональные латентные масштабаторы для более чётких кадров и более устойчивого движения, если вы стремитесь к разрешению, превышающему первый проход. Spatial x2 • Temporal x2
• RIFE (Real-Time Intermediate Flow Estimation). Модель интерполяции кадров, которая удваивает FPS для более плавного движения в конечном экспорте. Repo • ComfyUI extension

Как использовать рабочий процесс Comfyui LTX 2.3 Edit Anything#

На высоком уровне, вы загружаете видео, описываете редактирование и запускаете генерацию. Рабочий процесс нормализует ваш запрос в подпись в стиле обучения, кондиционирует LTX-2.3 направляющими кадрами из исходного клипа и выбирает отредактированный результат. Опциональная постобработка интерполирует кадры и применяет адаптивный антиалиасинг перед экспортом.

Настройки Видео#

Используйте эту группу, чтобы определить тайминг клипа и размер вывода. Установите FPS и Duration (Seconds), чтобы соответствовать вашей цели; график вычисляет количество кадров, выровненное для стабильной выборки. Выберите Resolution (Longer dimension) для вашей целевой длинной стороны, затем, при необходимости, установите Downscale Video Factor, если вы хотите более быстрый, меньший первый проход. Если вы планируете сохранить один проход, предпочитайте фактор 1.0 для вывода в родном размере.

Входные данные#

Загрузите ваш исходный клип в VHS_LoadVideo и позвольте рабочему процессу заниматься изменением размера. Кадры изменяются до выбранной длинной стороны и при необходимости уменьшаются для скорости, затем проходят через LTXVPreprocess, чтобы подготовиться к LTX-2.3. Тот же самый вход сохраняется как "контрольное видео", которое позже закрепляет движение и контент, чтобы редактирование следовало за оригинальной сценой.

Подсказка#

Введите ваш запрос в Describe the task here (Prompt). Встроенный шаг TextGenerate переписывает его в единую подпись в стиле набора данных, например, "Удалить маленькую красную машину на заднем плане." Нормализованная подпись отображается в "Final Prompt" и затем кодируется для кондиционирования. Вы также можете ввести точную подпись в кодировщике "Manual Prompt", если предпочитаете полный контроль.

Модель#

Загрузчик инициализирует каркас LTX-2.3 и прикрепляет LoRAs. Используйте базовую модель для общей точности и добавьте LTX 2.3 Edit Anything LoRA для редактируемости. Опционально включите distilled LoRA, если вы хотите более короткие графики при сохранении согласованности. Видео и аудио VAEs здесь подготавливаются для латентного кодирования/декодирования.

Генерация Низкого Разрешения#

Рабочий процесс преобразует вашу подпись в положительное/отрицательное кондиционирование и задаёт частоту кадров видео, чтобы временное руководство соответствовало вашей цели. LTXVAddGuideMulti вводит направляющую информацию из контрольного видео, что помогает сохранить идентичности, компоновку и движение, когда применяется редактирование. Пользовательская выборка затем удаляет шум от направляемого шума к отредактированному AV латенту, балансируя приверженность подсказке с сохранением структуры. После выборки видео латент декодируется для создания отредактированных кадров первого прохода.

Пустой Латент#

Этот путь подготавливает аудио/видео латенты, используемые выборщиком. По умолчанию пустой аудио латент соединяется, чтобы вы могли рендерить, даже если не редактируете аудио. Чтобы локализовать редактирования, SolidMask вместе с SetLatentNoiseMask могут ограничить, где вводится новый шум, что полезно для замены одного объекта без затрагивания остальной сцены.

Аудио#

Если ваш исходный клип включает аудио, оно может быть пропущено без изменений; в противном случае график создаёт тихую дорожку для надёжного экспорта. Вы также можете загрузить или записать пользовательское аудио и обрезать его в соответствии с вашей длительностью. Для редактирований, сосредоточенных исключительно на визуалах, вы можете удалить аудио из окончательных шагов комбинирования.

1 Проход Результата#

Эта область предварительно просматривает отредактированные кадры и собирает бок о бок "до и после" сравнение с контрольным видео. Это идеально для быстрого проверки, попала ли подсказка LTX 2.3 Edit Anything в нужную область, сохранило ли движение и уважило ли композицию сцены. Вы можете экспортировать это сравнение как быстрое артефакт для обмена.

Постобработка#

Если вы хотите более плавное движение, этап RIFE VFI интерполирует между кадрами, чтобы удвоить FPS. VideoAdaptiveAA затем применяет лёгкий антиалиасинг, чтобы очистить края перед финальным кодированием. Экспортер записывает результат с удвоенной оригинальной частотой кадров, чтобы движение казалось естественным без увеличения начальной стоимости выборки.

Ключевые узлы в рабочем процессе Comfyui LTX 2.3 Edit Anything#

TextGenerate (#178)#

Преобразует неформальные запросы в единую подпись в стиле обучения, которую LTX-2.3 хорошо понимает, улучшая точность редактирования и временную стабильность. Используйте его, когда хотите, чтобы фразировка была согласованной в проектах; если вам нужны точные формулировки, введите их напрямую в "Manual Prompt." Ссылка: обработка подсказок LTX-2.3 в официальном репозитории предоставляет более широкий контекст для поведения кондиционирования. Docs

LTXVConditioning (#51)#

Упаковывает положительное и отрицательное кондиционирование с предполагаемой частотой кадров, чтобы временные токены выровнялись с вашим клипом. Держите frame_rate согласованным с вашим экспортом, чтобы избежать дрейфа; это помогает LTX 2.3 Edit Anything сохранить движение при внесении изменений. Вам редко нужны сильные негативы; краткие негативы могут быть достаточными для подавления нежелательных артефактов.

LTXVAddGuideMulti (#104)#

Присоединяет один или несколько направляющих кадров из контрольного видео к латенту, чтобы редактирование следило за оригинальной структурой и таймингом. Изменение, с каким кадром вы направляете, может повлиять на сохранение идентичности и согласованность позы. Для локализованных редактирований используйте это вместе с маской, чтобы только целевой регион получал значимый шум.

SetLatentNoiseMask (#75)#

Определяет, где выборщик может добавлять или сохранять шум, эффективно контролируя области редактирования. Полностью белая маска редактирует весь кадр; мягкие маски идеальны для слияния замен в загруженные фоны. Замените SolidMask на нарисованную маску, когда вам нужен точный пространственный контроль.

SamplerCustomAdvanced (#38)#

Управляет процессом удаления шума с использованием вашего выбранного выборщика и графика. Более короткие графики быстрее, но получают выгоду от distilled LoRA; более длинные могут увеличить приверженность за счёт времени. Если вы хотите другой вид или профиль стабильности, попробуйте альтернативные выборщики, сохраняя ту же установку направляющих. Ссылка: документы выборщика ComfyUI объясняют, как взаимодействуют выборщик и графики сигмы. ComfyUI

RIFE VFI (#205)#

Интерполирует промежуточные кадры для увеличения плавности без повторной выборки модели диффузии. Это постобработка, которая сохраняет контент, улучшая при этом ритм движения. Ссылка: модель RIFE и интеграция ComfyUI. Model • Extension

Опциональные дополнения#

• Локальные редактирования в первую очередь: Используйте нарисованную маску с SetLatentNoiseMask, чтобы плотно ограничить, где LTX 2.3 Edit Anything вносит изменения, затем расширьте маску, если края выглядят слишком острыми.
• Быстрая итерация: Уменьшите Downscale Video Factor для быстрых проверок, затем вернитесь к 1.0 для финального рендера или добавьте пространственные/временные масштабаторы для дополнительной чёткости.
• Источники без аудио: Если вход не содержит аудио, отключите аудио в финальном комбинировании, чтобы избежать ошибок мультиплексирования, или предоставьте тихую дорожку через предоставленные узлы.
• Примечание о графике: График "bong_tangent", показанный в графике, требует установки узлового пакета RES4LYF; если вы выбираете его, сначала установите расширение. Repo
• Сравнения: Используйте встроенный экспорт бок о бок, чтобы убедиться, что идентичности, освещение и движение камеры сохраняются перед тем, как приступить к длительным рендерам.

Этот шаблон ComfyUI сочетает высокую точность основного каркаса LTX-2.3 с LTX 2.3 Edit Anything LoRA, чтобы вы могли добавлять, удалять, заменять или изменять стиль элементов в клипе, сохраняя ритм сцены.

Благодарности#

Этот рабочий процесс реализует и основывается на следующих работах и ресурсах. Мы с благодарностью признаём LTX за LTX 2.3 Edit Anything Workflow Source за их вклад и поддержку. Для авторитетных деталей, пожалуйста, обратитесь к оригинальной документации и репозиториям, приведённым ниже.

Ресурсы#

• LTX/LTX 2.3 Edit Anything Workflow Source
  • Документы / Примечания о выпуске @Benji’s AI Playground: LTX 2.3 Edit Anything Workflow Source

Примечание: Использование упомянутых моделей, наборов данных и кода подлежит соответствующим лицензиям и условиям, предоставленным их авторами и поддерживающими.