LTX 2.3 IC-LoRA 摄像机控制用于 ComfyUI#
LTX 2.3 IC-LoRA 摄像机控制是 LTX-Video 2.3 在 ComfyUI 中的一个参考驱动摄像机运动工作流程。给它一个简短的参考视频和一个创意提示，它将从参考中转移摄像机轨迹到新生成的场景中，保持主体构图和时间一致性，同时您可以专注于内容、照明和氛围。
专为电影制作人、视觉效果艺术家和 AI 创作者设计，这个 ComfyUI 工作流程可以重现平移、倾斜、推镜头、缩放和环绕移动，并具有可调的运动强度。它将 LTX-2.3 的统一音视频生成与为摄像机控制量身定制的 In-Context LoRA 结合在一起，因此您可以在一次通过中获得流畅的运动、一致的构图和同步的音频。
Comfyui LTX 2.3 IC-LoRA 摄像机控制工作流程中的关键模型#
- Lightricks LTX-2.3。一个扩散变压器，联合生成视频和音频，在一次前向传递中提供强大的时间一致性和同步声音。它是这个工作流程中的核心生成器，也是 IC-LoRA 指导的目标。Model card
- LTX-Video VAE。LTX 使用的时空视频 VAE 将帧压缩到一个紧凑的潜在空间中以进行高效去噪，然后在采样结束时解码高质量帧。请参阅LTX-Video和LTX-2的技术报告中的架构背景。
- Gemma 指令调优文本编码器。指令调优的 Gemma 文本编码器将您的提示转换为生成器可以遵循的条件向量，从而实现详细的镜头描述和风格控制。
- LTX 2.3 IC-LoRA 摄像机控制。一个专门的 In-Context LoRA 适配器，从参考视频中提取摄像机运动线索并将其注入 LTX-2.3，使新场景的虚拟摄像机与参考路径对齐。
如何使用 Comfyui LTX 2.3 IC-LoRA 摄像机控制工作流程#
这个工作流程被组织成若干组，准备您的参考，构建条件，并在音视频混合之前运行采样。IC-LoRA 从参考中提取摄像机运动，而您的提示定义了屏幕上出现的内容。
输入视频设置#
使用此组中的输入设置每秒帧数、剪辑持续时间和目标长边尺寸。这三个值决定了整个运行的帧预算和工作分辨率。保持帧率和持续时间与您的参考对齐有助于 IC-LoRA 重现原始运动的时序和速度。选择适合您交付宽高比和性能预算的尺寸。如果您正在实验，开始时选择适度的设置，一旦运动看起来合适再进行放大。
准备参考视频#
使用VHS_LoadVideo (#5983)加载您的摄像机参考。管道将帧缩放并标准化以适应模型，然后分析它们以计算尺寸和数量，确保与 LTX-2.3 良好配合的尺寸。平稳的、无剪辑的长镜头最适合 LTX 2.3 IC-LoRA 摄像机控制，因为适配器是在学习摄像机路径而不是故事编辑。支持平移、倾斜、推镜头、缩放和环绕；避免使用抖动的剪辑或快速场景变化。如果您的参考比目标长，请将其修剪到最具代表性的片段。
预处理#
工作流程创建一个与您选择的分辨率和持续时间对齐的空视频潜在，然后可以选择使用LTXVImgToVideoConditionOnly (#5904)从静止图像中锚定外观。提供一个风格一致的静止图像可以提高主体和调色板的一致性，同时将运动留给 IC-LoRA。此阶段还计算安全、模型友好的尺寸，并确保潜在时间线与参考的节奏匹配。结果是一个为摄像机控制做好准备的干净起点。
条件#
在正面提示中写下您的主要镜头描述，并在负面提示中列出不希望出现的伪影。提示被编码，并在LTXVConditioning (#164)中组装成时间感知的条件。LTX 2.3 IC-LoRA 摄像机控制然后用从参考视频中提取的摄像机运动令牌增强此条件。将您的文本集中在主体、设置、照明和艺术指导上；让摄像机移动留给参考，以免指导发生冲突。您可以在不每次都触及参考的情况下迭代语气和风格。
模型#
工作流程加载 LTX-2.3 基础模型，应用性能友好的注意力补丁和前馈分块以适应大分辨率，并使用LTXICLoRALoaderModelOnly (#5924)注入 IC-LoRA。这保持了 VRAM 使用的实用性，同时保持了逼真性和运动一致性。IC-LoRA 还暴露了一个潜在的缩放因子，图形使用它来平衡速度和细节。将此组视为 LTX 2.3 IC-LoRA 摄像机控制的运行引擎室。
采样#
SamplerCustom (#561)使用在KSamplerSelect (#154)中选择的采样器和手动调整的 sigma 计划运行去噪过程。在采样期间，LTXAddVideoICLoRAGuide (#5899)将提示条件、外观锚点和参考驱动的摄像机路径融合到潜在中。去噪完成后，视频和音频潜在被分离和解码，然后VHS_VideoCombine (#604)在您选择的帧率下混合帧和音频。您最终得到一个准备分享的 MP4，它包含您描述的内容和您引用的摄像机运动。如果摄像机感觉过于僵硬或过于松散，调整运动强度并重新采样。
空音频#
创建了一个对齐的音频潜在，以便 LTX-2.3 可以同步生成的视频合成声音。这为您提供与运动时序匹配的环境音、拟音轨，而无需额外工作。如果您计划在后期为剪辑配乐，可以忽略生成的音频并在稍后静音或替换它。对于运动测试，保留音频可以帮助您判断时序和强度。
Comfyui LTX 2.3 IC-LoRA 摄像机控制工作流程中的关键节点#
VHS_LoadVideo (#5983)#
加载提供摄像机运动的参考剪辑。使用它来选择您要转移其轨迹的确切片段，并将有效帧率与目标对齐。短而稳定的单镜头输入提供最可预测的运动转移。如果需要，修剪参考或减少帧上限以更快地迭代。
LTXICLoRALoaderModelOnly (#5924)#
将 LTX 2.3 IC-LoRA 摄像机控制适配器注入基础模型，并暴露图形用于效率的潜在缩放因子。增加其强度以更严格地遵循参考摄像机路径；降低它以便提示放松运动。保持模型和适配器版本匹配以获得最佳效果。项目中途更换适配器将改变摄像机的解释方式。
LTXAddVideoICLoRAGuide (#5899)#
将 IC-LoRA 指导附加到条件和潜在中。这里的关键控制是运动强度，它决定了生成的摄像机多么忠实于参考。提高它以进行精确转移和技术匹配，降低它以进行创意再解释。结合强烈的主体提示，以保持构图，同时允许微观变化。
LTXVImgToVideoConditionOnly (#5904)#
将静止图像转化为仅外观指导而不施加运动，适合锁定角色、调色板或艺术指导。如果第一帧偏离您的静止图像，增加依从性；如果外观过于受限，减少它。此节点是可选的；当您希望提示和 IC-LoRA 完全驱动外观时，省略静止图像。
SamplerCustom (#561)#
使用您选择的采样器和 sigma 曲线运行去噪。将 KSamplerSelect (#154) 中的采样器如 euler_ancestral_cfg_pp 与提供的 sigma 计划配对，以实现细节和平稳的时间稳定性。如果您将运动强度推高，考虑使用更温和的计划以避免过度修正。重新种子以在保持相同摄像机路径的同时探索替代方案。
VHS_VideoCombine (#604)#
将解码的帧和音频混合到一个 MP4 中以供预览或交付。使用它来设置格式和输出帧率以匹配您的管道。对于日常工作，使用更高压缩导出；对于完成，提升质量以保留高光和运动节奏。输出包括元数据，因此您可以稍后追踪设置。
可选附加项#
- 在 LTX 2.3 IC-LoRA 摄像机控制中实现干净的转移，请选择一个具有单一、连续运动、最小主体运动且无剪辑的参考。
- 将目标 FPS 和持续时间与您的参考匹配以实现 1:1 时序；如果您想要慢速或快速呈现，请故意偏离。
- 将提示集中于内容和风格；让 IC-LoRA 处理摄像机语言以避免信号冲突。
- 如果您看到边缘伪影，尝试稍小的长边尺寸或更温和的采样器以提高稳定性。
- 探索 LTX 资源和示例以加深对模型行为和控制的理解：Lightricks/LTX-2.3, Lightricks/ComfyUI-LTXVideo, AVControl。
致谢#
此工作流程实现并建立在以下作品和资源之上。我们感谢 Innovate Futures @ Benji 对 LTX 2.3 IC-LoRA 摄像机控制工作流程来源的贡献和维护。有关权威细节，请参阅下面链接的原始文档和存储库。
资源#
- Innovate Futures @ Benji/LTX 2.3 IC-LoRA 摄像机控制工作流程来源
- 文档 / 发布说明: LTX 2.3 IC-LoRA 摄像机控制工作流程来源
注意: 引用模型、数据集和代码的使用受其作者和维护者提供的各自许可证和条款的约束。