ใน Workflow ของ ComfyUI นี้ เราใช้ IPAdapter Plus พร้อมกับฟีเจอร์ Attention Mask เพื่อเพิ่มประสิทธิภาพในการสร้างภาพ การตั้งค่านี้ช่วยให้การควบคุมที่แม่นยำ ทำให้สามารถจัดการภาพและวิดีโอได้อย่างซับซ้อน
เริ่มต้นโดยการเลือกภาพสองภาพที่แตกต่างกัน กำหนดเป็น Image A และ Image B นอกจากนี้ เลือกวิดีโอที่จะใช้เป็นหน้ากากซึ่งจะชี้นำการเปลี่ยนแปลงจาก Image A เป็น Image B
การเปลี่ยนแปลงนี้ใช้ส่วนประกอบสำคัญ เช่น AnimateDiff, IPAdapter Plus (IPAdapter V2) หลายอินสแตนซ์ และโมเดล ControlNet ต่าง ๆ:
AnimateDiff: AnimateDiff ใช้ในบทบาทปกติใน Workflow
IPAdapter Plus: ทำหน้าที่เป็นองค์ประกอบหลักของกระบวนการนี้ เราใช้ IPAdapter Plus สองอินสแตนซ์ อินสแตนซ์แรกของ IPAdapter Plus ประมวลผล Image A และใช้วิดีโอเป็นหน้ากากความสนใจ อินสแตนซ์ที่สองของ IPAdapter Plus ทำงานกับ Image B โดยใช้วิดีโอกลับด้านเป็นหน้ากาก การตั้งค่านี้สำคัญสำหรับการเปลี่ยนภาพที่ราบรื่น นอกจากนี้ IPAdapter Plus ยังเก่งในการรักษาสไตล์ดั้งเดิมของภาพที่นำเข้า
ControlNet: เราใช้โมเดล ControlNet สองตัว โมเดลแรกใช้ ControlNet Tile โมเดล และโมเดลที่สองใช้ ControlNet Lineart โมเดล ทั้งสองโมเดลรับ Image B เป็นอินพุต ซึ่งมีผลต่อการเปลี่ยนแปลงสุดท้าย แนะนำให้ปรับความแรงและขั้นตอนของโมเดล ControlNet ตามความต้องการเฉพาะของคุณและลักษณะของภาพอินพุตเพื่อให้ได้ผลลัพธ์ที่ดีที่สุด
การเรนเดอร์สองรอบช่วยให้ผลลัพธ์เริ่มต้นถูกปรับแต่งเพิ่มเติมโดยการใช้โมเดล ControlNet Tile เป็นครั้งที่สอง ซึ่งช่วยเพิ่มกระบวนการขยายวิดีโอ
IPAdapter Attention Mask ถูกออกแบบมาโดยเฉพาะเพื่อเพิ่มความแม่นยำและความมุ่งเน้นในระหว่างกระบวนการสร้างภาพ Attention Mask ช่วยให้คุณสามารถใช้หน้ากากที่กำหนดพื้นที่เฉพาะภายในภาพที่ต้องการการปรับปรุงหรือการโฟกัสในระหว่างขั้นตอนการสังเคราะห์ การประยุกต์ใช้แบบเป้าหมายนี้มีความสำคัญสำหรับการสังเคราะห์ภาพขั้นสูง ทำให้มีคุณค่ามากเมื่อทำงานกับโมเดลที่ซับซ้อนอย่าง IPAdapter plus
หลักการทำงานของ IPAdapter Attention Mask เริ่มต้นด้วยการสร้างหน้ากากที่ชี้นำกระบวนการสร้างภาพอย่างแม่นยำ หน้ากากนี้อาจอยู่ในรูปแบบไบนารีหรือเกรย์สเกล กำหนดว่า IPAdapter plus ควรจัดการแต่ละส่วนของภาพอย่างไรตามระดับความเข้มต่าง ๆ ดังนี้:
นี่คือตัวอย่างการใช้ IPAdapter Attention Mask
การชี้นำแบบเป้าหมายนี้มีความสำคัญสำหรับการได้รับผลลัพธ์ที่แม่นยำในการสังเคราะห์ภาพโดยใช้ IPAdapter plus เพิ่มทั้งความแม่นยำและประสิทธิภาพของโมเดล
การใช้ Attention Mask กับ IPAdapter plus มีข้อดีหลายประการ:
โดยการใช้ความสามารถของ Attention Mask คุณสามารถได้รับระดับรายละเอียดและการปรับแต่งที่สูงขึ้นในโครงการสร้างภาพของคุณด้วย IPAdapter Plus ทำให้มันเป็นเครื่องมือที่มีคุณค่าสำหรับการประมวลผลภาพดิจิทัลขั้นสูง
© ลิขสิทธิ์ 2024 RunComfy. สงวนลิขสิทธิ์