APISR | Mejorador de imágenes/videos de anime

1. APISR para Resolución de Imágenes de Anime | Flujo de trabajo de Upscale de ComfyUI

Este flujo de trabajo de upscale de ComfyUI integra el modelo APISR (Anime Production-oriented Image Super-Resolution) para mejorar imágenes y videos de anime de baja calidad y baja resolución. Además, incorpora el modelo 4xAnimateSharp con fines comparativos.

Por defecto, el flujo de trabajo está configurado para el upscale de imágenes. Para hacer upscale de videos, simplemente reemplace el nodo "load image" con el nodo "load video" y reemplace el nodo "save image" con el nodo "combine video" para una transición sin problemas.

2. Introducción a APISR

APISR (Anime Production-oriented Image Super-Resolution) está diseñado para restaurar y mejorar imágenes y fuentes de video de anime de baja calidad y baja resolución que han sufrido diversas degradaciones en escenarios del mundo real. Responde al creciente interés en la súper resolución (SR) de anime al desviarse de la aplicación tradicional de técnicas de SR fotorrealistas, que pueden no adaptarse adecuadamente a las características distintivas del anime.

Se identifican dos desafíos principales en la SR de anime: la degradación de las líneas dibujadas a mano debido a la compresión o el envejecimiento, y la presencia de artefactos de color no deseados. Para abordar estos problemas, APISR introduce un modelo de degradación de imágenes específicamente diseñado para simular los efectos de compresión y ayudar en la restauración de las líneas dibujadas a mano. Además, propone una técnica para mejorar las líneas dibujadas a mano tenues y envejecidas combinándolas a partir de imágenes excesivamente afiladas.

Para el problema de los artefactos de color, que a menudo surgen de las redes SR basadas en GAN, APISR introduce una pérdida perceptual gemela equilibrada. Este método combina características perceptuales tanto del dominio fotorrealista como del dominio del anime, con el objetivo de reducir las inconsistencias de color y mejorar la calidad visual de las imágenes de anime súper resueltas.

APISR introduce una canalización de curación de conjuntos de datos específicamente diseñada para el anime, un modelo de degradación de imágenes que se enfoca en los desafíos únicos de la restauración de anime, y un enfoque innovador para abordar los artefactos de color en el entrenamiento de redes SR basadas en GAN. Estos métodos se enfocan colectivamente en mejorar el proceso de súper resolución para el anime mediante la selección de los cuadros más informativos para los conjuntos de datos, la restauración de las líneas dibujadas a mano degradadas y la mejora de la calidad visual al abordar las inconsistencias de color. La efectividad del enfoque de APISR se valida a través de evaluaciones exhaustivas en conjuntos de datos SR de anime del mundo real, mostrando avances significativos sobre las técnicas existentes.

3. Cómo usar APISR de ComfyUI para la resolución de imágenes de anime

El modelo APISR es muy fácil de usar; simplemente seleccione el modelo correspondiente al tamaño de upscale que desee.

Para obtener más información, consúltelo en github y en el artículo