APISR | Upscaler di immagini/video anime

1. APISR per la risoluzione delle immagini anime | Flusso di lavoro di upscale ComfyUI

Questo flusso di lavoro di upscale ComfyUI integra il modello APISR (Anime Production-oriented Image Super-Resolution) per aumentare la scala di immagini e video anime di bassa qualità e bassa risoluzione. Inoltre, incorpora il modello 4xAnimateSharp a scopo di confronto.

Per impostazione predefinita, il flusso di lavoro è configurato per l'aumento della scala delle immagini. Per aumentare la scala dei video, basta sostituire il nodo "load image" con il nodo "load video" e sostituire il nodo "save image" con il nodo "combine video" per una transizione senza soluzione di continuità.

2. Introduzione ad APISR

APISR (Anime Production-oriented Image Super-Resolution) è progettato per ripristinare e migliorare immagini e sorgenti video anime di bassa qualità e bassa risoluzione che hanno subito vari degradi in scenari del mondo reale. Si rivolge al crescente interesse per la super-risoluzione (SR) degli anime deviando dall'applicazione tradizionale delle tecniche di SR fotorealistiche, che potrebbero non adattarsi adeguatamente alle caratteristiche distintive degli anime.

Due sfide principali sono identificate nella SR degli anime: il degrado delle linee disegnate a mano a causa della compressione o dell'invecchiamento, e la presenza di artefatti di colore indesiderati. Per affrontare questi problemi, APISR introduce un modello di degradazione dell'immagine specificamente progettato per simulare gli effetti di compressione e assistere nel ripristino delle linee disegnate a mano. Inoltre, propone una tecnica per migliorare le linee disegnate a mano sbiadite e invecchiate fondendole da immagini eccessivamente nitide.

Per il problema degli artefatti di colore, spesso derivanti dalle reti SR basate su GAN, APISR introduce una perdita percettiva gemella bilanciata. Questo metodo combina caratteristiche percettive sia dal dominio fotorealistico che da quello degli anime, mirando a ridurre le incoerenze di colore e migliorare la qualità visiva delle immagini anime super-risolte.

APISR introduce una pipeline di curatela dei dataset specificamente progettata per gli anime, un modello di degradazione dell'immagine che mira alle sfide uniche del restauro degli anime e un approccio innovativo per affrontare gli artefatti di colore nell'addestramento della rete SR basata su GAN. Questi metodi si concentrano collettivamente sul miglioramento del processo di super-risoluzione per gli anime selezionando i fotogrammi più informativi per i dataset, ripristinando le linee disegnate a mano degradate e migliorando la qualità visiva affrontando le incoerenze di colore. L'efficacia dell'approccio di APISR è convalidata attraverso valutazioni complete su dataset SR di anime del mondo reale, mostrando progressi significativi rispetto alle tecniche esistenti.

3. Come utilizzare ComfyUI APISR per la risoluzione delle immagini anime

Il modello APISR è molto intuitivo; basta selezionare il modello corrispondente alla dimensione di upscale desiderata.

Per ulteriori informazioni, consultare il e il