Come eseguire l'upscaling di un'immagine o di un video con l'intelligenza artificiale: gli 8 migliori strumenti
Pubblicato: 2023-02-13
Trasforma le tue vecchie foto e i tuoi video sfocati in capolavori ad alta risoluzione con la potenza dell'intelligenza artificiale. Il machine learning può migliorare in modo intelligente le tue immagini fisse e in movimento, con strumenti sia gratuiti che a pagamento disponibili che vengono eseguiti in modo nativo e nel cloud.
Cos'è l'upscaling?
Upscaling significa semplicemente aumentare le dimensioni di un'immagine o di un video. Questo viene fatto allargando la risoluzione, passando ad esempio da una sorgente HD (1920×1080) a un upscale 4K (3840×2160). L'upscaling comporta l'aggiunta di pixel mancanti a un'immagine e la tecnica in sé non è una novità. Le vecchie tecniche di upscaling implicano semplicemente lo "allungamento" dell'immagine duplicando i pixel o utilizzando il dithering.
Le tecniche moderne utilizzano l'intelligenza artificiale (AI) per aggiungere un livello di dettaglio superiore. L'intelligenza artificiale è "addestrata" a riconoscere determinate caratteristiche come volti, nuvole, erba o alberi in modo da poter fare previsioni su come dovrebbe essere una versione di qualità superiore dell'immagine. Queste tecniche hanno fatto molta strada, ma sono ancora lontane dall'essere perfette. Abbinare la tecnica di upscaling all'immagine o al video sorgente può alterare drasticamente i risultati.
Puoi utilizzare strumenti di upscaling AI che vengono eseguiti sia localmente sul tuo computer che nel cloud.
Upscaling dell'immagine
Prendi un'immagine a bassa risoluzione, pixellata e rumorosa ed eseguila attraverso un upscaler per ottenere qualcosa che puoi stampare, utilizzare come sfondo del desktop o condividere con gli amici con una qualità migliore. L'upscaling di un'immagine non richiede troppo tempo né richiede un computer particolarmente potente (per le soluzioni native).
Upscayl (gratuito)
Il miglior punto di partenza se stai cercando un upscaler gratuito per lavori singoli o batch, Upscayl è un upscaler di immagini gratuito e open source che viene eseguito localmente sul tuo computer Windows, Mac o Linux. Presenta un'interfaccia utente di facile utilizzo, molteplici opzioni di upscaling e la possibilità di personalizzare il tipo di immagine di output (JPG, PNG, WebP) e la posizione.
I risultati di Upscayl sono impressionanti, con opzioni per l'upscaling di fotografie standard, opere d'arte digitali e anche per rendere più nitide le immagini. Lo strumento ha funzionato meglio di alcune delle opzioni basate sul Web che abbiamo provato e i tempi di elaborazione sono stati relativamente rapidi (meno di 10 secondi sul nostro MacBook M1 Max) con opzioni per "raddoppiare l'upscaling" a risoluzioni molto più elevate.
Questo è il punto di partenza se disponi di una ricca libreria di foto o di una raccolta di opere d'arte digitale che necessita di un potenziamento. Upscayl offre alcune delle opzioni a pagamento in questo elenco una corsa per i loro soldi.
Topazio GigaPixel AI ($ 99)
Se il denaro non è un problema e desideri il miglior strumento di upscaling che il denaro possa acquistare, Gigapixel AI è l'app che fa per te. L'app promette di ingrandire le immagini fino al 600% e lo strumento si è fatto un bel nome tra i circoli professionali. Nonostante la sua reputazione, $ 99 sembra un prezzo equo da pagare se sei seriamente interessato all'upscaling e stai cercando uno strumento da acquistare a titolo definitivo. Puoi anche scaricarlo e provarlo prima di acquistarlo per vedere tu stesso i risultati.
Gigapixel AI include alcuni miglioramenti che non troverai nelle opzioni gratuite, come Face Recovery AI che è specificamente progettato per fare magie su volti a bassa risoluzione. L'app può anche rimuovere artefatti di compressione a blocchi che sono spesso presenti su immagini fortemente compresse.
Usa Gigapixel AI come app autonoma, in Photoshop come filtro o come parte del tuo flusso di lavoro Adobe Lightroom Classic. Non esiste un componente cloud in questo, l'app viene eseguita in modo nativo su computer Windows o Mac.
waifu2x o Waifu2X.io (gratuito)
Basato sul progetto waifu2x, waifu2x è uno strumento online che può essere utilizzato per migliorare le tue immagini in pochi clic. Il progetto è stato originariamente progettato per migliorare le opere d'arte in stile anime con una minima perdita di qualità, ma funziona anche con le fotografie in misura minore.
Il sito Web dimostrativo del progetto è un modulo relativamente semplice che consente di inserire un URL o caricare un'immagine, quindi selezionare il tipo di immagine, la riduzione del rumore da applicare e il livello di upscaling desiderato (fino al 200%). Sarai quindi in grado di scaricare la tua immagine. In alternativa, puoi scaricare lo strumento waifu2x da GitHub e utilizzarlo tramite la riga di comando.
È disponibile anche Waifu2X.io, che non è correlato al progetto originale ma offre un upscaling fino a 10x. Entrambi gli upscaler sono alimentati dallo stesso motore sottostante, sebbene quest'ultimo possa essere utilizzato per caricare più di un file alla volta.
Upscale.media di PixelBin (gratuito con opzioni a pagamento)
Upscale.media è un upscaler basato sul Web che consente di eseguire l'upscaling di una singola immagine fino al 400% gratuitamente. Carica semplicemente la tua immagine, lascia che lo strumento faccia il suo lavoro, quindi modifica il rapporto di upscaling o abilita l'interruttore "Migliora qualità" per risultati ancora migliori. Questi miglioramenti aggiuntivi rimuovono artefatti, bilanciano la nitidezza e tentano di mantenere un aspetto naturale.
Il servizio è alimentato da PixelBin.io, un servizio separato che consente di eseguire l'upscaling delle immagini in blocco. Crea un account gratuito e ottieni 45 crediti (buoni per 45 upscale) o opta per un livello a pagamento a partire da $ 29 al mese (300 crediti). Il servizio premium ti dà accesso a strumenti di cancellazione dello sfondo, strumenti di sovracampionamento e anche un dispositivo di rimozione della filigrana.
Questo strumento basato sul Web è orientato verso fotografie dall'aspetto naturale, quindi i nostri risultati sono stati migliori di waifu2x, ma preferiremmo comunque che Upscayl fosse eseguito localmente se il tuo computer è all'altezza del compito. Se sei di fretta o hai bisogno di migliorare qualcosa e non puoi installare un'app di terze parti, Upscale.media è l'ideale poiché non hai nemmeno bisogno di registrarti per un account.
CORRELATO: Come eseguire Stable Diffusion sul tuo PC per generare immagini AI
Aumento video
L'upscaling di una foto è come l'upscaling di un singolo fotogramma di un video, quindi l'upscaling del video è naturalmente un processo molto più dispendioso in termini di risorse. Proprio come i requisiti per la generazione di immagini AI con Stable Diffusion, un computer potente farà molto per ridurre i tempi di elaborazione durante l'esecuzione di un upscaler video nativo, in particolare quando si tratta della tua GPU.
Video2X (gratuito)
Video2X è un ottimo posto per iniziare l'upscaling dei video. Puoi utilizzare Video2X come app Windows autonoma o sfruttare la potenza di Google Colab per prendere in prestito una potente GPU per un massimo di 12 ore alla volta (istruzioni qui). L'app utilizza una combinazione di upscaler waifu2x, Anime4K, SRMD, RealSR e Real-CUGAN e si concentra principalmente sull'upscaling di opere animate tra cui anime, CGI e cartoni animati.
Detto questo, non c'è motivo per cui non puoi provare a utilizzare Video2X per tutti i tipi di progetti di upscaling. Funziona con video, GIF e immagini statiche e può eseguire l'upscaling, la pulizia e persino l'interpolazione dei frame. Puoi portare i video 360p alla risoluzione 4K o convertire un video a 30 fotogrammi al secondo in uno che gira a 120 fotogrammi al secondo.
L'app presenta un'interfaccia utente che semplifica l'impostazione di processi batch e la selezione di impostazioni di output come rapporti di ridimensionamento o tipi di ridimensionamento. Puoi anche utilizzare l'app tramite la riga di comando o distribuirla su macOS o Linux utilizzando il file contenitore con uno strumento come Docker o Podman.
CORRELATO: Guida introduttiva a Podman Desktop, un'alternativa desktop Docker open source
Topazio Video AI ($ 299)
Topaz Video AI è probabilmente il miglior strumento di upscaling video che puoi acquistare, con un prezzo da abbinare. Anche se $ 299 sembrano un sacco di soldi (lo è), Topaz Video AI è tuo da tenere una volta pagato, senza costi continui di cui parlare. Detto questo, dovrai disporre di un computer potente (con Windows o macOS) per sfruttare al meglio l'app.
L'app può produrre video 4K o 8K ottimizzando in modo intelligente i file sorgente e portando i miglioramenti tra i fotogrammi. Questo aiuta a ridurre l'effetto glitch che si ottiene eseguendo questo fotogramma per fotogramma in un upscaler di foto e quindi combinando i risultati. Funziona sia per i video "naturali", sia per le immagini generate al computer (come i filmati dei videogiochi) sia per l'animazione (come i cartoni animati e gli anime).
Oltre all'upscaling, ottieni anche una suite di strumenti per il deinterlacciamento del video, il recupero dei dettagli persi, l'interpolazione dei fotogrammi (con generazione di fotogrammi al rallentatore fino a 4x) e la riduzione del rumore per la rimozione di artefatti e grana. È una soluzione potente, che richiede una macchina potente, quindi assicurati di provarla prima di acquistarla utilizzando la prova gratuita.
Pixop (il prezzo varia)
Se stai cercando qualcosa che fornisca un livello di risultati simile a Topaz Video AI ma che funzioni anche nel cloud, Pixop potrebbe valere la pena dare un'occhiata. È un upscaler che elimina la necessità di un computer potente (o un'attesa molto lunga) esternalizzando l'elaborazione ai server di Pixop. Sono disponibili vari miglioramenti, inclusa la super risoluzione che può eseguire l'upscaling del video fino alla risoluzione 8K.
Se segui questa strada, pagherai per gigapixel. Puoi calcolare un prezzo approssimativo utilizzando la pagina dei prezzi di Pixop. Hai la possibilità di rimuovere l'interlacciamento e il rumore sgradevoli, ottimizzare l'immagine ed eseguire una conversione della frequenza dei fotogrammi, se lo desideri. È costoso, ma potrebbe essere conveniente se si desidera eseguire solo un piccolo lavoro. Con lo sconto del primo mese (25%) Pixop addebiterà solo $ 22,70 per 30 minuti di upscaling video o $ 55,03 se desideri aggiungere anche il ripristino video.
Se non vuoi pagare quasi $ 300 per Topaz Video AI, non hai il potente computer su cui eseguire l'upscaling da solo e vuoi solo eseguire un piccolo compito (come l'upscaling di un video di matrimonio o di un progetto personale), Pixop potrebbe funzionare per Voi.
waifu2x-Extension-GUI (Windows, gratuito) o waifu2x Video (Mac, gratuito)
Un'altra soluzione completamente gratuita basata sull'upscaler waifu2x sono due progetti per Windows e macOS. waitfu2x-Extension-GUI è un'app nativa di Windows che utilizza una varietà di strumenti di upscaling tra cui RTX Super Resolution di NVIDIA per l'upscaling di immagini, GIF, video standard, video animati e immagini generate al computer con interpolazione full frame e analisi dei frame.
waifu2x Video è una soluzione nativa per macOS che si appoggia a waifu2x per una soluzione che favorisce principalmente l'upscaling di video animati. È molto meno sviluppato dell'alternativa Windows ma ha un'interfaccia utente facile da usare e funziona su macOS 10.15 e versioni successive.
Buon upscaling
L'upscaling moderno dipende dall'apprendimento automatico in cui i computer sono addestrati a riconoscere le funzionalità e inserire i dettagli in modo intelligente. L'ascesa dell'intelligenza artificiale negli ultimi anni sta arrivando al culmine con progetti sempre più degni di nota come ChatGPT e strumenti per la generazione di immagini e opere d'arte che sollevano questioni etiche.
Puoi utilizzare l'intelligenza artificiale per migliorare i video e le immagini esistenti con gli strumenti descritti sopra, ma che ne dici di guardare un film generato interamente dall'intelligenza artificiale?