Comment améliorer l'IA d'une image ou d'une vidéo : 8 meilleurs outils
Publié: 2023-02-13
Transformez vos anciennes photos et vidéos floues en chefs-d'œuvre haute résolution grâce à la puissance de l'intelligence artificielle. L'apprentissage automatique peut améliorer intelligemment vos images fixes et animées, avec des outils gratuits et payants disponibles qui s'exécutent en mode natif et dans le cloud.
Qu'est-ce que la mise à l'échelle ?
La mise à l'échelle signifie simplement augmenter la taille d'une image ou d'une vidéo. Cela se fait en agrandissant la résolution, en passant par exemple d'une source HD (1920x1080) à un upscale 4K (3840x2160). La mise à l'échelle consiste à ajouter des pixels manquants à une image, et la technique elle-même n'a rien de nouveau. Les techniques de mise à l'échelle plus anciennes impliquent simplement «d'étirer» l'image en dupliquant des pixels ou en utilisant le tramage.
Les techniques modernes utilisent l'intelligence artificielle (IA) pour ajouter un niveau de détail supérieur. L'IA est "formée" pour reconnaître certaines caractéristiques comme les visages, les nuages, l'herbe ou les arbres afin que des prédictions puissent être faites sur ce à quoi une version de meilleure qualité de l'image devrait ressembler. Ces techniques ont parcouru un long chemin, mais elles sont encore loin d'être parfaites. Faire correspondre la technique de mise à l'échelle à l'image ou à la vidéo source peut modifier considérablement les résultats.
Vous pouvez utiliser des outils de mise à l'échelle de l'IA qui s'exécutent à la fois localement sur votre ordinateur ou dans le cloud.
Mise à l'échelle de l'image
Prenez une image basse résolution, pixélisée et bruyante et passez-la dans un upscaler pour obtenir quelque chose que vous pouvez imprimer, utiliser comme arrière-plan de bureau ou partager avec des amis avec une meilleure qualité. L'upscaling d'une image ne prend pas trop de temps et ne nécessite pas un ordinateur particulièrement puissant (pour les solutions natives).
Upscail (Gratuit)
Le meilleur endroit pour commencer si vous recherchez un upscaler gratuit pour des travaux simples ou par lots, Upscayl est un upscaler d'image gratuit et open source qui s'exécute localement sur votre machine Windows, Mac ou Linux. Il dispose d'une interface utilisateur facile à utiliser, de plusieurs options de mise à l'échelle et de la possibilité de personnaliser le type d'image de sortie (JPG, PNG, WebP) et l'emplacement.
Les résultats d'Upscayl sont impressionnants, avec des options pour mettre à l'échelle des photographies standard, des illustrations numériques et des images plus nettes. L'outil a fait mieux que certaines des options Web que nous avons essayées, et les temps de traitement étaient relativement rapides (moins de 10 secondes sur notre MacBook M1 Max) avec des options pour "doubler la mise à l'échelle" à des résolutions beaucoup plus élevées.
C'est le point de départ si vous disposez d'une importante bibliothèque de photos ou d'une collection d'œuvres d'art numériques nécessitant une mise à l'échelle. Upscayl donne à certaines des options payantes de cette liste une course pour leur argent.
Topaze GigaPixel AI (99 $)
Si l'argent n'est pas un problème et que vous voulez le meilleur outil de mise à l'échelle que l'argent puisse acheter, Gigapixel AI est l'application qu'il vous faut. L'application promet d'améliorer les images jusqu'à 600 %, et l'outil s'est fait un nom parmi les cercles professionnels. Malgré sa réputation, 99 $ semble être un juste prix à payer si vous êtes sérieux au sujet de la mise à l'échelle et que vous recherchez un outil d'achat pur et simple. Vous pouvez également le télécharger et l'essayer avant d'acheter pour voir les résultats par vous-même.
Gigapixel AI inclut certaines améliorations que vous ne trouverez pas dans les options gratuites, comme Face Recovery AI qui est spécialement conçue pour faire de la magie sur les visages à basse résolution. L'application peut également supprimer les artefacts de compression en blocs qui sont souvent présents sur les images fortement compressées.
Utilisez Gigapixel AI en tant qu'application autonome, dans Photoshop en tant que filtre ou dans le cadre de votre flux de travail Adobe Lightroom Classic. Il n'y a pas de composant cloud dans celui-ci, l'application s'exécute nativement sur les ordinateurs Windows ou Mac.
waifu2x ou Waifu2X.io (gratuit)
Basé sur le projet waifu2x, waifu2x est un outil en ligne permettant de mettre à l'échelle vos images en quelques clics. Le projet a été initialement conçu pour améliorer les illustrations de style anime avec une perte de qualité minimale, mais il fonctionne également avec des photographies dans une moindre mesure.
Le site Web de démonstration du projet est un formulaire relativement simple qui vous permet de saisir une URL ou de télécharger une image, puis de sélectionner le type d'image, la quantité de réduction de bruit à appliquer et le niveau de mise à l'échelle souhaité (jusqu'à 200%). Vous pourrez alors télécharger votre image. Alternativement, vous pouvez télécharger l'outil waifu2x depuis GitHub et l'utiliser via la ligne de commande.
Waifu2X.io est également disponible, qui n'est pas lié au projet d'origine mais offre une mise à l'échelle jusqu'à 10x. Les deux upscalers sont alimentés par le même moteur sous-jacent, bien que ce dernier puisse être utilisé pour télécharger plus d'un fichier à la fois.
Upscale.media par PixelBin (gratuit avec options payantes)
Upscale.media est un upscaler basé sur le Web qui vous permet de mettre à l'échelle une image individuelle jusqu'à 400 % gratuitement. Téléchargez simplement votre image, laissez l'outil faire son travail, puis ajustez le rapport de mise à l'échelle ou activez la bascule "Améliorer la qualité" pour des résultats encore meilleurs. Ces améliorations supplémentaires suppriment les artefacts, équilibrent la netteté et tentent de conserver un aspect naturel.
Le service est alimenté par PixelBin.io, un service distinct qui vous permet de mettre à l'échelle des images en masse. Créez un compte gratuit et obtenez 45 crédits (valables pour 45 mises à niveau) ou optez pour un niveau payant à partir de 29 $/mois (300 crédits). Le service premium vous donne accès à des outils d'effacement d'arrière-plan, à des outils de suréchantillonnage et à un outil de suppression de filigrane.
Cet outil basé sur le Web est orienté vers des photographies d'aspect naturel, donc nos résultats étaient meilleurs que waifu2x mais nous préférerions toujours Upscayl exécuté localement si votre ordinateur est à la hauteur de la tâche. Si vous êtes pressé ou avez besoin de mettre à niveau quelque chose et que vous ne pouvez pas installer une application tierce, Upscale.media est idéal car vous n'avez même pas besoin de créer un compte.
CONNEXION: Comment exécuter une diffusion stable sur votre PC pour générer des images AI
Mise à l'échelle vidéo
La mise à l'échelle d'une photo est comme la mise à l'échelle d'une seule image d'une vidéo, donc la mise à l'échelle de la vidéo est naturellement un processus beaucoup plus gourmand en ressources. Tout comme les exigences pour générer des images AI avec Stable Diffusion, un ordinateur puissant contribuera grandement à réduire les temps de traitement lors de l'exécution d'un upscaler vidéo natif, en particulier en ce qui concerne votre GPU.
Vidéo2X (Gratuit)
Video2X est un excellent endroit pour commencer à mettre à l'échelle des vidéos. Vous pouvez soit utiliser Video2X en tant qu'application Windows autonome, soit en tirant parti de la puissance de Google Colab pour emprunter un GPU puissant jusqu'à 12 heures à la fois (instructions ici). L'application utilise une combinaison de convertisseurs ascendants waifu2x, Anime4K, SRMD, RealSR et Real-CUGAN et se concentre principalement sur la mise à l'échelle des œuvres animées, notamment les dessins animés, les images de synthèse et les dessins animés.
Cela dit, il n'y a aucune raison pour que vous ne puissiez pas essayer d'utiliser Video2X pour toutes sortes de projets de mise à l'échelle. Il fonctionne avec des vidéos, des GIF et des images statiques et peut mettre à l'échelle, nettoyer et même interpoler des images. Vous pouvez prendre des vidéos 360p en résolution 4K ou convertir une vidéo à 30 images par seconde en une vidéo qui tourne à 120 images par seconde.
L'application dispose d'une interface utilisateur qui facilite la configuration des tâches par lots et la sélection des paramètres de sortie tels que les taux de mise à l'échelle ou les types de mise à l'échelle. Vous pouvez également utiliser l'application via la ligne de commande ou déployer sur macOS ou Linux en utilisant le fichier conteneur avec un outil comme Docker ou Podman.
CONNEXION: Premiers pas avec Podman Desktop, une alternative Open Source Docker Desktop
IA vidéo topaze (299 $)
Topaz Video AI est probablement le meilleur outil de mise à l'échelle vidéo que vous puissiez acheter, avec un prix correspondant. Bien que 299 $ semblent être beaucoup d'argent (c'est le cas), Topaz Video AI est à vous une fois que vous l'avez payé, sans frais permanents à proprement parler. Cela dit, vous aurez besoin d'un ordinateur puissant (exécutant Windows ou macOS) pour tirer le meilleur parti de l'application.
L'application peut produire des vidéos 4K ou 8K en optimisant intelligemment les fichiers source et en apportant des améliorations entre les images. Cela aide à réduire l'effet glitchy que vous obtenez en faisant cela image par image dans un upscaler de photo fixe, puis en combinant les résultats. Cela fonctionne à la fois pour les vidéos "naturelles", les images générées par ordinateur (comme les séquences de jeux vidéo) et les animations (comme les dessins animés et les anime).
En plus de la mise à l'échelle, vous disposez également d'une suite d'outils pour désentrelacer la vidéo, récupérer les détails perdus, interpoler les images (avec jusqu'à 4 fois la génération d'images au ralenti) et la réduction du bruit pour supprimer les artefacts et le grain. C'est une solution puissante, qui nécessite une machine puissante, alors assurez-vous de l'essayer avant d'acheter en utilisant l'essai gratuit.
Pixop (le prix varie)
Si vous recherchez quelque chose qui fournit un niveau de résultats similaire à Topaz Video AI mais qui fonctionne également dans le cloud, Pixop pourrait valoir le coup d'œil. C'est un upscaler qui supprime l'exigence d'un ordinateur puissant (ou une très longue attente) en externalisant le traitement vers les serveurs de Pixop. Diverses améliorations sont disponibles, y compris la super-résolution qui peut mettre à l'échelle la vidéo jusqu'à une résolution de 8K.
Si vous suivez cette voie, vous paierez par gigapixel. Vous pouvez calculer un prix approximatif en utilisant la page de tarification Pixop. Vous avez la possibilité de supprimer les entrelacs et le bruit disgracieux, d'optimiser l'image et d'effectuer une conversion de fréquence d'images si vous le souhaitez. C'est cher, mais cela pourrait être rentable si vous ne souhaitez effectuer qu'un petit travail. Avec la remise du premier mois (25%), Pixop ne facturera que 22,70 $ pour 30 minutes de mise à l'échelle vidéo, ou 55,03 $ si vous souhaitez également ajouter la restauration vidéo.
Si vous ne voulez pas payer près de 300 $ pour Topaz Video AI, que vous n'avez pas l'ordinateur puissant sur lequel effectuer vous-même la mise à l'échelle et que vous ne voulez effectuer qu'une petite tâche (comme la mise à l'échelle d'une vidéo de mariage ou d'un projet personnel), Pixop pourrait fonctionner pour toi.
waifu2x-Extension-GUI (Windows, gratuit) ou waifu2x Video (Mac, gratuit)
Une autre solution entièrement gratuite basée sur l'upscaler waifu2x est deux projets pour Windows et macOS. waitfu2x-Extension-GUI est une application native Windows qui utilise une variété d'outils de mise à l'échelle, notamment la super résolution RTX de NVIDIA pour mettre à l'échelle des images, des GIF, des vidéos standard, des vidéos animées et des images générées par ordinateur avec interpolation et analyse d'images complètes.
waifu2x Video est une solution native macOS qui s'appuie sur waifu2x pour une solution qui favorise principalement la mise à l'échelle de la vidéo animée. Il est beaucoup moins développé que l'alternative Windows, mais il possède une interface utilisateur facile à utiliser et fonctionne sur macOS 10.15 et supérieur.
Bonne mise à l'échelle
La mise à l'échelle moderne dépend de l'apprentissage automatique où les ordinateurs sont formés pour reconnaître les fonctionnalités et remplir les détails intelligemment. L'essor de l'IA au cours des dernières années atteint son paroxysme avec des projets de plus en plus remarquables comme ChatGPT et des outils de génération d'images et d'œuvres d'art qui soulèvent des questions éthiques.
Vous pouvez utiliser l'IA pour améliorer des vidéos et des images existantes avec les outils présentés ci-dessus, mais qu'en est-il de regarder un film entièrement généré par l'IA ?