Как масштабировать изображение или видео с помощью ИИ: 8 лучших инструментов
Опубликовано: 2023-02-13
Превратите свои размытые старые фотографии и видео в шедевры высокого разрешения с помощью искусственного интеллекта. Машинное обучение может интеллектуально улучшать ваши неподвижные и движущиеся изображения с помощью как бесплатных, так и платных инструментов, которые работают как изначально, так и в облаке.
Что такое апскейлинг?
Апскейлинг просто означает увеличение размера изображения или видео. Это делается путем увеличения разрешения, например, перехода от источника HD (1920 × 1080) к апскейлу 4K (3840 × 2160). Масштабирование включает в себя добавление недостающих пикселей к изображению, и сама техника не является чем-то новым. Старые методы масштабирования просто включали «растягивание» изображения путем дублирования пикселей или использования дизеринга.
Современные методы используют искусственный интеллект (ИИ) для повышения уровня детализации. ИИ «обучен» распознавать определенные особенности, такие как лица, облака, трава или деревья, чтобы можно было делать прогнозы о том, как должна выглядеть версия изображения в более высоком качестве. Эти методы прошли долгий путь, но они все еще далеки от совершенства. Сопоставление техники масштабирования с исходным изображением или видео может кардинально изменить результаты.
Вы можете использовать инструменты масштабирования ИИ, которые работают как локально на вашем компьютере, так и в облаке.
Масштабирование изображения
Возьмите изображение с низким разрешением, пикселизированное и зашумленное изображение и пропустите его через средство масштабирования, чтобы получить что-то, что вы можете распечатать, использовать в качестве фона рабочего стола или поделиться с друзьями в лучшем качестве. Масштабирование изображения не занимает много времени и не требует особенно мощного компьютера (для нативных решений).
Апскейл (бесплатно)
Лучшее место для начала, если вы ищете бесплатный апскейлер для одиночных или пакетных заданий, Upscayl — это бесплатный апскейлер изображений с открытым исходным кодом, который работает локально на вашем компьютере с Windows, Mac или Linux. Он имеет простой в использовании пользовательский интерфейс, несколько параметров масштабирования и возможность настраивать тип выходного изображения (JPG, PNG, WebP) и местоположение.
Результаты от Upscayl впечатляют, с возможностью масштабирования стандартных фотографий, цифровых изображений и повышения резкости изображений. Инструмент работал лучше, чем некоторые из опробованных нами веб-опций, и время обработки было относительно быстрым (менее 10 секунд на нашем M1 Max MacBook) с возможностью «двойного увеличения» до гораздо более высоких разрешений.
Это то место, с которого стоит начать, если у вас есть большая фотобиблиотека или коллекция цифровых произведений искусства, которые нуждаются в масштабировании. Upscayl превосходит некоторые платные опции в этом списке.
Топаз GigaPixel AI (99 долларов)
Если деньги не проблема, и вы хотите лучший инструмент для масштабирования, который можно купить за деньги, Gigapixel AI — это приложение для вас. Приложение обещает масштабировать изображения до 600%, и этот инструмент зарекомендовал себя в профессиональных кругах. Несмотря на свою репутацию, 99 долларов кажутся справедливой ценой, если вы серьезно относитесь к апскейлингу и ищете инструмент, который можно купить сразу. Вы также можете загрузить его и попробовать, прежде чем покупать, чтобы увидеть результаты для себя.
Gigapixel AI включает в себя некоторые улучшения, которые вы не найдете в бесплатных опциях, например, AI для восстановления лиц, который специально разработан для волшебства на лицах с низким разрешением. Приложение также может удалять блочные артефакты сжатия, которые часто присутствуют на сильно сжатых изображениях.
Используйте Gigapixel AI как отдельное приложение, в Photoshop в качестве фильтра или как часть рабочего процесса Adobe Lightroom Classic. В этом нет облачного компонента, приложение изначально работает на компьютерах с Windows или Mac.
waifu2x или Waifu2X.io (бесплатно)
Основанный на проекте waifu2x, waifu2x — это онлайн-инструмент, который можно использовать для масштабирования изображений всего за несколько кликов. Первоначально проект был разработан для повышения качества художественных работ в стиле аниме с минимальной потерей качества, но он также в меньшей степени работает с фотографиями.
Демонстрационный веб-сайт проекта представляет собой относительно простую форму, которая позволяет вам ввести URL-адрес или загрузить изображение, а затем выбрать тип изображения, уровень шумоподавления и желаемый уровень масштабирования (до 200%). После этого вы сможете загрузить свое изображение. Кроме того, вы можете загрузить инструмент waifu2x с GitHub и использовать его через командную строку.
Также доступен Waifu2X.io, который не имеет отношения к оригинальному проекту, но предлагает до 10-кратного масштабирования. Оба апскейлера работают на одном и том же базовом движке, хотя последний можно использовать для загрузки более одного файла за раз.
Upscale.media от PixelBin (бесплатно с платными опциями)
Upscale.media — это веб-инструмент для масштабирования, который позволяет бесплатно масштабировать отдельное изображение до 400%. Просто загрузите свое изображение, позвольте инструменту сделать свою работу, а затем настройте коэффициент масштабирования или включите переключатель «Повысить качество», чтобы получить еще лучшие результаты. Эти дополнительные улучшения удаляют артефакты, балансируют резкость и пытаются сохранить естественный вид.
Сервис работает на PixelBin.io, отдельном сервисе, который позволяет вам массово масштабировать изображения. Создайте бесплатную учетную запись и получите 45 кредитов (хорошо для 45 апскейлов) или выберите платный уровень от 29 долларов в месяц (300 кредитов). Премиум-сервис предоставляет вам доступ к инструментам стирания фона, инструментам суперсэмплинга и удалению водяных знаков.
Этот веб-инструмент предназначен для естественно выглядящих фотографий, поэтому наши результаты были лучше, чем у waifu2x, но мы все же предпочли бы, чтобы Upscayl работал локально, если ваш компьютер справляется с этой задачей. Если вы спешите или вам нужно что-то улучшить, и вы не можете установить стороннее приложение, Upscale.media идеально подходит, поскольку вам даже не нужно регистрировать учетную запись.
СВЯЗАННЫЕ С: Как запустить стабильную диффузию на вашем ПК для создания изображений AI
Масштабирование видео
Масштабирование фотографии похоже на масштабирование одного кадра видео, поэтому масштабирование видео, естественно, является гораздо более ресурсоемким процессом. Подобно требованиям для создания изображений AI с помощью Stable Diffusion, мощный компьютер будет иметь большое значение для сокращения времени обработки при запуске собственного видеоапскейлера, особенно когда речь идет о вашем графическом процессоре.
Видео2Х (бесплатно)
Video2X — отличное место для начала масштабирования видео. Вы можете использовать Video2X как отдельное приложение для Windows или использовать возможности Google Colab, чтобы заимствовать мощный графический процессор на срок до 12 часов (инструкции здесь). Приложение использует комбинацию апскейлеров waifu2x, Anime4K, SRMD, RealSR и Real-CUGAN и в основном ориентировано на апскейлинг анимационных работ, включая аниме, компьютерную графику и мультфильмы.
Тем не менее, нет никаких причин, по которым вы не можете попробовать использовать Video2X для всех видов проектов масштабирования. Он работает с видео, GIF-файлами и статическими изображениями и может масштабировать, очищать и даже интерполировать кадры. Вы можете преобразовать видео 360p в разрешение 4K или преобразовать видео со скоростью 30 кадров в секунду в видео со скоростью 120 кадров в секунду.
Приложение имеет пользовательский интерфейс, который упрощает настройку пакетных заданий и выбор параметров вывода, таких как коэффициенты масштабирования или типы масштабирования. Вы также можете использовать приложение через командную строку или развернуть его в macOS или Linux, используя файл-контейнер с помощью таких инструментов, как Docker или Podman.
СВЯЗАННЫЕ С: Начало работы с Podman Desktop, альтернативой Docker Desktop с открытым исходным кодом
Топаз Видео ИИ ($299)
Topaz Video AI, вероятно, лучший инструмент для масштабирования видео, который вы можете купить, с соответствующей ценой. Хотя 299 долларов кажутся большими деньгами (это так), Topaz Video AI остается за вами, как только вы заплатите за него, без каких-либо текущих сборов. Тем не менее, вам понадобится мощный компьютер (под управлением Windows или macOS), чтобы максимально использовать приложение.
Приложение может создавать видео 4K или 8K за счет интеллектуальной оптимизации исходных файлов и переноса улучшений между кадрами. Это помогает уменьшить эффект сбоев, который вы получаете, выполняя это кадр за кадром в фотоапскейлере, а затем объединяя результаты. Он работает как с «натуральными» видео, так и с компьютерными изображениями (например, видеоиграми) и анимацией (например, мультфильмами и аниме).
Помимо апскейлинга, вы также получаете набор инструментов для деинтерлейсинга видео, восстановления потерянных деталей, интерполяции кадров (с 4-кратным замедлением кадров) и шумоподавления для удаления артефактов и зернистости. Это мощное решение, для которого требуется мощная машина, поэтому обязательно попробуйте его, прежде чем покупать с помощью бесплатной пробной версии.
Пиксоп (цена варьируется)
Если вы ищете что-то, что обеспечивает аналогичный уровень результатов с Topaz Video AI, но также работает в облаке, возможно, вам стоит взглянуть на Pixop. Это апскейлер, который устраняет потребность в мощном компьютере (или очень долгое ожидание) за счет аутсорсинга обработки на серверах Pixop. Доступны различные улучшения, в том числе сверхвысокое разрешение, позволяющее повышать разрешение видео до разрешения 8K.
Если вы пойдете по этому пути, вы будете платить за гигапиксель. Вы можете определить приблизительную цену на странице цен Pixop. У вас есть возможность удалить неприглядную чересстрочную развертку и шум, оптимизировать изображение и выполнить преобразование частоты кадров, если хотите. Это дорого, но может быть рентабельно, если вы хотите выполнить только небольшую работу. Со скидкой в первом месяце (25%) Pixop будет взимать всего 22,70 доллара США за 30-минутное масштабирование видео или 55,03 доллара США, если вы также хотите добавить восстановление видео.
Если вы не хотите платить почти 300 долларов за Topaz Video AI, вам не хватает мощного компьютера для самостоятельного масштабирования, и вы хотите выполнять только небольшую задачу (например, масштабирование свадебного видео или личного проекта), Pixop может подойти для ты.
waifu2x-Extension-GUI (Windows, бесплатно) или waifu2x Video (Mac, бесплатно)
Еще одно совершенно бесплатное решение на основе апскейлера waifu2x — два проекта для Windows и macOS. waitfu2x-Extension-GUI — это собственное приложение для Windows, в котором используются различные инструменты масштабирования, в том числе NVIDIA RTX Super Resolution, для масштабирования изображений, GIF-файлов, стандартного видео, анимированного видео и компьютерных изображений с полнокадровой интерполяцией и анализом кадров.
waifu2x Video — это собственное решение для macOS, основанное на waifu2x для решения, которое в основном поддерживает масштабирование анимированного видео. Он намного менее развит, чем альтернатива Windows, но имеет простой в использовании пользовательский интерфейс и работает на macOS 10.15 и выше.
Счастливый апскейлинг
Современное масштабирование зависит от машинного обучения, когда компьютеры обучены распознавать функции и разумно заполнять детали. Рост ИИ за последние несколько лет достигает апогея с появлением все более примечательных проектов, таких как ChatGPT, и инструментов для создания изображений и иллюстраций, которые поднимают этические вопросы.
Вы можете использовать ИИ для улучшения существующих видео и изображений с помощью описанных выше инструментов, но как насчет просмотра фильма, полностью созданного ИИ?