Как AI Upscaling може да направи по-добри снимки

Съдържание:

Как AI Upscaling може да направи по-добри снимки
Как AI Upscaling може да направи по-добри снимки
Anonim

Ключови изводи

  • Новите подобрения в уголемяването на изображения могат да помогнат с всичко - от семейни снимки до медицински изображения.
  • Изследователите на Google обявиха, че са направили пробив в използването на AI за увеличаване на разделителната способност на снимките.
  • Но един експерт казва, че софтуерът за мащабиране може да не е необходим за фотографите.
Image
Image

Нови техники, които увеличават изображения с помощта на AI, биха могли да подобрят всичко - от снимки до графики на видеоигри, казват експерти.

Изследователите на Google наскоро обсъдиха пробивите, които са постигнали в увеличаването на разделителната способност на изображенията. Учените са използвали модел за машинно обучение, за да превърнат снимка с ниска разделителна способност в детайлна картина с висока разделителна способност. Това е част от нарастващата тенденция за използване на AI за подобряване на изображенията.

Виждаме нарастване на ъпскейлинга, задвижван от AI, особено в игрите, където технологии като NVIDIA DLSS използват машинно обучение, за да пресъздадат изображение с много по-висока разделителна способност, което съперничи и понякога надвишава качеството на естествените изображения “, каза експертът по изображения Йонут-Александру Попа пред Lifewire в интервю по имейл.

"Този тип мащабиране работи чудесно в компютърни игри, където успява да използва по-малко ресурси, отколкото директно изобразяване на изображение с по-високо качество."

Създаване на Pixel

Google проучва начин за увеличаване на мащаба на снимки с помощта на метод, наречен дифузионни модели.

Компанията твърди, че тази техника подобрява съществуващите технологии, когато хората са помолени да преценят резултатите. Един подход, използван от Google, се нарича SR3 или Super-Resolution via Repeated Refinement.

"SR3 е дифузионен модел със супер разделителна способност, който приема като вход изображение с ниска разделителна способност и изгражда съответното изображение с висока разделителна способност от чист шум", пишат изследователите на Google в публикацията в блога.„Моделът е обучен на процес на повреждане на изображението, при който постепенно се добавя шум към изображение с висока разделителна способност, докато остане само чист шум.“

Техниките за мащабиране не са нови и често се използват в приложения за редактиране на снимки, каза Попа.

"Има много ситуации, когато имате нужда от изображение с по-висока разделителна способност, така че мащабирането се използва за създаване на пиксели между съществуващите", добави той. „Повечето хора не осъзнават, но когато гледат телевизия на своя 4K екран, 1080p видеосигналът автоматично се увеличава, за да покрие целия екран. Това се прави автоматично от вашия телевизор.“

Използват се много съвременни техники за „отгатване“на съдържанието на новите пиксели, така че полученото изображение да изглежда добре, каза Попа.

"В момента най-използваните алгоритми за мащабиране на изображения са билинейни и бикубични методи, които осигуряват непрекъснат преход между съседни пиксели, с постепенно променящ се цвят, но този метод често води до загуба на острота", добави той.„Това се компенсира частично чрез прилагане на преминаване на изостряне върху увеличеното изображение.“

Има много ситуации, когато имате нужда от изображение с по-висока разделителна способност, така че мащабирането се използва за създаване на пиксели между съществуващите.

Повишаването на изображението е от решаващо значение за това как работят развлеченията, медиите и интернет, каза фотографът Себастиен Коел пред Lifewire в интервю по имейл.

"Например, вместо да се налага да имате няколко размера на изображението за една уеб страница, като един за използване на телефон, един за таблет," каза той, "ако можете да увеличите това 1080p изображение до 2k или 4k и това изображение на телефона към таблет и 1080p, внезапно сте намалили броя на необходимите изображения от 6 на 2."

"Също така ще спестите необходимото файлово пространство от големите 2k и 4k файлове, така че ще намалите необходимия ви общ размер за съхранение на файлове с около 70-90%."

Не само за телевизия

Повишаването на размера на снимките също може да повиши качеството на снимките и дори може да помогне с медицински изображения. Разработчиците на софтуер казват, че увеличаването на мащаба може да увеличи разделителната способност на изображенията без никакво влошаване на качеството.

Но Matic Broz, основателят на уебсайта за фотография Photoutorial, каза пред Lifewire в интервю по имейл, че действителните резултати зависят от използвания софтуер.

"Напоследък изкуственият интелект намери пътя си към мащабирането на изображения, въпреки че досега не съм впечатлен от него", добави той.

Броз каза, че най-добрият софтуер за мащабиране, който е използвал, е AI Image Enlarger от Vance AI.

Image
Image

"Дори техният 8x ъпскейлер на изображението не внася значителен шум (това е 64x увеличение на разделителната способност)", каза той. „Очаквам алгоритмите да се подобряват само през следващите години, позволявайки още по-голямо мащабиране.“

За фотографите Броз каза, че е открит въпросът дали са необходими средства за увеличаване на изображението.

"Разработчиците на камери непрекъснато подобряват разделителната способност на сензорите на камерата, вече дори с резолюция 100MP+", добави той. „Лично аз съм използвал 24MP и около 50MP и никога не съм изпитвал нужда от по-големи изображения, дори и от големи разпечатки.“

Препоръчано: