Ako môže vylepšenie AI vytvárať lepšie fotografie

Obsah:

Ako môže vylepšenie AI vytvárať lepšie fotografie
Ako môže vylepšenie AI vytvárať lepšie fotografie
Anonim

Kľúčové poznatky

  • Nové pokroky vo zväčšovaní obrázkov by mohli pomôcť so všetkým, od rodinných fotografií po lekárske snímky.
  • Výskumníci spoločnosti Google oznámili, že urobili prelom v používaní AI na zvýšenie rozlíšenia fotografií.
  • Jeden odborník však hovorí, že pre fotografov, ktorí nehybne stoja, nemusí byť softvér na zvýšenie rozlíšenia potrebný.
Image
Image

Nové techniky, ktoré zväčšujú obrázky pomocou AI, by mohli zlepšiť všetko od fotografií po grafiku videohier, hovoria odborníci.

Výskumníci spoločnosti Google nedávno diskutovali o prelomových objavoch, ktoré dosiahli v oblasti zvyšovania rozlíšenia obrázkov. Vedci použili model strojového učenia na premenu fotografie s nízkym rozlíšením na detailný obrázok s vysokým rozlíšením. Je to súčasť rastúceho trendu používania AI na zlepšenie obrázkov.

„Vidíme nárast upscalingu poháňaného umelou inteligenciou, najmä v hrách, kde technológie ako NVIDIA DLSS využívajú strojové učenie na vytvorenie obrazu s oveľa vyšším rozlíšením, ktoré konkuruje kvalite natívnych obrazov a niekedy ju prevyšuje.,“povedal odborník na zobrazovanie Ionut-Alexandru Popa pre Lifewire v e-mailovom rozhovore.

"Tento typ upscalingu funguje skvele v počítačových hrách, kde dokáže spotrebovať menej zdrojov ako priamo vykresľovať obraz vyššej kvality."

Vytváranie pixelu

Google skúmal spôsob, ako zväčšiť fotografie pomocou metódy nazývanej difúzne modely.

Spoločnosť tvrdí, že táto technika zlepšuje existujúce technológie, keď sú ľudia požiadaní, aby posúdili výsledky. Jeden prístup, ktorý Google použil, sa nazýva SR3 alebo Super-Resolution via Repeated Refinement.

"SR3 je difúzny model s vysokým rozlíšením, ktorý berie ako vstup obrázok s nízkym rozlíšením a vytvára zodpovedajúci obrázok s vysokým rozlíšením z čistého šumu," napísali výskumníci Google v blogovom príspevku."Model je trénovaný na procese poškodenia obrazu, v ktorom sa k obrazu s vysokým rozlíšením postupne pridáva šum, až kým nezostane iba čistý šum."

Techniky upscalingu nie sú nové a bežne sa používajú v aplikáciách na úpravu fotografií, povedala Popa.

"Existuje veľa situácií, keď potrebujete obrázok vo vyššom rozlíšení, preto sa na vytvorenie pixelov medzi existujúcimi používa upscaling," dodal. „Väčšina ľudí si to neuvedomuje, ale keď pozerajú televíziu na svojej 4K obrazovke, video signál 1080p sa automaticky prevzorkuje tak, aby pokryl celú obrazovku. Automaticky to urobí váš televízor.“

Na „uhádnutie“obsahu nových pixelov sa používa veľa súčasných techník, aby výsledný obrázok vyzeral dobre, povedala Popa.

„V súčasnosti sú najpoužívanejšími algoritmami na prevzorkovanie obrazu bilineárne a bikubické metódy, ktoré zaisťujú plynulý prechod medzi susednými pixelmi s postupne sa meniacou farbou, avšak táto metóda často vedie k strate ostrosti,“dodal."Čiastočne sa to kompenzuje použitím prechodu doostrenia na zväčšený obrázok."

Existuje veľa situácií, keď potrebujete obrázok vo vyššom rozlíšení, preto sa na vytvorenie pixelov medzi existujúcimi používa zväčšenie.

Upscaling obrazu je rozhodujúci pre fungovanie zábavy, médií a internetu, povedal fotograf Sebastien Coell pre Lifewire v e-mailovom rozhovore.

„Napríklad namiesto toho, aby ste museli mať viacero veľkostí obrázkov pre webovú stránku, napríklad jeden na použitie v telefóne, jeden na tablet,“povedal, „ak dokážete upscalovať ten obrázok s rozlíšením 1080p na 2 kB. alebo 4k a ten obrázok z telefónu na tablet a 1080p, zrazu ste znížili počet potrebných obrázkov zo 6 na 2."

"Ušetríte aj priestor potrebný na veľké súbory s veľkosťou 2k a 4k, čím znížite celkovú veľkosť potrebného úložiska súborov približne o 70 – 90 %."

Nielen pre TV

Prevzorkovanie fotografií môže tiež zvýšiť kvalitu fotografií a môže dokonca pomôcť pri medicínskom zobrazovaní. Vývojári softvéru tvrdia, že upscaling môže zvýšiť rozlíšenie obrázkov bez akéhokoľvek zníženia kvality.

Ale Matic Broz, zakladateľ fotografickej webovej stránky Photutorial, povedal Lifewire v e-mailovom rozhovore, že skutočné výsledky závisia od použitého softvéru.

„Umelá inteligencia si v poslednej dobe našla cestu do upscalingu obrazu, aj keď na mňa zatiaľ nezapôsobila,“dodal.

Broz povedal, že najlepší softvér na zvýšenie rozlíšenia, ktorý používa, je AI Image Enlarger od Vance AI.

Image
Image

„Dokonca ani ich 8-násobný zväčšený obraz neprináša žiadny výrazný šum (to je 64-násobné zvýšenie rozlíšenia),“povedal. "Očakávam, že algoritmy sa budú v nasledujúcich rokoch len zlepšovať, čo umožní ešte väčšie zvýšenie."

Pre statických fotografov Broz povedal, že je otvorenou otázkou, či sú potrebné vylepšenia obrazu.

„Vývojári fotoaparátov neustále zlepšujú rozlíšenie snímačov fotoaparátov, teraz dokonca s rozlíšením 100 MP+,“dodal. „Osobne som používal 24 MP a približne 50 MP a nikdy som necítil potrebu väčších obrázkov, dokonca ani veľkých výtlačkov.“

Odporúča: