Kuidas AI ülesskaleerimine võiks teha paremaid fotosid

Sisukord:

Kuidas AI ülesskaleerimine võiks teha paremaid fotosid
Kuidas AI ülesskaleerimine võiks teha paremaid fotosid
Anonim

Võtmed kaasavõtmiseks

  • Uued edusammud piltide suurendamisel võivad aidata kõigega alates perefotodest kuni meditsiinilise pildistamiseni.
  • Google'i teadlased teatasid, et on teinud läbimurdeid tehisintellekti kasutamisel fotode eraldusvõime suurendamiseks.
  • Kuid üks ekspert ütleb, et fotograafide jaoks ei pruugi tarkvara suurendamine vajalik olla.
Image
Image

Eksperdid ütlevad, et uued tehnikad, mis suurendavad pilte tehisintellekti abil, võivad parandada kõike alates fotodest kuni videomängude graafikani.

Google'i teadlased arutasid hiljuti läbimurdeid, mida nad on teinud pildi eraldusvõime suurendamisel. Teadlased kasutasid masinõppe mudelit, et muuta madala eraldusvõimega foto üksikasjalikuks kõrge eraldusvõimega pildiks. See on osa kasvavast trendist kasutada AI-d piltide täiustamiseks.

Me näeme AI-toega ülesskaleerimise tõusu, eriti mängudes, kus tehnoloogiad, nagu NVIDIA DLSS, kasutavad masinõpet, et luua palju suurema eraldusvõimega pilt, mis konkureerib ja mõnikord isegi ületab loomulike piltide kvaliteediga.”, ütles pildiekspert Ionut-Alexandru Popa Lifewire'ile e-posti teel antud intervjuus.

"Seda tüüpi ülesskaleerimine töötab suurepäraselt arvutimängudes, kus see suudab kasutada vähem ressursse kui kvaliteetsema pildi otse renderdamisel."

Piksli loomine

Google on uurinud võimalust fotode täiustamiseks, kasutades meetodit, mida nimetatakse difusioonimudeliteks.

Ettevõte väidab, et see tehnika parandab olemasolevaid tehnoloogiaid, kui inimestel palutakse tulemusi hinnata. Üks Google'i kasutatud lähenemisviis on SR3 ehk ülilahutusvõime korduva täpsustamise kaudu.

"SR3 on ülieraldusvõimega difusioonimudel, mis võtab sisendiks madala eraldusvõimega pildi ja loob vastava kõrge eraldusvõimega pildi puhtast mürast, " kirjutasid Google'i teadlased blogipostituses."Mudel on koolitatud pildi kahjustamise protsessis, mille käigus lisatakse kõrge eraldusvõimega kujutisele järk-järgult müra, kuni järele jääb ainult puhas müra."

Skaleerimise tehnikad ei ole uued ja neid kasutatakse sageli fototöötlusrakendustes, ütles Popa.

"On palju olukordi, kui vajate kõrgema eraldusvõimega pilti, nii et suurendamist kasutatakse pikslite loomiseks olemasolevate vahele," lisas ta. "Enamik inimesi ei saa sellest aru, kuid kui nad vaatavad telerit oma 4K-ekraanilt, suurendatakse 1080p videosignaali automaatselt, et katta kogu ekraan. Seda teeb teie teler automaatselt."

Uute pikslite sisu "arvamiseks" kasutatakse paljusid praeguseid tehnikaid, et tulemuseks olev pilt näeks hea välja, ütles Popa.

"Praegu on enim kasutatud pildi suurendamise algoritmid bilineaarsed ja kahekuubilised meetodid, mis tagavad pideva ülemineku kõrvutiasetsevate pikslite vahel järk-järgult muutuva värviga, kuid see meetod toob sageli kaasa teravuse kadumise," lisas ta."Seda kompenseeritakse osaliselt suurendatud pildile teravustamise abil."

Olukordi, kui vajate suurema eraldusvõimega pilti, on palju, seega kasutatakse suurendamist olemasolevate pikslite vahele.

Pildi suurendamine on meelelahutuse, meedia ja Interneti toimimise seisukoh alt ülioluline, ütles fotograaf Sebastien Coell Lifewire'ile antud meiliintervjuus.

"Näiteks selle asemel, et veebilehe jaoks oleks vaja mitut kujutise suurust, üks telefonis ja teine tahvelarvuti jaoks," ütles ta, "kui saate selle 1080p pildi 2k-ni suurendada. või 4k ja see telefoni pilt tahvelarvutisse ja 1080p, olete järsku vähendanud vajalike piltide arvu kuuelt kahele."

"Säästate ka suurte 2k ja 4k failide jaoks vajaliku failiruumi, nii et väheneb kogu vajalik failimaht umbes 70–90% võrra."

Mitte ainult TV jaoks

Fotode suurendamine võib samuti tõsta fotode kvaliteeti ja võib isegi aidata meditsiinilise pildistamise puhul. Tarkvaraarendajad ütlevad, et ülesskaleerimine võib suurendada piltide eraldusvõimet ilma kvaliteedi halvenemiseta.

Aga fotograafiaveebisaidi Photutorial asutaja Matic Broz ütles Lifewire'ile e-kirjas antud intervjuus, et tegelikud tulemused sõltuvad kasutatavast tarkvarast.

"Hiljuti on AI leidnud tee pildi ülesskaleerimisele, kuigi see pole mulle siiani muljet avaldanud," lisas ta.

Broz ütles, et parim ülesskaleerimise tarkvara, mida ta on kasutanud, on Vance AI AI Image Enlarger.

Image
Image

"Isegi nende 8-kordne kujutise suurendaja ei tekita märkimisväärset müra (see tähendab 64-kordset eraldusvõime suurenemist), " ütles ta. "Ma eeldan, et algoritmid muutuvad järgmistel aastatel ainult paremaks, võimaldades veelgi suuremat ülesskaleerimist."

Stoppfotograafide jaoks ütles Broz, et see on lahtine küsimus, kas piltide skaleerimine on vajalik.

"Kaameraarendajad täiustavad pidev alt kaameraandurite eraldusvõimet, nüüd isegi eraldusvõimega 100 MP+," lisas ta. "Isiklikult olen kasutanud 24 MP ja umbes 50 MP ning ma pole kunagi tundnud vajadust suuremate piltide järele, isegi mitte suurte väljatrükkide jaoks."

Soovitan: