Hvordan AI-opskalering kunne lave bedre billeder

Indholdsfortegnelse:

Hvordan AI-opskalering kunne lave bedre billeder
Hvordan AI-opskalering kunne lave bedre billeder
Anonim

Key takeaways

  • Nye fremskridt til at forstørre billeder kan hjælpe med alt fra familiebilleder til medicinsk billedbehandling.
  • Google-forskere annoncerede, at de havde gjort gennembrud i brugen af kunstig intelligens til at øge billedopløsningen.
  • Men en ekspert siger, at opskaleringssoftware muligvis ikke er nødvendig for stillfotografer.
Image
Image

Nye teknikker, der forstørrer billeder ved hjælp af kunstig intelligens kan forbedre alt fra fotos til videospilsgrafik, siger eksperter.

Google-forskere diskuterede for nylig de gennembrud, de har gjort med at øge billedopløsningen. Forskerne brugte en maskinlæringsmodel til at omdanne et foto i lav opløsning til et detaljeret billede i høj opløsning. Det er en del af en voksende tendens til at bruge kunstig intelligens til at forbedre billeder.

"Vi ser en stigning i AI-drevet opskalering, især i spil, hvor teknologier som NVIDIA DLSS bruger maskinlæring til at genskabe et billede med meget højere opløsning, som konkurrerer med og nogle gange overgår kvaliteten af de oprindelige billeder, " fort alte billedbehandlingsekspert Ionut-Alexandru Popa til Lifewire i et e-mailinterview.

"Denne type opskalering fungerer godt i computerspil, hvor den formår at bruge færre ressourcer end at gengive et billede i højere kvalitet direkte."

Creating Pixel

Google har undersøgt en måde at opskalere billeder ved hjælp af en metode kaldet diffusionsmodeller.

Virksomheden hævder, at denne teknik forbedrer eksisterende teknologier, når mennesker bliver bedt om at bedømme resultaterne. En tilgang Google brugte kaldes SR3 eller Super-Resolution via Repeated Refinement.

"SR3 er en diffusionsmodel med superopløsning, der som input tager et billede i lav opløsning og bygger et tilsvarende billede i høj opløsning ud fra ren støj," skrev Google-forskere i blogindlægget."Modellen er trænet i en billedkorruptionsproces, hvor støj gradvist tilføjes til et billede i høj opløsning, indtil der kun er ren støj tilbage."

Opskaleringsteknikker er ikke nye og bruges ofte i fotoredigeringsapplikationer, sagde Popa.

"Der er masser af situationer, hvor du har brug for et billede med højere opløsning, så opskalering bruges til at skabe pixels mellem de eksisterende," tilføjede han. "De fleste ved det ikke, men når de ser tv på deres 4K-skærm, opskaleres 1080p-videosignalet automatisk til at dække hele skærmen. Dette gøres automatisk af dit tv."

Mange nuværende teknikker bruges til at 'gætte' indholdet af de nye pixels, så det resulterende billede ser godt ud, sagde Popa.

"I øjeblikket er de mest anvendte algoritmer til billedopskalering bilineære og bikubiske metoder, som sikrer en kontinuerlig overgang mellem tilstødende pixels, med gradvist skiftende farve, men denne metode resulterer ofte i tab af skarphed," tilføjede han."Dette kompenseres delvist ved at anvende et skærpepas over det opskalerede billede."

Der er masser af situationer, hvor du har brug for et billede i højere opløsning, så opskalering bruges til at skabe pixels mellem de eksisterende.

Billedopskalering er afgørende for, hvordan underholdning, medier og internettet fungerer, fort alte fotograf Sebastien Coell til Lifewire i et e-mailinterview.

"For eksempel, i stedet for at skulle have flere billedstørrelser til en webside, som i, en til brug på en telefon, en til en tablet," sagde han, "hvis du kan opskalere det 1080p-billede til 2k eller 4k og det telefonbillede til en tablet og 1080p, har du pludselig reduceret antallet af nødvendige billeder fra 6 ned til 2."

"Du vil også spare den nødvendige filplads fra de store 2k- og 4k-filer, så du vil reducere din samlede fillagringsstørrelse med omkring 70-90 %."

Ikke kun til tv

Fotoopskalering kan også øge kvaliteten af billeder og kan endda hjælpe med medicinsk billedbehandling. Softwareudviklere siger, at opskalering kan øge opløsningen af billeder uden forringelse af kvaliteten.

Men Matic Broz, grundlæggeren af fotograferingswebstedet Phototutorial, fort alte Lifewire i et e-mailinterview, at de faktiske resultater afhænger af den anvendte software.

"For nylig har AI fundet vej til billedopskalering, selvom jeg ikke er imponeret over det indtil videre," tilføjede han.

Broz sagde, at den bedste opskaleringssoftware, han har brugt, er AI Image Enlarger af Vance AI.

Image
Image

"Selv deres 8x billedopskalering introducerer ikke nogen væsentlig støj (det er en 64x stigning i opløsning)," sagde han. "Jeg forventer, at algoritmerne kun bliver bedre i de følgende år, hvilket giver mulighed for endnu større opskalering."

For stillfotografer sagde Broz, at det er et åbent spørgsmål, om billedopskalere er nødvendige.

"Kameraudviklere forbedrer konstant opløsningen af kamerasensorer, nu endda med 100 MP+ opløsning," tilføjede han. "Personligt har jeg brugt 24MP og omkring 50MP, og jeg har aldrig følt behov for større billeder, ikke engang til store print."

Anbefalede: