Com l'augment de l'IA podria fer millors fotos

Taula de continguts:

Com l'augment de l'IA podria fer millors fotos
Com l'augment de l'IA podria fer millors fotos
Anonim

Clau per emportar

  • Els nous avenços per ampliar imatges podrien ajudar amb tot, des de fotos familiars fins a imatges mèdiques.
  • Els investigadors de Google van anunciar que havien fet avenços en l'ús de la IA per augmentar la resolució de les fotos.
  • Però un expert diu que el programari d'augment d'escala pot no ser necessari per als fotògrafs.
Image
Image

Les noves tècniques que amplien les imatges amb IA podrien millorar-ho tot, des de fotos fins a gràfics de videojocs, diuen els experts.

Els investigadors de Google van discutir recentment els avenços que han fet per augmentar la resolució d'imatge. Els científics van utilitzar un model d'aprenentatge automàtic per convertir una foto de baixa resolució en una imatge detallada d' alta resolució. Forma part d'una tendència creixent d'utilitzar IA per millorar les imatges.

"Estem veient un augment de l'augment d'escala impulsat per IA, especialment en els jocs, on tecnologies com NVIDIA DLSS utilitzen l'aprenentatge automàtic per recrear una imatge de resolució molt més alta, que rivalitza i de vegades supera la qualitat de les imatges natives. ", va dir l'expert en imatges Ionut-Alexandru Popa a Lifewire en una entrevista per correu electrònic.

"Aquest tipus d'augment d'escala funciona molt bé en els jocs d'ordinador, on aconsegueix utilitzar menys recursos que renderitzar directament una imatge de més qualitat."

Creació de píxels

Google ha estat explorant una manera d'augmentar les fotos mitjançant un mètode anomenat models de difusió.

La companyia afirma que aquesta tècnica millora les tecnologies existents quan se'ls demana als humans que jutgin els resultats. Un dels enfocaments utilitzats per Google s'anomena SR3, o Super-resolució mitjançant el refinament repetit.

"SR3 és un model de difusió de superresolució que pren com a entrada una imatge de baixa resolució i crea una imatge d' alta resolució corresponent a partir del soroll pur", van escriure els investigadors de Google a la publicació del bloc."El model està entrenat en un procés de corrupció d'imatges en què el soroll s'afegeix progressivament a una imatge d' alta resolució fins que només queda soroll pur."

Les tècniques d'augment d'escala no són noves i s'utilitzen habitualment en aplicacions d'edició de fotos, va dir Popa.

"Hi ha moltes situacions en què necessiteu una imatge de resolució més alta, de manera que s'utilitza l'augment d'escala per crear píxels entre els existents", va afegir. "La majoria de la gent no s'adona, però quan veu la televisió a la seva pantalla 4K, el senyal de vídeo de 1080p s'augmenta automàticament per cobrir tota la pantalla. Això ho fa automàticament el teu televisor."

S'utilitzen moltes tècniques actuals per "endevinar" el contingut dels nous píxels perquè la imatge resultant sembli bé, va dir Popa.

"Actualment, els algorismes més utilitzats per augmentar l'escala d'imatges són els mètodes bilineals i bicúbics, que garanteixen una transició contínua entre píxels adjacents, amb un canvi de color gradual, però aquest mètode sovint provoca una pèrdua de nitidesa", va afegir."Això es compensa parcialment aplicant una passada de nitidesa sobre la imatge augmentada."

Hi ha moltes situacions en què necessiteu una imatge de resolució més alta, de manera que l'augment d'escala s'utilitza per crear píxels entre els existents.

El fotògraf Sebastien Coell va dir a Lifewire en una entrevista per correu electrònicL'augment d'escala d'imatge és crucial per al funcionament de l'entreteniment, els mitjans de comunicació i Internet.

"Per exemple, en lloc d'haver de tenir diverses mides d'imatge per a una pàgina web, com ara, una per utilitzar-la en un telèfon, una altra per a una tauleta", va dir, "si podeu augmentar aquesta imatge de 1080p a 2k o 4k i aquesta imatge del telèfon a una tauleta i 1080p, has reduït de sobte el nombre d'imatges necessàries de 6 a 2."

"També desaràs l'espai de fitxers necessari dels fitxers grans de 2k i 4k, de manera que reduiràs la mida general d'emmagatzematge de fitxers que necessites en un 70-90%."

No només per a la televisió

L'augment d'escala de fotos també pot augmentar la qualitat de les fotos i fins i tot pot ajudar amb imatges mèdiques. Els desenvolupadors de programari diuen que l'augment d'escala pot augmentar la resolució de les imatges sense cap degradació de la qualitat.

Però, Matic Broz, el fundador del lloc web de fotografia Photutorial, va dir a Lifewire en una entrevista per correu electrònic que els resultats reals depenen del programari utilitzat.

"Recentment, la IA ha trobat el seu camí en l'augment d'escala d'imatges, tot i que fins ara no m'ha impressionat", va afegir.

Broz va dir que el millor programari de millora que ha utilitzat és AI Image Enlarger de Vance AI.

Image
Image

"Fins i tot el seu escalador d'imatges de 8x no introdueix cap soroll significatiu (és a dir, un augment de la resolució de 64x)," va dir. "Espero que els algorismes només millorin els anys següents, permetent una ampliació encara més gran."

Per als fotògrafs d'imatge, Broz va dir que és una qüestió oberta si són necessaris els escaladors d'imatge.

"Els desenvolupadors de càmeres milloren constantment la resolució dels sensors de la càmera, ara fins i tot amb una resolució de 100MP+", va afegir. "Personalment, he utilitzat 24 MP i uns 50 MP, i mai he sentit la necessitat d'imatges més grans, ni tan sols per a impressions grans."

Recomanat: