Come fanno le fotocamere degli smartphone a continuare a migliorare? È l'elaborazione delle immagini?

C'è già un sacco di post-elaborazione in tempo reale delle immagini scattate dalla fotocamera dello smartphone, ma la maggior parte riguarda la mitigazione del rumore, la conversione da formato raw a jpeg e alcune semplici trasformazioni come l'interpolazione per ottenere un'immagine più grande e lo zoom. Queste operazioni sono spesso fatte direttamente dall'hardware.

Le operazioni più comuni fatte dal software di miglioramento delle foto sono la correzione del colore, la luminosità e il contrasto, la correzione di tre volte e alcune piccole correzioni di routine come la rimozione degli occhi rossi. Le app possono farlo facilmente, la maggior parte delle app per fotocamere hanno queste funzioni.

L'hardware assicura che si otterrà un'immagine realistica, e il software che si otterrà una bella immagine. Un'immagine realistica può non essere bella e viceversa.

Lo stato attuale dell'arte è che si otterranno immagini realistiche dai sensori, al punto che hanno più dettagli e dati di ciò che l'occhio può catturare nelle stesse condizioni.

Tuttavia il cervello elabora l'immagine molto meglio identificando forme, forme e gradienti, e ha uno spazio colore diverso.

Anche se si vede un'immagine sfocata che può essere riconosciuta, i bordi sono più nitidi, e il verde è molto più vivo. Rispetto a un sensore l'immagine risultante non sembrerebbe affatto reale, ma non perché il sensore sia difettoso, ma perché il processore d'immagine del cervello è orientato a vedere la luce con recettori rossi, verdi, blu che sono equivalenti a ~400nm, ~530nm, ~650nm, invece di un array di sensori uniformemente distanziati.

Vediamo a malapena le cose rispetto a tutto lo spettro elettromagnetico. Se un alieno potesse vederci con uno spettrometro completo vedrebbe lo schermo e le foto come per lo più scure con alcuni colori esagerati.

Ci sono anche differenze biologiche su come vengono visti i colori, come il daltonismo.

Come scopriamo di più su come vediamo la telecamera sicuramente migliorerà ulteriormente.