¿Podrían los avances futuros en tecnología de sensores reducir o eliminar el ruido?

19

¿Existe la posibilidad de que los avances tecnológicos futuros puedan reducir o eliminar el ruido cuando se usa una configuración de ISO alta, o es este ruido inevitable e inherente a todos los sensores digitales?

Si hay un límite teórico donde el ruido es inevitable, ¿qué tan cerca estamos de eso?

angel rojas
fuente

Respuestas:

26

Es muy importante darse cuenta de que no es la configuración de ISO alta en sí la que produce imágenes ruidosas, es el hecho de que usar una configuración de ISO alta significa que captura muy poca luz.

La luz está compuesta de fotones que son emitidos aleatoriamente por una fuente de luz. Cuando los niveles de luz son bajos o el tiempo de exposición es muy corto, la cantidad de fotones que obtenga variará considerablemente de

Imagine que está tratando de estimar la velocidad a la que las personas abandonan un centro comercial. Si solo tiene 10 segundos para contar personas, el resultado que obtenga variará mucho dependiendo de cuándo exactamente comience a contar y qué salida elija. Si tiene 10 minutos para contar personas, obtendrá una respuesta mucho más estable que será similar para todas las salidas (suponiendo que no haya preferencias personales para las salidas) y en diferentes ventanas de tiempo de 10 minutos (suponiendo que no haya otros factores que influyan el resultado).

Eso es lo que sucede cuando usa una configuración de ISO alta, captura muy pocos fotones, por lo que un conjunto de píxeles vecinos que cubren un objeto de color uniforme puede recibir 4, 3, 4 y 5 fotones cada uno, por lo que en lugar de un color uniforme y uniforme obtienes un resultado granulado que cambia para cada píxel.

Este ruido se llama ruido de fotones y es la fuente dominante de ruido en imágenes de ISO alto, excepto en las sombras. Incluso si tuviera un sensor perfecto que contó y reportó fielmente cada fotón que golpeó el sensor, aún tendría una cantidad significativa de ruido con poca luz.


Eso no quiere decir que hemos alcanzado el límite de alto rendimiento ISO. Todavía no de ninguna manera. El ruido de fotones puro es de grano muy fino y es menos objetable que el ruido de patrones agrupados observado en fotografías con ISO alto.

La reducción de la conversación cruzada de píxeles, la mejora de la electrónica en general solo podría tener un pequeño efecto en la reducción de la amplitud del ruido , pero un efecto mayor en la mejora de la calidad del ruido .

Wikipedia tiene una simulación del sensor "perfecto" donde el ruido de fotones es solo la fuente de ruido:

Haga clic para obtener una versión más grande donde pueda distinguir píxeles individuales. Imagen de Mdf algunos derechos reservados.

Matt Grum
fuente
2
Esto es cierto para tiempos de exposición muy cortos , pero ¿qué tan corto? ¿Puede agregar algunos valores (estimados) para las diferentes exposiciones en la imagen de ejemplo. ¿Estamos hablando de 1 nano segundo a 10 nano segundos, o nos estamos acercando a tiempos de exposición de rendimiento de cámara "normales" ? Me doy cuenta de que esto dependerá de la cantidad de luz, pero tome una escena interior "normal" como ejemplo.
Håkon K. Olafsen
Me gusta esta respuesta, pero `captura muy pocos fotones, por lo que un conjunto de píxeles vecinos que cubren un objeto de color uniforme podría recibir 4, 3, 4 y 5 fotones cada uno`, ¿no estamos hablando todavía de millones de fotones?
Kirk Broadhurst
@KirkBroadhurst Ese es el punto: en condiciones de poca luz no lo estamos. La visión humana es aproximadamente logarítmica, y la "escala de parada" también es logarítmica. Una parada menos luz significa la mitad de fotones. Si comienzas a la mitad, solo obtienes unos pocos fotones muy rápidamente . Si está orientado matemáticamente, es posible que desee leer sobre el proceso de Poisson . En general, si tiene kfotones en promedio por píxel, la magnitud del ruido de píxeles será sqrt(k).
Szabolcs
@KirkBroadhurst Históricamente, el primer modelo de luz fue como "rayos" (óptica geométrica). Luego vino la óptica de onda. Entonces la mecánica cuántica --- la luz está hecha de unidades discretas. Es interesante pensar que los fenómenos relacionados con cada modelo (y no explicables por los anteriores) tienen un significado práctico en la fotografía digital.
Szabolcs
@ Matt Grum: el segundo párrafo parece estar incompleto.
Michael C
10

Reducirlo, sí. Por ejemplo, la Canon 5D Mark III es 2/3 paradas mejor que la Canon 5D en alto rendimiento ISO, aunque sus sensores son del mismo tamaño, porque es siete años más nuevo. Por supuesto, el rendimiento pasado no es necesariamente indicativo de resultados futuros, pero no veo ninguna razón para que no se sigan obteniendo ganancias incrementales.

Eliminarlo por completo es físicamente imposible. Cuando llegas a un ISO por millones, estás tratando de extraer datos de unos pocos fotones. Independientemente de cuán buena sea su tecnología, la información simplemente no está allí para que la extraiga.

Ahora, en cuanto a conseguir que sea "perfecto" para todos los ISO bajo, digamos, 3200, tenga en cuenta que en realidad no hay un estándar consistente para "perfecto". Puede desarrollar una nueva tecnología sorprendente que alcance un límite teórico en la relación señal / ruido, pero eso realmente importa cuando mis ojos afirman que este píxel debería ser # 0f3ed2, usted afirma que debería ser # 0e3fd4 y el sensor cree que es # 0d3dd3?

Tony
fuente
44
"Perfecto" sería un sensor de conteo de fotones con capacidad infinita. En realidad, podría hacerlo hoy (a excepción de la parte de capacidad infinita), pero sería muy costoso. Pero incluso eso sería ruidoso con poca luz. La información simplemente no está allí como sugiere.
Matt Grum
@MattGrum: ¿Qué pasaría si pudiéramos hacer que los sensores sean sensibles solo para espectros muy estrechos, de modo que solo cuente fotones de una energía específica? ¿No eliminaría eso la mayor parte del ruido que en los sensores contemporáneos proviene de cosas como los efectos térmicos?
PlasmaHH
2
@PlasmaHH: todavía estás atrapado en la naturaleza no determinista de la luz. No hay forma de evitarlo, excepto para mantener su "encuesta" en marcha el tiempo suficiente para que la variación de la muestra estadística sea insignificante. O, en términos fotográficos, necesita una mayor exposición para reducir el ruido. En algún momento, no importa cuán eficiente sea su sensor, llamará a muy pocas personas para predecir con precisión los resultados de las elecciones, por así decirlo.
@StanRogers: Ah, entonces te refieres al ruido que se parece a las imágenes de rastreo de fotones con pequeños conjuntos de muestras. Siempre estaba pensando en el ruido como señal adicional "encima" del conteo perfecto de fotones.
PlasmaHH
@PlasmaHH Sí, exactamente. Simplemente no hay suficientes fotones (en este caso, podemos pretender que los fotones realmente son solo algunas bolas distintas que rebotan) para pintar una imagen precisa. Esto mejora mucho si no le importa el color (aún más para la visión humana, que es mucho mejor para ver la intensidad de la luz), pero aún así es finito. También hay algo de ruido en el sensor (por ejemplo, debido a las conversaciones cruzadas de fotones, que es donde se rompen los fotones como bolas), pero ahí es donde la limitación solo es práctica: sensores más grandes y mejores lentes eliminan esto casi por completo.
Luaan
7

Ya sucedió! En películas, o principios digitales, ISO alto significaba 400, en las últimas cámaras de fotograma completo significa 6400. El problema es que cada vez que sucede, 'ISO alto' se redefine para ser aún más alto, o en otras palabras, ISO alto siempre significa " tan alto que la tecnología actual lo hace ruidoso ". Como señaló Tony, eventualmente hay limitaciones físicas en cuanto a qué tan lejos puede llegar.

Slartibartfast
fuente
3

A través de Hacker News, recientemente encontré este artículo de 2008, escrito por el profesor de física Emil Martinec, aparentemente en su tiempo libre.

Ruido, rango dinámico y profundidad de bits en cámaras réflex digitales

Él caracteriza los diferentes tipos de ruido que son posibles y describe su importancia relativa.

  • Ruido de disparo de fotones
  • Leer ruido
  • Ruido de patrón
  • Ruido térmico
  • Respuesta de píxeles no uniforme (PRNU)
  • Error de cuantización

Después de leer esto, se dará cuenta de que es imposible eliminar por completo los distintos tipos de ruido del sensor. Ciertamente, es posible minimizarlos (de varias maneras), pero también hay otras decisiones de diseño que el fabricante de la cámara / sensor debe tomar que pueden introducir otros problemas o compensaciones (por ejemplo, aplicar compensaciones en el convertidor A / D, ver Fig. 10 + 11)

Con respecto a sus preguntas sobre un límite teórico:

"Las fuentes de ruido más importantes para exposiciones típicas son el ruido de lectura y el ruido de disparo de fotones".

"La inversa de la pendiente del gráfico PRNU (ver la Figura 7 para un ejemplo) es un límite superior para la relación S / N, a menos que PRNU se compense en el procesamiento posterior".

knb
fuente
-1

Este es un problema con los sensores en general, desde sensores ópticos hasta acelerómetros y giroscopios. Todos los productos de consumo se ocupan de esto e intentan ocultar el ruido del usuario; por ejemplo, su teléfono es capaz de detectar vibraciones muy por debajo del nivel que hace que actúe, y hay aplicaciones que pueden mostrarle eso.

Cualquier sensor capaz de grabar señales con precisión dentro del área de interés también podrá grabar señales fuera del área de interés, y las señales por debajo o por encima del umbral de interés generalmente se denominan ruido. Este 'problema' no está relacionado solo con sensores ópticos, está relacionado con las limitaciones físicas de detectar las cosas que nos interesan.

Por lo tanto, la respuesta es no: cualquier sensor que sea lo suficientemente 'insensible' como para eliminar el ruido también eliminará parte de la señal que queremos, lo que hace imposible construir sensores no ruidosos.

Jazmín
fuente