
La fidelidad de la información visual ( VIF ) es un índice de evaluación de la calidad de imagen de referencia completa basado en estadísticas de escenas naturales y la noción de información de imagen extraída por el sistema visual humano . [ 1 ] Fue desarrollado por Hamid R Sheikh y Alan Bovik en el Laboratorio de Ingeniería de Imagen y Video (LIVE) de la Universidad de Texas en Austin en 2006. Está implementado en el núcleo del sistema de monitoreo de calidad de video VMAF de Netflix , que controla la calidad de imagen de todos los videos codificados transmitidos por Netflix.
Modelo del sistema
Modelo fuente
Se utiliza una mezcla de escala gaussiana (GSM) para modelar estadísticamente los coeficientes wavelet de una descomposición piramidal orientable de una imagen. [ 2 ] El modelo se describe a continuación para una subbanda dada de la descomposición multiescala y multiorientación, y puede extenderse a otras subbandas de manera similar. Sean los coeficientes wavelet en una subbanda dada los siguientes:dóndedenota el conjunto de índices espaciales a través de la subbanda y cadaes unvector dimensional . La subbanda se divide en bloques no superpuestos decoeficientes cada uno, donde cada bloque corresponde aSegún el modelo GSM, dóndees un escalar positivo yes un vector gaussiano con media cero y covarianzaAdemás, se supone que los bloques no superpuestos son independientes entre sí y que el campo aleatorioes independiente de.
Modelo de distorsión
El proceso de distorsión se modela utilizando una combinación de atenuación de señal y ruido aditivo en el dominio de la ondícula . Matemáticamente, sidenota el campo aleatorio de una subbanda dada de la imagen distorsionada,es un campo escalar determinista y, dóndees un vector gaussiano de media cero con covarianza, entonces
Más,está modelado para ser independiente dey.
Modelo HVS
La dualidad de los modelos HVS y NSS implica que varios aspectos del HVS ya se han tenido en cuenta en el modelo fuente. Aquí, el HVS se modela adicionalmente basándose en la hipótesis de que la incertidumbre en la percepción de las señales visuales limita la cantidad de información que se puede extraer de la imagen fuente y distorsionada. Esta fuente de incertidumbre se puede modelar como ruido visual en el modelo HVS. En particular, el ruido HVS en una subbanda dada de la descomposición wavelet se modela como ruido gaussiano blanco aditivo. Seaysean campos aleatorios, dondeyson vectores gaussianos de media cero con covarianzay. Además, dejemosydenotamos la señal visual en la salida del HVS. Matemáticamente, tenemosy. Tenga en cuenta queyson campos aleatorios que son independientes de,y.
Índice VIF
Dejardenotemos el vector de todos los bloques de una subbanda dada.y ser definidos de manera similar. Seadenota la estimación de máxima verosimilitud dedadoy. La cantidad de información extraída de la referencia se obtiene como
mientras que la cantidad de información extraída de la imagen de prueba se da como
Denotando elbloques en la subbandade la descomposición wavelet pory de manera similar para las demás variables, el índice VIF se define como
Actuación
El coeficiente de correlación de rangos de Spearman (SROCC) entre las puntuaciones del índice VIF de las imágenes distorsionadas en la base de datos de evaluación de la calidad de imagen LIVE y las puntuaciones de opinión humana correspondientes se evalúa en 0,96.
Referencias
- ↑ Sheikh, Hamid; Bovik, Alan (2006). "Información de imagen y calidad visual". IEEE Transactions on Image Processing . 15 (2): 430– 444. Bibcode : 2006ITIP...15..430S . doi : 10.1109/tip.2005.859378 . PMID 16479813 .
- ↑ Simoncelli, Eero; Freeman, William (1995). «La pirámide orientable: una arquitectura flexible para el cálculo de derivadas multiescala». Actas de la Conferencia Internacional sobre Procesamiento de Imágenes . Vol. 3. págs. 444–447 . doi : 10.1109/ICIP.1995.537667 . ISBN 0-7803-3122-2. S2CID 1099364 .
Enlaces externos
- Laboratorio de Ingeniería de Imagen y Video de la Universidad de Texas
- Una implementación del índice VIF
- Base de datos de evaluación de la calidad de imagen en tiempo real
- Sistema Universitario de Texas
- Tecnología cinematográfica y de vídeo
- Procesamiento de imágenes