• Fusion de datos

Fusión de Datos – Pansharpening

La fusión de imágenes remotas es un campo fascinante que ha evolucionado significativamente desde sus inicios en la década de 1990. En este artículo, nos centraremos en la técnica de pansharpening y en la fusión de imágenes multibanda, destacando los avances recientes, especialmente en el ámbito del aprendizaje profundo (deep learning). Se mostrarán las metodologías, los resultados experimentales y las aplicaciones prácticas de estas técnicas en remote sensing.

1. Introducción a la Fusión de Imágenes

La fusión de imágenes remotas se define como el proceso de combinar datos de diferentes fuentes para crear una imagen que contenga información más rica y detallada que cualquiera de las imágenes originales. Este proceso es fundamental en remote sensing, donde se busca obtener una representación precisa de la superficie terrestre. La fusión de imágenes se utiliza en diversas aplicaciones, como la agricultura de precisión, la gestión de recursos naturales, la planificación urbana y la monitorización ambiental.

La fusión de imágenes puede ser vista como una forma de superresolución, donde se busca mejorar la resolución espacial de las imágenes multiespectrales mediante la incorporación de información de alta resolución de una imagen pancromática. Este enfoque es especialmente útil en situaciones donde se requiere una alta precisión en la identificación de características del terreno, como en el caso de la clasificación de la cobertura terrestre.

Es necesario conocer el significado de imagen pancromática. Es una imagen monocromática (en escala de grises) que captura una amplia gama del espectro visible de luz. A diferencia de las imágenes multiespectrales, que dividen la luz en bandas estrechas correspondientes a diferentes colores (como rojo, verde y azul), una imagen pancromática combina toda esta información en una sola banda. Estas imágenes son importantes, porque al combinar todas las bandas del espectro visible, las imágenes pancromáticas suelen tener una resolución espacial más alta que las imágenes multiespectrales. Esto significa que pueden mostrar detalles más finos y características más pequeñas en la superficie terrestre. El contraste entre diferentes objetos en una imagen pancromática suele ser más pronunciado, lo que facilita la identificación de características como bordes, líneas y texturas. 

Imagen pancromatica
Imagen pancromática e imagen multiespectral. (He, Guiqing & Xing, Siyuan & Xia, Zhaoqiang & Huang, Qingqing & Fan, Jianping. (2018). Panchromatic and multi-spectral image fusion for new satellites based on multi-channel deep model. Machine Vision and Applications. 29. 10.1007/s00138-018-0964-5)

2. Pansharpening: Un Enfoque Especializado

El pansharpening es una técnica específica dentro de la fusión de imágenes que se centra en mejorar la resolución espacial de las imágenes multiespectrales. En este proceso, se utiliza una imagen pancromática de alta resolución, junto con imágenes multiespectrales de menor resolución que contienen información sobre diferentes bandas espectrales.

El objetivo del pansharpening es crear una imagen que conserve tanto la información espectral de las imágenes multiespectrales como la información espacial de la imagen pancromática. Esto se logra mediante diferentes métodos que varían en su enfoque y complejidad. Puede considerarse un problema de fusión de un solo sensor, donde se combinan dos canales distintos: el canal multiespectral (MS) y el canal panchromático (PAN).

3. Evolución de las Técnicas de Pansharpening

A lo largo de los años, se han desarrollado múltiples métodos para el pansharpening, que se pueden clasificar en enfoques tradicionales y modernos. Los métodos tradicionales incluyen técnicas basadas en análisis multiresolutivo, como la Transformada de Ondículas (Wavelet Transform) y el Análisis de Componentes Principales (PCA). Estos métodos se centran en la extracción de detalles espaciales de la imagen pancromática y su inyección en la imagen multiespectral.

Imagen Multiespectral, imagen Pancromática e imagen tras el Pansharpening
Imagen Multiespectral, imagen Pancromática e imagen tras el Pansharpening

Sin embargo, estos enfoques tradicionales a menudo presentan limitaciones en términos de calidad de imagen y eficiencia computacional. Por ejemplo, pueden introducir artefactos o distorsiones en la imagen fusionada, lo que puede afectar la interpretación de los datos. Con la llegada del aprendizaje profundo, se han propuesto nuevas metodologías que han revolucionado el campo del pansharpening. Estas técnicas modernas utilizan redes neuronales profundas (DNN) que son capaces de aprender representaciones complejas de los datos a partir de ejemplos de entrenamiento.

4. Aprendizaje Profundo en la Fusión de Imágenes

El aprendizaje profundo ha demostrado ser una herramienta poderosa en la fusión de imágenes, ya que permite a los modelos aprender de manera end-to-end, es decir, desde la entrada hasta la salida, sin necesidad de diseñar manualmente características específicas. Los métodos basados en DNN han superado a los enfoques tradicionales en términos de calidad de imagen y velocidad de procesamiento.

Algunos de los modelos de aprendizaje profundo que se han desarrollado para el pansharpening, son el PNN (Pansharpening Neural Network) y el PanNet. Estos modelos utilizan arquitecturas de red que incluyen módulos residuales, lo que les permite aprender de manera más efectiva al evitar la degradación del rendimiento en redes más profundas. Por ejemplo, el modelo PanNet se centra en la eliminación de contenidos de baja frecuencia de la imagen de entrada, lo que mejora la preservación de la información espectral y espacial.

 

Las principales ventajas de utilizar técnicas de aprendizaje profundo, son la capacidad de generalización y la adaptabilidad a diferentes tipos de datos. Esto es especialmente importante en el contexto de la remote sensing, donde las condiciones de captura pueden variar significativamente.

5. Resultados Experimentales

A continuación, se presentarán algunos experimentos realizados con datos de satélites WorldView-2, en el libro «Deep learning for the Earth Sciences. A Comprehensive Approach to Remote Sensing, Climate Science and Geosciences» de Gustau Camps-Valls, donde se comparan métodos de pansharpening tradicionales y basados en aprendizaje profundo. Los resultados muestran que los enfoques de aprendizaje profundo no solo ofrecen una mejor calidad de imagen, sino que también son más robustos frente a variaciones en los datos de entrada.

En el experimento se utilizan métricas de referencia como el índice de calidad de imagen universal (Q), la relación señal-ruido pico (PSNR) y el coeficiente de correlación espacial (SCC) para evaluar el rendimiento de los diferentes métodos.

Resultados
Resultados basados en aprendizaje profundo

Los resultados indican que los métodos basados en aprendizaje profundo, como PNN+ y DRPNN, superan a los métodos tradicionales en la mayoría de las métricas evaluadas, lo que demuestra la efectividad de estas técnicas en la mejora de la calidad de las imágenes fusionadas.

Pansharpening
Resultados de pansharpening con diferentes métodos comparados en una imagen WV-2 de resolución completa. Una región ampliada aparece enmarcada en verde y la imagen residual correspondiente entre la imagen fusionada y MS-GT aparece enmarcada en rojo.

Deja una respuesta

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *