Development and Status of Image Matching in Photogrammetry
Armin Gruen
DOI: https://doi.org/10.1111/j.1477-9730.2011.00671.x
2012-03-01
The Photogrammetric Record
Abstract:Abstract Image and template matching is probably the most important function in digital photogrammetry and also in automated modelling and mapping. Many approaches for matching have evolved over the years, but the problem is still unsolved in general terms. This paper describes the development of image matching techniques in photogrammetry over the past 50 years, addresses the results of some empirical accuracy studies and also provides a critical account of some of the problems that remain. Although automated approaches have quite a number of advantages, the quality of the results is still not satisfactory and, in some cases, far from acceptable. Even with the most advanced techniques, it is not yet possible to achieve the quality of results that a human operator can produce. There is an urgent need for further improvements and innovations, be it through more powerful multi‐sensor approaches, thereby enlarging the information spectrum, and/or through advancements in image understanding algorithms, thus coming closer to human capabilities of reading and understanding image content. Résumé L’appariement d’images et de formes est sans doute l’opération la plus importante en photogrammétrie numérique et en modélisation et cartographie automatiques. De nombreuses approches se sont succédé depuis des années mais le problème n’est toujours pas totalement résolu. Cet article décrit le développement des techniques d’appariement d’images en photogrammetrie pendant les 50 dernières années, présente les résultats obtenus dans quelques études de précision empiriques, et dresse un bilan critique des problèmes qui subsistent. Bien que les approches automatiques aient un grand nombre d’avantages, la qualité des résultats n’est toujours pas satisfaisante, et même loin d’être acceptable dans certains cas. Même avec les techniques les plus avancées, nous sommes toujours dans l’incapacité d’atteindre la qualité des résultats obtenus par un opérateur humain. Il y a un besoin urgent d’améliorations et d’innovations, soit à travers des approches multi‐capteurs plus puissantes et consistant àélargir le spectre d’information, soit à travers une amélioration des algorithmes de compréhension d’images visant à les rendre plus proches des possibilités humaines de lecture et de compréhension du contenu des images. Zusammenfassung Bild‐ und Musterkorrelation gehören zu den wichtigsten Grundfunktionen der Digitalen Photogrammetrie und somit auch der automatischen 3D Modellierung und Kartierung. Viele Ansätze zur Korrelation wurden über die Jahre entwickelt, aber das Problem gilt grundsätzlich noch immer als ungelöst. Dieser Beitrag beschreibt die Entwicklung der Verfahren der Bildkorrelation in der Photogrammetrie über die letzten 50 Jahre, verweist auf die Ergebnisse einiger empirischer Genauigkeitsstudien und diskutiert einige der immer noch bestehenden Probleme.Obwohl automatische Verfahren eine ganze Reihe von Vorteilen aufweisen, ist doch die Qualität der Ergebnisse meist nicht ausreichend, teilweise ja sogar weit entfernt von jeglicher Akzeptanz. Selbst mit den höchstentwickelten Verfahren sind wir immer noch nicht in der Lage, die Qualität der Ergebnisse eines menschlichen Operateurs zu erreichen. Wir benötigen dringend weitere Verbesserungen und Innovationen. Dazu gibt es gegenwärtig zwei grundsätzlich gangbare Wege: (a) Nutzung von Multi‐Sensor Informationen und somit Erweiterung der Informationsgrundlagen und/oder (b) durch Fortschritte bei den Algorithmen des Bildverstehens und somit besserer Modellierung des menschlichen Prozesses des Bildverstehens.Resumen La correspondencia de imágenes y muestras es, probablemente, la función más importante en la fotogrametría digital, en el modelado 3D y en la cartografía automática. Muchos métodos de correspondencia han evolucionado a lo largo de los años pero, en términos generales, el problema se considera aún no resuelto completamente. Este artículo describe la evolución de las técnicas de correspondencia de imágenes en la fotogrametría a lo largo de los últimos 50 años, analiza los resultados de algunos estudios empíricos de la exactitud, y ofrece una valoración crítica de los problemas aún sin resolver. Aunque los métodos automáticos poseen un gran número de ventajas, la calidad de los resultados no es todavía satisfactoria y, en algunos casos, incluso está lejos de ser aceptable. Incluso con las más avanzadas técnicas no somos capaces de lograr la calidad de los resultados que un operador humano puede conseguir. Hay una necesidad urgente de continuar las mejoras e innovaciones, ya sea mediante la utilización de múltiples sensores que incrementen el espectro de la información, o por avances en los algoritmos de comprensión de la imagen que permitan acercarnos más a la capacidad humana de lectura e interpretación de su contenido.
geosciences, multidisciplinary,geography, physical,remote sensing,imaging science & photographic technology