eprintid: 9681 rev_number: 6 eprint_status: archive userid: 1 dir: disk0/00/00/96/81 datestamp: 2009-07-28 15:00:58 lastmod: 2014-04-03 21:25:36 status_changed: 2012-08-14 15:30:18 type: doctoralThesis metadata_visibility: show creators_name: Kondermann, Claudia title: Postprocessing and Restoration of Optical Flows title_de: Nachbearbeitung and Wiederherstellung des Optischen Flusses ispublished: pub subjects: 004 divisions: 110300 adv_faculty: af-11 keywords: Optical Flow , Confidence , Statistics , Inpainting , Restoration abstract: The notion "Optical flow" refers to the apparent motion in the image plane produced by the projection of the real 3D motion onto the 2D image plane. The thesis at hand addresses postprocessing and restoration methods for arbitrarily computed optical flow fields. Many motion estimators have been proposed during the last three decades, but all of them suffer from shortcomings in difficult situations. Hence, it is of utmost importance for any optical flow measurement technique to give a prediction of the quality and reliability of each individual flow vector. Yet, a sound, universally applicable, and statistically motivated confidence measure for optical flow measurements is still missing today. Based on such information, erroneous optical flow fields can be restored or improved by means of inpainting techniques. This thesis introduces three confidence measures, which evaluate the reliability of optical flow vectors. In contrast to previously employed methods, these confidence measures are based on learned motion models and are, thus, statistically motivated, they are independent of the original flow computation method and yield more accurate predictions on the quality of optical flow vectors. The thesis puts a second focus on the restoration of optical flow fields, where it transfers inpainting techniques from the restoration of images to the field of motion recovery. Since the reconstruction process in case of motion fields can use the image sequence as additional source of information, a novel motion inpainting approach is proposed. It combines motion and image information in one functional and, thus, allows to control the orientation of the reconstruction algorithm based on image edges. abstract_translated_text: Der Begriff "Optischer Fluss" bezeichnet die scheinbare Bewegung auf der Bildebene, die durch die Projektion der realen 3D Bewegung auf die 2D Bildebene erzeugt wird. Die vorliegende Arbeit befasst sich mit der Nachbearbeitung und Wiederherstellung beliebig berechneter Flussfelder. Viele Bewegungsschätzer sind in den letzten drei Jahrzenten vorgeschlagen worden, aber alle weisen in schwierigen Situationen Mängel auf. Deshalb ist es von höchster Wichtigkeit für jede Flussberechnungsmethode, eine Schätzung der Qualität und Zuverlässigkeit für jeden einzelnen Flussvektor anzugeben. Jedoch fehlt ein solides, allgemein anwendbares und statistisch motiviertes Konfidenzmaß für Flussberechnungen bis heute. Basierend auf diesen Informationen können mittels sogenannter "inpainting" Methoden fehlerhafte Flussfelder wiederhergestellt oder verbessert werden. Im Rahmen dieser Arbeit werden drei Konfidenzmaße vorgeschlagen, die die Zuverlässigkeit von Flussvektoren bewerten. Im Unterschied zu den bisher verwendeten Methoden basieren diese Konfidenzmaße auf gelernten Bewegungsmodellen und sind somit statistisch motiviert, sie sind unabhängig von der zu Grunde liegenden Flussberechnungsmethode und liefern genauere Vorhersagen über die Qualität der Flussvektoren. Ein zweiter Schwerpunkt der Arbeit liegt auf der Wiederherstellung von Flussfeldern. Sie überträgt "inpainting" Methoden von der Bildrestauration auf das Feld der Bewegungsrekonstrution. Da der Rekonstruktionsprozess im Falle von Bewegungsfeldern zusätzlich die Bildsequenz als Informationsquelle benutzen kann, wird ein neuer Ansatz zur Rekonstruktion von Bewegungen vorgeschlagen. Er kombiniert Bewegungs- und Bildinformationen in einem Funktional und erlaubt dadurch die Orientierung des Rekonstruktionsprozesses an Bildkanten. abstract_translated_lang: ger date: 2009 date_type: published id_scheme: DOI id_number: 10.11588/heidok.00009681 ppn_swb: 608560448 own_urn: urn:nbn:de:bsz:16-opus-96816 date_accepted: 2009-07-13 advisor: HASH(0x564e1c2e0d50) language: eng bibsort: KONDERMANNPOSTPROCES2009 full_text_status: public citation: Kondermann, Claudia (2009) Postprocessing and Restoration of Optical Flows. [Dissertation] document_url: https://archiv.ub.uni-heidelberg.de/volltextserver/9681/1/dissertation_Claudia_Kondermann.pdf