Model-independent light field reconstruction using a generic camera calibration

Anspruchsvolle und hochspezialisierte optische Messgeräte werden für die hochpräzise Fertigung und Umfelderkennung immer wichtiger. Insbesondere Lichtfeldkameras erfahren ein immer größeres Interesse in Forschung und Industrie, da sie eine Vielzahl von neuen Messmethoden ermöglichen. Leider ist ihre Kalibrierung aufgrund ihres komplexen Aufbaus sehr schwierig und meist genau auf den jeweiligen Lichtfeldkamera-Typ zugeschnitten. Um diese Schwierigkeiten zu überwinden, stellen wir eine Methode vor, die ein Lichtfeld aus den Rohdaten eines beliebigen Lichtfeldaufnahmesystem decodiert, ohne die internen optischen Elemente zu kennen und zu modellieren. ... mehrWir kalibrieren die Kamera mit einer präzisen generischen Kalibrierungsmethode und transformieren das erhaltene Strahlenset in eine äquivalente Lichtfelddarstellung. Schließlich rekonstruieren wir ein rektifiziertes Lichtfeld aus den unregelmäßig abgetasteten Daten und leiten darüber hinaus die geometrischen Eigenschaften der Strahlen als intrinsische Kameraparameter ab. Experimentelle Ergebnisse validieren die Methode, indem sie zeigen, dass sowohl die Informationen der beobachteten Szene als auch die geometrische Struktur des Lichtfeldes durch eine adäquate Rektifizierung und Kalibrierung erhalten bleiben.

Sophisticated and highly specialized optical measuring devices are becoming increasingly important for high-precision manufacturing and environment perception. In particular, light field cameras are experiencing an ever-increasing interest in research and industry as they enable a variety of new measurement methods. Unfortunately, due to their complex structure, their calibration is very difficult and usually precisely tailored to the particular type of light field camera. To overcome these difficulties, we present a method that decodes a light field from the raw data of any light field imaging system without knowing and modeling the internal optical elements. ... mehrWe calibrate the camera using a precise generic calibration method and transform the obtained ray set into an equivalent light field representation. Finally, we reconstruct a rectified light field from the irregularly sampled data and in addition we derive the geometric ray properties as intrinsic camera parameters. Experimental results validate the method by showing that both the information of the observed scene and the geometric structure of the light field are preserved by an adequate rectification and calibration.