Erweiterte Schärfentiefe

Metrisch kalibrierte 3D-Lichtfeld-Kameras

Erweiterte Schärfentiefe

Seit 2010 werden 3D-Lichtfeld-Kameras für industrielle Anwendungen wie optische Inspektion, 3D-Mikroskopie, Strömungsmessung und Phenotyping verkauft. Der Artikel gibt eine Einführung in die Technologie, beschreibt die Möglichkeit des metrischen Messens mit einer Lichtfeld-Kamera und erläutert das metrische Kalibrierverfahren.
Eine 3D-Lichtfeld-Kamera ermöglicht die Aufnahme eines 2D-Bildes in Kombination mit metrischen Tiefeninformationen über einen erweiterten Schärfentiefebereich mit nur einer Kamera, einem Standard Objektiv und einer Aufnahme ohne spezielle Beleuchtung. Die Vorteile der Kameras kommen vor allem bei der Aufnahme von kleinen Bauteilen zum Tragen, bei denen ein Stereo-Kamerasystem oder ein Laserlinienschnitt-Verfahren zu große Verdeckungsbereiche hat oder baulich nicht genug Platz vorhanden ist, z.B. tief in einem Plastikgehäuse sitzende Stecker oder Bonddrähte. Da nur ein einziges Bild nötig ist, müssen die Bauteile auch nicht stillstehen, sondern können geblitzt werden, was eine hohe Taktrate erlaubt. Prinzipiell hängt der Bildbereich, der mit einer Lichtfeld-Kamera aufgenommen werden kann, nur von dem verwendeten Objektiv ab. Die effektive laterale Auflösung ist maximal ¼ der Sensorauflösung und verändert sich über den gesamten Tiefenbereich. Die Anzahl der unterscheidbaren Tiefenebenen ist konstant ca. 100. Wird also ein Tiefenbereich von 10m abgedeckt, so ist die Tiefenauflösung ca.10cm, wohingegen bei einem Aufbau mit 10mm Tiefenbereich eine Tiefenauflösung von ca. 0,1mm erreicht wird. Die Kamera kann also durch die Auswahl eines passenden Objektivs auf den notwendigen Tiefenbereich eingestellt werden. Es stehen auch Kameras für den Anschluss an Mikroskope zur Verfügung, die ein normales Mikroskop in ein 3D-Mikroskop verwandeln.

Funktionsweise

Das Hauptobjektiv erzeugt ein virtuelles 3D-Zwischenbild (Bild 1). Dieses soll verdeutlichen, wo das Hauptobjektiv die verschiedenen Punkte des Objektes in den Fokus bringt. Jede Linse des Mikrolinsen-Arrays agiert nun wie eine kleine Kamera mit geringer Auflösung, die das virtuelle 3D-Zwischenbild aus einer leicht anderen Perspektive sieht. Der Aufbau ist vergleichbar zu einem Array von Kameras, nur dass bei der 3D-Lichtfeld-Kamera das Objektiv die Szene verkleinert (bzw. bei Mikroskopen vergrößert), bevor es von einem Array von ´Mikrokameras´ aufgenommen wird. Das so erzeugte Rohbild kann nicht direkt verwendet werden. Vielmehr werden aus dem Rohbild die Tiefeninformation und ein ´normales´ 2D-Bild anhand von spezieller Algorithmik berechnet. Da die Berechnungen sehr rechenintensiv sind, wurden sie auf die Grafikkarte ausgelagert. Bei der R12-Kamera mit einem 12MP-Sensor ist dies mit ca.15fps auf einem handelsüblichen PC mit einer Nvidia GTX780 Karte möglich. Ein erweiterter Schärfentiefebereich wird durch ein speziell entwickeltes und patentiertes Mikrolinsenarray möglich, das aus Mikrolinsen verschiedener Brennweiten besteht. Hierdurch wird eine Szene gleichzeitig mit verschiedenen Fokuseinstellungen aufgenommen, was die Schärfentiefe der Kamera stark vergrößert, ohne dass eine Verkleinerung der Blende nötig wäre. Ein vergrößerter Schärfentiefebereich bedeutet auch, dass Tiefeninformationen über einen größeren Tiefenbereich aufgenommen werden können als z.B. mit einem Stereo-Kamerasystem. Besonders beim Einsatz mit Mikroskopen kommt dies zum Tragen.

Metrische Kalibrierung

Mit der neuen Software ist nun auch die metrische Kalibrierung einer 3D-LichtfeldKamera möglich. Die Kalibrierung gleicht viele Aspekte des gesamten optischen Systems aus. Berechnet werden die Fokallänge, der Fokusabstand, die Verkippung der optischen Achse des Hauptobjektivs zum Sensor sowie die Radialverzerrung und die Krümmung der Schärfeebene des Hauptobjektivs. Zusätzlich werden Unterschiede zwischen den verschiedenen Mikrolinsentypen ausgeglichen. Die Kalibrierung unterscheidet sich wesentlich von der eines Stereo-Kamerasystems. Bei der 3D-Lichtfeld-Kamera werden benachbarte Mikrolinsen als Multi-Kamerasysteme betrachtet und über einen Korrelationsansatz gleiche Bildelemente in den entsprechenden Mikrobildern gesucht. Hieraus ergibt sich eine Disparität und somit eine Tiefe, allerdings nur für das virtuelle 3D-Zwischenbild. Der Einfluss des Hauptobjektivs muss nun auch mit in Betracht gezogen werden. Das gesamte optische System wird kalibriert, indem man eine Kalibrierplatte in verschiedenen Positionen mit einer unkalibrierten Lichtfeld-Kamera aufnimmt. Zur Validierung des Verfahrens wurde eine R29M-Kamera mit einem 29MP-Monochrom-Sensor verwendet. Mit der kalibrierten Kamera wurde ein Objekt aufgenommen, das aus fünf Treppenstufen besteht, die jeweils einen Abstand von 5mm zueinander haben. Für jede Stufe wurde aus den gemessenen Tiefendaten eine optimale Ebene berechnet. Die Standardabweichung der Tiefendaten innerhalb einer Stufe zur entsprechenden Ebene gibt Aufschluss über die Unsicherheit der Tiefenmessung. Der Abstand der gemessenen Ebenen zueinander beschreibt die absolute Genauigkeit der Tiefenmessung. Das laterale Bildfeld bei der Messung betrug 55x32mm. Der gesamte Tiefenbereich von der Oberfläche der untersten Stufe bis zur Oberfläche der obersten Stufe war 20mm. Die mittlere Standardabweichung der Tiefenmessungen von den jeweiligen Stufenebenen ergab sich als 0,19mm und die mittlere Abweichung der berechneten Stufenebenen zum Objekt lag bei 0,12mm. Es wurde also eine Genauigkeit von <1% erreicht.

Das könnte Sie auch interessieren

Inspired by the Kinect

Although different 3D cameras and scanners have existed for some time, present solutions have been limited by several unwanted compromises. If you wanted high speed, you would get very low resolution and accuracy (e.g. Time-of-Flight cameras and existing stereo vision cameras, which despite being fast typically have resolution in the millimeter to centimeter range). If you wanted high resolution and accuracy, you would typically get a camera that was slow and expensive (e.g. the high accuracy scanners).

www.zividlabs.com

Anzeige
4. VDI-Fachkonferenz ‚Industrielle Bildverarbeitung‘

Vom 18. bis 19. Oktober veranstaltet der VDI die nunmehr 4. Fachkonferenz zum Thema ‚Industrielle Bildverarbeitung‘ im Kongresshaus Baden-Baden. In 19 Fachvorträgen werden u.a. die Schwerpunktthemen Automation in der Robotik mit 3D-Bildverarbeitung, Oberflächeninspektion und Bildverarbeitung in der Nahrungsmittelindustrie und intelligenten Logistik behandelt.

www.vdi-wissensforum.de

Anzeige
Low Noise SWIR-Camera with 400fps

C-Red 2 is an ultra high speed low noise camera designed for high resolution SWIR-imaging based on the Snake detector from Sofradir. The camera is capable of unprecedented performances up to 400fps with a read out noise below 30 electrons. To achieve these performances, it integrates a 640×512 InGaAs PIN Photodiode detector with 15m pixel pitch for high resolution, which embeds an electronic shutter with integration pulses shorter than 1μs. The camera is capable of windowing and multiple ROI, allowing faster image rate while maintaining a very low noise.

www.first-light.fr

Anzeige
Whitepaper: Sechs Kriterien für den optimalen Bildsensor

Ob Automatisierung, Mensch-Maschine-Kollaboration in der Robotik oder selbstfahrende Autos – die Auswahl des richtigen Sensors hängt stark von der Applikation und dem gewünschten Output ab. Diese 6 Faktoren helfen Ihnen dabei, den passenden Sensor für Ihre Applikation zu finden!

imaging.framos.com

Anzeige
Metrologic Anwendertreffen 2017

Vom 17. bis 18. Oktober veranstaltet die Metrologic Group ihr diesjähriges Anwendertreffen in Uhingen. Bei den zahlreichen Anwendervorträgen und der Hausmesse sind auch Messtechnik Firmen wie Creaform, Faro, Hexagon, Kreon und Wenzel vertreten. Anmeldeschluss ist bereits der 4. Oktober.

www.metrologic.frNEUIGKEITENNeuigkeiten

Anzeige
VDMA: Deutsche Bildverarbeitung mit +9%

Die deutsche industrielle Bildverarbeitung hat im Jahr 2016 ein Umsatzplus von 9% gegenüber dem Vorjahr erwirtschaftet. Dabei stieg das Inlandsgeschäft um 3%, das Auslandsgeschäft um 14%. Laut Prognose des VDMA Robotik + Automation rechnet man für 2017 mit einem Umsatzplus von 10% auf dann 2,4Mrd.€.

ibv.vdma.org