Hyperspectral Recovery from RGB Images

A $50,000 Camera you Already Own

Conventional cameras capture images using only three frequency bands (red, blue, green), while the full visual spectrum is a much richer representation that facilitates a wide range of additional and important applications. A new technology allows conventional cameras to increase their spectral resolution, capturing information over a wide range of wavelengths without the need for specialized equipment or controlled lighting.

Figure 1 | HC-Vision?s hyperspectral reconstruction methods: A rich hyperspectral prior is collected, a corresponding hyperspectral dictionary is produced and projected to RGB. Once produced, the dictionary may be used to reconstruct novel images without a additional hyperspectral input. (Bild: Hc Vision)

Figure 1 | HC-Vision’s hyperspectral reconstruction methods: A rich hyperspectral prior is collected, a corresponding hyperspectral dictionary is produced and projected to RGB. Once produced, the dictionary may be used to reconstruct novel images without a additional hyperspectral input. (Bild: Hc Vision)

Hyperspectral (HS) imaging systems are capable of collecting the complete spectral signature reflected from each point in a given scene, producing a much more spectrally detailed image than that provided by RGB cameras. Although these systems are widely used in industrial and scientific settings, they have yet to find a place in the consumer market due to their cost, size, and slow acquisition process (often requiring close to one minute to acquire a single image). HC-Vision’s story began at the Ben-Gurion University Interdisciplinary Computational Vision Laboratory where the company’s co-founders, Prof. Ohad Ben-Shahar and Boaz Arad, were studying the properties of natural hyperspectral images. To this end they began collecting what is now the largest, most detailed natural hyperspectral image collection published to date. Analysis of this database revealed that, in the case of natural images people experience in typical indoor and outdoor environments, underlying hyperspectral information can be accurately recovered from its RGB projection.

Figure 2: Filter testing platform used to design single chip systems. (Bild: Hc Vision)

Figure 2: Filter testing platform used to design single chip systems. (Bild: Hc Vision)

Hyperspectral images from RGB

Unlike the three channel images that RGB cameras (and human eyes) produce, hyperspectral images contain dozens or hundreds (and from an abstract theoretical point of view, infinite number) of wavelength bands. But even simpler hyperspectral cameras contain at least 31 channels, a number representing the division of the visible spectrum to spectral bands of 10nm, and so even in this case, the 31-to-3 dimensionality reduction that occurs while projecting hyperspectral information to RGB appears rather severe,. And yet, HC-Vision’s methodology is already able to recover the former from the latter with 90 percent to 95 percent accuracy over a wide variety of scenes. In addition to producing state-of-the-art results at the time of publication, this approach produced comparable results to previous methodologies which relied on hybrid HS/RGB input. This methodology often surpassed the performance of the latter (in both accuracy and computation time) despite a significant information disadvantage.

A $50,000 Camera you Already Own
Bild: Hc-Vision


Das könnte Sie auch interessieren

Die Zeit ist reif

Die Bildverarbeitungsindustrie ist in einem ständigen Wandel begriffen. Zurzeit erleben wir dies auf zwei Ebenen: auf der Seite der Algorithmen mit Deep Learning und bei den Rechnerplattformen mit dem Umbruch von PC-basierter Systemen hin zu Embedded Vision. Erstaunlicherweise gibt es aber etwas in der Bildverarbeitung, das sich nie geändert hat: die Objektivanschlüsse.‣ weiterlesen

www.iwr.uni-heidelberg.de

Anzeige
Geschützt vor Schmutz, Staub und Spritzwasser

Die Ensenso X 3D-Kameraserie von IDS wird um Modelle mit IP65/67 Protection Code zum Einsatz in rauen Umgebungen erweitert. Das Projektionsmodul ist mit einem Gigabit Ethernet Switch ausgestattet und wird mit zwei GigE-uEye-FA-Kameras zu einem 3D-Kamerasystem kombiniert. Kameras, Objektive, Baseline, Vergenzwinkel und Fokusabstand sind frei wählbar. Dadurch bietet das System endlose Flexibilität um es auf Ihre 3D-Anwendungsanforderungen zuzuschneiden.

de.ids-imaging.com

Lichtfeldkameras

Trifft Licht auf einen Punkt an der Oberfläche eines Objektes, so wird es in verschiedene Raumrichtungen reflektiert und erzeugt damit ein Lichtfeld. Lichtfeldkameras (auch plenoptische Kameras) liefern neben einer 2D-Bildinformation auch die Richtung der an der Abbildung beteiligten Lichtstrahlen.‣ weiterlesen

www.evotron-gmbh.de

Anzeige
Ohne Fehl und Tadel

Scheuermann+Heilig GmbH mit Sitz in Buchen im Odenwald hat sich in mehr als 50 Jahren mit Produkten aus Band und Draht weltweit einen Namen gemacht. Innovative Feder-, Stanz-, Biege- und Montageteile zählen zum Sortiment. In Kooperation mit di-soric Solutions hat die Firma eine optische Prüfanlage durch ihr Schwesterunternehmen SH Automation entwickeln lassen, die Stanz- und Biegeteile auf Fehlerfreiheit kontrolliert.‣ weiterlesen

www.sh-gmbh.com; www.di-soric-solutions.com

Anzeige
Industrial Vision Systems erhält PPMA Group Award

Das Unternehmen Industrial Vision Systems mit Sitz in Oxfordshire wurde mit dem ‚Innovative Vision Solution Award 2017‘ prämiert. Der Preis wurde seitens der Processing & Packaging Machinery Association (PPMA) für eine flexible Inspektionslösung zur Qualitätskontrolle überreicht, in der die Bildverarbeitung mit einem kollaborativen Roboter innerhalb eines Prüfstandes kombiniert wurde.

www.industrialvision.co.uk

Neuer Salesmanager bei Opto UK

Die OptoGroup aus München hat Grant Hurley zum neuen Sales Manager von Opto UK mit Sitz in Daresbury, Großbritannien, ernannt. Grant bringt viele Jahre Erfahrung im Vertrieb und Service von Mikrsokopie-Lösungen und technischen Instrumenten mit. Die Ernennung von Grant ist Teil der umfassenden Expansionsstrategie der Unternehmensgruppe in Großbritannien.

www.opto.de

Anzeige