The Imaging Source Blog

2015 hat Sony sämtliche CCD Sensoren mit dem Hinweis abgekündigt, dass mit den neuen Pregius Global Shutter CMOS Sensoren eine deutlich bessere Sensor Technologie bezüglich Bildqualität, Empfindlichkeit und Performance zur Verfügung steht.

Bei den Sony CCD Sensoren handelt es sich um Global Shutter Sensoren mit Auflösungen zwischen 0.3 MP und 12 MP.

Für jeden einzelnen CCD Sensor hat Sony inzwischen einen Pregius Global Shutter Sensor mit besseren Eigenschaften zu geringeren Kosten im Angebot.

The Imaging Source bietet Kameras mit Pregius Sensoren von 0.4 MP bis 12 MP mit Gigabit Ethernet, USB 3.0 oder USB 3.1 (gen. 1) interface.

Wir möchten Ihnen dringend empfehlen den Übergang von CCD nach CMOS rechtzeitig zu planen und die neuen CMOS Kameras in Ihrer Umgebung zu testen. Unter anderem können sich Pixelgröße und Formfaktor unterscheiden.

Wir beraten Sie gerne.

Holen Sie sich Ideen und Antworten auf Ihre Fragen zum Thema industrielle Bildverarbeitung in dem Sie The Imaging Source auf einer der vielen kommenden Messen im Sommer und Herbst besuchen. The Imaging Source und seine Wiederverkäufer präsentieren eine Reihe von Bildverarbeitungs-Hardware- und Bildverarbeitungslösungen, darunter die neuen USB3 Vision-kompatiblen USB 3.1 (gen.1) Platinen- und Industriekameras sowie das Stereo-3D-System, IC 3D.

• Taiwan AOI Forum & Show 2018. Hsinchu, Taiwan. Stand: F03. 4. Oktober 2018.
• VISION. Stuttgart, Deutschland. Stand: 1D51. 6.-8. November 2018.

The Imaging Source Reseller-Messen

• Sunvision: Integrated Automation Motion & Drives SHENZHEN. Shenzhen, China. Stand: 4.41. 27.-29. Juni 2018.
• SureTech und Nevis: Industrial Automation Taipei 2018. Taipeh, China. Stand: K614 und K501. 1.-4. August 2018.
• Sunvision: C-Touch & Display Shenzhen 2018. Shenzhen, China. 5.-7. November 2018.

Besuchen Sie uns an unserem Stand, wir freuen uns Sie persönlich zu informieren und zu beraten. Natürlich können Sie uns auch jederzeit telefonisch oder per E-Mail kontaktieren.

Während klassischer Weise bei der Wahl einer geeigneten Industriekamera das Augenmerk meist zunächst der Auflösung und der Geschwindigkeit (Framerate) galt, so rücken Lichtempfindlichkeit und Dynamikbereich, insbesondere auch im Zuge des Kameraeinsatzes im Automotive Bereich, immer mehr in den Vordergrund. Insbesondere in beleuchtungstechnisch unkontrollierten Situation, wie es beispielsweise bei Autofahrten der Fall ist, ist ein großer Dynamikbereich des Sensors von Vorteil. Man stelle sich nur die klassische Fahrt aus einem Tunnel heraus ins Tageslicht vor. Sensoren mit geringem Dynamikumfang liefern hier meist Bilder, die in großen Teilen unter- bzw. überbelichtet sind und somit in diesen Bereichen keine Details erkennen lassen. Sollen sich aber Fahrassistenzsysteme auf diese Daten verlassen, so kann dies fatal sein. Hier ist es zwingend notwendig, einen größtmöglichen Dynamikumfang zu realisieren, um auch in sehr hellen und sehr dunklen Bereichen noch wichtige Details erkennen zu können.

Erhöhung des Dynamikbereichs: Zwei Ansätze

Grundsätzlich gibt es zwei Ansätze, den Dynamikbereich des finalen Bildes zu erhöhen: Eine hardwareseitige Verbesserung des Dynamikbereichs des Sensors und eine softwareseitige algorithmische Herangehensweise.

Der Dynamikbereich eines CMOS Sensors hängt dabei von der maximalen Anzahl an Elektronen, die ein Sensorpixel vorhalten kann, bis dieser saturiert ist (Sättigungskapazität), und dem Dunkelrauschen des Pixels, d.h. dem Rauschen das beim Auslesen der Ladung auftritt, ab. Soll also der Dynamikbereich gesteigert werden, so kann entweder versucht werden, das Dunkelrauschen weiter zu verringern, oder die Sättigungskapazität zu erhöhen. Das Dunkelrauschen ist dabei abhängig von der Sensorelektronik. Eine Erhöhung der Sättigungskapazität der Pixel kann zum einen durch größere Pixel erreicht werden, da eine größere Pixelfläche auch gleichzeitig mehr Photonen ausgesetzt ist und somit eine größere Ladung generiert, oder aber durch einen verbesserten Pixelaufbau an sich. Insbesondere Sony hat mit seiner Pregius Sensorik in den letzten Jahren eindrucksvoll bewiesen, wie bei gleichbleibender Pixelgröße und Verbesserungen des Pixeldesigns und gleichzeitiger Reduktion des Dunkelrauschens der Dynamikbereich enorm vergrößert werden kann. So erreicht beispielsweise ein Sony IMX 265 Pregius Sensor einen Dynamikbereich von 70.5 dB bei einer Pixelgröße von 3.45um. Die Konsequenz einer höheren Sättigungskapazität ist ein vergrößerter Messbereich, der durch einen Pixel abgedeckt wird. Um diesen größeren Bereich geeignet zu quantisieren, sind in der Regel bei modernen CMOS Sensoren mehr als 8 Bit notwendig. So liefert z.B. der Sony IMX 264 Sensor ein mit 12 Bit quantisiertes Signal.

Verbesserungen im Dynamikbereich durch Algorithmen

Neben der Verbesserung der Sensorik kann der Dynamikbereich auch algorithmisch vergrößert werden. Grundlage sind dabei Bilddaten, die mit verschiedenen Belichtungszeiten akquiriert wurden. Das wohl prominenteste Verfahren in dieser Familie nutzt eine Belichtungsreihe (time varying exposure), d.h. mehrere komplette Bilder, die mit unterschiedlichen Belichtungszeiten akquiriert wurden, als Datengrundlage. Diese Methode wird mittlerweile von vielen Smartphones und gängigen Bildbearbeitungsprogrammen, unter anderem auch in der Photographie, angeboten und ist daher einem weitreichenden Publikum auch außerhalb des Machine-Vision Marktes bekannt.

Grundannahme ist, dass die finalen Pixelwerte eines Sensor in etwa linear von der einfallenden Lichtmenge und der Belichtungszeit abhängig sind, so dass für eine bekannte Belichtungszeit also, falls der Pixel nicht gesättigt ist, die zugrundeliegende einfallende Lichtmenge (bzw. eine dazu proportionale Größe) bestimmt werden. Im Falle gesättigter Pixel greift man auf die entsprechenden Pixelwerte bei kürzeren Belichtungszeiten zurück. Auf diese Weise kann die einfallende Lichtmenge für einen größeren Bereich bestimmt werden, als es nur bei einer Belichtungszeit der Fall gewesen wäre. Die Belichtungsreihe birgt den Vorteil, dass man durch sie ohne ortsbezogenen Auflösungsverlust die Luminanz über einen vergrößerten Bereich bestimmten kann. Nichtsdestotrotz gilt es zu bedenken, dass Aufnahmen mit mehreren Belichtungszeiten notwendig sind, was insbesondere im Falle bewegter Objekte zu unerwünschten Artefakten führen kann (Ghosting).

Moderne CMOS Sensorik, z.B. Sony Pregius, verfügt in der Regel über Multi-Exposure Funktionalitäten um nativ Bilder mit unterschiedlichen Belichtungszeiten aufzunehmen, ohne zwischen den Aufnahmen manuell die Belichtungszeit ändern zu müssen.

Spatially Varying Exposure

Um die Entstehung von Artefakten durch Belichtungsreihen zu vermeiden, bieten moderne Sensoren die "Spatially Varying Expsoure" Technologie an. Dabei werden bestimmte Pixelgruppen auf dem Sensor mit unterschiedlichen Belichtungszeiten belichtet. Eine gängige Variante belichtet beispielsweise immer jeweils zwei Bildzeilen im Wechsel mit unterschiedlichen Belichtungszeiten. Da die Belichtungen gleichzeitig starten, werden Artefakte, die durch Bewegungen in der Szene auftreten, minimiert. Allerdings gibt es in diesem Falle keine 1:1 Korrespondenz unterschiedlich belichteter Pixel und die Pixel des finalen HDR Bildes müssen durch Interpolation berechnet werden. Dieser Vorgang führt notgedrungen zu einem Auflösungsverlust und kann zu Artefakten insbesondere an Kantenstrukturen führen. Ferner ist die Berechnung des finalen Bildes durch die notwendige Interpolation rechenintensiver als die Berechnung aus den Daten der Belichtungsreihe.

Anzeige von HDR-Bildern und Tone Mapping

Bei der Anzeige von HDR Bildern ist man in der Regel direkt mit dem im Vergleich zum menschlichen Wahrnehmungssystem kleinen Dynamikbereich der Anzeigegeräte konfrontiert. Während zwar mittlerweile HDR-Displays mit einem größeren Dynamikbereich verfügbar sind, so sind diese bei weitem noch nicht durchgehend verbreitet. Soll ein HDR-Bild auf einem Anzeigegerät mit geringerem Dynamikumfang dargestellt werden, so muss es wieder in seinem Dynamikumfang reduziert werden. Diesen Reduktionsvorgang bezeichnet man als Tone-Mapping. Wie die Reduktion zu erfolgen hat, ist nicht klar definiert sondern abhängig von dem Ziel, das es zu erreichen gilt. Dieses kann eine bestmögliche Approximation der tatsächlichen Szeneneigenschaften sein oder aber das Erreichen einer bestimmten subjektiven, künstlerischen Qualität. Grundsätzlich wird zwischen globalen und lokalen Tone-Mapping Algorithmen unterschieden. Im Falle globaler Algorithmen wird für alle Pixel, unabhängig vom Ort, die gleiche Transformation durchgeführt. Diese Algorithmen sind sehr effizient und erlauben eine Echtzeitverarbeitung der Daten. Lokale Algorithmen agieren in lokalen Pixelnachbarschaften und versuchen beispielsweise in diesen Nachbarschaften den Kontrast bestmöglich zu erhalten. Sie sind rechenintensiver, liefern aber in der Regel kontrastreichere Bilder.

The Imaging Source hat die Notwendigkeit eines maximalen Dynamikumfangs im Machine-Vision Umfeld schon früh erkannt und bietet in seinen End-User Softwareprodukten und den Programmierschnittstellen die Möglichkeit an, sowohl HDR-Bilddaten zu akquirieren, als auch entsprechend durch Tone-Mapping zu visualisieren oder zu speichern. Viel Aufwand wurde dabei in die Benutzerfreundlichkeit der Algorithmen investiert. So gibt es für die Algorithmen entsprechende Automatikmodi, die sämtliche Parameter automatisch an die Szene adaptieren und kein Eingreifen des Benutzers erfordern. Das Ergebnis sind von Haus aus kontrastreiche Aufnahmen mit brillanten natürlichen Farben. Insbesondere die End-Eser Software IC Measure nutzt mittlerweile standardmäßig, sofern von der Kamera unterstützt, die HDR Funktionalitäten und präsentiert dem Nutzer HDR Bilder.

Der obige Artikel, verfasst von Dr. Oliver Fleischmann (Projektmanager bei The Imaging Source), wurde in der April 2018-Ausgabe der Zeitschrift inspect unter dem Titel, "High-Dynamic-Range Imaging in modernen Industriekamerasveröffentlicht."

Wenn Sie zufällig am 26. April in einem Geschäft waren, sind Sie vielleicht auf Gruppen von jungen Leuten gestoßen, die durch die Räumlichkeiten streiften. Am vierten Donnerstag im April findet immer der Girls' and Boys' Day statt. Diese Bildungsinitiative bietet jungen Schülern die Möglichkeit, verschiedene Berufbilder kennenzulernen und direkte Erfahrungen mit Fachleuten und Spezialisten in ihrem Arbeitsumfeld zu sammeln.

Vier Mädchen und zwei Jungen kamen zu The Imaging Source zum Girls' and Boys' Day 2018. Ingenieure führten die Schüler in die industrielle Bildverarbeitung, ihre Anwendungen sowie deren Auswirkungen im Alltag ein. Vorgestellt wurden u. a. ein 3D-Stereo System und ein Studentenprojekt zum Thema virtuelle Realität. Ein Besuch in der Produktion, wo die Schüler sich in der Kameraproduktion und beim Kameratest versuchten, rundete den Tag ab.

Als Nordamerikas führende Fachmesse für industrielle Bildverarbeitung und Bildverarbeitungskomponenten bot The Vision Show eine Vielzahl von neuen Bildverarbeitungstechnologien sowie Fachvorträge und Netzwerk Möglichkeiten.

The Imaging Source präsentierte seine neuesten USB3 Vision konformen USB 3.1 (gen. 1) Industrie- und USB 3.1 (gen. 1) Platinenkameras mit den neuesten Sony Sensoren (u.a. IMX287/IMX273 and IMX255/IMX253) sowie sein 3D Stereo System und 3D Software SDK IC 3D. The Imaging Source freute sich über die Auszeichnung Innovators Award 2018 in Bronze, die während der Messe für den IC USB 3 to 10 GigE Software Converter - Software zur Konvertierung und Übertragung von Bilddaten von einer USB 3 Kamera auf eine 10 GigE Schnittstelle - verliehen wurde.