Smartere Kamera(-features)
Industriekameras mittels FPGA intelligenter machen
Industriekameras sind meist einfach gestrickt: Sie nehmen Bilder auf und senden diese an ein Host-System. Dort bereitet der Kameratreiber die Daten auf, welche die Anwendung auf dem gleichen System verarbeitet. Je nach Datenvolumen kann so selbst ein High-End-System schnell an seine Grenzen kommen. Warum also nicht Industriekameras mittels FPGA smarter machen und diese die Bilddaten aufbereiten lassen, sodass sich das Host-System voll auf die Anwendung konzentrieren kann?
Bild: Matrix Vision GmbHAn und für sich ist ein FPGA nichts Neues, immerhin wurde das erste Patent schon im Jahre 1985 vergeben. Jedoch steckt in dem Baustein ein Potenzial, welches clever ausgeschöpft, eine bildverarbeitende Industriekamera wesentlich smarter macht.
Bild: Matrix Vision GmbH
Bild: Matrix Vision GmbH
Bild: Matrix Vision GmbHGamma-Korrektur
Die Vorteile durch die auf der Kamera durchgeführten, bildvorbereitenden Funktionen lassen sich über die Gamma-Korrektur verdeutlichen: Das Bildmaterial der USB 3.0 Industriekamera mvBlueFox3-2024 mit einem 2,4MP Pregius CMOS-Sensor von Sony hat eine ADC-Auflösung von 12Bit. Eine 12Bit nach 12Bit host-basierte (also über den Treiber) Gamma-Korrektur führt auf einem 4-Kern i7 (2,5GHz) Host-System unter Windows 10 inklusive der Live-Bilddarstellung zu einer CPU-Last von 6 bis 7%. Ohne Gamma-Korrektur beträgt die CPU-Last ca. 1,5%. Bei 8Bit Auflösung und kamerabasierter Gamma-Korrektur wird hingegen eine CPU-Last von 1% erzeugt. Ein anderes Beispiel mit der gleichen Kamera als Farbversion: Bei 160fps und einem host-seitigem Debayering ist das System voll ausgelastet, wohingegen die zusätzliche Last auf dem Host-System nicht messbar ist, sobald das RGB auf der Kamera erzeugt wird. Der Frage, ob die erhöhte CPU-Last nicht durch ein leistungsstärkeres Host-System auszugleichen ist, kann man entgegnen, dass zum einen auch beim Aufrüsten irgendwann Grenzen erreicht und zum anderen das Host-System schon bei der Planung festgezurrt werden muss. Kommt es zu Konzeptänderungen, dass beispielsweise doch mehrere Kameras zum Einsatz kommen sollen, ist eine Skalierung selbst bei leistungsstarken Industrie-PCs nur schwer oder gar nicht möglich. Embedded Systeme haben wir hier noch gar nicht berücksichtigt. Ein weiteres Plus ist, dass die Kamera-basierte Vorverarbeitung der Bilddaten über die volle Auflösung (je nach Sensor 10 bis 12Bit) geht. Host-basierte Vorverarbeitung arbeitet mit der Auflösung, die nach der Übertragung am System ankommt. Um Bandbreite zu sparen, sind das meistens 8Bit. Hier können wichtige Information schon verloren sein. Ein anschauliches Beispiel ist auch hier wieder die Gamma-Korrektur. Bild 3 links zeigt die lineare Kompression der Bilddaten auf 8Bit, während rechts eine Gamma-Korrektur eine höhere Dynamik im 8Bit Bild erreicht, was dazu führt, dass im dunklen Bereichen des Bildes der Fahrer wieder sichtbar wird. Ein weiterer Vorteil ist die Updatefähigkeit. Neue Features oder Optimierungen von bestehenden Anwendungen können ohne Kameraaustausch einfach durch ein Firmware-Update in das FPGA geladen werden.
Bild: Matrix Vision GmbH
Bild: Matrix Vision GmbHGibt es Einschränkungen? - Ja, aber?
Natürlich ist ein FPGA auf die Anzahl der nutzbaren Logikelemente beschränkt. Ist dieser voll, kann nicht einfach der FPGA-Baustein gewechselt werden, da er ein fester Bestandteil der Kameraelektronik ist. Einschränkend kommt hinzu, dass ein FPGA Dinge wie Schnittstellenanbindung z.B. zu Ethernet oder USB übernehmen muss. Jedoch kann durch cleveres Programmieren viel und auch neue Features in ein FPGA gesteckt werden. Aktuelles Beispiel ist der SmartFrameRecall (Bild 4): Dabei erzeugt das FPGA kleine Vorschaubilder mit reduzierter Auflösung (Thumbnails), die mit IDs versehen an den Host-PC übertragen werden. Gleichzeitig wird das entsprechende Bild in Vollauflösung im Bildspeicher der Kamera abgelegt, der als FIFO Ringpuffer angelegt ist. Im Host-PC wird das Vorschaubild von der Anwendung analysiert. Wird das Bild in Vollauflösung benötigt, sendet die Anwendung einen Request und das Bild wird im gleichen Datenstrom wie die Vorschaubilder übertragen. Die Anwendung kann darüber hinaus auch die Region of Interest (ROI) angeben, sodass das FPGA nur den entsprechenden Bereich des Originalbildes überträgt. Die Vorteile liegen auf der Hand. Wie bei allen FPGA-basierten Features bleibt die CPU im Host-System unangetastet, was den Stromverbrauch insgesamt reduziert. Des Weiteren ermöglicht es der SmartFrameRecall, dass große Sensoren mit hohen Frameraten auch über GigE voll ausgereizt und bei voller Geschwindigkeit verwendet werden können oder die Hardware-Aufwendung verringert und somit auch die Hardware-Kosten reduziert werden können. Konkret veranschaulicht dies das Beispiel eines automatisierten Kommissionierungssystems. Werden zur vollständigen Erfassung und Verfolgung von beispielsweise Pharmapackungen üblicherweise bis zu acht Industrie-PCs und 16 Industriekameras benötigt, konnte ein Kunde durch den Einsatz von Industriekameras mit SmartFrameRecall sieben Industrie-Rechner im Gegenwert von 14.000? einsparen. Auch durch den Wegfall von Kabeln konnten die Kosten reduziert werden. Der minimale Aufpreis für die smarteren Industriekameras war daher schnell kompensiert.
Fazit
Durch Kameras mit Smart Features können im Gesamtsystem durch Wegfall von Kabeln, Controllern und der Reduzierung der Host-PC-Leistung weit mehr Kosten gespart werden, als es durch den Einsatz von ´asiatischen Low-Cost-Kameras´ möglich wäre. Ferner kann die Leistungsfähigkeit des Gesamtsystems verbessert und die Flexibilität erhöht werden, da das System einfach skaliert werden kann. Mit der Einführung der ersten Ne-x-t Generation Kamera hat Matrix Vision seit jeher das Ziel verfolgt, die Funktionalität ihrer Kameras mit smarten Features kontinuierlich zu erweitern und dadurch einen echten Mehrwert für Kunden zu bieten.
Industriekameras sind meist einfach gestrickt: Sie nehmen Bilder auf und senden diese an ein Host-System. Dort bereitet der Kameratreiber die Daten auf, welche die Anwendung auf dem gleichen System verarbeitet. Je nach Datenvolumen kann so selbst ein High-End-System schnell an seine Grenzen kommen. Warum also nicht Industriekameras mittels FPGA smarter machen und diese die Bilddaten aufbereiten lassen, sodass sich das Host-System voll auf die Anwendung konzentrieren kann?
Bild: Matrix Vision GmbHAn und für sich ist ein FPGA nichts Neues, immerhin wurde das erste Patent schon im Jahre 1985 vergeben. Jedoch steckt in dem Baustein ein Potenzial, welches clever ausgeschöpft, eine bildverarbeitende Industriekamera wesentlich smarter macht.Bild: Matrix Vision GmbHBild: Matrix Vision GmbH
Matrix Vision GmbH
Dieser Artikel erschien in inVISION 4 2017 - 14.09.17.Für weitere Artikel besuchen Sie www.invision-news.de
