Deep Learning in der Bildverarbeitung KI findet Oberflächenfehler

Cognex VisionPro ViDi ist die erste auf Deep Learning basierende Bild­analyse-Software, die speziell für die Fabrikautomation konzipiert wurde. Es handelt sich um eine praxiserprobte und zuverlässige Software-Lösung mit modernen Algorithmen für maschinelles Lernen. Sie kombiniert künstliche Intelligenz mit der Robustheit der industriellen Bildverarbeitung in der
Cognex Designer Software. Damit lassen sich komplexe Anwendungen lösen, die mit traditionellen Bildverarbeitungssystemen zu schwierig, zu aufwändig oder zu teuer wären. VisionPro ViDi von Cognex verfügt über vier Tools:

• ViDi Blue Locate dient zur Lokalisierung und Identifizierung von Merkmalen.

• ViDi Red erledigt die Segmentierung und Fehlererkennung.

• ViDi Green Classify erledigt die Objekt- und Szenenklassifizierung.

• ViDi Blue Read wird zum Lesen von Texten und Zeichen verwendet.

Die neue Technologie auf Basis von Deep Learning funktioniert zuverlässig auch bei Abweichungen und unvorhersehbaren Defekten und ist selbst den besten Qualitätsprüfern überlegen. Sie wird insbesondere angewendet zur Lokalisierung und Identifizierung verzerrter Merkmale, zur Segmentierung und Fehlererkennung, zur Klassifikation von Textur und Material und für anspruchsvolle OCR-Anwendungen, etwa mit verzerrtem Druck.

Kommentierte Bilder auswerten

ViDi Blue Locate findet komplexe Merkmale und Objekte durch Lernen aus kommentierten Bildern. Selbstlernende Algorithmen lokalisieren Teile, zählen durchsichtige medizinische Glasfläschchen auf einem Tablett und führen Bestückungsprüfungen auf Kits und Packungen durch. Zum Einlernen von ViDi Blue Locate benötigt der Anwender lediglich Bilder, auf denen die relevanten Merkmale markiert sind.

Ein typisches Anwendungsbeispiel ist die Identifizierung und Klassifizierung von Zündkerzen. Hier müssen die Hersteller auf Sichtprüfungen vertrauen, wenn die Umgebungen keine Technologie zum Lesen von Barcodes unterstützen. Leichte Abweichungen im Erscheinungsbild können für automatische Prüfsysteme aber ein Problem darstellen. Dies ist der Fall bei Zündkerzen, die zur Vormontage auf Tabletts in unterschiedlichen Farben ankommen. VisionPro ViDi verallgemeinert dann die Merkmale einer Zündkerze anhand ihrer Größe, Form und Oberflächenmerkmale. Der Ingenieur markiert mithilfe des ViDi-Blue-Locate-Tools einige Zündkerzen auf den Bildern, um die Software einzulernen. Dadurch werden einzelne Zündkerzen nach dem Training identifiziert und können gezählt werden. Das ViDi-Green-Classify-Tool verwendet das Deep-Learning basierte Modell, um die Zündkerzen nach dem bekannten Merkmal – der Farbe – in einer definierten Größe zu klassifizieren.

Ästhetische Fehler erkennen

ViDi Red Analyze wird verwendet, um Anomalien und ästhetische Fehler zu erkennen – gleichgültig ob es sich um Kratzer auf einer dekorierten Oberfläche handelt, um unvollständige oder unsaubere Anordnungen oder um problematische Webstellen in Textilien. Das Tool kann all diese Probleme ganz einfach durch das Lernen des normalen Aussehens eines Objekts einschließlich erheblicher, jedoch zulässiger Änderungen identifizieren. Zudem wird das ViDi-Red-Analyze-Tool zum Segmentieren spezieller Bereiche verwendet – beispielsweise beim Vorhandensein von Fremdmaterial auf einem medizinischen Gewebe. Das Analysetool kann die relevanten Bereiche durch Lernen des wechselnden Erscheinungsbilds in der Zielzone zuverlässig identifizieren.

Beispielsweise erleichtert ViDi Red Analyze die automatische Erfassung und Bestimmung von Fehlern auf texturierten Metall­oberflächen, etwa bei der Prüfung von Kolbenringen. Außerdem erfasst das Tool zuverlässig Poren im Metall, beispielsweise bei der Inspektion der Zylinder. Auch bei der Inspektion von Textilien, etwa bei der Airbag-Prüfung, kommt ViDi Red Analyze zum Einsatz. Denn für Airbags gelten zur Gewährleistung der Sicherheit der Passagiere strenge Qualitätsstandards. Die Fahrzeughersteller müssen alle sicherheitskritischen Komponenten doppelt und dreifach prüfen, um deren Qualität zu gewährleisten und Garantie- und Rückrufkosten zu senken.

Die Vorgehensweise zur Lösung der Aufgabe ist einfach: Ein Ingenieur trainiert das ViDi-Red-Analyze-Tool im sogenannten Unsupervised-Mode – zu diesem Zweck wird eine Reihe an fehlerfreien Bildern eines Airbags eingelernt. Das Tool erlernt so das normale Erscheinungsbild eines Airbag-Gewebes einschließlich Webmuster, Gewebeeigenschaften und Farbe. Alle Merkmale, die von dem eingelernten Erscheinungsbild des Modells abweichen, werden im Bild markiert. Auf diese Weise erfasst VisionPro ViDi zuverlässig und beständig alle Anomalien wie Löcher, Schlitze, Risse und ungewöhnliche Stichbilder. So können fehlerhafte Bereiche des Gewebes auch ohne umfangreiche Fehlerbibliotheken schnell identifiziert und gemeldet werden.

Objekte und Szenen klassifizieren

ViDi Green Classify wird verwendet, um ein Objekt oder eine ganze Szene zu klassifizieren, beispielsweise bei der Identifizierung von Produkten basierend auf deren Verpackung, bei der Klassifizierung von Schweißnähten oder der Unterscheidung von zulässigen und unzulässigen Fehlern. Basierend auf einer Sammlung von Bildern lernt das Tool verschiedene Klassen zu unterscheiden. Zum Einlernen benötigt der Anwender lediglich Bilder, die den verschiedenen Klassen zugeordnet und entsprechend markiert sind.

Fehler einfach erkennen

Ein Anwendungsbeispiel ist die Prüfung der Schweißnähte eines Motor-Kolbens. Diese sind extrem unterschiedlich, wodurch die Erkennung von Anomalien schwierig wird. Bestimmte Anomalien, wie fehlende, zu große oder zu kleine Schweißnähte, sind unerwünscht. Andere Anomalien, wie überlappende Nähte, dagegen sind erlaubt und aus Sicherheitsgründen sogar erforderlich. Das ViDi-Red-Analyze-Tool erleichtert in Kombination mit dem ViDi-Green-Classify-Werkzeug die automatische Prüfung und Klassifizierung der Schweißnahtfehler.

Auch hier ist die Vorgehensweise zur Lösung der Aufgabe unproblematisch: Die Software wird vom Ingenieur mittels des Red-Analyze-Tools im Supervised-Mode eingelernt. Hierfür werden auf Bildern, die als „Nicht in Ordnung“ eingestuft sind, die Fehler händisch im Tool markiert. Das Red-Analyze-Tool lernt somit das Erscheinungsbild eines spezifischen Fehlers, und ist somit in der Lage, mit dem eingelernten Model in Bildern nach Fehlern zu suchen. Im zweiten Teil der Prüfung klassifiziert der Ingenieur die Fehler mithilfe des Green-Classify-Tools nach ihrem jeweiligen Typ. Die Software extrahiert auf der Basis des entwickelten Modells Informationen über bestimmte Fehler und separiert überlappende Nähte als eigene Klassifizierung. Auf der Basis dieser Information ist der Automobilhersteller in der Lage, ausschließlich überlappende Nähte auszuwählen.

Lesen von Texten und Zeichen

ViDi Blue Read entziffert stark verformte, schiefe und schlecht geätzte Zeichen mit Hilfe der optischen Zeichenerkennung OCR. Die vorgeschulte Font-Bibliothek identifiziert den größten Teil des Textes ohne zusätzliche Programmierung oder Font-Training und ermöglicht damit eine schnelle und einfache Anwendung. Das robuste Tool kann so eingelernt werden, dass spezifische OCR-Anwendungsanforderungen eingestellt werden können. Hierfür ist kein spezifisches Know-how erforderlich. Beispielsweise erkennt das ViDi-Blue-Read-Tool verformte Zeichen bei der Prüfung der Fahrgestellnummer (VIN, Vehicle Indentification Number). Denn für eine erfolgreiche Rückverfolgbarkeit müssen die Hersteller in der Lage sein, die Fahrgestellnummer zuverlässig zu lokalisieren und zu dekodieren. Die Farbgebung sowie Spiegel- und Blendeffekte machen es für industrielle Bildverarbeitungssysteme aber schwierig, die Zeichen zu lokalisieren und zu erkennen. Mit dem ViDi-Blue-Read-Tool hingegen lassen sich verformte Zeichen nun trotz der anspruchsvollen Bilderstellung einfach lokalisieren und lesen.

Zum Einlernen der Software definiert ein Ingenieur die Zeichengröße auf Bildern mit einer repräsentativen Auswahl an VIN-Zeichen. Dank seiner vorinstallierten Omni-Schriftarten erkennt das Tool sogar Zeichen, die durch Blendeffekte und Kon­traste verdeckt sind. Während der Einlern- und Validierungsphase kennzeichnet der Ingenieur immer nur die jeweils übersehenen Zeichen – und zwar solange, bis die Software in der Lage ist, alle Zeichen korrekt zu identifizieren. Dieser neue, auf Deep-
Learning basierte Ansatz zu OCR spart nicht nur beim Einlernen sondern auch bei der Entwicklung Zeit, indem er eine übermäßige Kennzeichnung vermeidet und Zeichen auf unruhigem Hintergrund erfolgreich liest.

Qualität auf hohem Niveau

Cognex Designer bietet in der Version 4.0 Bild­verarbeitungs- und Deep-Learning-Algorithmen, um anspruchsvolle Fertigungsanwendungen mit automatischer Erkennung, Prüfung und Klassifizierung zu lösen. Diese Technologie ist selbst den besten Qualitätsprüfern überlegen und kommt bei der Fehlererkennung, der Klassifikation von Textur und Material, bei der Montageüberprüfung und Lokalisierung verformter Teile und der Zeichenerkennung zum Einsatz.