MVTec Software GmbH
 

Deep Learning

MVTec Softwareprodukte bieten eine große Auswahl an Operatoren, Funktionen und Methoden, die entweder auf Deep-Learning-Technologien basieren oder es Kunden ermöglichen, Deep-Learning-Technologien in ihren eigenen Anwendungen selbst einzusetzen.

Deep-Learning-Gestützte Technologien

In HALCON and MERLIC beinhaltet

HALCON (hier kostenlos testen) und MERLIC (hier kostenlos testen) bieten beide Deep-Learning-basierte OCR (in diesem Video in Aktion zu sehen). Diese neuen Klassifikatoren wurde mit Hilfe von Deep Learning trainiert. Mit ihnen lassen sich höhere Leseraten erzielen als mit allen bisherigen Klassifikationsverfahren.

Deep Learning in Ihrer Anwendung

[Translate to Deutsch:] Featured in HALCON

HALCON erlaubt es Kunden, Deep-Learning-Technologien in ihren eigenen Anwendungen selbst einzusetzen. Nutzer können mit Hilfe von CNNs (Convolutional Neural Networks) einen eigenen Klassifikator trainieren, der dann zur Klassifizierung neuer Daten eingesetzt werden kann.

HALCON bietet einen nahtlos integrierten, umfassenden Satz von Deep-Learning-Funktionen für:

Deep-learning-basierte Klassifikation ganzer Bilder

 

Klassifikation ganzer Bilder

Deep-learning-basierte Objektdetektion

 

Objektdetektion

Semantische Segmentierung mittels Deep Learning

 

Semantische Segmentierung

Labeling von Daten

Mockup: Deep-Learning-Tool
Mockup eines Labeling-Tools

MVTec arbeitet an einem eigenständigen Tool zum Labeln von Trainingsdaten für Deep Learning. Eine erste Preview-Version wird im Laufe von Q1/2019 veröffentlicht. Kunden können damit Trainingsbilder labeln, die für Objektdetektion und semantische Segmentierung benötigt werden: Das Tool ermöglicht es, in einem Bild angezeigte Objekte mit umschreibenden Rechtecken verschiedenen Klassen zuzuordnen. Ebenso ist es möglich, jeden Pixel eines Bildes einer bestimmten Klasse zuzuordnen. Die gelabelten Bilder können dann in HDevelop geladen werden, um das CNN zu trainieren.

Für Kunden, die sofort loslegen wollen, haben wir eine Lösung zum Labeln von Trainingsbildern in HDevelop vorbereitet. Dieses HDevelop-Skript, einschließlich einer kurzen Dokumentation, kann hier heruntergeladen werden.

Kunden, die ihre Daten bereits (mit einem beliebigen Tool) gelabelt haben, können sich dieses HDevelop-Beispielskript ansehen: Es zeigt, wie man aus solchen Daten ein DLDataset-Dictionary für die Objektdetektion mit HALCON erstellt. Für zusätzliche Hilfe bei der Konvertierung ihres Trainingsdatensatzes in ein von HDevelop lesbares Format können sich Kunden mit uns in Verbindung setzen.

Trainieren kundenspezifischer CNNs

Das Netzwerk trainieren
Trainieren eines CNN mit "gelabelten" Bilddaten

Mit HALCON können Anwender ihren eigenen Klassifikator mithilfe vortrainierter CNNs (Convolutional Neural Networks), welche in HALCON enthalten sind, trainieren. Diese Netze wurden hochgradig für industrielle Anwendungen optimiert und basieren auf Hunderttausenden von Bildern. Nach dem Training kann das CNN zur Klassifizierung neuer Daten verwendet werden.

Das Training geschieht durch die Bereitstellung einer ausreichenden Anzahl passend beschrifteter bzw. "gelabelter" Trainingsbilder. Anschließend analysiert die Software diese gelabelten Bilder und lernt dabei automatisch, anhand welcher Merkmale die gegebenen Klassen identifiziert werden können. Dies ist ein großer Vorteil gegenüber traditioneller Klassifizierungsmethoden, bei denen diese Eigenschaften vom Anwender manuell programmiert werden mussten – ein komplexes und umständliches Unterfangen, das qualifizierte Ingenieure mit Programmier- und Bildverarbeitungskenntnissen erfordert.

Verwendung der trainierten Netze

Defektklassifizierung mit Hilfe von Deep Learning
Das trainierte CNN klassifiziert Defekte anhand ganzer Bilder

Sobald das Netzwerk gelernt hat, zwischen den vorgegebenen Klassen zu unterscheiden, z.B. also, ob ein Bild ein zerkratztes, ein verunreinigtes oder ein gutes Werkstück zeigt, kann das Netzwerk in Betrieb genommen werden. Das bedeutet, dass der Anwender den neu erstellten CNN-Klassifikator auf neue Bilddaten anwenden kann, welche der Klassifikator dann mit den im Training erlernten Klassen abgleicht – dies wird auch als "Inferenz" bezeichnet. Die Inferenz kann sowohl auf GPUs als auch auf CPUs ausgeführt werden.

Anwendungsbereiche

Bei der Suche nach realen Anwendungen können CNNs beispielsweise zur Defektklassifizierung (z.B. für Leiterplatten, Flaschenmündungen oder Tabletten) oder zur Objektklassifizierung (z.B. zum Identifizieren einer Pflanzenart anhand lediglich eines Bildes) verwendet werden.

Entwickelt mit Schlüsselkunden verschiedenster Industrien

Bei der Entwicklung von HALCONs Deep-Learning-Features haben wir eng mit wichtigen Pilotkunden aus verschiedenen Branchen zusammengearbeitet. Nachfolgend ein kurzer Überblick über die verschiedenen Herausforderungen und wie Deep Learning uns geholfen hat, sie zu lösen.

[Translate to Deutsch:] Plant identification

Die Aufgabe: Identifizierung von Pflanzen

Vor Deep Learning

Neue Pflanzentypen mussten manuell programmiert werden. Für die Merkmals­extraktion wurden für jedes Land eigene MLP-Klassifikatoren verwendet ­– ein zeitraubender Prozess.

Mit Deep Learning

Es dauerte nur etwa zwei Wochen, bis wir die gleichen Aufgaben gelöst hatten. Die Fehlerrate konnte dabei halbiert werden.

Identifizierung leerer Regalschächte mit Deep Learning

Die Aufgabe: Leere Regalschächte erkennen

Vor Deep Learning

Ein aufwändiges Hardware-Setup mit 3D-Sensoren war notwendig.

Mit Deep Learning

Die Lösung benötigt lediglich 2D-Bilddaten, was dank der damit kostengünstigeren Bilderfassung und schnelleren Klassifizierung zu Kosteneinsparungen führte. Zudem konnte die Fehlerrate deutlich reduziert werden.

Defektprüfung von Pillen mit Deep Learning

Die Aufgabe: Defekte auf Pillen erkennen

Vor Deep Learning

Neue Fehlerklassen mussten manuell und vor Ort programmiert werden – ein zeit- und kostenintensiver Prozess.

Mit Deep Learning

Neue Fehlertypen können automatisch trainiert werden, was eine enorme Zeit- und Kostenersparnis bedeutet, da die Ingenieure nicht mehr zum Kunden reisen müssen.

Kontaktflächeninspektion mit Deep Learning

Die Aufgabe: Kontaktflächen auf Defekte prüfen

Vor Deep Learning

Eine relativ hohe Fehlerquote erforderte viel manuelle Nach-Kontrolle durch die Arbeiter, was die Produktion verlangsamte und die Kosten erhöhte.

Mit Deep Learning

Die Implementierung einer deep-learning-basierten Fehlererkennung führte zu einer massiven Reduzierung der Fehlerquote, was den Bedarf an manueller Prüfung drastisch reduzierte, die Produktion beschleunigte und die Arbeitskosten senkte.

Deep Learning Tutorials

Unsere dreiteilige Tutorialreihe führt Sie durch alle notwendigen Schritte, um Ihren eigenen Deep-Learning-basierten Klassifikator mit HALCON zu trainieren und zu evaluieren.

Vorbereitende Schritte
(1) Vorbereitende Schritte
Trainieren eines Klassifikators
(2) Trainieren eines Klassifikators
Evaluierung eines trainierten Klassifikators
(3) Evaluierung eines trainierten Klassifikators

Deep Learning Helfer

Nachfolgend finden Sie einige zusätzliche Downloads, die Ihnen den Einstieg in Deep Learning mit HALCON erleichtern.

 

BeschreibungDownload
HDevelop-Skript zum Labeln Ihrer Daten in HALCON

Zip-File

(19 MB)

HDevelop-Beispielskript, das zeigt wie man aus vorhandenen gelabelten Daten ein DLDataset-Dictionary zur Objektdetektion mit HALCON erstellt.

Zip-File

(3.4 MB)

Minimalversion des HDevelop-Beispiels für Objektdetektion

Zip-File

(3 KB)

Minimalversion des HDevelop-Beispiels für Semantische Segmentierung

Zip-File

(3 KB)