Pick & Place: Unterschied zwischen den Versionen
K (→Erforderliche Software: Link Layout) |
(Aufbau Hardware) |
||
Zeile 70: | Zeile 70: | ||
== Hardware == | == Hardware == | ||
Der Aufbau des Roboters erfolgt mit | |||
== Bilderkennung == | == Bilderkennung == |
Version vom 19. Juni 2014, 20:16 Uhr
Autor: Daniel Block
Betreuer: Prof. Schneider
Motivation
Ein Roboterarm ist ein tolles Anschauungsobjekt, um etwas über Koordinatentransformation zu lernen.
Ziel
Programmiern Sie einen Roboterarm so, dass er sich ein Zuckerstücke von einem Haufen nimmt und dieses in eine HSHL-Tasse fallen lässt.
Aufgabe
- Erkennen Sie mit einer Webcam einen Zuckerwürfel.
- Konstruieren Sie den Standadrd Lego Roboterarm so, dass er den Zuckerwürfel greifen kann.
- Analysieren Sie die Videoszene und steuern Sie den Roboterarm, so dass er den Zucker Greift und diesen kollisionsfrei in die Tasse fallen lässt.
Vorbereitungen
Vor der Bearbeitung der Aufgabe sind einige Vorbereitungen zu treffen. Zum einen wird ein Grundverständnis für die Bildverarbeitung und die Koordinatentransformation vorausgesetzt. Dieses wurde im Rahmen der Veranstaltung Digitale Signal- und Bildverarbeitung während des Sommersemesters 2014 im Studiengang Mechatronik der HSHL erlangt. Eine weitere Recherche in Literatur und im Internet erwies sich jedoch als sehr zielführend. Besonders zur Umsetzung in Matlab konnten hier einige hilfreiche Hinweise gefunden werden.
Erforderliches Equipment
- Lego NXT Roboter
- Lego Mindstorms Basisset 9797
- Lego Mindstorms Ergänzungsset 9648/9695
- Webcam (z. Bsp. Logitech C310)
- HSHL-Tasse
- Zuckerstücke
- Tesafilm
- Notebook oder Rechner mit Matlab
Erforderliche Software
- Matlab (es wird die Version 2014a empfohlen aufgrund der Image Processing Toolbox)
- RWTH - Mindstorms NXT Toolbox für MATLAB
- LEGO Mindstorms NXT Treiber Fantom
- NXT Firmware Version 1.28 oder höher
- NeXTTool
- Camera Calibration Toolbox für Matlab
Die Hyperlinks führen jeweils zur Download-Seite. Matlab ist über das ZFW (Zentrum für Wissensmanagment) der HSHL zu bekommen.
Installation der Treiber
Diese Schritt-für-Schritt-Anleitung orientiert sich an der Beschreibung der RTWH Aachen [1].
- Toolbox der RWTH Aachen
- Toolbox der RWTH Aachen herunterladen.
- Heruntergeladene Datei extrahieren.
- Toolbox als Matlab-Pfad hinzufügen.
- Set Path in Matlab aufrufen.
- Add with subfolders aufrufen und Verzeichnis der Toolbox auswählen.
- Speichern nicht vergessen.
- Firmware des NXT
- Version der Firmware auf dem NXT überprüfen. Die Version lässt sich im Menü des NXT einsehen.
- Wenn die Version älter ist als 1.28 bwz. 1.29, die Firmware herunterladen.
- Die Firmware auf den NXT laden, z.Bsp. mit der Funktion FlashNXTWithFirmware1.29.bat in /tools/MotorControl im Verzeichnis der Toolbox.
- Laden von MotorControl auf NXT
- NeXTool herunterladen und im Verzeichnis /tools/MotorControl der Toolbox speichern.
- In Windows-Systemen nun die Funktion TransferMotorControlBinaryToNXT.bat aufrufen, um mit NeXTool die MotorControl*.rxe auf den NXT zu laden.
- Den Schritten im Command-Fenster folgen.
- Treiber Wird beispielhaft für Windows 32 bit mit USB-Verbindung erklärt. Das Vorgehen für andere Betriebssysteme oder die Bluetooth-Verbindung kann auf der Internetseite der RWTH Aachen[2] nachgesehen werden unter Check other software requirements.
- NXT Fantom-Treiber herunterladen und installieren.
- Funktionstext
- USB-Verbindung zwischen NXT und Rechner bzw. Notebook herstellen.
- NXT einschalten.
- Matlab starten.
- Im Command Window von Matlab COM_OpenNXT ausführen (einfach eintippen und mit Enter ausführen).
- Wird der Aufruf ohne Fehler ausgeführt, ist die Installation erfolgreich abgeschlossen.
Installation der Camera Calibration Toolbox
Diese Beschreibung ist angelehnt an die Erläuterungen von Jean-Yves Bouguet [3].
- Toolbox herunterladen.
- Heruntergeladene Datei extrahieren.
- Den Ordner TOOLBOX_calib als Matlab-Pfad hinzufügen (Vorgehen vgl. RWTH-Toolbox s. o.).
- Starten mit ausführen von calib_gui in Matlab.
Die genaue Vorgehensweise bei der Kalibrierung der Kamera wird an dieser Stelle nicht erläutert. Ich verweise an dieser Stelle auf die Homepage zur Toolbox und den Artikel von Herrn Deitel zu diesem Thema [4].
Hardware
Der Aufbau des Roboters erfolgt mit
Bilderkennung
Hardware-Ansteuerung
Reflexion - Lessons Learned
Einzelnachweise
- ↑ Homepage der RTWH Aachen zur Mindstorms NXT Toolbox (letzter Aufruf 19.6.2014)
- ↑ Internetseite der RWTH Aachen
- ↑ Jean-Yves Bouguet: Camera Calibration Toolbox for Matlab. (Homepage, letzter Aufruf 19.6.2014)
- ↑ Deitel, M.: Extrinsische und Intrinsische Kameraparameter. Lippstadt, Bericht Seminarvortrag, 2013. Link
Siehe auch
- Objekterkennung mit Kamera
- Camera Calibration Toolbox
- RWTH Aachen Toolbox meets NXT
- Lego Mindstorms
- Tönnies, Klaus D.: Grundlagen der Bildverabeitung. Pearson Studium, München, 2005. ISBN 3-8273-7155-4
Weblinks
- Beschreibung, Tutorial und Downlod der Camera Calibration Toolbox für Matlab von Jean-Yves Bouguet
- Beschreibung der Klasse NXTmotor der RWTH Aachen
- Matlab-Seite zur Image Processing Toolbox
- Homepage der RWTH Aachen zur Mindstorms NXT Toolbox für MATLAB
- Downloadseite von Lego
→ zurück zum Hauptartikel: Digitale Signal- und Bildverarbeitung SoSe2014