Steuerung des Computers durch Handgesten mit Arduino

Autoren: Lihui Liu, Junjie Lyu
Betreuer: Prof. Göbel & Prof. Schneider

→ zurück zur Übersicht: WS 22/23: Angewandte Elektrotechnik (BSE)

Einleitung

Bei dem vorliegenden Artikel handelt es sich um ein Projekt aus dem Praktikum angewandte Elektrotechnik des Studiengangs Business and Systems Engineering (BSE). Ziel des Projektes ist es, die bestimmten Funktionen auf dem Computer durch Handgesten zu realisieren. Hierfür werden die Ultraschallsensoren (US) eingesetzt, um die Entfernung zwischen Monitor und Hande zu erfassen. Die Messdaten werden über die serielle Schnittstelle (USB) an den Computer gesendet, die von Python eingelesen werden. Während des Laufs der Pythonprogrammierung auf dem Computer werden die bestimmten Aktionen ausgeführt. Die Umsetzung des Projektes erfolgt nach dem V-Modell.

Abbildung 1: V-Modell 15:59, 02. Okt. 2022 Quelle:[1]

Anforderungen

Tabelle 1: Persölichkeit; Hardware; Software; System

ID	Inhalt	Ersteller	Datum	Geprüft von	Datum
Persönlichkeit
1.1	Python Erkenntnisse	Lihui Liu	-	Junjie Lyu	-
1.2	Arduino Erkenntnisse	Lihui Liu	-	Junjie Lyu	-
Hardware
2.1	Arduino Uno	Lihui Liu	02.10.2022	Junjie Lyu	02.10.2022
2.2	Ultraschallsensor (3 stück)	Lihui Liu	02.10.2022	Junjie Lyu	02.10.2022
2.3	USB Kabel	Lihui Liu	02.10.2022	Junjie Lyu	02.10.2022
2.4	Laptop mit Python	Lihui Liu	02.10.2022	Junjie Lyu	02.10.2022
Software
3.1	Arduino IDE	Lihui Liu	02.10.2022	Junjie Lyu	02.10.2022
3.2	Python3	Lihui Liu	02.10.2022	Junjie Lyu	02.10.2022
3.3	VLC media player	Lihui Liu	02.10.2022	Junjie Lyu	02.10.2022
Funktionen des Systems
4.1	Wenn beide Hände in einer bestimmten Entfernung vor den Sensor gehalten werden, sollte das Video im VLC-Player abgespielt/angehalten werden.	Lihui Liu	02.10.2022	Junjie Lyu	02.10.2022
4.2	Wenn die rechte Hand in einem bestimmten Abstand vor dem Sensor platziert wird, sollte das Video einen Schritt vorwärts laufen.	Lihui Liu	02.10.2022	Junjie Lyu	02.10.2022
4.3	Wenn die linke Hand in einer bestimmten Entfernung vor dem Sensor platziert wird, sollte das Video um einen Schritt zurückgespult werden.	Lihui Liu	02.10.2022	Junjie Lyu	02.10.2022
4.4	Wenn die rechte Hand in einem bestimmten Nahbereich vor dem Sensor platziert wird und dann in Richtung des Sensors bewegt wird, sollte das Video vorgespult werden, und wenn es wegbewegt wird, sollte das Video zurückgespult werden.	Lihui Liu	02.10.2022	Junjie Lyu	02.10.2022
4.5	Wenn die linke Hand in einem bestimmten Nahbereich vor dem Sensor platziert wird und dann in Richtung des Sensors bewegt wird, sollte die Lautstärke des Videos zunehmen und wenn sie wegbewegt wird, sollte die Lautstärke abnehmen.	Lihui Liu	02.10.2022	Junjie Lyu	02.10.2022

Funktionaler Systementwurf/Technischer Systementwurf

Die Abb. 2 und 3 stellen einen funktionalen Systementwurf dar, mit dem die Zuschauer beim Video durch Handgesten die Lautstärke ändern oder vor-/rückwärtsspulen können. Auf dem Monitor werden drei Ultraschallsensoren angelegt, mit denen die Entfernung zwischen Monitor und Hand erfasst wird. Die Messsdaten werden über die serielle Schnittstelle (USB) an den Computer gesendet und mittels der Python Module pyautogui and pyserial mit dem VDL media player verknüpft.

• 

  Abbildung 2: Systementwurf - Projektskizze

• 

  Abbildung 3: Systementwurf - Signalfluss

Literatur

---

→ zurück zur Übersicht: WS 21/22: Angewandte Elektrotechnik (BSE)