Dieser Handschuh übersetzt Gebärdensprache mithilfe einer Reihe von Sensoren

Dieser Handschuh übersetzt Gebärdensprache mithilfe einer Reihe von Sensoren

Arduino-Team – 14. Januar 2023

Für Menschen, die mit der amerikanischen Gebärdensprache (ASL) nicht vertraut sind, ist es eine fast unmögliche Aufgabe, die Bedeutung bestimmter Handbewegungen und -positionen zu erkennen. Um diesen Prozess zu erleichtern, hatte Hackster.io-Benutzer ayooluwa98 die Idee, verschiedene Bewegungs-, Widerstands- und Tastsensoren in einen einzigen Handschuh zu integrieren, der diese Signale in verständlichen Text und Sprache umwandeln könnte.

Das System basiert auf einer einzelnen Arduino Nano-Platine, die für die Aufzeichnung von Daten vom Sensor und die Ausgabe des Satzes verantwortlich ist, der am besten zu den Eingaben passt. Die Handausrichtung wird bestimmt, indem die X-, Y- und Z-Achsenwerte eines einzelnen Beschleunigungsmessers gelesen und eine kleine Änderung basierend auf einer vorherigen Kalibrierung vorgenommen werden. Währenddessen erzeugen flexible Widerstandssensoren, die sich über die Länge jedes Fingers erstrecken, je nach Ausmaß der Biegung einen unterschiedlichen Spannungspegel.

Bei jeder Iteration der Hauptprogrammschleife wird eine Reihe von booleschen Anweisungen ausgewertet, um den Satz auszuwählen, der am besten zur aktuellen Fingerkrümmung und Handausrichtung passt, und diese Daten werden dann über die UART-Pins an eine übertragen angeschlossenes HC-05 Bluetooth®-Modul. Die letzte Komponente ist ein verbundenes Telefon, auf dem eine benutzerdefinierte Anwendung ausgeführt wird, die eingehende Wörter von Bluetooth® entgegennimmt und sie für die Text-zu-Sprache-Ausgabe aufzeichnet, wenn die Taste gedrückt wird.

Um mehr über dieses Projekt zu erfahren, können Sie den Artikel von ayooluwa98 hier auf Hackster.io lesen.

Dieser Handschuh übersetzt Gebärdensprache mithilfe einer Reihe von Sensoren
Dieser Handschuh übersetzt Gebärdensprache mithilfe einer Reihe von Sensoren

Arduino-Team – 14. Januar 2023

Für Menschen, die mit der amerikanischen Gebärdensprache (ASL) nicht vertraut sind, ist es eine fast unmögliche Aufgabe, die Bedeutung bestimmter Handbewegungen und -positionen zu erkennen. Um diesen Prozess zu erleichtern, hatte Hackster.io-Benutzer ayooluwa98 die Idee, verschiedene Bewegungs-, Widerstands- und Tastsensoren in einen einzigen Handschuh zu integrieren, der diese Signale in verständlichen Text und Sprache umwandeln könnte.

Das System basiert auf einer einzelnen Arduino Nano-Platine, die für die Aufzeichnung von Daten vom Sensor und die Ausgabe des Satzes verantwortlich ist, der am besten zu den Eingaben passt. Die Handausrichtung wird bestimmt, indem die X-, Y- und Z-Achsenwerte eines einzelnen Beschleunigungsmessers gelesen und eine kleine Änderung basierend auf einer vorherigen Kalibrierung vorgenommen werden. Währenddessen erzeugen flexible Widerstandssensoren, die sich über die Länge jedes Fingers erstrecken, je nach Ausmaß der Biegung einen unterschiedlichen Spannungspegel.

Bei jeder Iteration der Hauptprogrammschleife wird eine Reihe von booleschen Anweisungen ausgewertet, um den Satz auszuwählen, der am besten zur aktuellen Fingerkrümmung und Handausrichtung passt, und diese Daten werden dann über die UART-Pins an eine übertragen angeschlossenes HC-05 Bluetooth®-Modul. Die letzte Komponente ist ein verbundenes Telefon, auf dem eine benutzerdefinierte Anwendung ausgeführt wird, die eingehende Wörter von Bluetooth® entgegennimmt und sie für die Text-zu-Sprache-Ausgabe aufzeichnet, wenn die Taste gedrückt wird.

Um mehr über dieses Projekt zu erfahren, können Sie den Artikel von ayooluwa98 hier auf Hackster.io lesen.

What's Your Reaction?

like

dislike

love

funny

angry

sad

wow