Este guante traduce el lenguaje de señas usando un conjunto de sensores
Este guante traduce el lenguaje de señas usando un conjunto de sensores
Equipo Arduino — 14 de enero de 2023
Para las personas que no están familiarizadas con el lenguaje de señas americano (ASL), ser capaz de reconocer el significado de ciertos movimientos y posiciones de las manos es una tarea casi imposible. Para facilitar este proceso, al usuario de Hackster.io ayooluwa98 se le ocurrió la idea de integrar varios sensores de movimiento, resistivos y táctiles en un solo guante que podría convertir estas señales en texto y voz comprensibles.
El sistema se basa en una sola placa Arduino Nano, que es responsable de registrar los datos del sensor y generar la oración que mejor se adapte a las entradas. La orientación de la mano se determina leyendo los valores de los ejes X, Y y Z de un solo acelerómetro y aplicando un pequeño cambio basado en una calibración previa. Mientras tanto, los sensores resistivos flexibles que abarcan la longitud de cada dedo producen un nivel de voltaje diferente según la extensión de la curvatura.
En cada iteración del ciclo del programa principal, se evalúa una serie de declaraciones booleanas para elegir la oración que mejor se adapte a la flexión de los dedos y la orientación de la mano actuales, y estos datos se transmiten a través de los pines UART a un módulo Bluetooth® HC-05 adjunto. El componente final es un teléfono conectado que ejecuta una aplicación personalizada que toma las palabras entrantes de Bluetooth® y las registra para la salida de texto a voz cuando se presiona el botón.
Para obtener más información sobre este proyecto, puede leer el artículo de ayooluwa98 aquí en Hackster.io.
Equipo Arduino — 14 de enero de 2023
Para las personas que no están familiarizadas con el lenguaje de señas americano (ASL), ser capaz de reconocer el significado de ciertos movimientos y posiciones de las manos es una tarea casi imposible. Para facilitar este proceso, al usuario de Hackster.io ayooluwa98 se le ocurrió la idea de integrar varios sensores de movimiento, resistivos y táctiles en un solo guante que podría convertir estas señales en texto y voz comprensibles.
El sistema se basa en una sola placa Arduino Nano, que es responsable de registrar los datos del sensor y generar la oración que mejor se adapte a las entradas. La orientación de la mano se determina leyendo los valores de los ejes X, Y y Z de un solo acelerómetro y aplicando un pequeño cambio basado en una calibración previa. Mientras tanto, los sensores resistivos flexibles que abarcan la longitud de cada dedo producen un nivel de voltaje diferente según la extensión de la curvatura.
En cada iteración del ciclo del programa principal, se evalúa una serie de declaraciones booleanas para elegir la oración que mejor se adapte a la flexión de los dedos y la orientación de la mano actuales, y estos datos se transmiten a través de los pines UART a un módulo Bluetooth® HC-05 adjunto. El componente final es un teléfono conectado que ejecuta una aplicación personalizada que toma las palabras entrantes de Bluetooth® y las registra para la salida de texto a voz cuando se presiona el botón.
Para obtener más información sobre este proyecto, puede leer el artículo de ayooluwa98 aquí en Hackster.io.
What's Your Reaction?
