Ця рукавичка перекладає мову жестів за допомогою набору датчиків
Ця рукавичка перекладає мову жестів за допомогою набору датчиків
Команда Arduino — 14 січня 2023 р.
Для людей, які не знайомі з американською мовою жестів (ASL), здатність розпізнати значення певних рухів і положень рук є майже неможливим завданням. Щоб полегшити цей процес, користувач Hackster.io ayooluwa98 придумав інтегрувати різні датчики руху, резистивні та тактильні датчики в одній рукавичці, яка могла б перетворювати ці сигнали на зрозумілий текст і мову.
Система базується на одній платі Arduino Nano, яка відповідає за запис даних із датчика та виведення речення, яке найкраще відповідає введеним даних. Орієнтація руки визначається шляхом зчитування значень осей X, Y і Z одного акселерометра та застосування невеликих змін на основі попереднього калібрування. У той же час гнучкі резистивні датчики, що охоплюють довжину кожного пальця, виробляють різний рівень напруги залежно від ступеня вигину.
На кожній ітерації основного програмного циклу серія булевих операторів оцінюється, щоб вибрати речення, яке найкраще відповідає поточній кривизні пальця та орієнтації руки, а потім ці дані передаються через контакти UART до приєднаний модуль Bluetooth® HC-05. Останнім компонентом є підключений телефон із спеціальною програмою, яка приймає вхідні слова з Bluetooth® і записує їх для виведення тексту в мовлення, коли натискається кнопка.
Щоб дізнатися більше про цей проект, ви можете прочитати статтю ayooluwa98 тут, на Hackster.io.
Команда Arduino — 14 січня 2023 р.
Для людей, які не знайомі з американською мовою жестів (ASL), здатність розпізнати значення певних рухів і положень рук є майже неможливим завданням. Щоб полегшити цей процес, користувач Hackster.io ayooluwa98 придумав інтегрувати різні датчики руху, резистивні та тактильні датчики в одній рукавичці, яка могла б перетворювати ці сигнали на зрозумілий текст і мову.
Система базується на одній платі Arduino Nano, яка відповідає за запис даних із датчика та виведення речення, яке найкраще відповідає введеним даних. Орієнтація руки визначається шляхом зчитування значень осей X, Y і Z одного акселерометра та застосування невеликих змін на основі попереднього калібрування. У той же час гнучкі резистивні датчики, що охоплюють довжину кожного пальця, виробляють різний рівень напруги залежно від ступеня вигину.
На кожній ітерації основного програмного циклу серія булевих операторів оцінюється, щоб вибрати речення, яке найкраще відповідає поточній кривизні пальця та орієнтації руки, а потім ці дані передаються через контакти UART до приєднаний модуль Bluetooth® HC-05. Останнім компонентом є підключений телефон із спеціальною програмою, яка приймає вхідні слова з Bluetooth® і записує їх для виведення тексту в мовлення, коли натискається кнопка.
Щоб дізнатися більше про цей проект, ви можете прочитати статтю ayooluwa98 тут, на Hackster.io.
What's Your Reaction?
