Цей олівець Apple Pencil своїми руками пише жестами
Цей олівець Apple Pencil своїми руками пише жестами
Команда Arduino — 20 січня 2023 р.
Випущений у 2015 році Apple Pencil — це технологічний стилус, який дозволяє користувачам писати на екранах iPad під різним натиском і кутом, спілкуючись із дуже малими затримками. Нехіл Раві та Шебін Хосе Джейкоб із Coders Café надихнулися цією технологією носимих пристроїв, щоб розробити власну концепцію олівця, за винятком того, що для роботи цьому не потрібен екран.
Пишуче приладдя пари розпізнає певні жести як літери, а коли один з них виявлено, надсилає результат через USB або Bluetooth® на головний пристрій. Вони почали зі збору багатьох зразків різних букв і співвіднесення їх зі зміною руху на вбудованому акселерометрі Arduino Nano 33 BLE Sense. Звідти вони розробили імпульс у Edge Impulse Studio для вилучення спектральних характеристик із даних акселерометра часових рядів і передачі їх у класифікаційну нейронну мережу Keras. Отримана модель може точно визначати правильну літеру кожного жесту, що робить її придатною для розгортання в Nano 33 BLE Sense.
Перед тестуванням нового апаратного коду для визначення апаратного забезпечення було спроектовано простий корпус, надрукований на 3D-принтері, щоб він містився навколо плати й нагадував справжній Apple Pencil. Крім того, команда створила простий веб-сайт, який міг отримувати дані з дошки через BLE і відображати відповідну літеру у вікні браузера. Щоб дізнатися більше про цей проект, ви можете переглянути його відео нижче!
Команда Arduino — 20 січня 2023 р.
Випущений у 2015 році Apple Pencil — це технологічний стилус, який дозволяє користувачам писати на екранах iPad під різним натиском і кутом, спілкуючись із дуже малими затримками. Нехіл Раві та Шебін Хосе Джейкоб із Coders Café надихнулися цією технологією носимих пристроїв, щоб розробити власну концепцію олівця, за винятком того, що для роботи цьому не потрібен екран.
Пишуче приладдя пари розпізнає певні жести як літери, а коли один з них виявлено, надсилає результат через USB або Bluetooth® на головний пристрій. Вони почали зі збору багатьох зразків різних букв і співвіднесення їх зі зміною руху на вбудованому акселерометрі Arduino Nano 33 BLE Sense. Звідти вони розробили імпульс у Edge Impulse Studio для вилучення спектральних характеристик із даних акселерометра часових рядів і передачі їх у класифікаційну нейронну мережу Keras. Отримана модель може точно визначати правильну літеру кожного жесту, що робить її придатною для розгортання в Nano 33 BLE Sense.
Перед тестуванням нового апаратного коду для визначення апаратного забезпечення було спроектовано простий корпус, надрукований на 3D-принтері, щоб він містився навколо плати й нагадував справжній Apple Pencil. Крім того, команда створила простий веб-сайт, який міг отримувати дані з дошки через BLE і відображати відповідну літеру у вікні браузера. Щоб дізнатися більше про цей проект, ви можете переглянути його відео нижче!
What's Your Reaction?
