Cette œuvre d'art sait quand elle est photographiée grâce à tinyML

Cette œuvre d'art sait quand elle est photographiée grâce à tinyML

Équipe Arduino — 9 septembre 2022

Presque tous les arts fonctionnent dans une seule direction en permettant au spectateur d'admirer sa beauté, sa créativité et sa construction. Mais l'artiste estonien Tauno Erik a fait quelque chose d'un peu différent grâce au matériel embarqué et à la puissance de tinyML. Son travail est capable de répondre activement à une personne chaque fois qu'elle utilise un téléphone portable pour le prendre en photo.

Au centre se trouvent quatre circuits/composants primaires, qui comprennent un grand haut-parleur, une sculpture abstraite à LED, une ancienne carte de sonnette de style soviétique et un circuit imprimé contenant l'électronique de commande. Le circuit contient un Arduino Nano 33 BLE Sense ainsi qu'un module de caméra OV7670 qui peut capturer des objets directement devant. Tauno a ensuite formé un modèle d'apprentissage automatique à l'aide d'Edge Impulse sur près de 700 images étiquetées comme contenant des humains, un téléphone portable ou tout le reste/indéterminé.

Avec le modèle formé et déployé sur le Nano 33 BLE Sense, un programme a été écrit qui saisit une image de la caméra, convertit son espace colorimétrique en RVB 24 bits et l'envoie au modèle pour inférence . L'étiquette résultante peut ensuite être utilisée pour activer la sonnette connectée et jouer diverses animations sur la sculpture LED.

Plus de détails sur ce projet peuvent être trouvés ici sur le site Web de Tauno.

Cette œuvre d'art sait quand elle est photographiée grâce à tinyML
Cette œuvre d'art sait quand elle est photographiée grâce à tinyML

Équipe Arduino — 9 septembre 2022

Presque tous les arts fonctionnent dans une seule direction en permettant au spectateur d'admirer sa beauté, sa créativité et sa construction. Mais l'artiste estonien Tauno Erik a fait quelque chose d'un peu différent grâce au matériel embarqué et à la puissance de tinyML. Son travail est capable de répondre activement à une personne chaque fois qu'elle utilise un téléphone portable pour le prendre en photo.

Au centre se trouvent quatre circuits/composants primaires, qui comprennent un grand haut-parleur, une sculpture abstraite à LED, une ancienne carte de sonnette de style soviétique et un circuit imprimé contenant l'électronique de commande. Le circuit contient un Arduino Nano 33 BLE Sense ainsi qu'un module de caméra OV7670 qui peut capturer des objets directement devant. Tauno a ensuite formé un modèle d'apprentissage automatique à l'aide d'Edge Impulse sur près de 700 images étiquetées comme contenant des humains, un téléphone portable ou tout le reste/indéterminé.

Avec le modèle formé et déployé sur le Nano 33 BLE Sense, un programme a été écrit qui saisit une image de la caméra, convertit son espace colorimétrique en RVB 24 bits et l'envoie au modèle pour inférence . L'étiquette résultante peut ensuite être utilisée pour activer la sonnette connectée et jouer diverses animations sur la sculpture LED.

Plus de détails sur ce projet peuvent être trouvés ici sur le site Web de Tauno.

What's Your Reaction?

like

dislike

love

funny

angry

sad

wow