Inspiration

Ce matin, on s’est posé une question un peu bizarre : est-ce qu’on peut écrire un message… juste en clignant des yeux ? Il y a des gens qui ne peuvent plus bouger ni parler, et pour eux, les yeux, c’est tout ce qui reste. Les appareils qui existent pour les aider coûtent des milliers de dollars. On s’est dit : une webcam de portable, ça devrait suffire.

What it does

Le programme regarde l’utilisateur à travers la webcam et observe ses clignements. Un clignement court devient un point, un clignement long devient un trait : l’utilisateur écrit donc en code Morse avec ses yeux. Le programme traduit ces points et ces traits en lettres, puis en mots, et les affiche directement dans la vidéo.

How we built it

Pour le construire, on a codé en Python et avec le plugin MediaPipe de TouchDesigner. Comme on découvrait TouchDesigner aujourd’hui, on a utilisé ChatGPT pour nous guider dans l’interface, et Claude pour affiner, corriger et renforcer notre code. Mais on l’a lu, testé, modifié — et on peut vous expliquer chaque partie.

Challenges we ran into

Découvrir TouchDesigner en une journée. Une logique de nœuds et de réseaux très différente de ce qu’on connaissait. Trouver le bon rythme entre point, trait et pause pour que ce soit naturel à utiliser sans être trop lent.

Accomplishments that we're proud of

Nous sommes fiers de pouvoir démontrer que nous avons bel et bien un prototype à montrer aux juges. Il s'agit d'un défi qui a été très dur

What we learned

Les bases de TouchDesigner : opérateurs, CHOPs, scripts Python intégrés, plugin MediaPipe. Que le code Morse, c’est avant tout une question de temps : ce sont les pauses qui font les lettres et les mots.

What's next for Blink

Prédire les mots après deux ou trois lettres, pour écrire plus vite. Reconnaître la langue des signes à partir des mains.

Built With

Share this project:

Updates

Submission history