hackpue2.0

Ambiente interactivo de Hello World

Inspiration

HelloWord nacio bajo la inspiración de una amiga llamada Chantal quien junto con su hermano buscan maneras de incluir y brindar la mejores oportunidades posibles a niños con autismo. Este proyecto busca apoyar, mediante el uso de la tecnología, el propósito con el cual surgió que es ayudar.

What it does

Es una plataforma virtual que en la cual los niños con autismo pueden interactuar y recibir estimulos de acuerdo a las emociones que expresan con su rostro, dependiendo de la emoción del niño, los elemetos del ambiente cambian de color y los estímulos auditivos cambian de ritmo.

How we built it

Conectamos la plataforma Unity con la SDK de Kinect y la API de Afectiva para poder construir un ambiente el cual se adapta con forme a las emociones del niño. De tal manera que este pueda interactuar con el entorno virtual.

Challenges we ran into

El manejo de 2 plataformas y su combinación que fueron Kinect V2 con Unity, ademas de que las librerías que teníamos de reconocimiento facial no eran compatible con la versión de Unity que teníamos y tuvimos que buscar una librería alternativa. Involucrarnos en temas que no son de nuestra área como lo fueron las teorías cognitivas y trastornos psicológicos como lo es el autismo.

Accomplishments that we're proud of

Los retos de aprender algo nuevo siempre nos hacen crecer y aprender en el proceso. A pesar de las dificultades, como equipo, logramos cumplir con las metas planteadas al inicio del proyecto. Además de buscar alternativas a los problemas que surgieron durante la planificación, el diseño y el desarrollo. El trabajo en conjunto nos permitió finalizar con anticipación y prepararnos para la presentación del mismo.

What we learned

Después de leer varias publicaciones, artículos e investigaciones pudimos concluir cuales eran los mejores estímulos para lograr obtener una reacción e interacción por parte de los niños con autismo, del mismo modo aprendimos a interconectar diversas tecnologías entre si para que pudieran trabajar en armonía.

What's next for hackpue2.0

En un inicio buscaremos validar si el software cumple con las expectativas para interactuar y ser de ayuda a personas con autismo, realizar pruebas del mismo, así como recibir retroalimentación por parte de expertos que nos ayude a mejorar con el fin de cumplir el objetivo de "Hello World". Una vez validado se implementarán nuevas funciones o actividades para el usuario, como un avatar, con la posibilidad de reconocer expresiones faciales. El proyecto expande su uso aplicativo, no sólo puede ayudar a niños con autismo, sino además a personas con problemas de comunicación e interacción social. Servir como herramienta para fisioterapia y aplicación de terapias de control para Parkinson y Alzheimer.