L'innovation d'EmoPLAY consiste à utiliser des techniques de vision artificielles et d'apprentissage automatique pour capturer l'expression de la personne autiste et l'aider à moduler ses émotions par le biais d'un jeu interactif. En temps réel, grâce à une webcam placée devant l'utilisateur, le système analyse l'image (localisation du visage, prétraitement, extraction des caractéristiques et classification) pour fournir un retour d'information en temps réel à l'utilisateur et percevoir la modulation de ses émotions grâce à un retour d'information automatique.
Le processus d'EmoPLAY est le suivant :
1. Explication de l'émotion et proposition personnalisée d'une situation prototypique ;
2. Proposition personnalisée d'expression faciale ;
3. Reflet virtuel : visualisation de l'image elle-même sur l'écran et, simultanément, reconnaissance automatique de l'expression faciale ;
4. Feedback personnalisé associé à un renforcement positif en cas de correspondance avec l'étape 3.

L'application a été entraînée à reconnaître des expressions faciales chez des utilisateurs âgés de 6 à 16 ans. Il est possible de l'utiliser avec des utilisateurs d'un autre âge, sans toutefois pouvoir garantir la même efficacité de l'algorithme de reconnaissance faciale.
EmoPLAY est un produit innovant prometteur dans le domaine de la santé en ligne. Il offre la possibilité de travailler sur l'apprentissage et l'expression des émotions dans n'importe quel coin du monde et s'adapte aux appareils mobiles. Compte tenu de la forte dispersion géographique de l'autisme, cette caractéristique est d'une toute grande importance. Ce produit pourrait être appliqué à d'autres handicaps/troubles.