Arrows, un système de rétroaction d’« assistant personnel » en temps réel, intégré aux lunettes de réalité augmentée, est conçu pour améliorer les conversations et les interactions sociales des personnes ayant des difficultés de communication dues à l’autisme et au trouble d’anxiété sociale. Les commentaires sont projetés sur les lunettes uniquement lorsque cela est nécessaire avec une distraction minimale du champ de vision.
Le fondateur d’Arrows, Eran Dvir, a une formation en communication visuelle et a étudié les techniques d’interaction avancées à la maîtrise en interaction homme-machine (HCI) de l’Université Reichman. « J’ai une fille de 16 ans atteinte d’autisme. C’est grâce au programme HCI que j’ai eu un moment éclair où j’ai réalisé qu’avec mon expérience en conception de communications visuelles, je pouvais créer une application de réalité augmentée qui l’aiderait à communiquer plus efficacement à l’aide de simples repères visuels ».
Grâce au programme HCI de l’Université Reichman, Eran a rencontré Biran Shaar, un autre étudiant ayant une formation en informatique. Ils se sont associés pour finalement concevoir un système mis en œuvre sur des lunettes AR qui a été testé avec succès sur un groupe d’adolescents atteints d’autisme de haut niveau (HFA) âgés de 13 à 18 ans. Les retours ont été très positifs : « Je ressens toujours de l’anxiété en parlant lors d’événements sociaux parce que j’ai peur de m’humilier. Les lunettes m’ont aidé et ont amélioré mon auto-efficacité » et « l’icône m’a rappelé de réagir, de comprendre que c’est le bon moment pour prendre part à la conversation, très utile.
Eran dit « nous pensons qu’avec ces repères visuels AR, nous pouvons aider les personnes ayant une communication altérée à devenir plus indépendantes socialement et à favoriser un meilleur sentiment de bien-être. Ces repères, signalent la tonalité de correction, évitent la répétitivité, augmentent ou diminuent le volume, ainsi que signalent la fin d’un
conversation. »
Oren Zuckerman, responsable de la maîtrise en HCI, ajoute: «HCI est un domaine interdisciplinaire qui rassemble des étudiants ayant une formation en technologie, design, psychologie et sciences humaines. Nos étudiants, comme Eran et Biran, collaborent pour créer des prototypes significatifs qui peuvent avoir un impact réel sur les gens. Nous sommes fiers de voir nos étudiants suivre leur passion en créant de nouvelles entreprises ou en rejoignant les équipes UX et produit dans les startups les plus en croissance.
Arrows exploite les percées de l’IA dans le langage naturel et le traitement vidéo pour comprendre la posture, les mouvements et les intentions de l’utilisateur ainsi que la reconnaissance des émotions faciales. L’application utilise la reconnaissance faciale, le traitement du langage naturel et le traitement vidéo pour offrir au porteur la solution la plus appropriée en temps réel.
Arrows a récemment remporté des subventions de l’Autorité israélienne de l’innovation et est actuellement dans la phase initiale de création de MVP, le pilote devant être publié dans les mois à venir et recrute activement des experts techniques et cliniques.
Pour plus d’informations
