Notre visage peut ouvrir un téléphone intelligent, permettre l’utilisation d’un bâtiment sécurisé et accélérer le contrôle des passeports dans les aéroports, en vérifiant notre identité à de nombreuses fins. Un groupe international de chercheurs de Melbourne, de Nouvelle-Zélande et d’Inde a maintenant porté les technologies de réputation faciale à un niveau supérieur, en utilisant l’expression d’une personne pour utiliser des objets dans un cadre de vérité numérique sans l’utilisation d’un contrôleur portable ou d’un pavé tactile. Dans le cadre d’une première étude mondiale dirigée par le Dr Arindam Dey, spécialiste du College of Queensland, des experts en connexion informatique personnelle ont utilisé des stratégies de traitement neuronal pour capturer le sourire, le froncement des sourcils et la mâchoire serrée d’une personne et ont utilisé chaque concept pour déclencher des actions particulières dans un environnement de vérité numérique. « L’inspiration principale de ce travail était de créer un métavers beaucoup plus disponible et complet », déclare le docteur Dey. « Simultanément, l’expression du visage peut également être utilisée pour permettre des interactions telles que s’embrasser et prendre l’air dans les environnements virtuels de manière beaucoup plus réaliste qu’actuellement. » Parmi les experts participant à l’essai, le professeur Mark Billinghurst, du College of Southern Australia, affirme que le système continue d’être conçu pour identifier diverses expressions faciales à l’aide d’un casque EEG. Un sourire a été utilisé pour déclencher l’ordre « bouger », un froncement de sourcils pour l’ordre « arrêter » et une crispation pour l’ordre « action », au lieu d’une commande manuelle effectuant ces actions », explique le professeur Billinghurst. « En fait, nous enregistrons des expressions faciales courantes comme la frustration, la joie et la surprise et nous les appliquons dans une atmosphère de vérité virtuelle. » Les chercheurs ont conçu 3 environnements numériques — heureux, neutre et effrayant — et ont mesuré l’état cognitif et physiologique de chaque personne lorsqu’elle était immergée dans chaque situation. En reproduisant trois expressions faciales courantes — un sourire, un froncement de sourcils et une crispation — ils ont découvert si les modifications de l’environnement entraînaient ou non l’apparition de l’une des trois expressions, en fonction des réponses psychologiques et physiologiques. Par exemple, dans l’environnement heureux, les utilisateurs devaient se déplacer dans un parc pour attraper des papillons avec un filet. Un individu se déplaçait lorsqu’il souriait et s’arrêtait lorsqu’il fronçait les sourcils. Dans l’environnement naturel, les utilisateurs devaient déplacer un atelier pour ramasser des objets éparpillés. L’os de la mâchoire serrée entraînait un mouvement – dans ce cas, récupérer chaque article – alors que les instructions de début et de fin de mouvement étaient lancées avec un sourire et un froncement de sourcils. Exactement les mêmes expressions faciales ont été utilisées dans l’atmosphère effrayante, où les participants ont navigué dans une base souterraine pour tirer sur des zombies. « Dans l’ensemble, nous nous attendions à ce que les contrôleurs portables fonctionnent beaucoup mieux, car il s’agit d’une méthode beaucoup plus intuitive que les expressions faciales, mais les individus ont noté qu’ils se sentaient plus immergés dans les rencontres RV contrôlées par les expressions faciales. » Le professeur Billinghurst affirme que dépendre des expressions faciales dans un environnement RV est un travail difficile pour le cerveau, mais offre aux clients une expérience bien plus réaliste. « J’espère qu’avec un peu plus d’études, nous pourrons rendre l’utilisation plus facile », dit-il. En plus d’offrir une nouvelle façon d’utiliser la RV, la technique pourrait également permettre aux personnes handicapées – comme les amputés et les personnes atteintes de la maladie du neurone moteur – d’interagir les mains libres dans la RV, sans avoir à utiliser des contrôleurs conçus pour des personnes complètement handicapées. Les experts répètent que les technologies pourraient également être utilisées pour compléter les contrôleurs portables où les expressions du visage sont une forme naturelle d’interaction.