Sony a franchi une étape importante vers l'amélioration de l'accessibilité pour les joueurs sourds en déposant un brevet pour un traducteur innovant en langue des signes en jeu. Cette technologie, détaillée dans le brevet intitulé «La traduction de la langue des signes dans un environnement virtuel», vise à combler les lacunes de communication en traduisant la langue des signes américains (ASL) en langue des signes japonais (JSL) et vice versa dans les jeux vidéo.

Sony brevets ASL au traducteur JSL pour les jeux vidéo

Proposé d'utiliser les appareils VR et de travailler sur les jeux en nuage

Le brevet de Sony présente un système révolutionnaire conçu pour faciliter la traduction en langue des signes en temps réel lors des interactions en jeu. La technologie capture les gestes de signe d'une langue, les convertit en texte, traduit le texte en une autre langue et transforme enfin le texte traduit en gestes de signe correspondants de la langue cible. Ce processus permet une communication transparente entre les joueurs sourds à l'aide de différentes langues de signe.

Sony souligne l'importance de cette technologie, en énonçant: "Les implémentations de la présente divulgation concernent les méthodes et les systèmes pour capturer la langue des signes d'un utilisateur (par exemple, japonais), et traduire la langue des signes à un autre utilisateur (par exemple, anglais)." L'entreprise reconnaît la nature non universelle des langages de signe et la nécessité d'un système qui peut interpréter et générer avec précision les gestes de la langue des signes adaptés à la langue des signes native de l'utilisateur.

Pour implémenter ce système, Sony suggère d'utiliser un appareil de type VR ou un affichage monté sur la tête (HMD). "Dans certaines implémentations, le HMD se connecte via une connexion câblée ou sans fil à un périphérique utilisateur, comme un ordinateur personnel, une console de jeu ou un autre appareil informatique", explique Sony. Cette configuration permet une expérience de visualisation immersive dans l'environnement virtuel du jeu.

En outre, Sony propose que le système puisse fonctionner sur un réseau avec un serveur de jeu, permettant à plusieurs périphériques utilisateur d'interagir dans le même environnement virtuel. "Dans certaines implémentations, le serveur de jeux exécute une session partagée d'un jeu vidéo, en maintenant l'état canonique du jeu vidéo et de son environnement virtuel", note Sony, assurant la synchronisation sur tous les appareils connectés.

L'intégration de cette technologie avec les systèmes de jeu cloud est également envisagée, où le serveur de jeux "rendrait et diffuserait la vidéo" entre les appareils utilisateur. Cette approche pourrait améliorer l'accessibilité et l'efficacité du système de traduction de la langue des signes, ce qui en fait un outil précieux pour les joueurs sourds dans le monde.