Sony dévoile le brevet pour l'outil de langue des signes en jeu

Sony a déposé un brevet révolutionnaire visant à améliorer l'accessibilité pour les joueurs sourds en introduisant un traducteur en langue des signes en jeu en temps réel. Le brevet, intitulé «Traduction de la langue des signes dans un environnement virtuel», décrit un système qui peut traduire la langue des signes américaine (ASL) en langue des signes japonaise (JSL) dans les jeux vidéo.

Sony brevets ASL au traducteur JSL pour les jeux vidéo

Proposé d'utiliser les appareils VR et de travailler sur les jeux en nuage

Le brevet innovant de Sony présente un système conçu pour aider les joueurs sourds à travers des traductions en temps réel des langages de signes lors des conversations en jeu. Cette technologie permettrait à des indicateurs ou à des avatars virtuels de communiquer la langue des signes de manière transparente à l'écran. Le processus consiste à traduire les gestes de signe d'une langue en texte, à convertir le texte en une autre langue spécifiée, et enfin à rendre les données en gestes de signe de la langue cible.

"Les implémentations de la présente divulgation concernent les méthodes et les systèmes de capture de la langue des signes d'un utilisateur (par exemple, japonais) et de traduction de la langue des signes à un autre utilisateur (par exemple, anglais)", a déclaré Sony dans le brevet. "Parce que les langages des signes varient en fonction des origines géographiques, la langue des signes n'est pas universelle. Cela permet de capturer de manière appropriée la langue des signes d'un utilisateur, de comprendre la langue maternelle et de générer un nouveau langage de signes comme sortie pour un autre utilisateur dans leur langue de signe native."

L'implémentation de ce système pourrait impliquer l'utilisation de périphériques de type VR ou d'écrans montés sur la tête (HMD). "Dans certaines implémentations, le HMD se connecte via une connexion câblée ou sans fil à un périphérique utilisateur, comme un ordinateur personnel, une console de jeu ou un autre appareil informatique", a expliqué Sony. "Dans certaines implémentations, le périphérique utilisateur rend les graphiques pour l'affichage via le HMD qui fournissent une visualisation immersive de l'environnement virtuel pour l'utilisateur."

Sony suggère en outre que le système pourrait faciliter la communication transparente entre les appareils utilisateur sur un réseau avec un serveur de jeu. "Dans certaines implémentations, le serveur de jeux exécute une session partagée d'un jeu vidéo, en maintenant l'état canonique du jeu vidéo et de son environnement virtuel", a déclaré Sony, "et à laquelle les appareils utilisateur sont synchronisés concernant l'état de l'environnement virtuel."

Cette configuration permet aux utilisateurs de partager et d'interagir dans le même environnement virtuel ou le même jeu sur un réseau ou un serveur partagé. De plus, Sony a mentionné que dans certaines implémentations, le serveur de jeux pourrait être intégré dans un système de jeu cloud, qui "rend et diffuse une vidéo" entre chaque appareil utilisateur, améliorant l'expérience de jeu et l'accessibilité pour les joueurs sourds.