Le brevet innovant de Sony vise à améliorer l'accessibilité pour les joueurs sourds en introduisant une traduction en langue des signes en temps réel dans le jeu. Cette technologie révolutionnaire comble les lacunes de communication, permettant une interaction transparente entre les joueurs utilisant différentes langues des signes.

Sony fait breveter la traduction en langue des signes en temps réel pour les jeux vidéo

Tirer parti des technologies de réalité virtuelle et de jeu en nuage

Ce brevet, intitulé "TRADUCTION DE LA LANGUE DES SIGNES DANS UN ENVIRONNEMENT VIRTUEL", propose un système qui facilite la traduction en temps réel entre les langues des signes, telles que l'American Sign Language (ASL) et la langue des signes japonaise (JSL). L'objectif est de permettre aux joueurs sourds de participer pleinement à la communication dans le jeu.

La technologie brevetée utilise des indicateurs virtuels ou des avatars à l'écran pour afficher les traductions en langue des signes en temps réel. Le processus implique une traduction en trois étapes : premièrement, les gestes de signe sont convertis en texte ; deuxièmement, le texte est traduit dans la langue cible ; et enfin, le texte traduit est reconverti dans les gestes correspondants en langue des signes.

Comme Sony l'explique dans le dépôt de brevet, « les mises en œuvre de la présente divulgation concernent des méthodes et des systèmes permettant de capturer la langue des signes d'un utilisateur et de la traduire pour un autre utilisateur dans sa langue des signes native. Étant donné que les langues des signes varient géographiquement, cette technologie répond la nécessité d'une capture précise, d'une compréhension de la langue et de la génération d'un résultat approprié en langue des signes. "

Sony suggère de mettre en œuvre ce système à l'aide de casques VR ou d'écrans montés sur la tête (HMD). Ces HMD se connecteraient à un appareil utilisateur (PC, console de jeu, etc.) pour fournir un environnement virtuel immersif. La machine utilisateur communiquerait alors avec d'autres machines utilisateur et un serveur de jeu sur un réseau.

Le brevet propose en outre d'utiliser un serveur de jeu, potentiellement au sein d'un système de jeu en nuage, pour gérer l'état du jeu et synchroniser l'environnement virtuel pour tous les utilisateurs connectés. Cela permet un gameplay et une interaction partagés au sein du même monde virtuel. L’aspect cloud gaming gérerait le rendu et le streaming de vidéo entre appareils. Cette architecture garantit une traduction et une interaction fluides et en temps réel pour tous les joueurs, quelle que soit leur langue des signes.