Le brevet innovant de Sony vise à améliorer l'accessibilité des joueurs sourds en introduisant la traduction en langue des signes en jeu en temps réel. Cette technologie comble les écarts de communication entre les joueurs utilisant différentes langues de signe.
Traduction de la langue des signes en temps réel de Sony pour les jeux vidéo
Tiration des technologies VR et Cloud Gaming
Un brevet Sony récemment déposé détaille un système de traduction en temps réel des langages de signe dans les jeux vidéo. Le brevet, intitulé «Traduction de la langue des signes dans un environnement virtuel», propose une solution permettant une communication entre, par exemple, un utilisateur ASL et un utilisateur JSL.
Ce système facilite la communication dans le jeu pour les joueurs sourds en traduisant instantanément la langue des signes. Les avatars ou indicateurs à l'écran refléteraient dynamiquement la langue des signes traduite. Le processus implique une traduction en trois étapes: la langue des signes au texte, la traduction de texte entre les langues et enfin le texte à la langue des signes cible.
"La divulgation actuelle décrit des méthodes et des systèmes pour capturer la langue des signes d'un utilisateur et la traduire pour un autre utilisateur dans leur langage de signe natif", explique Sony dans le brevet. "Les langages de signe varient géographiquement, nécessitant un système capable de capturer, d'interpréter et de générer une sortie de langage de signe appropriée pour différents utilisateurs."
Sony suggère d'utiliser des casques VR (HMD) pour une implémentation optimale. "Le HMD se connecte à un périphérique utilisateur (PC, console de jeu, etc.) pour fournir un environnement virtuel immersif", déclare le brevet.
De plus, Sony propose un système en réseau, en utilisant potentiellement une architecture de jeu cloud. "Un serveur de jeux gère l'état du jeu, synchronisant les appareils utilisateur et activant l'interaction dans un environnement virtuel partagé", les détails du brevet. "Dans certaines implémentations, le serveur de jeux pourrait faire partie d'un système de jeu cloud, rendu et diffusion vidéo entre les appareils utilisateur."
Cette architecture permet une interaction multijoueur transparente, avec la traduction de la langue des signes gérée via le système en réseau, améliorant potentiellement l'expérience de jeu pour un public plus large.