Outil de langue des signes révolutionnaire de brevets Sony en jeu

Le brevet révolutionnaire de Sony vise à révolutionner l'accessibilité pour les joueurs sourds. La technologie propose un traducteur en langue des signes en jeu en temps réel, combler les lacunes de communication entre les joueurs utilisant différentes langues de signe.

Sony brevets ASL au traducteur JSL pour les jeux vidéo

Tirer parti des jeux VR et cloud pour la traduction sans couture

Ce brevet innovant, intitulé «Traduction de la langue des signes dans un environnement virtuel», détaille un système permettant une traduction en temps réel entre les langues des signes, telles que la langue des signes américains (ASL) et la langue des signes japonais (JSL). Sony envisage un système qui facilite la communication dans le jeu pour les joueurs sourds en traduisant instantanément les gestes de la langue des signes. Les avatars ou indicateurs à l'écran représenteraient visuellement la langue des signes traduite en temps réel. Le processus implique une traduction en trois étapes: la langue des signes au texte, la traduction de texte entre les langues et enfin le texte à la langue des signes cible.

Comme l'explique Sony dans le brevet: "Les implémentations de la présente divulgation concernent les méthodes et les systèmes de capture de la langue des signes d'un utilisateur (par exemple, japonais) et de traduction de la langue des signes à un autre utilisateur (par exemple, l'anglais). Parce que les langages de signe varient en fonction de la langue géographique, la langue des signes n'est pas universelle.

Sony suggère d'utiliser des casques VR ou des écrans montés sur la tête (HMD) pour la mise en œuvre. Ces HMD se connecteraient à l'appareil d'un utilisateur (PC, console de jeu, etc.), fournissant des visuels immersifs dans l'environnement de jeu virtuel. Détails de Sony: "Dans certaines implémentations, le HMD se connecte via une connexion câblée ou sans fil à un périphérique utilisateur, comme un ordinateur personnel, une console de jeu ou un autre appareil informatique. Dans certaines implémentations, le périphérique utilisateur rend les graphiques pour l'affichage via le HMD qui fournit une visualisation immersive de l'environnement virtuel pour l'utilisateur."

En outre, Sony propose une communication inter-appareils via un serveur de jeux, permettant une interaction transparente entre les joueurs dans un environnement virtuel partagé. Le brevet met en évidence le potentiel d'intégration des jeux cloud: "Dans certaines implémentations, le serveur de jeux exécute une session partagée d'un jeu vidéo, en maintenant l'état canonique du jeu vidéo et son environnement virtuel, et à laquelle les appareils utilisateur sont synchronisés concernant l'état de l'environnement virtuel." Cette approche basée sur le cloud permet un rendu vidéo et un streaming efficaces entre les appareils utilisateur, améliorant l'expérience globale de jeu.