
Sony's baanbrekende patent is bedoeld om een revolutie teweeg te brengen in de toegankelijkheid voor dove gamers. De technologie stelt een realtime vertaler in het spel voor gebarentaal voor, die communicatiekloven tussen spelers overbrugt met behulp van verschillende tekentalen.
Sony Patenten ASL naar JSL -vertaler voor videogames
Gebruikmakend van VR en cloud gaming voor naadloze vertaling

Dit innovatieve patent, getiteld "Vertaling van gebarentaal in een virtuele omgeving", beschrijft een systeem dat realtime vertaling mogelijk maakt tussen tekentalen, zoals American Sign Language (ASL) en de Japanse gebarentaal (JSL). Sony stelt een systeem voor dat in-game communicatie voor dove spelers faciliteert door gebaren met gebarstaal onmiddellijk te vertalen. Avatars of indicatoren op het scherm zouden de vertaalde gebarentaal in realtime visueel vertegenwoordigen. Het proces omvat een driestaps vertaling: gebarentaal naar tekst, tekstvertaling tussen talen en ten slotte tekst naar de doelgebaretaal.
Zoals Sony in het octrooi uitlegt: "Implementaties van de huidige openbaarmaking hebben betrekking op methoden en systemen voor het vastleggen van gebarentaal van de ene gebruiker (bijv. Japans) en het vertalen van de gebarentaal naar een andere gebruiker (bijv. Engels). Omdat tekentalen variëren afhankelijk van geografische oorsprong, is de gebeldtaal niet universeel.

Sony stelt voor om VR-headsets of hoofd gemonteerde displays (HMDS) te gebruiken voor implementatie. Deze HMD's zouden verbinding maken met het apparaat van een gebruiker (pc, gameconsole, enz.) En bieden meeslepende visuals in de virtuele game -omgeving. Sony Details: "In sommige implementaties maakt de HMD verbinding via een bekabelde of draadloze verbinding met een gebruikersapparaat, zoals een personal computer, gameconsole of ander computerapparaat. In sommige implementaties geeft het gebruikersapparaat grafische weergaven voor weergave via de HMD die een meeslepende weergave van de virtuele omgeving voor de gebruiker biedt."
Bovendien stelt Sony inter-apparaatcommunicatie voor via een spelserver, waardoor naadloze interactie tussen spelers in een gedeelde virtuele omgeving mogelijk wordt. Het patent benadrukt het potentieel voor cloud gaming -integratie: "In sommige implementaties voert de gameserver een gedeelde sessie van een videogame uit, waarbij de canonieke status van de videogame en de virtuele omgeving worden gehandhaafd, en waarmee de gebruikersapparaten worden gesynchroniseerd met betrekking tot de status van de virtuele omgeving." Deze cloudgebaseerde aanpak zorgt voor efficiënte video-rendering en streaming tussen gebruikersapparaten, waardoor de algehele game-ervaring wordt verbeterd.