
A patente inovadora da Sony visa revolucionar a acessibilidade para jogadores surdos. A tecnologia propõe um tradutor de linguagem de sinais em tempo real no jogo, pontendo lacunas de comunicação entre os jogadores usando diferentes idiomas de sinais.
Sony patentes ASL para o tradutor JSL para videogames
Aproveitando a RV e os jogos em nuvem para tradução sem costura

Essa patente inovadora, intitulada "Tradução da linguagem de sinais em um ambiente virtual", detalha um sistema que permite a tradução em tempo real entre idiomas de sinais, como a American Sign Language (ASL) e a linguagem de sinais japonesa (JSL). A Sony prevê um sistema que facilite a comunicação no jogo para jogadores surdos, traduzindo instantaneamente gestos de linguagem de sinais. Avatares ou indicadores na tela representariam visualmente a linguagem de sinais traduzida em tempo real. O processo envolve uma tradução em três etapas: linguagem de sinais para texto, tradução de texto entre idiomas e, finalmente, texto para a linguagem de sinais de destino.
As Sony explains in the patent: "Implementations of the present disclosure relate to methods and systems for capturing sign language of one user (eg, Japanese), and translating the sign language to another user (eg, English). Because sign languages vary depending on geographical origins, sign language is not universal. This provides a need for appropriately capturing the sign language of one user, understanding the native language, and generating new sign language as output for another user in their native sign linguagem."

A Sony sugere a utilização de fones de ouvido VR ou displays montados na cabeça (HMDs) para implementação. Esses HMDs se conectariam ao dispositivo de um usuário (PC, console de jogos, etc.), fornecendo visuais imersivos no ambiente de jogo virtual. Detalhes da Sony: "Em algumas implementações, o HMD se conecta através de uma conexão com fio ou sem fio a um dispositivo de usuário, como um computador pessoal, console de jogo ou outro dispositivo de computação. Em algumas implementações, o dispositivo do usuário renderiza gráficos para exibição através do HMD que fornece visualização imersiva do ambiente virtual para o usuário".
Além disso, a Sony propõe a comunicação entre dispositivos por meio de um servidor de jogo, permitindo a interação perfeita entre os jogadores em um ambiente virtual compartilhado. A patente destaca o potencial de integração de jogos em nuvem: "Em algumas implementações, o servidor de jogos executa uma sessão compartilhada de um videogame, mantendo o estado canônico do videogame e seu ambiente virtual e ao qual os dispositivos do usuário são sincronizados em relação ao estado do ambiente virtual". Essa abordagem baseada em nuvem permite renderização e streaming de vídeo eficientes entre dispositivos de usuário, aprimorando a experiência geral dos jogos.