Sony Inova com tradutor de linguagem de sinais no jogo

A Sony registrou um pedido de patente para oferecer mais conveniência aos jogadores surdos. A patente mostra como uma linguagem de sinais pode ser traduzida para outra em um jogo.

Patente da Sony: tradutor de ASL para JSL para videogames

Está planejado usar equipamento VR e executá-lo por meio de jogos em nuvem

A Sony registrou um pedido de patente para adicionar tradução em linguagem de sinais em tempo real aos videogames. A patente, intitulada "Tradução de linguagem de sinais em ambientes virtuais", descreve uma tecnologia que pode traduzir a linguagem de sinais americana (ASL) para a linguagem de sinais japonesa (JSL), que pode ser entendida por falantes de japonês.

A Sony afirma que seu objetivo é construir um sistema para ajudar jogadores surdos por meio da tradução em tempo real da linguagem de sinais em jogos. A tecnologia descrita na patente permitiria que indicadores virtuais ou avatares exibidos na tela se comunicassem em linguagem de sinais em tempo real. O sistema primeiro traduzirá os gestos de um idioma em texto, depois converterá o texto em outro idioma especificado e, finalmente, traduzirá os dados recebidos em gestos em outro idioma.

"As modalidades da presente divulgação referem-se a métodos e sistemas para capturar a linguagem de sinais de um usuário (por exemplo, uma pessoa japonesa) e traduzir a linguagem de sinais para outro usuário (por exemplo, um falante de inglês)", descreve a Sony no patente. "Como as línguas de sinais variam de acordo com a origem regional, as línguas de sinais não são universalmente aplicáveis. Isso requer capturar adequadamente a linguagem de sinais de um usuário, compreender sua língua nativa e gerar uma nova linguagem de sinais como saída para outro usuário, adaptada à sua língua nativa. linguagem de sinais."

A Sony deu um exemplo de que uma implementação deste sistema pode usar equipamento VR ou head-mounted displays (HMD). “Em algumas modalidades, o HMD se conecta a um dispositivo de usuário, como um computador pessoal, console de jogo ou outro dispositivo de computação, por meio de uma conexão com ou sem fio”, detalha a Sony. “Em algumas modalidades, o dispositivo do usuário renderiza gráficos exibidos através do HMD, proporcionando ao usuário uma experiência de visualização imersiva do ambiente virtual

A Sony propôs ainda que um dispositivo de usuário possa se comunicar perfeitamente com outro dispositivo de usuário no servidor de jogo por meio da rede. “Em algumas modalidades, o servidor do jogo realiza uma sessão compartilhada do videogame, mantém o estado canônico do videogame e seu ambiente virtual”, disse a Sony, “e o estado do dispositivo do usuário em relação ao ambiente virtual é sincronizado”.

Com esta configuração, os usuários podem compartilhar e interagir no mesmo ambiente virtual (ou seja, jogo) em uma rede ou servidor compartilhado. A Sony também disse que em algumas modalidades do sistema, o servidor de jogos poderia fazer parte de um sistema de jogos em nuvem que poderia “renderizar e transmitir vídeo” entre cada dispositivo do usuário.