A Sony registrou um pedido de patente para fornecer melhores recursos de acessibilidade em jogos para jogadores surdos e mudos. A patente mostra como certas línguas de sinais podem ser traduzidas em tempo real para outra língua de sinais do jogo.
A Sony registrou uma patente para adicionar tradução em linguagem de sinais em tempo real aos videogames. A patente, intitulada "Interpretação de Linguagem de Sinais em Ambientes Virtuais", demonstra tecnologia que pode traduzir a Linguagem de Sinais Americana (ASL) para a Linguagem de Sinais Japonesa (JSL) usada por falantes de japonês.
A Sony afirma que seu objetivo é construir um sistema que auxilie jogadores surdos, traduzindo a linguagem de sinais em tempo real durante conversas no jogo. A tecnologia descrita na patente permitiria que indicadores virtuais ou avatares exibidos na tela se comunicassem em linguagem de sinais em tempo real. O sistema primeiro traduz os gestos de um idioma em texto, depois converte o texto em outro idioma especificado e, finalmente, traduz os dados recebidos em gestos em outro idioma.
"As modalidades da presente divulgação referem-se a métodos e sistemas para capturar a linguagem de sinais de um usuário (por exemplo, uma pessoa japonesa) e traduzir a linguagem de sinais para outro usuário (por exemplo, um falante de inglês)", descreve a Sony no patente. "Como as línguas de sinais variam dependendo de sua origem regional, as línguas de sinais não são línguas universais. Isso requer capturar adequadamente a linguagem de sinais de um usuário, compreender sua língua nativa e gerar uma nova linguagem de sinais como saída para outro usuário, apresentada em sua linguagem de sinais nativa."
Como explica a Sony, uma maneira de implementar esse sistema é com a ajuda de um dispositivo do tipo VR ou de um head-mounted display (HMD). “Em algumas modalidades, o HMD se conecta a um dispositivo de usuário, como um computador pessoal, console de jogo ou outro dispositivo de computação, por meio de uma conexão com ou sem fio”, detalha a Sony. “Em algumas modalidades, o dispositivo do usuário renderiza gráficos exibidos através do HMD, proporcionando ao usuário uma experiência de visualização imersiva do ambiente virtual
.”A Sony propôs ainda que um dispositivo de usuário possa se comunicar perfeitamente com outro dispositivo de usuário no servidor de jogo por meio da rede. “Em algumas modalidades, o servidor de jogo realiza uma sessão compartilhada do videogame, mantém o estado canônico do videogame e seu ambiente virtual”, disse a Sony, “e o dispositivo do usuário sincroniza com isso em relação ao estado do ambiente virtual ."
Com esta configuração, os usuários podem compartilhar e interagir no mesmo ambiente virtual (ou seja, jogo) em uma rede ou servidor compartilhado. A Sony também acrescentou que, em algumas modalidades do sistema, o servidor de jogos pode fazer parte de um sistema de jogos em nuvem que “renderiza e transmite vídeo” entre cada dispositivo do usuário.