Sony Svelato il brevetto per il traduttore del linguaggio dei segni in-game

Sony ha depositato una domanda di brevetto per fornire migliori funzionalità di accessibilità di gioco per i giocatori sordi e muti. Il brevetto mostra come determinate lingue dei segni possano essere tradotte in tempo reale in un'altra lingua dei segni nel gioco.

Brevetto Sony: traduttore da ASL a JSL per videogiochi

Si prevede di utilizzare apparecchiature VR e di operare tramite giochi cloud

Sony ha depositato un brevetto per aggiungere la traduzione del linguaggio dei segni in tempo reale ai videogiochi. Il brevetto, intitolato “Interpretazione della lingua dei segni in ambienti virtuali”, dimostra la tecnologia in grado di tradurre la lingua dei segni americana (ASL) nella lingua dei segni giapponese (JSL) utilizzata dai parlanti giapponesi.

Sony afferma che il suo obiettivo è creare un sistema che assista i giocatori non udenti traducendo il linguaggio dei segni in tempo reale durante le conversazioni durante il gioco. La tecnologia descritta nel brevetto consentirebbe agli indicatori virtuali o agli avatar visualizzati sullo schermo di comunicare nel linguaggio dei segni in tempo reale. Il sistema prima traduce i gesti in una lingua in testo, quindi converte il testo in un'altra lingua specificata e infine traduce i dati ricevuti in gesti in un'altra lingua.

"Le forme di realizzazione della presente divulgazione si riferiscono a metodi e sistemi per acquisire il linguaggio dei segni di un utente (ad esempio, un giapponese) e tradurre il linguaggio dei segni in un altro utente (ad esempio, un madrelingua inglese)", descrive Sony nel brevetto. "Poiché le lingue dei segni variano a seconda della loro origine regionale, le lingue dei segni non sono lingue universali. Ciò richiede l'acquisizione appropriata della lingua dei segni di un utente, la comprensione della sua lingua madre e la generazione di una nuova lingua dei segni come output per un altro utente, presentata in la loro lingua dei segni nativa."

Come spiega Sony, un modo per implementare questo sistema è con l'aiuto di un dispositivo di tipo VR o di un display montato sulla testa (HMD). "In alcune forme di realizzazione, l'HMD si connette a un dispositivo utente, come un personal computer, una console di gioco o un altro dispositivo informatico, tramite una connessione cablata o wireless", spiega Sony. "In alcune forme di realizzazione, il dispositivo dell'utente esegue il rendering della grafica visualizzata tramite l'HMD, fornendo all'utente un'esperienza visiva coinvolgente dell'ambiente virtuale

Sony ha inoltre proposto che un dispositivo utente possa comunicare senza problemi con un altro dispositivo utente sul server di gioco attraverso la rete. "In alcune forme di realizzazione, il server di gioco esegue una sessione condivisa del videogioco, mantiene lo stato canonico del videogioco e del suo ambiente virtuale", ha affermato Sony, "e il dispositivo dell'utente si sincronizza con esso rispetto allo stato dell'ambiente virtuale ."

Con questa configurazione, gli utenti possono condividere e interagire nello stesso ambiente virtuale (ad esempio un gioco) su una rete o un server condiviso. Sony ha anche aggiunto che in alcune forme di realizzazione del sistema, il server di gioco potrebbe far parte di un sistema di cloud gaming che "renderizza e trasmette video in streaming" tra ciascun dispositivo dell'utente.