Sony Innova con il traduttore della lingua dei segni in-game

Sony ha depositato una domanda di brevetto per offrire maggiore comodità ai giocatori non udenti. Il brevetto mostra come una lingua dei segni può essere tradotta in un'altra in un gioco.

Brevetto Sony: traduttore da ASL a JSL per videogiochi

Si prevede di utilizzare apparecchiature VR e di eseguirle tramite giochi cloud

Sony ha depositato una domanda di brevetto per aggiungere la traduzione del linguaggio dei segni in tempo reale ai videogiochi. Il brevetto, intitolato “Traduzione della lingua dei segni in ambienti virtuali”, descrive una tecnologia in grado di tradurre la lingua dei segni americana (ASL) nella lingua dei segni giapponese (JSL) che può essere compresa da chi parla giapponese.

Sony afferma che il suo obiettivo è creare un sistema per aiutare i giocatori non udenti attraverso la traduzione del linguaggio dei segni in tempo reale nei giochi. La tecnologia descritta nel brevetto consentirebbe agli indicatori virtuali o agli avatar visualizzati sullo schermo di comunicare nel linguaggio dei segni in tempo reale. Il sistema prima tradurrà i gesti in una lingua in testo, quindi convertirà il testo in un'altra lingua specificata e infine tradurrà i dati ricevuti in gesti in un'altra lingua.

"Le forme di realizzazione della presente divulgazione si riferiscono a metodi e sistemi per acquisire il linguaggio dei segni di un utente (ad esempio, un giapponese) e tradurre il linguaggio dei segni in un altro utente (ad esempio, un madrelingua inglese)", descrive Sony nel brevetto. "Poiché le lingue dei segni variano in base all'origine regionale, le lingue dei segni non sono universalmente applicabili. Ciò richiede di catturare in modo appropriato la lingua dei segni di un utente, comprenderne la lingua madre e generare una nuova lingua dei segni come output per un altro utente, adattata alla sua lingua nativa. linguaggio dei segni."

Sony ha fornito un esempio del fatto che un'implementazione di questo sistema può utilizzare apparecchiature VR o display montati sulla testa (HMD). "In alcune forme di realizzazione, l'HMD si connette a un dispositivo utente, come un personal computer, una console di gioco o un altro dispositivo informatico, tramite una connessione cablata o wireless", spiega Sony. "In alcune forme di realizzazione, il dispositivo dell'utente esegue il rendering della grafica visualizzata tramite l'HMD, fornendo all'utente un'esperienza visiva coinvolgente dell'ambiente virtuale

Sony ha inoltre proposto che un dispositivo utente possa comunicare senza problemi con un altro dispositivo utente sul server di gioco attraverso la rete. "In alcune forme di realizzazione, il server di gioco esegue una sessione condivisa del videogioco, mantiene lo stato canonico del videogioco e del suo ambiente virtuale", ha affermato Sony, "e lo stato del dispositivo dell'utente rispetto all'ambiente virtuale è sincronizzato."

Con questa configurazione, gli utenti possono condividere e interagire nello stesso ambiente virtuale (ad esempio un gioco) su una rete o un server condiviso. Sony ha anche affermato che in alcune forme di realizzazione del sistema, il server di gioco potrebbe far parte di un sistema di cloud gaming in grado di "renderizzare e trasmettere video in streaming" tra ciascun dispositivo dell'utente.