Il traduttore del linguaggio dei segni in-game di Sony rompe le barriere

Sony ha depositato una domanda di brevetto per fornire migliori funzionalità di accessibilità di gioco per i giocatori sordi e muti. Il brevetto mostra come una lingua dei segni può essere tradotta in un'altra in un gioco.

Brevetto Sony: sviluppo di un traduttore dal linguaggio dei segni americano al linguaggio dei segni giapponese per videogiochi

Si prevede di utilizzare apparecchiature VR e di eseguirle tramite giochi cloud

Sony ha depositato una domanda di brevetto che aggiungerebbe la traduzione del linguaggio dei segni in tempo reale ai videogiochi. Il brevetto, intitolato “Interpretazione della lingua dei segni in ambienti virtuali”, dimostra una tecnologia in grado di tradurre la lingua dei segni americana (ASL) nella lingua dei segni giapponese (JSL) per chi parla giapponese.

Sony afferma che il suo obiettivo è creare un sistema che assista i giocatori non udenti traducendo il linguaggio dei segni in tempo reale durante le conversazioni durante il gioco. La tecnologia descritta nel brevetto consentirebbe a un indicatore virtuale o avatar visualizzato sullo schermo di trasmettere il linguaggio dei segni in tempo reale. Il sistema prima tradurrà i gesti in una lingua in testo, quindi convertirà il testo in un'altra lingua specificata e infine tradurrà i dati ricevuti in gesti in un'altra lingua.

Sony descrive nel brevetto: "Le forme di realizzazione della presente divulgazione riguardano metodi e sistemi per acquisire il linguaggio dei segni di un utente (ad esempio, un giapponese) e tradurre il linguaggio dei segni in un altro utente (ad esempio, un madrelingua inglese) ." "Poiché le lingue dei segni variano in base all'origine regionale, le lingue dei segni non sono universalmente applicabili. Ciò richiede l'acquisizione appropriata della lingua dei segni di un utente, la comprensione della sua lingua madre e la generazione di una nuova lingua dei segni per un altro utente come output nella sua lingua madre. linguaggio dei segni."

Sony ha fornito un esempio del fatto che un modo per implementare questo sistema è con l'aiuto di apparecchiature VR o display montati sulla testa (HMD). Sony specifica: "In alcune forme di realizzazione, l'HMD è collegato a un dispositivo dell'utente, come un personal computer, una console di gioco o un altro dispositivo informatico, tramite una connessione cablata o wireless." "In alcune forme di realizzazione, il dispositivo dell'utente esegue il rendering del contenuto visualizzato tramite la grafica HMD, offrendo agli utenti un'esperienza visiva coinvolgente in ambienti virtuali”

Sony ha inoltre proposto che un dispositivo utente possa comunicare senza problemi con un altro dispositivo utente sul server di gioco attraverso la rete. "In alcune forme di realizzazione, il server di gioco esegue una sessione condivisa del videogioco, mantiene lo stato canonico del videogioco e del suo ambiente virtuale", ha affermato Sony, "e il dispositivo dell'utente si sincronizza con esso rispetto allo stato dell'ambiente virtuale ."

Con questa configurazione, gli utenti possono condividere e interagire nello stesso ambiente virtuale (ad esempio un gioco) su una rete o un server condiviso. Sony ha anche aggiunto che in alcune implementazioni del sistema, il server di gioco potrebbe far parte di un sistema di cloud gaming che "renderizza e trasmette video in streaming" tra ciascun dispositivo dell'utente.