Sony Patenten Revolutionaire in-game gebarentaaltechnologie

Sony heeft een patent aangevraagd met als doel verbeterde toegankelijkheid voor dove gamers te bieden. Het patent van Sony illustreert hoe specifieke gebarentalen kunnen worden omgezet naar een andere in-game.

Sony patenteert ASL naar JSL Translator voor videogamesVoorgesteld om VR-apparaten te gebruiken en te werken via cloudgaming

Sony heeft een patent aangevraagd dat een real-time gebarentolk aan videogames toevoegt. Het patent, getiteld "VERTALING VAN GEBARENTAAL IN EEN VIRTUELE OMGEVING", illustreert een technologie waarbij Amerikaanse Gebarentaal (ASL) kan worden gecommuniceerd naar een Japanssprekende gebruiker met behulp van Japanse Gebarentaal (JSL).

Sony verklaarde dat het een systeem wil implementeren dat dove gamers kan helpen via realtime interpretaties van gebarentalen tijdens in-game chats. De technologie die in het patent wordt beschreven, zou het mogelijk maken dat virtuele indicatoren of avatars op het scherm worden weergegeven om gebarentaal in realtime te communiceren. Het systeem zal in eerste instantie de gebaren van de ene taal in tekst vertalen, vervolgens de tekst naar een andere aangewezen taal converteren en uiteindelijk de ontvangen gegevens vertalen naar de gebaren van de andere taal.

"Implementaties van de huidige openbaarmaking hebben betrekking op methoden en systemen voor het vastleggen van gebarentaal van de ene gebruiker (bijvoorbeeld Japans) en het vertalen van de gebarentaal naar een andere gebruiker (bijvoorbeeld Engels),' beschrijft Sony in het patent. "Omdat gebarentalen variëren afhankelijk van de geografische oorsprong, is gebarentaal niet universeel. Dit vereist het op de juiste wijze vastleggen van de gebarentaal van de ene gebruiker, het begrijpen van de moedertaal en het genereren van nieuwe gebarentaal als output voor een andere gebruiker in hun moedertaal."

Een manier waarop dit systeem zou kunnen worden geïmplementeerd, zoals Sony illustreerde, zou zijn met behulp van een VR-type apparaat of een op het hoofd gemonteerd display (HMD). "In sommige implementaties maakt de HMD via een bekabelde of draadloze verbinding verbinding met een gebruikersapparaat, zoals een pc, gameconsole of ander computerapparaat", specificeerde Sony. "In sommige implementaties geeft het gebruikersapparaat afbeeldingen weer voor weergave via de HMD, waardoor de gebruiker een meeslepende kijk op de virtuele omgeving krijgt."

Sony stelde verder voor dat het ene gebruikersapparaat naadloos zou kunnen communiceren met een ander gebruikersapparaat via een netwerk met een gameserver. "In sommige implementaties voert de gameserver een gedeelde sessie van een videogame uit, waarbij de canonieke status van de videogame en zijn virtuele omgeving behouden blijft", aldus Sony, "en waarmee de gebruikersapparaten worden gesynchroniseerd met betrekking tot de status van de virtuele omgeving. ."

Met deze opstelling kunnen gebruikers met elkaar delen en met elkaar communiceren in dezelfde virtuele omgeving, aka game, via een gedeeld netwerk of server. Sony merkte bovendien op dat in sommige implementaties van het systeem de spelserver deel zou kunnen uitmaken van een cloud-spelsysteem, dat "video rendert en streamt" tussen elk gebruikersapparaat.