Sony Patente Revolutionäre In-Game-Gebärdensprachtechnologie

Sony hat ein Patent angemeldet, das darauf abzielt, gehörlosen Spielern eine verbesserte Zugänglichkeit zu bieten. Sonys Patent veranschaulicht, wie bestimmte Gebärdensprachen im Spiel in eine andere konvertiert werden können.

Sony patentiert ASL-zu-JSL-Übersetzer für VideospieleVorgeschlagen für die Nutzung von VR-Geräten und den Betrieb über Cloud-Gaming

Sony hat ein Patent angemeldet, das Videospielen einen Echtzeit-Gebärdensprachdolmetscher hinzufügt. Das Patent mit dem Titel „ÜBERSETZUNG DER GEBÄRDENSPRACHE IN EINER VIRTUELLEN UMGEBUNG“ veranschaulicht eine Technologie, mit der die amerikanische Gebärdensprache (ASL) einem japanischsprachigen Benutzer mithilfe der japanischen Gebärdensprache (JSL) vermittelt werden kann.

Sony gab an, dass es sich zum Ziel gesetzt hat, ein System zu implementieren, das gehörlosen Spielern durch Echtzeitinterpretation von Gebärdensprachen während Chats im Spiel helfen kann. Die im Patent beschriebene Technologie würde es virtuellen Indikatoren oder Avataren ermöglichen, die auf dem Bildschirm angezeigt werden, um Gebärdensprache in Echtzeit zu kommunizieren. Das System übersetzt zunächst die Gebärdengesten einer Sprache in Text, wandelt dann den Text in eine andere bestimmte Sprache um und übersetzt schließlich die empfangenen Daten in die Gebärdengesten der anderen Sprache.

"Implementierungen der vorliegenden Offenbarung beziehen sich auf Methoden und Systeme zum Erfassen der Gebärdensprache eines Benutzers (z. B. Japanisch) und zum Übersetzen der Gebärdensprache für einen anderen Benutzer (z. B. Englisch)“, beschrieb Sony im Patent. „Da Gebärdensprachen je nach geografischer Herkunft variieren, ist Gebärdensprache nicht universell. Dies erfordert die angemessene Erfassung der Gebärdensprache eines Benutzers, das Verständnis der Muttersprache und die Generierung neuer Gebärdensprache als Ausgabe für einen anderen Benutzer in seiner Muttersprache.“

Eine Möglichkeit, dieses System zu implementieren, wäre, wie Sony dargestellt hat, die Verwendung eines VR-Geräts oder eines Head-Mounted-Displays (HMD). „In einigen Implementierungen stellt das HMD über eine kabelgebundene oder kabellose Verbindung eine Verbindung zu einem Benutzergerät her, beispielsweise einem PC, einer Spielekonsole oder einem anderen Computergerät“, erklärte Sony. „In einigen Implementierungen rendert das Benutzergerät Grafiken zur Anzeige über das HMD, die dem Benutzer eine immersive Betrachtung der virtuellen Umgebung ermöglichen.“

Sony schlug außerdem vor, dass ein Benutzergerät nahtlos mit einem anderen Benutzergerät über ein Netzwerk mit einem Spieleserver kommunizieren könnte. „In einigen Implementierungen führt der Spieleserver eine gemeinsame Sitzung eines Videospiels aus und behält dabei den kanonischen Status des Videospiels und seiner virtuellen Umgebung bei“, erklärte Sony, „und mit dem die Benutzergeräte hinsichtlich des Status der virtuellen Umgebung synchronisiert werden.“ ."

Mit diesem Setup können Benutzer in derselben virtuellen Umgebung, aka Spiel, über ein gemeinsames Netzwerk oder einen gemeinsamen Server teilen und miteinander interagieren. Sony wies außerdem darauf hin, dass der Spieleserver in einigen Implementierungen des Systems Teil eines Cloud-Gaming-Systems sein könnte, das „Videos rendert und streamt“ zwischen den einzelnen Benutzergeräten.