Sony Patenty Rewolucyjna technologia języka migowego w grach

Sony złożyło patent, którego celem jest zapewnienie większej dostępności dla niesłyszących graczy. Patent Sony ilustruje, w jaki sposób określone języki migowe można konwertować w grze na inny.

Sony patentuje tłumacza ASL na JSL dla gier wideoProponowany do wykorzystania urządzeń VR i obsługi gier w chmurze

Sony złożyło patent, który dodaje do gier wideo tłumacza języka migowego działającego w czasie rzeczywistym. Patent zatytułowany „TŁUMACZENIE JĘZYKA MIGOWEGO W ŚRODOWISKU WIRTUALNYM” ilustruje technologię, dzięki której amerykański język migowy (ASL) może być komunikowany japońskiemu użytkownikowi za pomocą japońskiego języka migowego (JSL).

Sony oświadczyło, że zamierza wdrożyć system, który może pomóc niesłyszącym graczom poprzez interpretację języków migowych w czasie rzeczywistym podczas czatów w grach. Technologia opisana w patencie umożliwiłaby wyświetlanie na ekranie wirtualnych wskaźników lub awatarów komunikowanie się w języku migowym w czasie rzeczywistym. System początkowo przetłumaczy znaki migowe jednego języka na tekst, następnie przekonwertuje tekst na inny wyznaczony język, a na koniec przetłumaczy otrzymane dane na gesty migowe drugiego języka.

"Wdrożenia niniejszego ujawnienia odnoszą się do metod i systemów przechwytywania języka migowego jednego użytkownika (np. japońskiego) i tłumaczenia języka migowego innemu użytkownikowi (np. angielskiego)” – opisała firma Sony w patencie. „Ponieważ języki migowe różnią się w zależności od pochodzenia geograficznego, język migowy nie jest uniwersalny. Wymaga to odpowiedniego uchwycenia języka migowego jednego użytkownika, zrozumienia języka ojczystego i wygenerowania nowego języka migowego jako wyjścia dla innego użytkownika w jego ojczystym języku migowym.”

Jak pokazało Sony, jednym ze sposobów wdrożenia tego systemu byłoby użycie urządzenia typu VR lub wyświetlacza montowanego na głowie (HMD). „W niektórych implementacjach HMD łączy się za pomocą połączenia przewodowego lub bezprzewodowego z urządzeniem użytkownika, takim jak komputer osobisty, konsola do gier lub inne urządzenie komputerowe” – precyzuje Sony. „W niektórych implementacjach urządzenie użytkownika renderuje grafikę do wyświetlenia za pośrednictwem HMD, co zapewnia użytkownikowi wciągające oglądanie środowiska wirtualnego”.

Sony zaproponowało ponadto, że jedno urządzenie użytkownika mogłoby bezproblemowo komunikować się z innym urządzeniem użytkownika za pośrednictwem sieci z serwerem gier. „W niektórych wdrożeniach serwer gry wykonuje wspólną sesję gry wideo, zachowując kanoniczny stan gry wideo i jej środowiska wirtualnego” – stwierdziło Sony – „i z którą urządzenia użytkownika są synchronizowane pod względem stanu środowiska wirtualnego .”

Dzięki tej konfiguracji użytkownicy mogą udostępniać treści i wchodzić w interakcje ze sobą w tym samym środowisku wirtualnym, w grze aka, za pośrednictwem współdzielonej sieci lub serwera. Sony dodatkowo zauważyło, że w niektórych wdrożeniach systemu serwer gier może stanowić część systemu gier w chmurze, który „renderuje i przesyła strumieniowo wideo” pomiędzy każdym urządzeniem użytkownika.