Patent Sony: wbudowany w grę tłumacz języka migowego zapewnia lepsze wrażenia z gry graczom z wadą słuchu!

Sony złożyło wniosek patentowy, aby poprawić dostępność gier dla graczy z wadą słuchu. Patent demonstruje technologię, która może w czasie rzeczywistym tłumaczyć jeden język migowy na inny w grze.

Opatent Sony: tłumacz w czasie rzeczywistym z amerykańskiego języka migowego (ASL) na japoński język migowy (JSL)

Sony złożyło wniosek patentowy na dodanie do gier wideo tłumaczenia języka migowego w czasie rzeczywistym. Patent zatytułowany „Tłumaczenie języka migowego w środowiskach wirtualnych” opisuje technologię umożliwiającą tłumaczenie amerykańskiego języka migowego (ASL) na japoński język migowy (JSL) do użytku przez osoby mówiące po japońsku.

Celem firmy Sony jest zbudowanie systemu, który pomoże graczom z wadą słuchu prowadzić rozmowy w grze poprzez tłumaczenie języka migowego w czasie rzeczywistym w grze. Technologia opisana w patencie umożliwiłaby wyświetlanie na ekranie wirtualnego wskaźnika lub awatara przekazywania języka migowego w czasie rzeczywistym. System najpierw tłumaczy gesty języka migowego w jednym języku na tekst, następnie konwertuje tekst na inny określony język, a na koniec przekłada otrzymane dane na gesty w innym języku.

Sony opisuje w patencie: „Przykłady wykonania niniejszego ujawnienia dotyczą metod i systemów przechwytywania języka migowego jednego użytkownika (np. Japończyka) i tłumaczenia języka migowego innego użytkownika (np. osoby mówiącej po angielsku) Ponieważ języki migowe różnią się w zależności od pochodzenia geograficznego, a języki migowe nie są językami uniwersalnymi, wymaga to odpowiedniego uchwycenia języka migowego jednego użytkownika, zrozumienia jego języka ojczystego i wygenerowania jego ojczystego języka migowego jako danych wyjściowych dla innego użytkownika ”

Sony podało przykład, że w jednej implementacji tego systemu można wykorzystać sprzęt VR lub wyświetlacze nagłowne (HMD). Szczegóły Sony: „W niektórych przykładach wykonania HMD jest podłączony do urządzenia użytkownika, takiego jak komputer osobisty, konsola do gier lub inne urządzenie komputerowe, za pośrednictwem połączenia przewodowego lub bezprzewodowego. W niektórych przykładach urządzenie użytkownika renderuje grafikę wyświetlaną za pośrednictwem HMD, Zapewnij użytkownikom wciągające wrażenia wizualne w środowisku wirtualnym ”

Firma Sony zaproponowała ponadto, aby jedno urządzenie użytkownika mogło bezproblemowo komunikować się z innym urządzeniem użytkownika na serwerze gry za pośrednictwem sieci. Sony stwierdziło: „W niektórych przykładach serwer gry wykonuje wspólną sesję gry wideo, utrzymuje stan kanoniczny gry wideo i jej środowiska wirtualnego, a urządzenie użytkownika synchronizuje się z nim pod względem stanu środowiska wirtualnego”.

Dzięki tej konfiguracji użytkownicy mogą współużytkować to samo środowisko wirtualne (tj. grę) i wchodzić w interakcje ze sobą we wspólnej sieci lub serwerze. Sony powiedziało również, że w niektórych wdrożeniach systemu serwer gier może stanowić część systemu gier w chmurze, który „renderuje i przesyła strumieniowo wideo” pomiędzy każdym urządzeniem użytkownika.