
Przełomowy patent Sony ma na celu zrewolucjonizowanie dostępności dla osób niesłyszących. Technologia proponuje tłumacz języka migowego w czasie rzeczywistym, łącząc luki komunikacyjne między graczami za pomocą różnych języków migowych.
Sony Patents ASL to JSL Translator do gier wideo
Wykorzystanie VR i gier w chmurze do płynnego tłumaczenia

Ten innowacyjny patent, zatytułowany „Tłumaczenie języka migowego w środowisku wirtualnym”, szczegółowo opisuje system umożliwiający tłumaczenie w czasie rzeczywistym między językami migowymi, takimi jak amerykański język migowy (ASL) i japoński język migowy (JSL). Sony przewiduje system, który ułatwia komunikację w grze dla osób niesłyszących poprzez natychmiastowe tłumaczenie gestów języka migowego. Awatary lub wskaźniki na ekranie wizualnie reprezentowałyby przetłumaczony język migowy w czasie rzeczywistym. Proces obejmuje trzyetapowe tłumaczenie: język migowy na tekst, tłumaczenie tekstu między językami, a wreszcie tekst do docelowego języka migowego.
Jak wyjaśnia Sony na patencie: „Implementacje obecnego ujawnienia odnoszą się do metod i systemów przechwytywania języka migowego jednego użytkownika (np. Japończyków) i tłumaczenia języka migowego na innego użytkownika (np. Angielski). Ponieważ języki migowe różnią się w zależności od pochodzenia geograficznego, język migowy nie jest uniwersalny język."

Sony sugeruje wykorzystanie słuchawek VR lub wyświetlaczy zamontowanych na głowie (HMDS) do wdrożenia. Te HMDS łączą się z urządzeniem użytkownika (komputer, konsola do gry itp.), Zapewniając wciągające wizualne wizualne środowisko gier. Szczegóły Sony: „W niektórych implementacjach HMD łączy się za pośrednictwem połączenia przewodowego lub bezprzewodowego z urządzeniem użytkownika, takim jak komputer osobisty, konsola do gry lub inne urządzenie komputerowe. W niektórych implementacjach urządzenie użytkownika renderuje grafikę do wyświetlania za pośrednictwem HMD, które zapewniają wciągające wirtualne środowisko dla użytkownika”.
Ponadto Sony proponuje komunikację między urządzeniami za pośrednictwem serwera gier, umożliwiając płynną interakcję między graczami w wspólnym wirtualnym środowisku. Patent podkreśla potencjał integracji gier w chmurze: „W niektórych implementacjach serwer gier wykonuje wspólną sesję gry wideo, utrzymując kanoniczny stan gry wideo i jej wirtualne środowisko oraz zsynchronizowane urządzenia użytkownika dotyczące stanu wirtualnego środowiska”. To podejście oparte na chmurze pozwala na wydajne renderowanie wideo i przesyłanie strumieniowe między urządzeniami użytkownika, zwiększając ogólne wrażenia z gier.