Sony zrobił znaczący krok w kierunku zwiększenia dostępności dla osób niesłyszących, składając patent na innowacyjny tłumacz języka migowego w grze. Ta technologia, szczegółowo opisana w patencie zatytułowanym „Tłumaczenie języka migowego w wirtualnym środowisku”, ma na celu wypełnienie luk komunikacyjnych poprzez tłumaczenie amerykańskiego języka migowego (ASL) na japoński język migowy (JSL) i odwrotnie w grach wideo.

Sony Patents ASL to JSL Translator do gier wideo

Zaproponował korzystanie z urządzeń VR i przetwarzanie gier w chmurze

Patent Sony wprowadza przełomowy system zaprojektowany w celu ułatwienia tłumaczenia języka migowego w czasie rzeczywistym podczas interakcji w grze. Technologia przechwytuje gesty znaku jednego języka, przekształca je w tekst, tłumaczy tekst na inny język i ostatecznie przekształca przetłumaczony tekst w odpowiednie gesty znaku języka docelowego. Proces ten pozwala na bezproblemową komunikację między graczami głuchymi przy użyciu różnych języków migowych.

Sony podkreśla znaczenie tej technologii, stwierdzając, że „implementacje obecnego ujawnienia odnoszą się do metod i systemów przechwytywania języka migowego jednego użytkownika (np. Japońskiego) i tłumaczenia języka migowego na innego użytkownika (np. Angielski)”. Firma uznaje nie-uniwersalny charakter języków migowych i potrzebę systemu, który może dokładnie interpretować i generować gesty języka migowego dostosowane do ojczystego języka migowego użytkownika.

Aby wdrożyć ten system, Sony sugeruje użycie urządzenia typu VR lub wyświetlacza montowanego na głowie (HMD). „W niektórych implementacjach HMD łączy się za pomocą połączenia przewodowego lub bezprzewodowego z urządzeniem użytkownika, takim jak komputer osobisty, konsola do gry lub inne urządzenie komputerowe” - wyjaśnia Sony. Ta konfiguracja pozwala na wciągające doświadczenie oglądania w wirtualnym środowisku gry.

Ponadto Sony proponuje, aby system mógł działać przez sieć z serwerem gier, umożliwiając interakcję wielu urządzeń użytkownika w tym samym środowisku wirtualnym. „W niektórych implementacjach serwer gier wykonuje wspólną sesję gry wideo, utrzymując kanoniczny stan gry wideo i jej wirtualne środowisko”, zauważa Sony, zapewniając synchronizację na wszystkich podłączonych urządzeniach.

Rozważana jest również integracja tej technologii z systemami gier w chmurze, w której serwer gier „renderował i strumieniowy wideo” między urządzeniami użytkownika. Takie podejście może zwiększyć dostępność i wydajność systemu tłumaczenia języka migowego, co czyni go cennym narzędziem dla osób niesłyszących na całym świecie.