
Bằng sáng chế đột phá của Sony nhằm mục đích cách mạng hóa khả năng tiếp cận cho các game thủ điếc. Công nghệ đề xuất một dịch giả ngôn ngữ ký hiệu trong trò chơi thời gian thực, thu hẹp khoảng cách giao tiếp giữa những người chơi bằng các ngôn ngữ ký hiệu khác nhau.
Sony bằng sáng chế ASL cho người dịch JSL cho các trò chơi video
Tận dụng VR và trò chơi đám mây cho bản dịch liền mạch

Bằng sáng chế sáng tạo này, có tiêu đề "Bản dịch ngôn ngữ ký hiệu trong môi trường ảo", chi tiết một hệ thống cho phép dịch thời gian thực giữa các ngôn ngữ ký hiệu, như Ngôn ngữ ký hiệu của Mỹ (ASL) và Ngôn ngữ ký hiệu Nhật Bản (JSL). Sony hình dung một hệ thống tạo điều kiện giao tiếp trong trò chơi cho người chơi khiếm thính bằng cách dịch ngay các cử chỉ ngôn ngữ ký hiệu. Avatars hoặc chỉ số trên màn hình sẽ đại diện trực quan ngôn ngữ ký hiệu được dịch trong thời gian thực. Quá trình này bao gồm một bản dịch ba bước: ngôn ngữ ký hiệu sang văn bản, dịch văn bản giữa các ngôn ngữ và cuối cùng, văn bản sang ngôn ngữ ký hiệu đích.
Như Sony giải thích trong bằng sáng chế: "Việc triển khai công bố hiện tại liên quan đến các phương pháp và hệ thống để nắm bắt ngôn ngữ ký hiệu của một người dùng (ví dụ: tiếng Nhật) và dịch ngôn ngữ ký hiệu sang người dùng khác (ví dụ: tiếng Anh). ngôn ngữ."

Sony đề nghị sử dụng tai nghe VR hoặc màn hình gắn trên đầu (HMD) để thực hiện. Các HMD này sẽ kết nối với thiết bị của người dùng (PC, bảng điều khiển trò chơi, v.v.), cung cấp hình ảnh nhập vai trong môi trường trò chơi ảo. Chi tiết Sony: "Trong một số triển khai, HMD kết nối thông qua kết nối có dây hoặc không dây với thiết bị người dùng, chẳng hạn như máy tính cá nhân, bảng điều khiển trò chơi hoặc thiết bị điện toán khác. Trong một số triển khai, thiết bị người dùng hiển thị đồ họa để hiển thị thông qua HMD cung cấp khả năng xem tối đa môi trường ảo cho người dùng."
Hơn nữa, Sony đề xuất giao tiếp giữa các thiết bị thông qua máy chủ trò chơi, cho phép tương tác liền mạch giữa người chơi trong môi trường ảo được chia sẻ. Bằng sáng chế nhấn mạnh tiềm năng tích hợp trò chơi đám mây: "Trong một số triển khai, máy chủ trò chơi thực hiện một phiên chung của trò chơi video, duy trì trạng thái kinh điển của trò chơi video và môi trường ảo của nó và các thiết bị người dùng được đồng bộ hóa về trạng thái của môi trường ảo." Cách tiếp cận dựa trên đám mây này cho phép kết xuất video và phát trực tuyến hiệu quả giữa các thiết bị người dùng, nâng cao trải nghiệm chơi game tổng thể.