Sony Berinovasi dengan Penterjemah Bahasa Isyarat Dalam Permainan

Sony telah memfailkan permohonan paten untuk memberikan lebih banyak kemudahan kepada pemain pekak. Paten menunjukkan bagaimana satu bahasa isyarat boleh diterjemahkan ke bahasa lain dalam permainan.

Paten Sony: penterjemah ASL ke JSL untuk permainan video

Ia dirancang untuk menggunakan peralatan VR dan menjalankannya melalui permainan awan

Sony telah memfailkan permohonan paten untuk menambah terjemahan bahasa isyarat masa nyata pada permainan video. Paten itu, bertajuk "Terjemahan Bahasa Isyarat dalam Persekitaran Maya," menerangkan teknologi yang boleh menterjemah Bahasa Isyarat Amerika (ASL) ke Bahasa Isyarat Jepun (JSL) yang boleh difahami oleh penutur Jepun.

Sony berkata matlamatnya adalah untuk membina sistem untuk membantu pemain pekak melalui terjemahan bahasa isyarat masa nyata dalam permainan. Teknologi yang diterangkan dalam paten akan membolehkan penunjuk maya atau avatar yang dipaparkan pada skrin untuk berkomunikasi dalam bahasa isyarat dalam masa nyata. Sistem akan terlebih dahulu menterjemah gerak isyarat dalam satu bahasa ke dalam teks, kemudian menukar teks ke bahasa lain yang ditentukan, dan akhirnya menterjemah data yang diterima ke dalam gerak isyarat dalam bahasa lain.

"Penjelmaan pendedahan sekarang berkaitan dengan kaedah dan sistem untuk menangkap bahasa isyarat seorang pengguna (mis., orang Jepun) dan menterjemah bahasa isyarat kepada pengguna lain (mis., penutur bahasa Inggeris)," Sony menerangkan dalam paten. "Oleh kerana bahasa isyarat berbeza mengikut asal serantau, bahasa isyarat tidak boleh digunakan secara universal. Ini memerlukan menangkap bahasa isyarat seseorang pengguna dengan sewajarnya, memahami bahasa ibunda mereka dan menjana bahasa isyarat baharu sebagai output untuk pengguna lain, disesuaikan dengan bahasa ibunda mereka. bahasa isyarat."

Sony memberi contoh bahawa satu pelaksanaan sistem ini boleh menggunakan peralatan VR atau paparan yang dipasang di kepala (HMD). "Dalam sesetengah penjelmaan, HMD bersambung ke peranti pengguna, seperti komputer peribadi, konsol permainan atau peranti pengkomputeran lain, melalui sambungan berwayar atau wayarles," butiran Sony. "Dalam beberapa penjelmaan, peranti pengguna memaparkan grafik yang dipaparkan melalui HMD, memberikan pengguna pengalaman menonton persekitaran maya yang mengasyikkan."

Sony seterusnya mencadangkan bahawa satu peranti pengguna boleh berkomunikasi dengan lancar dengan peranti pengguna lain pada pelayan permainan melalui rangkaian. "Dalam beberapa penjelmaan, pelayan permainan melakukan sesi perkongsian permainan video, mengekalkan keadaan kanonik permainan video dan persekitaran mayanya," kata Sony, "dan keadaan peranti pengguna berkenaan dengan persekitaran maya disegerakkan."

Dengan persediaan ini, pengguna boleh berkongsi dan berinteraksi dalam persekitaran maya yang sama (iaitu permainan) pada rangkaian atau pelayan kongsi. Sony juga berkata bahawa dalam beberapa penjelmaan sistem, pelayan permainan boleh menjadi sebahagian daripada sistem permainan awan yang boleh "membuat dan menstrim video" antara setiap peranti pengguna.