Sony Цель: привнести язык жестов в видеоигры

Sony подала патент, целью которого является обеспечение дополнительной доступности для слабослышащих геймеров. Патент Sony показывает, как некоторые языки жестов могут быть переведены на другой внутриигровой.

Sony патентует переводчик ASL в JSL для видеоигр, предназначенный для использования устройств VR и работы через облачные игры

Sony подала патент, который добавляет в видеоигры сурдопереводчик реального времени. Патент под названием «ПЕРЕВОД ЖЕСТОВОГО ЯЗЫКА В ВИРТУАЛЬНОЙ СРЕДЕ» иллюстрирует технологию, с помощью которой американский язык жестов (ASL) может передаваться пользователю, говорящему по-японски, с использованием японского языка жестов (JSL).

В Sony заявили, что стремятся внедрить систему, которая сможет помочь глухим геймерам с помощью перевода жестовых языков в реальном времени во время внутриигровых разговоров. Технология, описанная в патенте, позволит виртуальным индикаторам или аватарам, отображаемым на экране, общаться на языке жестов в реальном времени

. Система сначала переводит жесты жестов одного языка в текст, затем преобразует текст в другой указанный язык и, наконец, переводит полученные данные в жесты жестов другого языка.

"Реализации настоящего изобретения относятся к методам и системам для захвата языка жестов одного пользователя (например, японского) и перевода языка жестов другому пользователю (например, английскому)», — описано Sony в патенте. «Поскольку языки жестов различаются в зависимости от географического происхождения, язык жестов не является универсальным. Это требует надлежащего захвата языка жестов одного пользователя, понимания родного языка и создания нового языка жестов в качестве вывода для другого пользователя на его родном языке жестов. ."

Один из способов реализации этой системы, как показано в Sony, — это использование устройства типа VR или головной дисплей (HMD). «В некоторых реализациях HMD подключается через проводное или беспроводное соединение к пользовательскому устройству, такому как персональный компьютер, игровая консоль или другое вычислительное устройство», - подробно описано Sony. «В некоторых реализациях пользовательское устройство отображает графику для отображения через HMD, что обеспечивает пользователю захватывающий просмотр виртуальной среды

». <🎜>

Sony далее предложила, чтобы одно пользовательское устройство могло беспрепятственно взаимодействовать с другим пользовательским устройством через сеть с игровым сервером. "В некоторых реализациях игровой сервер выполняет общий сеанс видеоигры, поддерживая каноническое состояние видеоигры и ее виртуальной среды ,» Sony сказала, «и с которым пользовательские устройства синхронизируются относительно состояния виртуальной среды».

Благодаря этой настройке пользователи могут обмениваться файлами и взаимодействовать друг с другом в одной и той же виртуальной среде, aka игре через общую сеть или сервер. Sony дополнительно заявила, что в некоторых реализациях системы игровой сервер может быть частью системы облачных игр, которая «рендерит и передает потоковое видео» между каждым устройство пользователя.