Sony представляет патент на инструмент на языке жестов в игре

Sony подала новаторский патент, направленный на повышение доступности для глухих геймеров путем представления переводчика языка жестов в реальном времени. Патент под названием «Перевод языка жестов в виртуальную среду» описывает систему, которая может перевести американский язык жестов (ASL) на японский язык жестов (JSL) в видеоиграх.

Sony Patents ASL для JSL Translator для видеоигр

Предлагается использовать устройства VR и работать над облачными играми

Инновационный патент Sony представляет систему, предназначенную для оказания помощи глухим геймерам через переводы языков знаков в реальном времени во время игровых разговоров. Эта технология позволила бы виртуальным индикаторам или аватарам беспрепятственно передавать язык жестов на экране. Процесс включает в себя перевод жестов знака одного языка в текст, преобразование текста в другой указанный язык и, наконец, превратить данные в жесты знака целевого языка.

«Реализации настоящего раскрытия связаны с методами и системами для захвата языка жестов одного пользователя (например, японского языка) и перевода языка жестов другому пользователю (например, английскому языку)», - заявила Sony в патенте. «Поскольку языки знаков варьируются в зависимости от географического происхождения, язык жестов не является универсальным. Это обеспечивает необходимость надлежащего захвата языка жестов одного пользователя, понимания нативного языка и генерирования нового языка жестов в качестве вывода для другого пользователя на их родном языке жестов».

Реализация этой системы может включать использование устройств VR-типа или дисплеев, установленных на голову (HMD). «В некоторых реализациях HMD подключается через проводное или беспроводное подключение к пользовательскому устройству, такому как персональный компьютер, игровой консоль или другое вычислительное устройство», - говорится Sony. «В некоторых реализациях пользовательское устройство отображает графику для отображения через HMD, который обеспечивает захватывающее просмотр виртуальной среды для пользователя».

Sony далее предполагает, что система может облегчить бесшовную связь между пользовательскими устройствами по сети с игровым сервером. «В некоторых реализациях игровой сервер выполняет общий сеанс видеоигры, поддерживая каноническое состояние видеоигры и ее виртуальную среду, - сказала Сони, - и к которому пользовательские устройства синхронизируются в отношении состояния виртуальной среды».

Эта настройка позволяет пользователям делиться и взаимодействовать в той же виртуальной среде или игре через общую сеть или сервер. Кроме того, Sony упомянула, что в некоторых реализациях игровой сервер может быть интегрирован в систему облачных игр, которая «видит и транслирует видео» между каждым пользовательским устройством, улучшая игровой опыт и доступ к глухим геймерам.