Sony Инновации в переводе языка жестов в игре

новаторский патент Sony стремится повысить доступность для глухих геймеров путем введения перевода на языке жестов в реальном времени. Эта инновационная технологическая технология моет пробелы между игроками, использующими разные языки знаков.

Sony Patents Перевод языка жестов в режиме реального времени для видеоигр

Использование технологий VR и облачных игр

Этот патент под названием «Перевод языка жестов в виртуальной среде» подробно описывает систему, позволяющую беспрепятственно общаться между геймерами, использующими различные языки знаков, такие как американский язык жестов (ASL) и японский язык жестов (JSL). Цель состоит в том, чтобы облегчить перевод в реальном времени во время внутриигровых взаимодействий.

В предлагаемой системе используются виртуальные индикаторы или аватары на экране для отображения переведенных жестов языка жестов. Процесс включает в себя трехэтапный перевод: жесты для знаков сначала преобразуются в текст, затем переводятся на целевой язык и, наконец, выводятся в виде жестов на целевом языке жестов.

, как объясняет Sony в патенте: «Реализации настоящего раскрытия связаны с методами и системами для захвата языка жестов от одного пользователя и перевода его для другого пользователя на их языковом языке. Чтобы точно захватить, понять и генерировать соответствующий вывод языка жестов для разных пользователей. "

Sony предполагает реализацию этой системы с использованием виртуальных гарнитур или дисплеев, установленных на голову (HMDS). Эти HMD подключатся к пользовательскому устройству (ПК, игровой консоли и т. Д.), Чтобы обеспечить захватывающую виртуальную среду.

Кроме того, Sony предлагает систему, в которой пользовательские устройства общаются друг с другом и игровым сервером по сети. Сервер игры поддерживает состояние игры, обеспечивая синхронизацию всех подключенных пользователей. Эта архитектура может также интегрироваться с систем облачных игр, оптимизируя видео -рендеринг и потоковую передачу между устройствами.

Этот инновационный подход обеспечивает общий, интерактивный опыт в той же виртуальной среде, способствуя инклюзивным игровым процессам для глухих геймеров по всему миру. Потенциальная интеграция с облачными играми еще больше расширяет доступность и охват.