Инновационный патент Sony представляет внутриигровой переводчик языка жестов, призванный значительно повысить доступность игры для глухих геймеров. Эта инновационная технология, подробно описанная в патенте под названием «ПЕРЕВОД ЖЕСТОВОГО ЯЗЫКА В ВИРТУАЛЬНОЙ СРЕДЕ», фокусируется на переводе в реальном времени между различными языками жестов, такими как американский язык жестов (ASL) и японский язык жестов (JSL).
Предлагаемая система переводит жесты языка жестов в текст, преобразует текст на целевой язык, а затем преобразует переведенный текст обратно в соответствующие жесты языка жестов, отображаемые с помощью экранных аватаров или индикаторов. Этот процесс обеспечивает беспрепятственное общение между игроками, использующими разные языки жестов. Sony подчеркивает острую необходимость в такой системе, подчеркивая неуниверсальный характер языков жестов и различное географическое происхождение, влияющее на их структуру.
В реализации можно использовать гарнитуры виртуальной реальности или наголовные дисплеи (HMD), подключающиеся по беспроводной или проводной сети к персональному компьютеру, игровой консоли или другому вычислительному устройству. В патенте предлагается система, в которой пользовательские устройства синхронизируются с игровым сервером локально или через облачные игры, что обеспечивает возможность совместного игрового процесса и взаимодействия в реальном времени в виртуальной среде. Этот сервер поддерживает состояние игры, обеспечивая бесперебойное общение и сотрудничество между игроками, независимо от их языка жестов. Аспект облачных игр еще больше повышает доступность за счет потоковой передачи визуализированного видео между пользовательскими устройствами. Этот патент демонстрирует стремление Sony предоставлять инклюзивные игровые возможности.