Инновационный патент Sony представляет внутриигровой переводчик языка жестов, повышающий доступность игры для глухих геймеров. Эта инновационная технология, подробно описанная в патенте «ПЕРЕВОД ЖЕСТОВОГО ЯЗЫКА В ВИРТУАЛЬНОЙ СРЕДЕ», облегчает общение в реальном времени между игроками, использующими разные языки жестов – например, перевод американского языка жестов (ASL) на японский язык жестов (JSL).
Система сначала фиксирует жесты языка жестов, преобразует их в текст, затем переводит текст на целевой язык и, наконец, отображает переведенный текст как соответствующие жесты языка жестов. Этот процесс преодолевает ограничения географических вариаций языка жестов, обеспечивая инклюзивный игровой процесс.
В реализации можно использовать гарнитуры виртуальной реальности или наголовные дисплеи (HMD), подключающиеся по беспроводной или проводной сети к персональному компьютеру, игровой консоли или другому вычислительному устройству. HMD создает захватывающую виртуальную среду, улучшающую взаимодействие с пользователем.
Sony мечтает о беспроблемной многопользовательской игре. Пользовательские устройства могут взаимодействовать друг с другом и с игровым сервером либо локально, либо через облачную игровую платформу. Сервер управляет состоянием игры, синхронизируя виртуальную среду всех подключенных игроков. Этот облачный подход обеспечивает плавный перевод и взаимодействие в реальном времени во время игрового процесса, способствуя инклюзивности и доступности в игровом мире. Патент подчеркивает стремление Sony устранить пробелы в общении и создать более дружелюбную игровую среду для всех игроков.