Инновационный патент Sony направлен на повышение доступности игры для глухих геймеров за счет введения внутриигрового сурдоперевода в реальном времени. Эта революционная технология устраняет пробелы в общении, обеспечивая беспрепятственное взаимодействие между игроками, использующими разные языки жестов.

Sony патентует сурдоперевод в реальном времени для видеоигр

Использование технологий виртуальной реальности и облачных игр

Этот патент под названием «ПЕРЕВОД ЖЕСТОВОГО ЯЗЫКА В ВИРТУАЛЬНОЙ СРЕДЕ» предлагает систему, которая облегчает перевод в реальном времени между языками жестов, такими как американский язык жестов (ASL) и японский язык жестов (JSL). Цель состоит в том, чтобы глухие игроки могли в полной мере участвовать в общении в игре.

Запатентованная технология использует виртуальные индикаторы или аватары на экране для отображения сурдоперевода в реальном времени. Процесс включает в себя трехэтапный перевод: сначала жесты жестов преобразуются в текст; во-вторых, текст переводится на целевой язык; и, наконец, переведенный текст преобразуется обратно в соответствующие жесты языка жестов.

Как объясняет Sony в заявке на патент: «Реализация настоящего изобретения относится к способам и системам для захвата языка жестов одного пользователя и перевода его для другого пользователя на его родной язык жестов. Поскольку языки жестов различаются географически, эта технология предназначена для необходимость точного захвата, понимания языка и создания соответствующего вывода на языке жестов».

Sony предлагает реализовать эту систему с помощью VR-гарнитур или головных дисплеев (HMD). Эти HMD будут подключаться к пользовательскому устройству (ПК, игровой консоли и т. д.), чтобы создать иммерсивную виртуальную среду. Затем пользовательское устройство будет связываться с другими пользовательскими устройствами и игровым сервером по сети.

В патенте также предлагается использовать игровой сервер, возможно, внутри облачной игровой системы, для управления состоянием игры и синхронизации виртуальной среды между всеми подключенными пользователями. Это позволяет использовать общий игровой процесс и взаимодействие в одном виртуальном мире. Аспект облачных игр будет обеспечивать рендеринг и потоковую передачу видео между устройствами. Эта архитектура обеспечивает плавный перевод и взаимодействие в реальном времени для всех игроков, независимо от их языка жестов.