ソニーの革新的な特許は、リアルタイムのゲーム内手話翻訳を導入することで、聴覚障害のあるゲーマーのアクセシビリティを高めることを目的としています。 この画期的なテクノロジーはコミュニケーションのギャップを埋め、異なる手話を使用するプレイヤー間のシームレスなインタラクションを可能にします。

ソニーがビデオゲーム用のリアルタイム手話翻訳の特許を取得

VR およびクラウド ゲーム テクノロジーの活用

「仮想環境における手話の翻訳」と題されたこの特許は、アメリカ手話 (ASL) と日本手話 (JSL) などの手話間のリアルタイム翻訳を容易にするシステムを提案しています。 目標は、聴覚障害のあるゲーマーがゲーム内コミュニケーションに完全に参加できるようにすることです。

この特許取得済みのテクノロジーは、画面上の仮想インジケーターまたはアバターを利用して、手話の翻訳をリアルタイムで表示します。 このプロセスには 3 段階の翻訳が含まれます。まず、手話ジェスチャーがテキストに変換されます。次に、テキストがターゲット言語に翻訳されます。そして最後に、翻訳されたテキストが対応する手話ジェスチャーに変換されます。

ソニーが特許出願の中で説明しているように、「本開示の実装は、あるユーザーから手話を取り込み、別のユーザーのために母国語の手話に翻訳する方法とシステムに関するものです。手話は地理的に異なるため、この技術は、正確なキャプチャ、言語理解、適切な手話出力の生成の必要性。」

ソニーは、VR ヘッドセットまたはヘッドマウント ディスプレイ (HMD) を使用してこのシステムを実装することを提案しています。 これらの HMD はユーザー デバイス (PC、ゲーム コンソールなど) に接続して、没入型の仮想環境を提供します。 その後、ユーザー デバイスはネットワーク経由で他のユーザー デバイスおよびゲーム サーバーと通信します。

この特許はさらに、ゲームの状態を管理し、接続されているすべてのユーザー間で仮想環境を同期するために、潜在的にクラウド ゲーム システム内でゲーム サーバーを利用することを提案しています。これにより、同じ仮想世界での共有ゲームプレイとインタラクションが可能になります。 クラウド ゲームの側面では、デバイス間のビデオのレンダリングとストリーミングが処理されます。 このアーキテクチャにより、手話に関係なく、すべてのプレーヤーのスムーズなリアルタイム翻訳と対話が保証されます。