ソニーは、聴覚障害者や口のきけないゲーマー向けに、より優れたゲーム アクセシビリティ機能を提供するために特許を申請しました。この特許は、ゲーム内である手話が別の手話にどのように翻訳されるかを示しています。
ソニーの特許: ビデオゲーム用の ASL から JSL への翻訳
VR機器を使用し、クラウドゲームで実行する予定です
ソニーは、ビデオゲームにリアルタイム手話翻訳を追加する特許を申請しました。 「仮想環境における手話通訳」と題されたこの特許は、日本手話(JSL)を使用してアメリカ手話(ASL)を日本人話者に伝えることができる技術を実証している。
ソニーは、ゲーム内の会話中に手話をリアルタイムで翻訳することで、聴覚障害のあるプレイヤーを支援するシステムを構築することが目標だと述べています。この特許に記載されている技術により、画面上に表示される仮想インジケーターまたはアバターがリアルタイムで手話を伝えることが可能になります。システムは、まずある言語のジェスチャをテキストに変換し、次にそのテキストを別の指定された言語に変換し、最後に受信したデータを別の言語のジェスチャに変換します。
ソニーは特許の中で次のように説明しています:「本開示の実施形態は、あるユーザー (例: 日本人) の手話をキャプチャし、その手話を別のユーザー (例: 英語話者) に翻訳する方法およびシステムに関する。 「手話は地域の出身地によって異なるため、手話は普遍的に適用できるわけではありません。これには、あるユーザーの手話を適切にキャプチャし、その母国語を理解し、別のユーザーの出力として、状況に合わせた新しい手話を生成する必要があります。」彼らの母国語の手話です。」
ソニーが説明したように、このシステムを実装する方法の 1 つは、VR タイプのデバイスまたはヘッドマウント ディスプレイ (HMD) の助けを借りて行うことです。 「いくつかの実施形態では、HMDは、有線または無線接続を介してパーソナルコンピュータ、ゲームコンソール、または他のコンピューティングデバイスなどのユーザデバイスに接続される。」とソニーは詳細に述べている。 HMD グラフィックスを介して、仮想環境での没入型の視聴体験をユーザーに提供します。」
ソニーはさらに、あるユーザーデバイスがネットワークを介してゲームサーバー上の別のユーザーデバイスとシームレスに通信できることを提案しました。 「一部の実施形態では、ゲームサーバーはビデオゲームの共有セッションを実行し、ビデオゲームとその仮想環境の標準状態を維持し、ユーザーデバイスは仮想環境の状態に関してそれらと同期する」とソニーは述べた。 ."
この設定を使用すると、ユーザーは共有ネットワークまたはサーバー上の同じ仮想環境 (ゲームなど) で共有し、相互に対話することができます。ソニーはまた、システムの一部の実装では、ゲームサーバーが各ユーザーデバイス間で「ビデオをレンダリングしてストリーミングする」クラウドゲームシステムの一部になる可能性があるとも付け加えた。