ソニーインタラクティブゲーム
ゲーム世界のバーチャルビューをライブ体験
ビデオゲーム関連市場は、世界のエンターテイメント市場において非常に大きな割合を占めるようになっています。近い将来、ビデオゲーム及びその関連市場全体の世界的収入は、映画業界を超えると予測されています。
そんな中、ビデオゲームを競技として楽しむ、「eスポーツ」が生まれました。eスポーツの世界では、プロゲーマーが、アリーナ等に集まって、マルチプレイヤーオンラインゲーム（MOG）形式でビデオゲームをプレイします。
一方、観客は、アリーナのビデオ制作チーム等によってリアルタイムに生成されるディスプレイパネルに提示されるビューを見て、またはネットワークを介してライブストリーミングされた映像を見て、ゲームの興奮を同時進行的に味わいます。
このようなイベントは既に大規模に行われており、2016年に開催された世界選手権では、約４万人の聴衆を動員し、ライブストリーミングの視聴者は2千5百万人を超えたといわれています。このように、ライブやストリーミングを問わず、最高の視聴体験を提供するために様々な技術が用いられています。
このような背景のもと、ソニーはライブイベントが撮影されたビデオストリームに基づいて、実世界の会場の三次元ライブビューをサーバで生成させ、これをリモートユーザのヘッドマウントディスプレイ（HMD）にストリーミングすることによって、リモートユーザに拡張現実ビューを提供する技術を開発し、特許出願が行われました。この技術においては、リモートユーザは単にライブビューを見るだけでなく、eスポーツにおけるプロゲーマーの視点や、ゲーマーが操るキャラクタの視点、鳥瞰図などを選択して楽しむことができます。
もちろん、ライブ会場におけるアリーナ席からの視点を選択して、会場の雰囲気をリモートで味わうことも可能となります。
ライブ会場における熱気を直接味わうことまではできないかもしれませんが、この技術を用いることで、リモートユーザならではの新しい視点によるeスポーツの楽しみ方ができそうです。
またこのようなスポーツの楽しみ方が、これからの時代において新たな文化・価値観を創造していくことは、確かなことといえそうです。
従来の課題
ビデオゲームは、ゲーム機やコンピュータ及び携帯電話等を含む様々な種類のプラットフォームを用いて、いつでもどこでもプレイされているが、そんなビデオゲームの新しい夜明けが、ｅスポーツの形で出現している。
ｅスポーツの世界では、プロゲーマーがアリーナ等の会場に集まって、ローカルエリアネットワークまたはインターネットを通じサポートされるマルチプレイヤオンラインゲーム（ＭＯＧ）形式でゲームをプレイする。
さらに、映像制作チームにより作成されるビデオディスプレイパネル上に提示されるビューは、インターネット等の任意のネットワークを介してより多くの視聴者にライブストリーミングされる。
このようなｅスポーツの視聴をより高次にサポートする技術が、最高の視聴体験を視聴者に与えるため日々開発されることが求められている。
本発明の効果
本発明は、インタラクティブなゲーム世界を作り出すゲームアプリケーションを確立する。ライブイベントは、ゲームをプレイしているプレイヤが存在する実世界の会場で行われる。
実世界の会場で撮影されたビデオストリームに基づいて３Ｄライブビューが作成され、リモートユーザのヘッドマウントディスプレイ（ＨＭＤ）に、ライブイベントの拡張現実ビューが提示される。
特許請求の範囲のポイント
本発明のポイントを下記に示す。
「以下より構成されるライブイベントへの参加方法であって、
・ゲームアプリケーションの実行を通じて、複数プレイヤが参加可能なインタラクティブなゲーム空間を作り出すことができるゲームセッションをサーバで確立し、
・前記サーバからネットワークを介して、リモートユーザのＨＭＤに観客ビューを配信することで、リモートユーザに、インタラクティブなゲーム世界の仮想現実ビューをリアルタイムで提示する、方法
本発明の更なるポイントとして、
・サーバは、インタラクティブなゲーム空間に観客として参加するためのリクエストを、リモートユーザより受信する、
・観客ビューの配信を行う前に、ライブビューの配信を停止する、
・ライブイベントへの参加を可能にするコンピュータプログラムを記憶する非一時的なコンピュータ可読媒体、
・ライブイベントへの参加を可能にする方法を実行するコンピュータシステム、が挙げられる。
全体構成
本発明の実施形態による、仮想現実（VR）コンテンツとのインタラクティブ体験を提供するよう構成されたシステムを示す。
【図１】 VRコンテンツとのインタラクティブな体験を提供するシステム図
ユーザＵ１は、ＨＭＤ１０２を装着する。ＨＭＤ１０２は、眼鏡、ゴーグル、またはヘルメットと同じように装着され、インタラクティブアプリケーションからのコンテンツをユーザに表示する。
ＨＭＤ１０２は、ユーザの眼のごく近くにディスプレイを設けることによって、高度に没入型の体験をユーザに提供する。ＨＭＤ１０２は、ユーザの各眼に、ユーザの視界の大部分または全体を占める表示領域を提供することができる。
本発明のある実施形態において、ＨＭＤ１０２は、ｅスポーツイベントのライブビューを提示する。ライブビューは、実世界会場のサーバ２３５によって管理され、実世界会場（例えば、ｅスポーツアリーナ）に配置されたデータ収集装置２３１より作成される。
ライブビュージェネレータ２６０は、複数の情報ソースより収集されたデータ（例えば、音声、ビデオ）をつなぎ合わせる技術を用いて、アリーナ内の任意の位置におけるライブビューを作成することができる。
エンターテイメントサーバは、ライブｅスポーツイベントのライブビューに、デジタルコンテンツをオーバーレイするように構成された拡張現実ライブビュー生成部２７０を含む。
本発明の一実施形態における、ｅスポーツアリーナの後部座席の一人称視点（POV）を図２に示す。
【図２】ｅスポーツアリーナの後部座席の一人称視点図
図２に示すように、複数の聴衆の頭部が一人称視点に示される。さらに一人称視点において、リモートユーザは、ステージ１９０に、またはその近くに位置するビューを有する。
例えば、一人称視点は、オートバイコース上のレーサ（例えば、少なくともレーサ１８０及びレーサ１８１）を示すメインディスプレイ１０１のビューを含む。一人称視点は、チーム１７１上にあるサイドディスプレイ１０５のビューを含む。また一人称視点は、オートバイレーサ１８０をコントロールするチームメンバ１７２ａのゲームプレイビューを示すサイドディスプレイ１０７のビューを含む。
サイドディスプレイは、オートバイレーサ１８１の背中のビューを含むオートバイレーサ１８０の視点を示し、レーサ１８１は、レースコースでオートバイレーサ１８０の前方を走行している。
細部
本開示の様々な実施形態の態様を行うために使用できるデバイスの構成要素を図３に示す。
【図３】本発明におけるデバイスの構成要素
デバイス７００は、本発明の実施形態を実践するのに適したサーバコンピュータ、パーソナルコンピュータ、ビデオゲームコンソール、パーソナルデジタルアシスタント、または、他のデジタルデバイスを組み込むことができる。
デバイス７００は、ソフトウェアアプリケーションとオペレーティングシステムを実行する中央処理装置（ＣＰＵ）７０２を含む。ＣＰＵ７０２は、座席ライブビュー生成部７２０を含む。
ライブビューは、ライブイベントにおいて収集された１または複数のライブ記録（例えば、ビデオ、音声）に基づき、アリーナ（例えば、ｅスポーツアリーナ）の１または複数の位置に対して作成される。
ライブ記録は、ライブイベントの画像や映像を収集するように構成されたビデオ収集部７２１と、アリーナから音声を収集するように構成された音声収集部７２２とによって行われてもよい。
一人称視点生成部７２３は、アリーナの特定の座席等、特定位置のライブビューを生成するように構成される。一人称視点生成部は、アリーナの所定の位置から取得したライブイベントの１つまたは複数のビデオをつなぎ合わせて、アリーナの特定位置のライブビューを生成するように構成されたステッチング技術を用いることができる。
従って、特定の位置からライブ記録が収集されなかった場合であっても、ライブビューは、ライブイベントの１または複数のライブ記録に基づいて、その特定の位置に対して作成することができる。
ネットワークインタフェース７１４は、デバイス７００が電子通信ネットワークを介して他のコンピュータシステムと通信するのを可能にし、ローカルエリアネットワーク、及び、インターネット等の広域ネットワークを介した有線または無線の通信を含んでいてもよい。
音声プロセッサ７１２は、ＣＰＵ７０２、メモリ７０４、記憶装置７０６によって提供された命令／データからのアナログまたはデジタルの音声出力を生成するように適合される。
ＣＰＵ７０２、メモリ７０４、データ記憶装置７０６、ユーザ入力デバイス７０８、ネットワークインタフェース７１０、及び、音声プロセッサ７１２を含む、デバイス７００の構成要素は、１または複数のデータバス７２２を介して接続される。
グラフィックスサブシステム７１４は、データバス７２２及びデバイス７００の構成要素にさらに接続される。グラフィックスサブシステム７１４は、グラフィックス処理ユニット７１６及びグラフィックスメモリ７１８を含む。
グラフィックスメモリ７１８は、出力画像の各画素の画素データの記憶に使用される表示メモリ（例えば、フレームバッファ）を含む。グラフィックスメモリ７１８は、グラフィックス処理ユニット７１６と同じデバイスに一体化されてもよい。
展望、結語
本発明は、リモートユーザが仮想の聴衆として、ライブイベント（例えば、競技ビデオゲームを含むライブｅスポーツイベント）に参加する方法及びシステムを提供する。
本発明の実施形態は、リモートユーザにライブイベントの拡張現実ビューを提示することを含み、実世界の会場（例えば、ｅスポーツアリーナ）での体験を高品質にリモートユーザに与える様々な技術を提供する。
概要
出願国：日本、外国（国際出願）
発明の名称：実世界会場で開催されたライブイベントで見せられるインタラクティブなゲーム世界の観客ビュー
出願番号：特願2020-517884
公開番号：特表2020-534952
出願日：2018年08月22日
公開日：2020年12月03日
出願人：ソニー インタラクティブ エンタテインメント アメリカ リミテッド ライアビリティ カンパニー
経過情報：出願審査係属中
その他情報：国際特許出願中
ＩＰＣ：A63F13/86
＜免責事由＞
本解説は、主に発明の紹介を主たる目的とするもので、特許権の権利範囲（技術的範囲の解釈）に関する見解及び発明の要旨認定に関する見解を示すものではありません。自社製品がこれらの技術的範囲に属するか否かについては、当社は一切の責任を負いません。技術的範囲の解釈に関する見解及び発明の要旨認定に関する見解については、特許（知的財産）の専門家であるお近くの弁理士にご相談ください。
