例えば、トラック等の荷台に室内のセットを用意し、実際に火災を発生させて、炎に消火剤を投入できるように設置されたものがあります。しかし、専門家向けであり簡便に体験できず、手軽に利用できませんでした。これに対して、近年、ＶＲ（仮想現実）の技術を利用した消火訓練シミュレータが考え出されています。しかし、このシミュレータは、あくまでも仮想現実（ＶＲ）空間のなかで実施するものであり、実際の道具を使用して体験しながら経験できるものではありません。
そこで、従来よりも簡便に利用でき、臨場感を伴って実際の消火活動の手順を体験できる消火体験シミュレーションシステムが要望されています。

本発明は、上記の要望に鑑みてなされたものであり、実際の消火活動の手順が臨場感をもって体験できる、ＶＲを用いた消火体験シミュレーションシステムを提供することを目的とします。

■本発明の効果

本発明は、ＶＲを用いた消火体験シミュレーションシステム、体験用消火器、及びプログラムに関するものです。本発明では、実際の消火器に似た体験用消火器と、ヘッドアップディスプレイ（ＨＭＤ）とを使用して、例えば室内であっても、実際の消火活動と同じ手順で消火体験を経験するこができます。

■特許請求の範囲のポイントなど

本発明の特許請求の範囲における概要を説明しますと、本発明のＶＲを用いた消火体験シミュレーションシステムは、
・体験者に装着されるヘッドマウントディスプレイ（ＨＭＤ）と、
・ＨＭＤのコントローラ機能を兼ねる体験用消火器と、を備えます。

本発明の全体構成を説明するために、特許請求の範囲に記載された「消火体験シミュレーションシステム」について説明します。

■全体構成

本発明の「消火体験シミュレーションシステム」は、上述しましたように、
・ヘッドマウントディスプレイ（ＨＭＤ）と、
・体験用消火器と、を備えます。
ヘッドマウントディスプレイ（ＨＭＤ）は、映像を表示するディスプレイと、コンピュータと、通信処理を行う通信部と、実景を撮像する実景撮像用カメラと、を有します。
体験用消火器は、ＨＭＤとの間で通信を行う通信部と、消火器本体と、操作レバーと、仮想現実の消火剤を先端から噴出させるホースと、操作レバーの動きを検出する第１のセンサと、ホースの先端の動きを検出する第２のセンサと、を有します。
なお、ＨＭＤのコンピュータは、ＨＭＤの操作を制御するようにはたらきます。また、体験用消火器の操作レバーは、ＨＭＤが仮想現実（ＶＲ）表示モードであるときに、仮想現実の消火剤を噴射するスイッチとして機能します。

上記コンピュータの制御は、実映像表示モード／仮想現実表示モードを切り換えるように機能します。実映像表示モードのときには、ＨＭＤのカメラで撮像した実映像をＨＭＤのディスプレイに表示させる実映像と、仮想現実映像との切換機能を有します。
また、上記コンピュータの制御は、実映像表示モードから仮想現実映像表示モードに切り換わると、体験用消火器のホースの先端から仮想現実の消火剤が噴射されるシミュレーション映像と、仮想現実の炎が鎮静されるシミュレーション映像と、を表示させる仮想現実映像生成機能を有します。

このシミュレーション映像は、
・体験用消火器の第１のセンサ（操作レバーの動きを検出）の検出情報と、
・第２のセンサ（ホースの先端の動きを検出）の検出情報と、を基にして表示されます。

本発明には、上記の「消火体験シミュレーションシステム」において使用される「体験用消火器」と、上記ヘッドマウントディスプレイ（ＨＭＤ）のコンピュータを作動させる「プログラム」も含まれています。

■細部

本発明の特許請求の範囲には、以下のような内容の発明も記載されています。
上記コンピュータの制御において、実映像／仮想現実映像切換機能は、実映像表示モードでの操作レバーの動きを第１のセンサで検出した後に、実映像表示モードの実行を終了するように設計されています。すなわち、仮想現実の消火剤を噴射すると、実映像表示モードから仮想現実映像表示モードに切り換わって、仮想現実映像で消火体験を実行するように設計されています。

さらに、下位概念の発明として、本発明の特許請求の範囲には、以下のような発明も記載されています。

ＨＭＤの通信部との間で通信できる（大きい）モニターを別途設けます。このモニターは、体験者がＨＭＤのディスプレイで見ている映像を表示します。このモニター映像は、実映像の映像データと、仮想現実映像の映像データとを基にして表示されます。

上記コンピュータ制御の仮想現実映像生成機能は、好ましくは以下のように設計されています。
実映像表示モードから仮想現実映像表示モードに切り換えたときに、仮想現実空間に消火活動前の火災映像を表示させます。続いて、消火活動前の火災映像が体験者に近寄ってきて止まり、その後、消火活動のシミュレーション映像を表示させ、炎が鎮静化されて小さくなると、消火活動によって小さくなった炎の映像がさらに近寄ってきて止まるように設計されています。
また、消火活動前や消火活動のシミュレーション映像の背景映像に、体験者が見渡すことができるパノラマ映像を表示させるように設計されています。
上記コンピュータ制御は、好ましくは以下のように設計されています。
仮想現実空間における消火活動が終了した後、体験者の消火活動を所定の基準に従って評価し、評価を示す情報をＨＭＤのディスプレイに表示させる機能をさらに有します。

このような発明を実施するための具体例について、以下に説明します。

■実施形態

図１（Ａ）は、ＶＲ（仮想現実）を用いた消火体験シミュレーションシステムの基本的な構成例を示します。図１（Ｂ）は、ＶＲを用いた消火体験シミュレーションにおける消火活動例を示します。

図１（Ａ）の左下側に示されるように、ＨＭＤ１０用のコントローラを兼ねる体験用消火器２０が、予め用意されています。
この体験用消火器２０は、
・ＨＭＤ１０の通信部（第１の通信部）との間で通信を行う通信部と、
・消火器本体２２と、
・ＨＭＤ１０が仮想現実（ＶＲ）表示モードであるときに、仮想現実の消火剤を噴射するスイッチとして機能する操作レバー２４と、
・仮想現実の消火剤５を先端から噴出させる噴出具として機能するホース２６と、
・体験者Ｕによる操作レバー２４の操作を検出する第１のセンサＳ１と、
・ホース２６の先端２８の動きを検出する第２のセンサＳ２と、を備えています。
訓練用消火器２０は、ＨＭＤ１０用のコントローラとして機能し、また、実際の消火器操作の体験用具としても機能します。

図１（Ａ）の右側に示されるように、体験者Ｕの近くに設置されたモニター３０は、図１（Ｂ）に示すごとく、ＨＭＤ１０の通信部（第１の通信部）との間で通信を行う通信部（第３の通信部）３２を備えています。なお、モニター３０は、画像処理装置を搭載しています。
モニターの画像処理装置は、体験者ＵがＨＭＤ１０のディスプレイを通じて見る映像を表示します。この映像は、ＨＭＤ１０が実映像表示モードであるときの実映像の映像データと、仮想現実映像表示モードであるときの仮想現実映像の映像データとを基にして入力され、ＨＭＤ１０の通信部（第１の通信部）及びモニター３０の通信部（第３の通信部）３２を経由して入力されます。図１（Ａ）の例では、体験者Ｕが見ている体験用消火器２０の実映像、及び、体験者Ｕの左手の手首付近の実映像が映し出されています。
図１（Ａ）の例では、消火活動の指導者ＴＣも、順番待ちをしている体験希望者ＡＤも、モニター３０の画像を見ています。これによって、多くの人が、体験者Ｕと同じ映像を通して、同じ経験を共有できます。従って、消火活動の指導者ＴＣが、体験者Ｕに、適宜、助言を与えることができます。また、観衆ＡＤが、叫び声をあげるなどして、現実感ある演出も可能となります。
消火器本体２２や自身の手（右手３Ｒ）の映像（実映像）を体験者が確認した後、図１（Ｂ）へと移行し、実映像表示モードから仮想現実表示モードへと切り換えられます。

図１（Ｂ）で示すように、ＶＲを用いた消火体験シミュレーションが開始されます。ＨＭＤ１０が、実映像表示モードから仮想現実映像表示モードに切り換えられると、下記の複数画像を重ね合わせた画像合成によって、仮想現実表示のためのフレーム映像ＶＲ（Ｆ）を生成します。
・体験者Ｕの手に握られたホース２６の先端２８を含む映像ＶＲ（１）
・ホース２６の先端２８から仮想現実の消火剤５が噴射される映像ＶＲ（２）
・仮想現実の炎７が鎮静される映像ＶＲ（３）
・背景対象物９（例えば、火元となるタコ足配線）を含む背景映像ＶＲ（４）
また、生成したフレーム映像ＶＲ（Ｆ）映像をＨＭＤ１０のディスプレイに表示させます。これと併行して、体験者Ｕが見ている映像を映像モニター３０に映し出します。

図１（Ａ）、（Ｂ）に示されるように、本実施形態のＶＲ（仮想現実）を用いた消火体験シミュレーションシステムでは、体験用消火器２０（ＨＭＤ１０のコントローラを兼ねる）が実際の消火器と似ています、よって、実際の消火活動と同様の操作（レバー２４の操作やホース２６の先端２８の操作）を、体験者Ｕ自身の手３（左手３Ｌ、右手３Ｒ）で行うことができます。従って、体験者Ｕは、実際の消火器の操作に慣れることができます。
また、すぐに仮想現実空間に入り込むのではなく、図１（Ａ）に示されるように、まず、実映像をディスプレイに表示し、訓練用消火器２０と手（右手３Ｒ）の位置等を確認した後、仮想現実（ＶＲ）空間での消火活動シミュレーションを開始することができます。
従って、現実の感覚を体験しつつ、実際の消火活動と同じ手順で、消火作業を行うことができます。体験者Ｕは、実際の消火活動の臨場感を持ちながら消火体験できます。

図２（Ａ）～（Ｄ）は、それぞれ、ホースの先端から噴射する消火剤の方向を変化させる例を示します。体験者は、ホースの先端を握る手の手首の支点を固定し、支点を中心として手首を回動させます。

図２（Ａ）は、右手３Ｒと、ホース２６の先端２８と、ホース２６の先端２８から噴出される仮想現実の消火剤５と、仮想現実の炎７とを、仮想現実空間において上から見たときの画像を示します。図２（Ｂ）は、そのＶＲ画像がモニター３０に映し出されている様子です。
図２（Ａ）、（Ｂ）の例で示されるように、仮想現実空間では右手３Ｒの手首の支点Ｋ１の位置が固定されています。仮に、実際の右手３Ｒがさまざまな方向へ動いたとしても、仮想現実空間でその動きは反映されず、常に、支点Ｋ１は同じ位置にあります。図３（Ａ）の例では、体験者Ｕから見て左右方向の横回動だけが、体験用消火器２０のセンサＳ２によって検出されます。また、例えば図２（Ｃ）に示すように、同様に上下方向の縦回動だけが体験用消火器２０のセンサＳ２によって検出できます。これによって、画像処理の負担の軽減など、仮想現実映像生成機能の負担を減らすことができます。

次に、図３（Ａ）～（Ｄ）に沿って、ＶＲを用いた消火体験の手順例、仮想現実の炎の見える位置等について説明します。

図３（Ａ）では、ＨＭＤ１０を装着した体験者Ｕが、まず、体験用消火器２０から安全ピン１３を引き抜きます。次に、一方の手（ここでは右手３Ｒ）をレバー２４に掛け、他方の手（ここでは左手３Ｌ）でホース２６の先端２８を保持します。レバーを握りしめていないので第１のセンサＳ１の検出信号はオフ状態です。
図３（Ａ）の状態では、ゴーグルとして機能するモバイル端末１６は、カメラで撮像した実映像を表示するため、体験者Ｕは、体験用消火器２０や手の位置等を自分の眼を通して確認することができます。

続いて、図３（Ｂ）に示すように、ＨＭＤ１０が、実映像表示モードから仮想現実映像表示モードへと切り換えられます。ゴーグル部分が黒く表示されています。例えば、仮想現実空間に、火元となっているタコ足配線９の映像が表示されます。このとき、体験者Ｕから炎７までの距離はＬ０です。その後、その映像が体験者Ｕの側に近寄ってきて止まり、体験者Ｕから炎７までの距離はＬ１（Ｌ１＜Ｌ０）となり、短くなります。
このように、火元の映像を体験者Ｕに近づけさせます。仮に、前後方向の動きが考慮されないと、炎までの距離感をつかみにくいのです。この点を考慮し、仮想現実空間における火元の映像を、適切なタイミングで体験者Ｕに近づけて、体験者Ｕが炎に向かって歩を進めたような感覚を得ることができるように設定されています。実映像表示モードから仮想現実映像表示モードに切り換わったときに、すぐに消火活動を開始させるのではなく、火元の映像を体験者Ｕに近づけることで、消火剤５が炎に届く距離まで近づくことが重要である、という消火活動の基本を体験者Ｕが学べます。

続いて、図３（Ｃ）に示すように、消火活動のシミュレーション映像が表示されます。仮想現実空間内において、消火剤５の噴射によって、炎７が鎮静化される様子を示す映像が表示されます。

最後に、図３（Ｄ）に示すように、炎７が鎮静化されて小さくなると、小さくなった炎を含む消火活動後の映像が、体験者Ｕに、さらに近寄って止まります。ある程度まで炎が鎮静化されたタイミングで、火元映像を近づけることで、油断せずに最後まで確実に炎を消すことが重要である、という基本を学ぶことができます。やがて、炎は完全に鎮火され、体験シミュレーションが終了します。

■展望、結語

以上ご説明しましたように、本発明のＶＲを用いた消火体験シミュレーションシステム、体験用消火器、及びプログラムによって、臨場感を伴って実際の消火活動の手順を体験できることができます。上述したような工夫が詰め込まれた本発明は、大掛かりな設備がなくても簡便に実施できることから、将来的に注目できるものです。

■概要

出願国：日本 発明の名称：ＶＲを用いた消火体験シミュレーションシステム、体験用消火器、及びプログラム
出願番号：特願2017-128155(P2017-128155)
特許番号：特許第6410378号 (P6410378)
出願日：2017年6月30日
公開日：2019年1月24日
登録日：2018年10月05日
出願人：ＭＸモバイリング株式会社
経過情報：2度の拒絶理由通知書を受け、補正手続きを経たうえで特許査定となり、特許料が支払われて、特許となりました。
その他情報：本権利は抹消されていません。存続期間満了日は2037年6月30日です。
IPC：Ｇ０９Ｂ

＜免責事由＞
本解説は、主に発明の紹介を主たる目的とするもので、特許権の権利範囲（技術的範囲の解釈）に関する見解及び発明の要旨認定に関する見解を示すものではありません。自社製品がこれらの技術的範囲に属するか否かについては、当社は一切の責任を負いません。技術的範囲の解釈に関する見解及び発明の要旨認定に関する見解については、特許（知的財産）の専門家であるお近くの弁理士にご相談ください。