なにが現実で何が過去なのか混乱させる技術?


仮想を現実と思わせる工夫

なにが現実で何が過去なのか混乱させる技術?

なにが現実で何が過去なのか混乱させる技術?

仮想現実研究において、実際には目の前で起きていないことを、いかにして実際に目の前で起きていることとして認識させるか、というのは長くこの研究の課題となっています。

どうやって現実とは違う映像を現実のものとして認識させるか、というのはなかなか難しい問題なのです。

例えばVRゴーグルを装着して見えるもの、これってちょっと現実とは違うものを見せられているという認識をもつのが普通だと思います。というのも、CGや映像の動きの不自然さが、目の前の映像を「現実ではないもの」と認識するからですね。


そこで、ある場所において撮影された、まったく同じ視点から撮影された映像を、現在映像、代替映像、これらを組み合わせた複合映像へと切り替える映像切替手段を備える「代替現実システム制御装置」が開発されました。

これは、過去の映像(自分が写っている可能性もある)と現在の映像をミックスして視聴者に見せるというもので、どこまでが過去映像で、どこからが現在映像であるかを混乱させることが目的なのです。過去映像の撮影にあたっては、同じ視点であることはもちろん、周辺の音声についても同様です。

このような装置を使って映像を見せると、ほとんどの被験者は、自分の判断に自信を持てなくなり、ほとんどの過去映像を現在実際に生じている事象として受け止めるようになるそうです。


このような技術は、研究分野だけでなく、例えば、ヘッドマウントVRディスプレイを用いたいわゆる「没入型一人称ゲーム」に応用が可能かもしれません。ゲーム内環境の現実感等を高めることができるとのことで、このような技術を応用したVRゲームの今後の発展がとても気になりますね。

今回ご紹介する特許出願は、日本の研究機関によって出願され、いったん特許となった出願です。その後、特許料の不納によって特許権が消滅しています。しかし、審査を経て特許となった内容ですから、技術的に意味のある内容となっています。


このように、日本研究機関によって出願されて特許となった内容についてご紹介します。

■従来の課題

従来、仮想現実研究において、仮想の事象を、いかに現実の事象として被験者に認識させるかが課題となっています。

しかしながら、被験者(体験者)が、仮想の事象を現実の事象として認識(「代替現実」といいます)できない場合が多いといえます。その原因は、その映像そのものに現実感がないこと、また、CGの不自然さ、映像の動きの不自然さなどと考えられています。

本発明は、上記の問題に鑑みてなされたものであり、被験者に対し、実際には目の前で起きていない仮想の事象を、あたかも実際に目の前で起きている現実の事象として認識させることができる代替現実システムを実現することを目的とします。

■本発明の効果

本発明によれば、被験者に対し、仮想事象をまるで現実事象のように認識させることができます。

■特許請求の範囲のポイントなど

本発明の特許請求の範囲における概要を説明します。本発明の代替現実システムは、所定の場所であらかじめ撮影した映像と、所定の場所へ来た被験者が見ている映像とを組み合わせて利用し、絶妙なタイミングで映像を切り替えるシステムです。


詳細は、後でご説明しますが、本発明によって、仮想事象を、あたかも現実事象として認識させることができます。


具体的には、被験者は、ヘッドカメラやヘッドマウントディスプレイを備えた視聴モジュールを装着します。被験者は、その視聴モジュールを装着した状態で、所定の場所へ行きます。所定の場所に来たときに、ヘッドカメラによってそのときの現在映像を撮り続け、被験者へ映し出します。一方で、所定の場所における映像は、過去映像として、全方位カメラなどによって、あらかじめ撮っておきます。


そして、被験者が所定の場所において、例えば視線を急激に変えたときに、現在映像と過去映像とを切り替えます。視線の変化は、視聴モジュールによって検出されます。被験者は、視線を急に変えたときに映像が変わったため、映像の切り替えに気づきにくく、現在映像と過去映像との区別がつきにくくなります。例えばこのようにして、仮想事象と現実事象との区別をつけにくくします。

■全体構成

本発明の特許請求の範囲には、大きく分けて、「代替現実システム制御装置」の発明、「代替現実システム制御装置」の発明、「代替現実システム」の発明、「代替現実システム制御方法」の発明、そして、「記録媒体」の発明が記載されています。


いずれの発明も、代替現実システムを基本としており、同様の内容となっています。

「代替現実システム制御装置」の発明を概説しますと、以下の通りです。


(1)被験者が見ている現在映像を取得する「現在映像取得手段(装置)」と、
(2)あらかじめ代替映像(過去映像)を用意しておく「代替映像取得手段(装置)」と、
(3)代替映像から部分映像を切り出すために、切出し方向(被験者が見ている方向)を更新(変更)する「映像方向更新手段(装置)」と、
(4)視聴者が見ている映像を、現在映像へ、または、部分映像へ、または、現在映像と部分映像とを組み合わせた複合映像へ、と切り替える「映像切替手段(装置)」とを利用します。


そして、上記の(4)「映像切替手段(装置)」は、被験者にバレにくいタイミングを見計らって、映像を切り替えます。

さらに「代替現実システム制御装置」について詳しく説明します。
本発明の「代替現実システム制御装置」は、以下のように4つの手段で構成されています。


(1)所定の場所において視聴者が見ている現在映像を取得する「現在映像取得手段」と、
(2)所定の場所で撮影された、あらかじめ用意された全方位映像であって、現在映像とは異なる代替映像(過去映像)を取得する「代替映像取得手段」と、
(3)視聴者が見ている方向の領域を代替映像から切り出して部分映像を得るべく、切出し方向を更新(変更)する「映像方向更新手段」と、
(4)所定の場所において視聴者に表示する映像(視聴者が見ている映像)を、現在映像へ、または、部分映像へ、または、現在映像と部分映像とを組み合わせた複合映像へ、と切り替える「映像切替手段」とを備えます。

そして、上記の(4)「映像切替手段」は、下記(a)~(f)の少なくともいずれか一つの方法によって、映像を切り替えます。

(a)視聴者の急速眼球運動を検出したタイミングで、映像を切り替える。

(b)視聴者が、切り替え前後の映像の両方に映し出されているオブジェクト(物体)に着目したことを検出したタイミングで、映像を切り替える。

(c)視聴者が、映像切り替え用のスイッチを押下したタイミングから遅延した(異なる)タイミングで、表示される映像を、現在映像と、現在映像以外との間で、切り替える。

(d)切り替え前後の映像に映し出されたオブジェクト(物体)の少なくとも一方をフェードインまたはフェードアウトさせつつ、切り替え前後の映像を重ね合せて、映像を切り替える。 (e)視聴者が所定の場所から移動すると、映像を現在映像に切り替え、移動中には、現在映像を表示させ続ける。

(f)視聴者が所定の場所に留まっている場合に、映像を切り替える。

また、特許請求の範囲に記載されているその他の発明も、上記の「代替現実システム制御装置」の発明と同様の内容を有しています。

■細部

本発明の特許請求の範囲には、さらに、下位概念の発明として、以下のような内容の発明も記載されています。上記「代替現実システム制御装置」は、さらに以下のように設計されても良いのです。

・好ましくは、視聴者の頭部の動きを検出するセンサをさらに備えます。映像方向更新手段は、検出された動きに応じて、表示映像の方向を更新(変更)します。
・好ましくは、代替映像を表示する際に、代替映像に予め対応付けられた、匂い、熱、振動、および触感の少なくともいずれか一つを発生させる発生手段をさらに備えます。

図1は、代替現実システムのシステム構成を表す図です。

■実施形態

図1は、物資取扱施設の一例を図示したブロック図です。

【図1】

図1に示されているように、代替現実システム100は、代替現実を被験者に体験させるシステムでず。代替現実システム100は、制御装置110、録画モジュール120、および視聴モジュール130を備えています。


制御装置110は、代替現実システム100を制御します。例えば、制御装置110は、パーソナルコンピュータによって実現されたり、サーバや、専用の機器によって実現されたりします。

次に、図2及び図3に基づいてさらに詳しく説明します。図2は、録画モジュールの具体例を図示しています。図3は、視聴モジュールの具体例を図示しています。

【図2】

【図3】

図2は、録画モジュール120の具体例を示します。録画モジュール120は、過去映像の撮像および録画に利用されます。図2に示すように、録画モジュール120は、全方位カメラ122およびマイク124を備えます。

全方位カメラ122は、異なる方向の映像が撮れるように、複数の撮像装置を備え、これにより、全ての方向(水平方向に360°かつ垂直方向に360°)を撮像することが可能です。全方位カメラ122によって撮像された映像は、制御装置110へ出力され、過去映像として扱われます。


マイク124によって集音された音声は、制御装置110へ出力され、上記過去映像の音声として扱われます。

図3は、視聴モジュール130の具体例を示します。視聴モジュール130は、現在映像の撮像、各映像(現在映像および過去映像)の視聴に利用されます。図3に示すように、視聴モジュール130は、ヘッドフォン132、ヘッドカメラ134、ヘッドマウントディスプレイ136、動きセンサ138、マイク140、スイッチ142、およびアイトラッカー144(図1参照)を備えます。


ヘッドカメラ134は、被験者の前方の映像を撮像します。ヘッドカメラ134によって撮像された映像は、現在映像として、制御装置110へ出力されます。また、マイク140は、周辺の音声を録音します。マイク140によって録音された音声は、上記現在映像の音声として、制御装置110へ出力されます。


ヘッドマウントディスプレイ136は、制御装置110から出力された映像(現在映像または過去映像)を表示します。ヘッドフォン132は、制御装置110から出力された音声(現在映像または過去映像の音声)を出力します。


動きセンサ138は、被験者の頭部の動きを検出します。アイトラッカー144は、被験者がヘッドマウントディスプレイ136画面のどこを見ているかを知るために視線方向を計測します。スイッチ142は、制御装置110に対して、映像の切り替えを指示するためのものです。被験者は、スイッチ142を押下することにより、制御装置110に対して、映像の切り替えを指示することができます。

続いて、図6に基づいてさらに詳しく説明します。図6は、代替現実システム100による代替現実体験の具体例を示します。図6(a)~(e)は、代替現実体験における代表的なシーンを、時系列に示しています。

【図6】

(a.過去映像の撮影シーン)
図6(a)は、代替現実体験における過去映像の撮影シーンを示します。体験室の所定の位置に全方位カメラ122が設置され、全方位カメラ122によって全方向の過去映像が撮像されています。


この体験室に被験者が案内されます。このとき、この体験室で体験を行うことが案内者によって説明されつつ、その様子が全方位カメラ122によって撮像されています。


続いて、被験者は、全方位カメラ122が置かれていた場所に移動し、そのときに、ヘッドマウントディスプレイ136が装着されます。ヘッドマウントディスプレイ136から表示される映像は、初めは現在の映像(ヘッドカメラ134によって撮像されているライブ映像)ですが、被験者が気付かない間に、過去の映像に切り替えられます。このように、最初に現在の映像を表示することによって、被験者に「現在の映像を視聴している」という意識を植え付けることができ、過去の映像への切り替えを気付きにくくしています。

(b.録画シーン)
図6(b)は、代替現実体験における録画シーンを示しています。この録画シーンにおいて、ヘッドマウントディスプレイの具合について被験者が問いかけられています。しかし、これは、過去の映像です。被験者は、問いかけが過去の映像によるものであることに気付かないまま応答しています。

(c.録画シーン)
図6(c)は、代替現実体験における録画シーンを示しています。図6(b)に示すシーンの後、ヘッドマウントディスプレイ136には、図6(a)で撮像した過去の映像が表示されます。この映像には、被験者自身が映し出されているため、被験者は、この映像が過去の映像であると認識します。そして、被験者は、いつの間にか過去の映像に切り替わっていたことを知ります。これによって、ヘッドマウントディスプレイに表示されている映像が、操作されているかもしれない、と疑い出します。

(d.録画シーン)
図6(d)は、代替現実体験における録画シーンを示します。この録画シーンにおいては、案内者が被験者に対して、図6(c)の映像が過去の映像であること、および、今視聴している映像が、現在の映像であることを説明しています。しかしながら、この説明は、過去の映像によるものです。
ところが、被験者は、シーンが切り替わったこと、および、上記説明を受けたことによって、今視聴している映像が、現在の映像であると思い込んでしまっています。特に、図6(c)のシーンにおいて、被験者自身を映像に映し出すことによって、過去の映像を過去の映像らしく演出したことにより、図6(d)のシーンにおける上記説明の真実感が高められ、したがって、図6(d)のシーンにおける映像の現実感がより高められています。

(e.ライブシーン)
図6(e)は、代替現実体験におけるライブシーンを示すものである。このライブシーンでは、さらに、案内者が被験者に対して、今視聴している映像が、現在の映像であることを説明している。これにより、図6(d)のシーンにおいて既に現実に戻ったと信じている被験者は、現実と過去の区別がもはやできなくなっています。

さらなる工夫も可能です。例えば、映像切替手段が過去映像に切り替えるときに、匂い、熱、振動、および触感の少なくともいずれか一つを発生させる発生手段をさらに備えることもできます。


例えば、過去映像に人が倒れるシーンがある場合、その過去映像を被験者に視聴させつつ、倒れるタイミングで振動を発生させます。これにより、被験者は、現実に人が倒れたような感覚を持ち、過去映像の現実感を高めることができます。


他の例では、火災のシーンが含まれている場合、その過去映像を被験者に視聴させつつ、被験者が感じ取れる熱や匂いを発生させます。これにより、被験者は、現実に火災が発生しているような感覚を持ち、過去映像の現実感を高めることができます。

展望、結語

以上ご説明しましたように、本発明の代替現実システム、このシステムの制御装置、制御方法、および、そのシステムのためのプログラムなどによって、被験者に対し、仮想事象を、あたかも現実事象として認識させることができます。上述したような工夫が詰め込まれた本発明は、仮想現実をよりリアルに体験できる技術であり、将来的に注目できるものです。

■概要

出願国:日本 発明の名称:代替現実システム制御装置、代替現実システム、代替現実システム制御方法、プログラム、および記録媒体
出願番号:特願2012-181114(P2012-181114)
特許番号:特許第5594850号(P5594850)
出願日:2012年8月17日
公開日:2014年2月27日
登録日:2014年8月15日
出願人:独立行政法人理化学研究所
経過情報:本出願はいったん特許となりましたが、特許権を維持するための特許料不納により特許権は抹消しています。
その他情報:本出願からさらに分割出願された子出願は、審査中です。なお、本特許出願を基礎出願にして、国際特許出願され、各国でも特許権を獲得する意向があるようです
IPC:G06T

<免責事由>
本解説は、主に発明の紹介を主たる目的とするもので、特許権の権利範囲(技術的範囲の解釈)に関する見解及び発明の要旨認定に関する見解を示すものではありません。自社製品がこれらの技術的範囲に属するか否かについては、当社は一切の責任を負いません。技術的範囲の解釈に関する見解及び発明の要旨認定に関する見解については、特許(知的財産)の専門家であるお近くの弁理士にご相談ください。


Latest Posts 新着記事

3Dプリンティング覇権争い──航空・半導体・医療で進む“実用化の壁”突破

航空機エンジンの心臓をプリントするGEの覚悟 3Dプリンティング(積層造形)の用途が玩具や試作品づくりといった小規模領域に留まっていたのは過去の話だ。いま、この技術が次なる産業革命の主役として存在感を放っている。とくに目立つのが、航空、半導体、医療という「高付加価値」「高信頼性」「高精度」が求められる産業における導入の加速だ。なかでもゼネラル・エレクトリック(GE)は、航空エンジン分野における3D...

BYD、自動洗浄EVでフリート管理を最適化――特許出願が示す未来戦略

2025年、中国のEV大手・BYD(比亜迪)は、「車両の自動洗浄」に関する特許を中国国家知識産権局に出願した。この特許は、車両に自動洗浄ユニットを組み込み、特定条件下で自律的に洗車作業を行うというものであり、従来の洗車文化を根底から変える可能性を秘めている。 EVならではの「清掃ニーズ」の進化 この特許が注目される背景には、EVという次世代自動車に特有の利用シーンがある。内燃機関車に比べ、EVは都...

チョコと生チョコのいいとこどり 明治が特許製法で「新領域」のお菓子発売

「チョコでもない、生チョコでもない。けれど、いいとこどり」。 老舗製菓メーカー・株式会社明治が2025年春、そんなキャッチコピーとともに市場投入したのが、“新領域チョコレート”こと『Melty Melt(メルティメルト)』だ。濃厚さと口どけを両立させたこのお菓子は、ただの新商品ではない。特許技術を背景にした、まさに「発明」に近い存在であり、チョコレート業界におけるポジショニングの再定義ともいえる一...

GE薬促進の陰で失われる特許の信頼性―PhRMAが警告する日本の制度的リスク

2025年4月、米国研究製薬工業協会(PhRMA)が日本政府に提出した意見書が、医薬業界および知財実務者の間で波紋を呼んでいる。矛先が向けられたのは、ジェネリック医薬品(GE薬)に関する特許抵触の有無を判断する「専門委員制度」だ。PhRMAはこの制度の有用性に疑問を呈し、「構造的な問題がある」と批判した。 一見すれば、専門家による中立的判断制度は知財紛争の合理的解決に寄与するようにも思える。だが、...

任天堂・ポケモン社に“特許無効”で真っ向勝負 ゲーム開発会社が放つ反撃の声明

2025年春、ゲーム業界に波紋を広げる知財係争が再び表面化した。任天堂と株式会社ポケモン(ポケモン社)の両社が、ある国内の中堅ゲーム開発会社に対して特許侵害を主張して提訴。一方、被告側のゲーム開発会社はこれに対し、2025年5月初旬に声明を発表し、「両社が主張する特許はそもそも無効であり、係争を通じてその事実を明らかにする」と真っ向から反論した。 このコラムでは、係争の背景にある技術的争点、主張さ...

破産からの逆襲―“夢の電池”開発者が挑む、特許逆転劇と再出発

2025年春、かつて“夢の電池”とまで称された次世代蓄電技術を開発していたベンチャー企業が、ついに再建を断念し、破産に至ったというニュースが駆け巡った。だが、そのニュースの“続報”が業界に波紋を呼んでいる。かつて同社を率いた元CEOが、新会社を設立し、破産企業が保有していた中核特許の“取り戻し”に動き出しているのだ。 この物語は、単なる一企業の興亡を超え、日本のスタートアップエコシステムにおける知...

サンダル革命!ワークマン〈アシトレ〉が“履くだけ足トレ”でコンディションまで整うワケ

「サンダルなのに快適」「履いた瞬間にわかる」「この値段でこれは反則級」――こうした驚きと称賛の声が続出しているのが、ワークマンの〈アシトレサンダル〉だ。シンプルな見た目に反して、履き心地・健康効果・歩行補助といった多面的な機能を備える同製品は、単なる夏の室内履き・外出用サンダルという枠を超えて「履くことで整う道具」として注目されつつある。 このコラムでは、アシトレサンダルの具体的な機能や構造だけで...

斬新すぎる中国製“センチュリーMPV”登場!アルファード超えのサイズと特許で快適空間を実現

中国の高級ミニバン市場に、新たな主役が登場した。GM(ゼネラルモーターズ)の中国ブランド「ビュイック(Buick)」が展開するフラッグシップMPV「世紀(センチュリー/CENTURY)」は、その名の通り“100年の誇り”を体現する存在だ。日本の高級ミニバンの代名詞・トヨタ「アルファード」をも超えるボディサイズに、贅沢を極めた2列4人乗りの内装、そして快適性を徹底追求した独自の“特許技術”が組み込ま...

View more


Summary サマリー

View more

Ranking
Report
ランキングレポート

大学発 知財活用収益ランキング

冒頭の抜粋文章がここに2〜3行程度でここにはいります鶏卵産業用機械を製造する共和機械株式会社は、1959年に日本初の自動洗卵機を開発した会社です。国内外の顧客に向き合い、技術革新を重ね、現在では21か国でその技術が活用されていますり立ちと成功の秘訣を伺いました...

View more



タグ

Popular
Posts
人気記事


Glossary 用語集

一覧を見る