JP5829154B2 - 拡張現実システム - Google Patents
拡張現実システム Download PDFInfo
- Publication number
- JP5829154B2 JP5829154B2 JP2012055381A JP2012055381A JP5829154B2 JP 5829154 B2 JP5829154 B2 JP 5829154B2 JP 2012055381 A JP2012055381 A JP 2012055381A JP 2012055381 A JP2012055381 A JP 2012055381A JP 5829154 B2 JP5829154 B2 JP 5829154B2
- Authority
- JP
- Japan
- Prior art keywords
- facility
- augmented reality
- traveling
- camera
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Instructional Devices (AREA)
- Navigation (AREA)
Description
すなわち、たとえば、走行中の道路の左側にある、現在位置から少し離れている施設の位置が、当該道路が前方で右に大きくカーブしているために、現在位置から見て右側に位置する場合に、カメラの撮影画像上の当該施設が移り込む位置付近に当該施設の情報を表示すると、当該情報はカメラ撮影映像の右側に表示されることとなる。そして、この場合において、道路の見通しが悪いときには、ユーザは、当該施設の情報がカメラ撮影映像の右側に表示されていることより、当該施設が走行中の道路の右側に位置すると誤認してしまうことがある。
また、以上のような拡張現実システムでは、前記拡張現実画像表示手段において、前記拡張現実情報が表す情報を、当該拡張現実情報が関係づけられた施設が写り込む位置からの吹き出しの形態で、前記カメラで撮影した撮影映像上に配置するように構成してもよい。
また、以上のような拡張現実システムに、目的地までのルートを設定するルート設定手段を設け、前記拡張現実画像表示手段において、前記拡張現実画像に、前記カメラで撮影した撮影映像上で前記ルートを表すルート図形を含めるようにしてもよい。
図1aに本実施形態に係る車載システムの構成を示す。
車載システムは、自動車に搭載されるシステムであり、図示するように、車載システム1は、表示装置101、操作部102、自動車の前方の風景を撮影するカメラ103、GPS受信機104、自動車の車速や角速度を計測する車両状態センサ105、制御部106、ナビゲーション部107、AR表示部108、記憶装置109、外部装置を無線または有線で接続するための外部インタフェース110とを備えている。
また、このような車載システム1には、外部インタフェース110を用いてスマートフォン2などを接続することができる。
次に、車載システム1の記憶装置109の記憶内容について説明する。
図2に示すように、記憶装置109には、地図データ、ARデータベースが格納される。
ここで、地図データは、道路地図を表すデータであり予め記憶装置109に記憶される。
また、ARデータベースは、施設の情報を表すARデータを蓄積したものであり、各ARデータは、ARデータが情報を表す施設の種別を示す情報種別、ARデータが情報を表す施設の位置を表す座標、拡張現実のためにカメラ103が撮影した映像上に表すARタグを表すARタグデータ、ARデータが情報を表す施設についての詳細な情報である詳細情報とを有する。ここで、本実施形態では、ARタグとしてARデータが情報を表す施設の施設名を用いる。ただし、ARタグとしては、施設の種別を示す図形であるアイコンなどを用いるようにすることもできる。
そして、制御部106は、操作部102を用いたユーザのモード選択操作に応じて、ナビゲーションモード、ARモードのいずれかを選択的に設定する。そして、ナビゲーションモードの設定期間中は、表示装置101に上述したナビゲーション画像を表示し、ARモードの設定期間中は、表示装置101に上述したAR画像を表示する。
図3に、AR表示部108が行うAR画像生成処理の手順を示す。
図示するように、この処理では、まず、カメラ103が撮影した映像を仮AR画像として取得する(ステップ302)。
そして、次に、ナビゲーション部107が上述のように算出している現在位置と現在の前方方向とよりカメラ103の実空間上の撮影範囲を算出する(ステップ304)。そして、算出したカメラ103の撮影範囲内の座標が登録されているARデータをARデータベースから抽出する(ステップ306)。
すなわち、抽出したARデータに登録されている座標が、ステップ308で識別した走行中の道路の、走行方向に見て左側の座標であるかどうかを調べる(ステップ312)。ARデータに登録されている座標が、走行中の道路の走行方向に見て左側の座標であるかどうかは、より具体的には、たとえば、次のようにして求めることができる。すなわち、走行中の道路上の当該座標に最寄りの地点を求める。そして、求めた地点における識別した道路の走行方向(上り方向/下り方向)の道路の方向を観察方向として、求めた地点から観察方向を向いた状態で、当該座標が求めた地点より左側にある場合に、当該座標が、走行中の道路の走行方向に見て左側の座標であると判定し、他の場合に、当該座標が、走行中の道路の走行方向に見て右側の座標であると判定する。
一方、ステップ312で、抽出したARデータに登録されている座標が、走行中の道路の走行方向に見て左側の座標であると判定されなかった場合、すなわち、抽出したARデータに登録されている座標が、走行中の道路の走行方向に見て右側の座標である場合には、抽出したARデータに対応する施設は走行中道路の右側に位置する施設であると見なし、抽出したARデータのARタグデータが表すARタグを、仮AR画像の右半分の領域内の位置に、ナビゲーション部107が上述のように算出している現在位置と現在の前方方向とより算出される当該ARタグのARタグデータに登録されている座標が写り込む、カメラ103の撮影映像中の位置からの吹き出しの形態で描画する(ステップ316)。
この結果、図4aに示すように、マーク401が自動車の現在位置と現在の進行方向とを表すものとして、自動車が現在走行している道路402の左側に「Aビル」、「Bビル」が位置し、道路402の右側に「Cビル」が位置する場合、図4bに示すように、仮AR画像は、カメラ103が撮影した画像410上の左半分の領域内に、道路402の左側に位置する「Aビル」のARタグ421と、「Bビル」のARタグ422が配置され、カメラ103が撮影した画像410上の右半分の領域内に、道路402の左側に位置する「Cビル」のARタグ423が配置されたものとなる。ここで、いずれのARタグ421-423も、カメラ103が撮影した画像410中に当該ARタグ対応する施設が写り込んでいる位置からの吹き出しの形態で描画される。
以上、AR表示部108が行うAR画像生成処理について説明した。
このようなAR画像生成処理によれば、前方風景からだけでは、走行中の道路の左右どちら側にあるか判別し難い施設であっても、そのARタグが、施設と走行中の道路との左右の位置関係に従って、AR画像の左側/右側に表示されることになるので、ユーザはARタグの左右の配置より、当該施設と走行中の道路との左右の位置関係を容易に認識することができる。また、ARタグの吹き出し元より、当該ARタグが情報を表す実風景中の施設も容易に認識することができる。
また、ユーザは、「Xマンション」のARタグ502がAR画像の左側に配置されていることより、カメラ103が撮影した画像410では右側に写り込んでいる「Xマンション」が、実際には走行中の道路402の左側に位置していることを容易に認識することができると共に、ARタグ502の吹き出し元より、「Xマンション」実風景上の位置を容易に認識することができる。
また、ユーザは、「XXビル」のARタグ512がAR画像の左側に配置されていることより、施設「XXビル」が実際には走行中の道路402の左側に位置していることを容易に認識することができると共に、ARタグ512の吹き出し元より、「XXビル」実風景上の位置を容易に認識することができる。
また、同様に、自動車が現在走行している前方に高架が存在しているために前方風景からだけでは、遠くの施設が走行中の道路の左右どちら側にあるか判別し難い場合において、図6a2に示すように、道路402が前方でカーブしているために、走行中の道路402の左側に位置しているにもかかわらずに、カメラ103が撮影した画像410では正面から右側に写り込むこととなる施設「Qビル」が存在する場合、図6b2に示すように、当該施設「Qビル」と道路402との左右の位置関係に従って、カメラ103が撮影した画像410上の左半分の領域内に、「Qビル」のARタグ602が、画像410の中央から右部分にかけて含まれる「Qビル」の像の位置からの吹き出しの形態で配置されることとなる。
以上、本発明の実施形態について説明した。
ところで、以上の実施形態では、ARタグのAR画像の左右の配置位置によって、当該ARタグが情報を表す施設と、走行中の道路との左右の位置関係を示すようにしたが、ARタグが情報を表す施設と走行中の道路との左右の位置関係は、ユーザがARタグとの区別を視認可能な他の形態によって表すようにしてもよい。
Claims (4)
- 自動車に搭載される拡張現実システムであって、
前記自動車前方の風景を撮影するカメラと、
前記自動車の現在位置と現在の進行方向とを現在状態として算出する現在状態算出手段と、
施設に関係づけられた当該関係づけられた施設の情報を表す拡張現実情報に基づいて、地図データと前記現在状態とより求まる前記カメラの撮影範囲に含まれる施設に関係づけられた拡張現実情報が表す情報を、前記カメラで撮影した撮影映像上に、当該撮影画像中の当該拡張現実情報が関係づけられた施設が写り込む位置に関連づけた形態で配置した拡張現実画像を表示する拡張現実画像表示手段と、
前記現在状態と前記地図データとに基づいて、前記自動車が走行中の道路である走行中道路と、当該道路の起点に向かう方向と終点に向かう方向とのうちの前記自動車が進行している方向である走行方向とを検出する検出手段と、
前記地図データに基づいて、前記走行中道路を前記走行方向に進む場合に、前記カメラの撮影範囲に含まれる各施設が、前記走行中道路の右側と左側のいずれに位置するかを判定する施設左右位置算出手段とを有し、
前記拡張現実画像表示手段は、
前記施設左右位置算出手段が前記走行中道路の右側に位置すると判定した施設に関係づけられた拡張現実情報が表す情報を、前記カメラで撮影した撮影映像の右半分の領域内に、当該拡張現実情報が関係づけられた施設が写り込む位置からの吹き出しの形態で配置し、前記施設左右位置算出手段が前記走行中道路の左側に位置すると判定した施設に関係づけられた拡張現実情報が表す情報を、前記カメラで撮影した撮影映像の左半分の領域内に、当該拡張現実情報が関係づけられた施設が写り込む位置からの吹き出しの形態で配置することを特徴とする拡張現実システム。 - 請求項1記載の拡張現実システムであって、
目的地までのルートを設定するルート設定手段を有し、
前記拡張現実画像表示手段は、前記拡張現実画像に、前記カメラで撮影した撮影映像上で前記ルートを表すルート図形を含めることを特徴とする拡張現実システム。 - カメラを備えた自動車に搭載されたコンピュータによって読み取られ実行されるコンピュータプログラムであって、
当該コンピュータプログラムは、前記コンピュータを、
前記自動車の現在位置と現在の進行方向とを現在状態として算出する現在状態算出手段と、
施設に関係づけられた当該関係づけられた施設の情報を表す拡張現実情報に基づいて、地図データと前記現在状態とより求まる前記カメラの撮影範囲に含まれる施設に関係づけられた拡張現実情報が表す情報を、前記カメラで撮影した撮影映像上に、当該撮影画像中の当該拡張現実情報が関係づけられた施設が写り込む位置に関連づけた形態で配置した拡張現実画像を表示する拡張現実画像表示手段と、
前記現在状態と前記地図データとに基づいて、前記自動車が走行中の道路である走行中道路と、当該道路の起点に向かう方向と終点に向かう方向とのうちの前記自動車が進行している方向である走行方向とを検出する検出手段と、
前記地図データに基づいて、前記走行中道路を前記走行方向に進む場合に、前記カメラの撮影範囲に含まれる各施設が、前記走行中道路の右側と左側のいずれに位置するかを判定する施設左右位置算出手段として機能させ、
前記拡張現実画像表示手段は、
前記施設左右位置算出手段が前記走行中道路の右側に位置すると判定した施設に関係づけられた拡張現実情報が表す情報を、前記カメラで撮影した撮影映像の右半分の領域内に、当該拡張現実情報が関係づけられた施設が写り込む位置からの吹き出しの形態で配置し、前記施設左右位置算出手段が前記走行中道路の左側に位置すると判定した施設に関係づけられた拡張現実情報が表す情報を、前記カメラで撮影した撮影映像の左半分の領域内に、当該拡張現実情報が関係づけられた施設が写り込む位置からの吹き出しの形態で配置することを特徴とするコンピュータプログラム。 - 請求項3記載のコンピュータプログラムであって、
当該コンピュータプログラムは、前記コンピュータを、さらに、目的地までのルートを設定するルート設定手段として機能させ、
前記拡張現実画像表示手段は、前記拡張現実画像に、前記カメラで撮影した撮影映像上で前記ルートを表すルート図形を含めることを特徴とするコンピュータプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012055381A JP5829154B2 (ja) | 2012-03-13 | 2012-03-13 | 拡張現実システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012055381A JP5829154B2 (ja) | 2012-03-13 | 2012-03-13 | 拡張現実システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013190255A JP2013190255A (ja) | 2013-09-26 |
JP5829154B2 true JP5829154B2 (ja) | 2015-12-09 |
Family
ID=49390687
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012055381A Active JP5829154B2 (ja) | 2012-03-13 | 2012-03-13 | 拡張現実システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5829154B2 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6107590B2 (ja) * | 2013-10-16 | 2017-04-05 | 株式会社デンソー | ヘッドアップディスプレイ装置 |
JPWO2021053843A1 (ja) * | 2019-09-18 | 2021-03-25 | ||
CN112212865B (zh) * | 2020-09-23 | 2023-07-25 | 北京市商汤科技开发有限公司 | Ar场景下的引导方法、装置、计算机设备及存储介质 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4551247B2 (ja) * | 2005-03-04 | 2010-09-22 | 株式会社シーズ・ラボ | 沿線目標物表示装置および沿線目標物表示プログラム |
JP2007256048A (ja) * | 2006-03-23 | 2007-10-04 | Matsushita Electric Ind Co Ltd | ナビゲーション装置 |
JP5320133B2 (ja) * | 2009-03-31 | 2013-10-23 | 株式会社エヌ・ティ・ティ・ドコモ | 情報提示システム、情報提示サーバ、通信端末、および情報提示方法 |
JP5665077B2 (ja) * | 2010-08-10 | 2015-02-04 | アルパイン株式会社 | 車載ナビゲーション装置 |
-
2012
- 2012-03-13 JP JP2012055381A patent/JP5829154B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2013190255A (ja) | 2013-09-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11698268B2 (en) | Street-level guidance via route path | |
JP5921320B2 (ja) | 表示システム、携帯装置、車載装置、及び、プログラム | |
JP2009020089A (ja) | ナビゲーション装置、ナビゲーション方法、及びナビゲーション用プログラム | |
JP5955662B2 (ja) | 拡張現実システム | |
US12033244B2 (en) | Map driven augmented reality | |
EP2988097B1 (en) | Driving support system, method, and program | |
JP2009236843A (ja) | ナビゲーション装置、ナビゲーション方法、およびナビゲーションプログラム | |
JP6345381B2 (ja) | 拡張現実システム | |
CN110672110A (zh) | 车辆的导航方法、装置、设备及计算机可读存储介质 | |
Lin et al. | Design and implement augmented reality for supporting driving visual guidance | |
JP5883723B2 (ja) | 3次元画像表示システム | |
JP5829154B2 (ja) | 拡張現実システム | |
JP4800252B2 (ja) | 車載装置及び交通情報提示方法 | |
JP5774524B2 (ja) | 拡張現実システム | |
KR20130112191A (ko) | 경로 안내 인터페이스를 구비한 ar 내비게이션 장치 및 경로 안내 제공 방법 | |
US11656089B2 (en) | Map driven augmented reality | |
JP5680481B2 (ja) | 車載システム | |
JP5702476B2 (ja) | 表示装置、制御方法、プログラム、記憶媒体 | |
JP2009026164A (ja) | 車線認識装置及びナビゲーション装置 | |
WO2022039011A1 (ja) | コンピュータシステムによるナビゲーション | |
JP5196426B2 (ja) | ナビゲーション装置 | |
JP2011179920A (ja) | 表示制御装置、表示制御方法、プログラム、および記録媒体 | |
JP6444514B2 (ja) | 表示制御装置、表示装置および経路案内方法 | |
JP2012007983A (ja) | 運転支援装置 | |
JP2019105581A (ja) | ナビゲーション装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140926 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150422 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150428 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150624 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20151020 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20151021 |
|
R150 | Certificate of patent (=grant) or registration of utility model |
Ref document number: 5829154 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |