JP7414197B2 - 仮想ゲージ表示プログラム及び装置 - Google Patents
仮想ゲージ表示プログラム及び装置 Download PDFInfo
- Publication number
- JP7414197B2 JP7414197B2 JP2020199562A JP2020199562A JP7414197B2 JP 7414197 B2 JP7414197 B2 JP 7414197B2 JP 2020199562 A JP2020199562 A JP 2020199562A JP 2020199562 A JP2020199562 A JP 2020199562A JP 7414197 B2 JP7414197 B2 JP 7414197B2
- Authority
- JP
- Japan
- Prior art keywords
- virtual gauge
- virtual
- display
- unit
- plane
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 claims description 11
- 238000003384 imaging method Methods 0.000 claims description 11
- 230000003190 augmentative effect Effects 0.000 claims description 7
- 230000004044 response Effects 0.000 claims description 4
- 238000000034 method Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 9
- 238000011161 development Methods 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 1
- 229910052782 aluminium Inorganic materials 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Landscapes
- Length Measuring Devices By Optical Means (AREA)
- Processing Or Creating Images (AREA)
Description
[態様1]
仮想ゲージ表示装置に、拡張現実を用いて実空間画像と共に仮想ゲージを表示させる仮想ゲージ表示プログラムであって、
前記仮想ゲージ表示装置は、前記実空間画像を撮影する撮影部と、前記実空間画像及び前記仮想ゲージを表示する表示部と、前記仮想ゲージを記憶する記憶部と、前記仮想ゲージの配置に関する入力を受け入れる入力部と、前記撮影部、前記表示部、前記記憶部、及び前記入力部を制御する制御部とを備え、
前記仮想ゲージ表示プログラムは、
前記撮影部に、前記実空間画像を撮影させる撮影ステップと、
前記制御部に、前記実空間画像から平面を検知させる平面検知ステップと、
前記入力部からの入力に基づき、前記制御部に、前記仮想ゲージの前記平面上の座標を特定させる座標特定ステップと、
前記仮想ゲージの前記平面上の座標に基づき、前記表示部に、前記実空間画像と共に、前記仮想ゲージを前記平面上に表示させる仮想ゲージ表示ステップと、
を実行させる、仮想ゲージ表示プログラム。
態様1に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示ステップで、前記仮想ゲージ表示プログラムは、前記表示部に、前記仮想ゲージの下端を前記平面上の座標に表示させる、仮想ゲージ表示プログラム。
[態様3]
態様1又は2に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージは、前記平面に対して縦方向に延びる縦方向部分と、前記平面に対して横方向に延びる横向部分とを備える、仮想ゲージ表示プログラム。
[態様4]
態様1乃至3のいずれか一項に記載の仮想ゲージ表示プログラムにおいて、
前記記憶部は、互いに形状が異なる複数の仮想ゲージを記憶し、
前記仮想ゲージ表示プログラムは、前記表示部に、前記複数の仮想ゲージを選択可能に表示させる仮想ゲージ選択ステップを実行させる、仮想ゲージ表示プログラム。
態様1乃至4のいずれか一項に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示プログラムは、前記表示部に、前記仮想ゲージを前記平面上に配置するための位置決めマークを表示させる位置決めマーク表示ステップを実行させる、仮想ゲージ表示プログラム。
[態様6]
態様5に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示プログラムは、前記制御部に、前記撮影部の撮影方向から前記平面に延びる仮想線を生成させ、前記表示部に、前記平面と前記仮想線の交点に前記位置決めマークを表示させる、仮想ゲージ表示プログラム。
[態様7]
態様6に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示プログラムは、前記制御部に、前記平面と前記仮想線の交点が前記前記表示部の画面中央領域に存在すること判断させ、前記交点が前記画面中央領域にある場合、前記表示部に、前記位置決めマークを前記画面中央領域に表示させる、仮想ゲージ表示プログラム。
態様1乃至7のいずれか一項に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示プログラムは、前記実空間画像が変化すると、前記制御部に、前記仮想ゲージの位置及び/又は向きを補正させる、仮想ゲージ表示プログラム。
[態様9]
態様1乃至8のいずれか一項に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示プログラムは、前記表示部に、前記仮想ゲージを前記平面に対して垂直な方向を中心として回転可能に表示させる回転表示ステップを実行させる、仮想ゲージ表示プログラム。
[態様10]
態様1乃至9のいずれか一項に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示プログラムは、前記表示部に、前記入力部からの入力に応じて、前記仮想ゲージが前記平面上で移動した状態を表示させる、仮想ゲージ表示プログラム。
態様1乃至10のいずれか一項に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示プログラムは、前記表示部に、目盛りを有する前記仮想ゲージを表示させる、仮想ゲージ表示プログラム。
[態様12]
態様1乃至11のいずれか一項に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示装置は、携帯機器である、仮想ゲージ表示プログラム。
拡張現実を用いて実空間画像と共に仮想ゲージを表示させる仮想ゲージ表示装置であって、
前記仮想ゲージ表示装置は、前記実空間画像を撮影する撮影部と、前記実空間画像及び前記仮想ゲージを表示する表示部と、前記仮想ゲージを記憶する記憶部と、前記仮想ゲージの配置に関する入力を受け入れる入力部と、前記撮影部、前記表示部、前記記憶部、及び前記入力部を制御する制御部とを備え、
前記撮影部は、前記実空間画像を撮影し、
前記制御部は、前記実空間画像から平面を検知し、
前記入力部からの入力に基づき、前記制御部は、前記仮想ゲージの前記平面上の座標を特定し、
前記仮想ゲージの前記平面上の座標に基づき、前記表示部は、前記実空間画像と共に、前記仮想ゲージを前記平面上に表示する、仮想ゲージ表示装置。
態様13に記載の仮想ゲージ表示装置において、
前記制御部は、前記仮想ゲージの下端を前記平面上に配置するように前記表示部に表示する、仮想ゲージ表示装置。
[態様15]
態様13乃至14のいずれか一項に記載の仮想ゲージ表示装置において、
前記制御部は、前記表示部に、前記仮想ゲージを前記平面上に配置するための位置決めマークを表示させる、仮想ゲージ表示装置。
[態様16]
態様15に記載の仮想ゲージ表示装置において、
前記制御部は、前記撮影部の撮影方向から前記平面に延びる仮想線を生成し、前記表示部に、前記平面と前記仮想線の交点に前記位置決めマークを表示させる、仮想ゲージ表示装置。
本実施形態に係る仮想ゲージ表示プログラム及び装置は、現実空間を装置(タブレット端末又はスマートフォン等の携帯機器)のカメラで撮影し、ARを用いて現実空間を仮想空間と関連付け、実物と同じサイズの仮想ゲージ(仮想コンツァーゲージ)を、現実空間画像上の三次元座標に出現(合成)させて表示する。作業者からすると、あたかも装置(携帯機器)の画面上に、本物のコンツァーゲージが出現しているように見える。そして、作業者が、仮想ゲージと航空貨物等の貨物とを比較することで、貨物のサイズの計測又は推測を行うことにより、作業者は、航空機等の貨物室に貨物が搭載可能なサイズか否かを確認することができる。
本実施形態の仮想ゲージ表示プログラムが実行する処理の概要を説明する。
第1ステップは、ARアプリの起動時に、仮想ゲージ表示装置1の撮影位置を原点(0,0,0)とした現実空間と適合(対応)するように仮想空間を作成する。この際、好ましくは、現実空間の1mを仮想空間の1単位と一致するように空間を作成する。
第2ステップは、モーショントラッキングと画像処理によって、仮想空間に内における仮想ゲージ表示装置1の自己位置を推定又は決定する。
第3ステップは、画像処理によって、周囲画像から基準となる平面(例えば水平面)の位置を検知し、仮想空間内に平面の位置を配置する。
第4ステップは、カメラの位置及び向きから作成した仮想線と、第3ステップで配置した平面とが交差する点の座標を得る。
第5ステップは、第4ステップで得た座標に、仮想ゲージ(仮想コンツァーゲージ)の下端が位置するように仮想ゲージを配置する。
仮想ゲージのサイズは、好ましくは、予め1単位=1mとなるように設定することにより、現実空間にあるものと同じサイズで表示されることとなる。
本実施形態に係る仮想ゲージ表示プログラム及び装置は、直接、ものさしを当てて測定し難いものの計測や大きな対象物の2点間の距離を測定する業務に応用できる。例えば、次の例1~3が考えられる。
例1:倉庫においてパレット上に積み上げた荷物をフォークリフトでトレーラ(トラック)の荷室へ積み込む際、パレット上に積み上げられた荷物が荷室に入るかどうかを仮想ゲージで確認することができる。
例2:高所など人が近づき難い場所での通路幅や、もののサイズなどを、少し離れたところから仮想ゲージを当てて測定することができる。
例3:対象物の底面からの高さ、大きさ、形などが、仮想ゲージと比べて正常かを判断することができる。
12 撮影部
14 記憶部
16 表示部
17 距離測定部
18 通信部
19 入力部
20 制御部
30 ARアプリ(仮想ゲージ表示プログラム)
30a ARエンジン
Claims (16)
- 仮想ゲージ表示装置に、拡張現実を用いて実空間画像と共に仮想ゲージを表示させる仮想ゲージ表示プログラムであって、
前記仮想ゲージ表示装置は、前記実空間画像を撮影する撮影部と、前記実空間画像及び前記仮想ゲージを表示する表示部と、前記仮想ゲージを記憶する記憶部と、前記仮想ゲージの配置に関する入力を受け入れる入力部と、前記撮影部、前記表示部、前記記憶部、及び前記入力部を制御する制御部とを備え、
前記仮想ゲージ表示プログラムは、
前記撮影部に、前記実空間画像を撮影させる撮影ステップと、
前記制御部に、前記実空間画像から平面を検知させる平面検知ステップと、
前記入力部からの入力に基づき、前記制御部に、前記仮想ゲージの前記平面上の座標を特定させる座標特定ステップと、
前記仮想ゲージの前記平面上の座標に基づき、前記表示部に、前記実空間画像と共に、前記仮想ゲージを前記平面上に表示させる仮想ゲージ表示ステップと、
を実行させる、仮想ゲージ表示プログラム。 - 請求項1に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示ステップで、前記仮想ゲージ表示プログラムは、前記表示部に、前記仮想ゲージの下端を前記平面上の座標に表示させる、仮想ゲージ表示プログラム。 - 請求項1又は2に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージは、前記平面に対して縦方向に延びる縦方向部分と、前記平面に対して横方向に延びる横向部分とを備える、仮想ゲージ表示プログラム。 - 請求項1乃至3のいずれか一項に記載の仮想ゲージ表示プログラムにおいて、
前記記憶部は、互いに形状が異なる複数の仮想ゲージを記憶し、
前記仮想ゲージ表示プログラムは、前記表示部に、前記複数の仮想ゲージを選択可能に表示させる仮想ゲージ選択ステップを実行させる、仮想ゲージ表示プログラム。 - 請求項1乃至4のいずれか一項に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示プログラムは、前記表示部に、前記仮想ゲージを前記平面上に配置するための位置決めマークを表示させる位置決めマーク表示ステップを実行させる、仮想ゲージ表示プログラム。 - 請求項5に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示プログラムは、前記制御部に、前記撮影部の撮影方向から前記平面に延びる仮想線を生成させ、前記表示部に、前記平面と前記仮想線の交点に前記位置決めマークを表示させる、仮想ゲージ表示プログラム。 - 請求項6に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示プログラムは、前記制御部に、前記平面と前記仮想線の交点が前記前記表示部の画面中央領域に存在すること判断させ、前記交点が前記画面中央領域にある場合、前記表示部に、前記位置決めマークを前記画面中央領域に表示させる、仮想ゲージ表示プログラム。 - 請求項1乃至7のいずれか一項に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示プログラムは、前記実空間画像が変化すると、前記制御部に、前記仮想ゲージの位置及び/又は向きを補正させる、仮想ゲージ表示プログラム。 - 請求項1乃至8のいずれか一項に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示プログラムは、前記表示部に、前記仮想ゲージを前記平面に対して垂直な方向を中心として回転可能に表示させる回転表示ステップを実行させる、仮想ゲージ表示プログラム。 - 請求項1乃至9のいずれか一項に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示プログラムは、前記表示部に、前記入力部からの入力に応じて、前記仮想ゲージが前記平面上で移動した状態を表示させる、仮想ゲージ表示プログラム。 - 請求項1乃至10のいずれか一項に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示プログラムは、前記表示部に、目盛りを有する前記仮想ゲージを表示させる、仮想ゲージ表示プログラム。 - 請求項1乃至11のいずれか一項に記載の仮想ゲージ表示プログラムにおいて、
前記仮想ゲージ表示装置は、携帯機器である、仮想ゲージ表示プログラム。 - 拡張現実を用いて実空間画像と共に仮想ゲージを表示させる仮想ゲージ表示装置であって、
前記仮想ゲージ表示装置は、前記実空間画像を撮影する撮影部と、前記実空間画像及び前記仮想ゲージを表示する表示部と、前記仮想ゲージを記憶する記憶部と、前記仮想ゲージの配置に関する入力を受け入れる入力部と、前記撮影部、前記表示部、前記記憶部、及び前記入力部を制御する制御部とを備え、
前記撮影部は、前記実空間画像を撮影し、
前記制御部は、前記実空間画像から平面を検知し、
前記入力部からの入力に基づき、前記制御部は、前記仮想ゲージの前記平面上の座標を特定し、
前記仮想ゲージの前記平面上の座標に基づき、前記表示部は、前記実空間画像と共に、前記仮想ゲージを前記平面上に表示する、仮想ゲージ表示装置。 - 請求項13に記載の仮想ゲージ表示装置において、
前記制御部は、前記仮想ゲージの下端を前記平面上に配置するように前記表示部に表示する、仮想ゲージ表示装置。 - 請求項13乃至14のいずれか一項に記載の仮想ゲージ表示装置において、
前記制御部は、前記表示部に、前記仮想ゲージを前記平面上に配置するための位置決めマークを表示させる、仮想ゲージ表示装置。 - 請求項15に記載の仮想ゲージ表示装置において、
前記制御部は、前記撮影部の撮影方向から前記平面に延びる仮想線を生成し、前記表示部に、前記平面と前記仮想線の交点に前記位置決めマークを表示させる、仮想ゲージ表示装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020199562A JP7414197B2 (ja) | 2020-12-01 | 2020-12-01 | 仮想ゲージ表示プログラム及び装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020199562A JP7414197B2 (ja) | 2020-12-01 | 2020-12-01 | 仮想ゲージ表示プログラム及び装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022087569A JP2022087569A (ja) | 2022-06-13 |
JP7414197B2 true JP7414197B2 (ja) | 2024-01-16 |
Family
ID=81975788
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020199562A Active JP7414197B2 (ja) | 2020-12-01 | 2020-12-01 | 仮想ゲージ表示プログラム及び装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7414197B2 (ja) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006085375A (ja) | 2004-09-15 | 2006-03-30 | Canon Inc | 画像処理方法、画像処理装置 |
JP2008293357A (ja) | 2007-05-25 | 2008-12-04 | Canon Inc | 情報処理方法および情報処理装置 |
JP2009015730A (ja) | 2007-07-06 | 2009-01-22 | Location View:Kk | 立体メジャー表示機能付き画像表示システム及び立体メジャー表示機能付き画像表示のプログラム |
JP2018195233A (ja) | 2017-05-22 | 2018-12-06 | リコノミカル株式会社 | 金融情報表示装置、および、金融情報表示プログラム |
JP2019148899A (ja) | 2018-02-26 | 2019-09-05 | 京セラ株式会社 | 電子機器、制御方法およびプログラム |
JP2019198905A (ja) | 2018-05-14 | 2019-11-21 | 株式会社Ihiエアロスペース | 画像表示装置、画像表示方法および遠隔操縦システム |
JP2020132361A (ja) | 2019-02-20 | 2020-08-31 | 株式会社三井E&Sマシナリー | クレーンの運転支援システム及び運転支援方法 |
-
2020
- 2020-12-01 JP JP2020199562A patent/JP7414197B2/ja active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006085375A (ja) | 2004-09-15 | 2006-03-30 | Canon Inc | 画像処理方法、画像処理装置 |
JP2008293357A (ja) | 2007-05-25 | 2008-12-04 | Canon Inc | 情報処理方法および情報処理装置 |
JP2009015730A (ja) | 2007-07-06 | 2009-01-22 | Location View:Kk | 立体メジャー表示機能付き画像表示システム及び立体メジャー表示機能付き画像表示のプログラム |
JP2018195233A (ja) | 2017-05-22 | 2018-12-06 | リコノミカル株式会社 | 金融情報表示装置、および、金融情報表示プログラム |
JP2019148899A (ja) | 2018-02-26 | 2019-09-05 | 京セラ株式会社 | 電子機器、制御方法およびプログラム |
JP2019198905A (ja) | 2018-05-14 | 2019-11-21 | 株式会社Ihiエアロスペース | 画像表示装置、画像表示方法および遠隔操縦システム |
JP2020132361A (ja) | 2019-02-20 | 2020-08-31 | 株式会社三井E&Sマシナリー | クレーンの運転支援システム及び運転支援方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2022087569A (ja) | 2022-06-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111639626B (zh) | 三维点云数据处理方法、装置、计算机设备和存储介质 | |
US20230412902A1 (en) | Image processing device, image processing method, and recording medium | |
JP6326996B2 (ja) | 端末装置、情報処理システム、及び表示制御プログラム | |
US8850337B2 (en) | Information processing device, authoring method, and program | |
US7440691B2 (en) | 360-° image photographing apparatus | |
US20120218257A1 (en) | Mobile electronic device, virtual information display method and storage medium storing virtual information display program | |
JP2008275341A (ja) | 情報処理装置、情報処理方法 | |
CN108344401B (zh) | 定位方法、装置及计算机可读存储介质 | |
US20120297019A1 (en) | Method for controlling electronic devices and a hand-held device using the same | |
JP6160290B2 (ja) | 情報処理装置、判定方法および判定プログラム | |
JP6096634B2 (ja) | 仮想現実を用いた3次元地図表示システム | |
US20210174599A1 (en) | Mixed reality system, program, mobile terminal device, and method | |
KR101703013B1 (ko) | 3차원 스캐너 및 스캐닝 방법 | |
JP2005283221A (ja) | 測量データ処理システム、電子地図を格納する記憶媒体及び電子地図表示装置 | |
US11321864B1 (en) | User guided mode for measurement purposes | |
JP7414197B2 (ja) | 仮想ゲージ表示プログラム及び装置 | |
JPWO2019106847A1 (ja) | カメラ撮影画像を用いる位置情報システム、及びそれに用いるカメラ付き情報機器 | |
KR102458559B1 (ko) | 휴대용 단말기를 이용한 건설 분야 시공 관리 시스템 및 방법 | |
KR20200104918A (ko) | 가상 물체 표시 제어 장치, 가상 물체 표시 시스템, 가상 물체 표시 제어 방법, 및 가상 물체 표시 제어 프로그램 | |
JP2008040913A (ja) | 情報処理方法、情報処理装置 | |
KR20210149658A (ko) | 3d 투어 내에서 실제 거리 측정 방법 및 그를 위한 3d 투어 시스템 | |
JP2021047516A (ja) | 情報処理装置、座標変換システム、座標変換方法、及び座標変換プログラム | |
US20230379429A1 (en) | Image displaying method, information processing apparatus, and non-transitory computer-readable storage medium storing program | |
KR102358950B1 (ko) | 모바일 스캔 객체 모델 스케일링을 통한 증강현실 구현 장치 및 방법 | |
KR102563138B1 (ko) | 건설현장 시공 및 감리용 증강현실 지원 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20221116 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20221116 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221214 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20221216 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231120 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231128 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231212 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7414197 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |