JP2009229182A - 画像上地物計測方法および表示法並びに計測装置 - Google Patents

画像上地物計測方法および表示法並びに計測装置 Download PDF

Info

Publication number
JP2009229182A
JP2009229182A JP2008073481A JP2008073481A JP2009229182A JP 2009229182 A JP2009229182 A JP 2009229182A JP 2008073481 A JP2008073481 A JP 2008073481A JP 2008073481 A JP2008073481 A JP 2008073481A JP 2009229182 A JP2009229182 A JP 2009229182A
Authority
JP
Japan
Prior art keywords
image
feature
measurement
line
axis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008073481A
Other languages
English (en)
Other versions
JP5256464B2 (ja
Inventor
Samon Isoyama
左門 磯山
Byokai Sha
苗海 謝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ACREEG CORP
Original Assignee
ACREEG CORP
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ACREEG CORP filed Critical ACREEG CORP
Priority to JP2008073481A priority Critical patent/JP5256464B2/ja
Publication of JP2009229182A publication Critical patent/JP2009229182A/ja
Application granted granted Critical
Publication of JP5256464B2 publication Critical patent/JP5256464B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

【課題】画像上での地物の高い精度での計測を簡単に行うことを可能とする画像上地物計測方法を提供する。
【解決手段】カメラ6で撮影して得られる道路沿い画像4上で当該画像に取り込まれている地物を計測することについて、画像に取り込まれている地物の輪郭、例えば道路2の側線を用いて消失点を求めるとともに、消失点に基づいて計測対象の地物の所望計測部位における1画素あたりの体現長さを求め、それによる1画素あたりの体現長さに基づいて地物の高さ、幅、奥行きなどの計測をなすようにしている。
【選択図】図1

Description

本発明は、デジタル方式のカメラによる撮影で得られる画像を利用する技術に係り、特に画像に取り込まれている建造物や道路などの地物の幅、高さ、奥行きについて画像上で計測して地物データを得る技術に関する。
近年におけるデータ処理技術の発展は、カメラによる画像の様々な分野への利用を活発化させている。例えば特許文献1〜特許文献7に開示されるのがそのような例である。
特許文献1の「地図作成支援システム」は、地図の作成支援に画像を利用する場合で、車両道路を遊歩道などから区別して道路データや三次元地図を作成することを課題としている。そのために、カメラとGPSシステムなどの位置情報取得手段を搭載した計測車両で道路を走行しながら画像を一定の移動距離ごとに取得し、それらの画像を位置情報取得手段による位置情報と関連付けて得られるデータを地図データの作成に利用するようにしている。
特許文献2の「三次元地図データベースの作成方法」は、地物の高さ情報を有する三次元地図データベースの作成に画像を利用する。そのために特許文献2の「三次元地図データベースの作成方法」では、特許文献1の計測車両と同様な移動計測車を用いる。すなわち二次元地図上の特定の地域内に存在する各地物の高さ情報取得対象の隅角部の集合を目標端点群として予め決めておき、そして移動計測車で2箇所以上の測定点から各目標端点を撮像するとともに、撮像画像中に表れる目標端点を撮像時の各測定点の三次元位置座標などに基づいて算出し、得られた三次元位置座標をその目標端点の二次元地図データベース上における二次元位置座標と対応付ける関係で二次元地図データベースに追加することで三次元地図データベースを作成するようにしている。
特許文献3の「写真測量による3次元計測方法」は、画像を測量に利用する場合で、写真測量における計測点の対応付けをより高精度に行うことができるようにする。そのために特許文献3の「写真測量による3次元計測方法」では、広角画像と望遠画像を用い、望遠画像の被写体像を同じ撮影位置から撮影された広角画像中の被写体像に一致するように両画像を合成して表示した合成写真画像を撮影位置ごとに作成するとともに、合成写真画像の望遠画像の撮影領域内に共通して写っている基準点を指定し、さらに基準点の複数の合成写真画像中の座標値に基づいて撮影位置関係を演算し、当該撮影位置関係に基づいて写真画像中の任意の計測点の座標値からその計測点の被写体空間中の3次元位置情報を計測するようにしている。
特許文献4の「消失点決定方法」は、画像上で建造物の高さを推定して3次元の地図モデルを作成したり、画像によりロボットの通行可能な通路を特定したりするのに必要な画像上の消失点の決定方法を提案している。その消失点決定方法では、歩道を撮影した画像データから線分を抽出し、さらにその線分の中から消失点に有用なものを選択し、消失点と線分の両端で作られる三角形の面積に基づいて定まる評価値を用いて消失点の位置を特定する。
特許文献5の「カメラ画像−実空間座標対応付けマップ生成方法」は、画像を監視に利用する場合で、監視画像中の人などの位置をリアルタイムで求めるのに用いるカメラ画像−実空間座標対応付けマップの生成方法を提案している。そのカメラ画像−実空間座標対応付けマップ生成方法では、対応付けを行う実空間の床面に正方形パターンを配置し、正方形パターンの存在する位置の実空間座標を決定する。そして正方形パターンを含む実空間を撮影して得られる画像中の正方形パターンの各頂点の画像座標を検出するとともに、その頂点画像座標を通る2直線の消失点の位置を計算し、それで計算された消失点の数に基づいて撮影画像の全画素について実空間座標が記述された対応マップ画像を生成する。
特開2007−206099号公報 特開2000−74669号公報 特開2006−113001号公報 特開2007−57386号公報 特開2005−275500号公報
カメラによる画像は、上述の例の他にもまだ多くの利用形態が可能である。例えば、道路とそれに沿った地物を撮影した画像を道路沿いの不動産の課税評価用の資料として利用するのもそのひとつである。すなわち不動産の課税評価では、評価対象不動産の周囲の地物状況が大きく影響することから、そうした地物状況について説得力の高い資料を得られるようにすることが大切になるが、そのような資料として撮影画像、特にカメラの光軸方向に道路が延びている状態で撮影することで得られる道路沿い画像を利用するということである。
ただ、道路沿い画像を不動産の課税評価用の資料として用いるについては、道路に沿って一定間隔で撮影した一連の道路沿い画像を整えることが求められ、また道路沿い画像に含まれている建造物や道路などの地物の幅、高さ、奥行き等を含む地物データを道路沿い画像に重ねて表示できるようにすることも重要な要素として求められる。
こうした要求のうち、一連の道路沿い画像についての要求には、上記の特許文献1や特許文献2に記載されるようなカメラと位置情報取得手段を搭載した計測車両を走行させながら一定間隔で道路沿い画像を取得することで応えることができる。しかし、地物データについての要求には、上述の従来の技術では十分に応えることができない。
地物データを画像に表示するには、画像上で地物を計測する必要がある。画像上での地物の計測は、例えば上記の特許文献2や特許文献3に開示の例のように、視差を有した複数の画像を用いる手法で行うことが可能である。しかし、複数の画像を用いる手法では、ひとつの被写体空間についての地物を計測するのに複数の画像を処理する必要があることから、データ処理の負担が大きくなり、また同じ被写体空間について2箇所以上から撮像する必要があることから、撮影についての負担も大きくなり、コストパフォーマンスの問題を招く。また特許文献4は、画像上での地物の計測に画像上の消失点が有効であることについては触れているものの、その具体的手段の開示がなく、地物データについての要求に応えることができない。
以上のようなことは、例えば道路沿い画像を利用して道路沿いや道路横断の電線を含むケーブル(配電ケーブルや通信ケーブルであり、これも地物の一種である)の地上高を計測してケーブル地上高データを収集するといった画像の利用形態の場合についてもいえる。すなわち車両を走行させながら得る道路沿い画像を利用してケーブル地上高データを収集する方法は、現場においてケーブル地上高を実測する方法に比べ大幅に作業負担を軽減させることが期待でき、有力な方法といえるが、それを実用的なものとするには、画像上でのケーブル地上高の高い精度での計測を簡単に行えるようにすることが望まれる。
本発明は、以上のような事情を背景になされたものであり、その課題は、画像上での地物の高い精度での計測を簡単に行うことを可能とする画像上地物計測方法及び表示法並びに計測装置の提供にある。
本発明では、上記課題を解決するために、地物を含む画像上で計測対象とする地物における計測部位の画素数からその計測部位の長さを求めることで計測をなし、これにより単画像計測(ひとつの被写体空間についての地物計測を1枚の画像で行う計測)を可能とし、これにより画像上での地物計測を簡単に行えるようにすることを基本としている。ただこの場合、1つの画素が体現している長さは、計測部位の被写体空間におけるカメラに対する奥行き位置、つまり計測部位の被写体空間でのカメラからの距離で異なる。このため1画素あたりの体現長さを計測部位ごとに求める必要があることになる。これについて、本発明では、画像上の消失点と計測部位の位置関係が1画素あたりの体現長さに相関するということを利用して計測部位における1画素あたりの体現長さを求めるようにしている。この場合、画像上の消失点は、画像に取り込まれている地物の輪郭、より具体的には被写体空間にあって画像面に対し直交している地物の輪郭を用いて求めることで十分な精度が得られ、例えば表示装置に表示した画像上で描画機能により地物の輪郭をなぞるなどの簡単な操作を行うことで求めることができる。また消失点と計測部位の位置関係から1画素あたりの体現長さを求める処理も比較的簡単なもので済む。このため画像上での地物の高い精度での地物データの計測を簡単に行うことが可能となる。
以上のような考え方に基づく本発明では、カメラによる画像上で当該画像に取り込まれている地物について計測する画像上地物計測方法において、前記画像に取り込まれている地物の輪郭を用いて消失点を求めるとともに、前記消失点に基づいて計測対象の地物の所望計測部位における1画素あたりの体現長さを求め、それによる1画素あたりの体現長さに基づいて地物データの計測をなすようにしたことを特徴としている。
また本発明では、上記のような画像上地物計測方法について、画像が道路沿い画像、つまりカメラの光軸方向に延びている状態で道路を取り込んで撮影される画像である場合、消失点は、道路の側線を用いて求めるようにする。このようにすることで、道路沿い画像での高い精度の地物計測を可能とする消失点をより簡単に求めることができる。
こうしたことから本発明では、上記のような画像上地物計測方法において、前記画像は、前記カメラの光軸方向に延びている状態で道路を取り込んで撮影される道路沿い画像であり、前記消失点は、前記道路の側線を用いて求めるようにされていることを特徴としている。
上記のような画像上地物計測方法については、1画素あたりの体現長さの絶対値を求める必要がある。1画素あたりの体現長さの絶対値は、画像の光学的な解析などで求めることも可能である。しかし画像解析法は、精度に問題を残す。また画像に取り込まれている地物について予め判っている長さを利用して1画素あたりの体現長さの絶対値を求めることも可能である。しかし長さが既知の地物を画像に取り込むことは必ずしも容易でない。そこで、長さが既知の線状体を画像に取り込ませ、その線状体の像を利用して1画素あたりの体現長さの絶対値を求めるようにするのが適切となる。
こうしたことから本発明では、上記のような画像上地物計測方法において、長さが既知の線状体を前記道路沿い画像に取り込ませることで、前記線状体の像として、前記道路沿い画像上での絶対長さが既知となる教師線を前記道路沿い画像中に生成させるようにし、そして計測対象の地物の所望計測部位に対して前記道路沿い画像上で計測線を指定し、前記消失点に対する前記計測線と前記教師線の相対的位置関係の下で前記計測線を前記教師線とそれぞれの画素数について比較することにより地物データの計測をなすようにしたことを特徴としている。
このように教師線を用いるについては、地物の幅、高さ、奥行きそれぞれを必要に応じて計測できるようにするために、教師線を被写体空間における3次元座標の各座標軸について得るようにするのが好ましい。
こうしたことから本発明では、上記のような画像上地物計測方法において、前記教師線は、前記道路沿い画像の被写体空間における3次元座標の各座標軸について生成させるようにしたことを特徴としている。
地物データとして、地物の幅、高さ、奥行きそれぞれを計測しようとする場合、それぞれの計測では、消失点と計測部位の位置関係の1画素あたりの体現長さに対する相関が異なる。
こうしたことから本発明では、上記のような画像上地物計測方法において、前記被写体空間の3次元座標について横方向をX軸、奥行き方向をY軸、縦方向をZ軸とし、また前記道路沿い画像に設定する画像上2次元座標について横方向をx軸、縦方向をy軸とするとして、前記計測線のX軸成分については、前記計測線の端点の前記y軸上での位置における1画素あたりの体現長さを前記X軸方向の教師線に基づいて求めて計測をなし、前記計測線のZ軸成分については、前記計測線の端点の前記y軸上での位置における1画素あたりの体現長さを前記Z軸方向の教師線に基づいて求めて計測をなし、前記計測線のY軸成分については、任意に仮想される投影中心からの前記道路沿い画像上での投影により、前記Y軸方向の教師線のy軸成分と前記計測線のy軸成分それぞれを前記画像上2次元座標におけるx軸に平行な線分上に投影して得られる教師線投影像と計測線投影像をそれぞれの画素数について比較することで地物データの計測をなすようにされていることを特徴としている。
消失点と計測部位の位置関係が1画素あたりの体現長さに相関することを利用した計測では、1画素あたりの体現長さの精度がカメラからの距離に応じて異なり、カメラに近過ぎたり、カメラから遠過ぎたりすると精度が不十分になる可能性がある。
こうしたことから本発明では、上記のような画像上地物計測方法において、前記道路沿い画像に計測領域を設定し、その計測領域内についてだけ計測を行えるようにしたことを特徴としている。
上記のような画像上地物計測方法で得られる地物データの利用分野としては、上述のように不動産の課税評価用の資料とする道路沿い画像に表示して用いるのが有力なひとつとしてある。この場合、上述のように道路に沿って一定間隔で撮影した一連の道路沿い画像を整える必要がある。
こうしたことから本発明では、上記のような画像上地物計測方法において、前記道路沿い画像は、カメラが搭載された車両を走行させながら撮影して得られる画像であることを特徴とし、また上記のような画像上地物計測方法で得られた地物データを前記道路沿い画像上に表示して画像データを形成するものとしている。
本発明は、前記地物データは、地物の長さ、高さ、奥行き、傾き、距離、面積の少なくともいずれか1つを含むものとした請求項1〜8のいずれかに記載の画像上地物計測方法を開示する。
更に本発明は、カメラにて撮像された地物を含む表示画面に表示する表示手段と、
この表示画像上で指定された地物の輪郭線をデータとして取り込み、この輪郭線データからその消失点を求める第1の処理手段と、
この消失点データに基づいて上記表示画像上の計測対象の地物の所望計測部位における1画素当りの体現長さを求める第2の処理手段と、
この体現長さに基づいて計測部位の長さ、高さ、奥行き、傾き、距離、面積の少なくともいずれか1つを含む地物データを求める第3の処理手段と、
を備える画像上地物計測装置を開示する。
以上のような本発明によれば、画像上での地物の高い精度での計測を簡単に行えるようになり、例えば不動産の課税評価用の資料として用いることのできる道路沿い画像を低コストで得ることが可能となり、また画像を利用したケーブル地上高データの収集が可能となる。
以下、本発明を実施するための形態について説明する。図1に、一実施形態による画像上地物計測方法の実施に用いる地物データ取得システム1の構成を示す。本実施形態における地物データ取得システム1は、道路2で撮影車両3を走行させながら画像として道路沿い画像4を取得し、その道路沿い画像4における地物について計測を行って地物データを得る場合であり、撮影車両3と画像上地物計測システム5からなる。
撮影車両3は、例えば幅員が4m以下であるような狭い道路が錯綜する市街地でも走行可能な車両にデジタル方式のカメラ6と撮影管理システム7を搭載して構成されている。
カメラ6は、スチールカメラまたはビデオカメラであり、通常はスチールカメラが用いられ、前方撮影用カメラ6fと後方撮影用カメラ6rとして2台が搭載される。前方撮影用カメラ6fは、撮影車両3の走行方向前方を走行方向に光軸が沿った状態で撮影を行い、後方撮影用カメラ6rは、撮影車両3の走行方向後方を走行方向に光軸が沿った状態で撮影を行う。これら前方撮影用カメラ6fや後方撮影用カメラ6rによる撮影で得られる道路沿い画像4は、光軸方向に延びている状態で道路を取り込んだ画像となる。このように走行方向前方と後方のそれぞれについて撮影できるようにするのは、撮影車両3の走行方向によっては前方撮影用カメラ6fが逆光になる場合があることから、そのような場合に対応できるようにするためである。
撮影管理システム7は、測位システム8、撮影制御システム9、および画像データ管理システム10の各サブシステムを含んでいる。測位システム8は、撮影車両3の現在位置と走行方向、より具体的にはカメラ6の光軸方向についての情報である位置方位情報を例えば走行距離1mごとにといった間隔で取得するのに機能する。そのために測位システム8は、GPS(全地球測位システム)と距離/慣性計測システムを組み合わせて構成される。GPSは、撮影車両3の前後に設けた2つのGPSアンテナ11により衛星からの信号を受信することで位置方位情報を取得する。一方、距離/慣性計測システムは、撮影車両3の走行方向や車両の水平面に対する傾きをジャイロにより検出する慣性計測器と撮影車両3の走行距離を検出する距離計測器からなり、これらにより位置方位情報を取得する。このようにGPSと距離/慣性計測システムを組み合わせて測位システム8を構成することにより、GPS衛星からの信号を受信できない環境においても位置方位情報を安定的に取得することができる。
撮影制御システム9は、一定距離間隔で道路沿い画像4を取得できるような制御としてカメラ6による撮影を制御する。具体的には、撮影車両3の走行距離をカウントし、例えば5mといった一定の走行距離ごとに撮影指令を出力してカメラ6に撮影を行わせる。こうした撮影により、撮影車両3が走行する道路に沿った一定距離間隔による一連の道路沿い画像を取得することができる。
画像データ管理システム10は、ワークステーションレベルのデータ処理装置を用いて構成され、カメラ6による撮影で取得された道路沿い画像4のデータを管理する。その管理は、道路沿い画像4をその撮影時の位置方位情報と関連させるようにしてなされる。
ここで、道路沿い画像4には、後述のような画像上地物計測処理に必要な教師線LTを生成させるようにする。教師線LTは、道路沿い画像4中の道路2の側線(これは後述のように消失点を求めるための地物の輪郭として用いられる)に沿う方向を1つの座標軸とした道路沿い画像4の被写体空間における3次元座標(X、Y、Z座標)の各座標軸について生成させる。つまりX軸方向の教師線LTx、Y軸方向の教師線LTy、Z軸方向の教師線LTzとして生成させる。これらの教師線LTx、LTy、LTzは、長さが既知の線状体(例えば測量用のポールなど)を取り込ませることで、その線状体の像として生成させる。このような教師線LTは、原理的にいえば、道路沿い画像を同一の撮影条件で撮影する範囲については、その撮影条件で最初に撮影する道路沿い画像にだけ生成させることで足りる。ただ実際的には、例えば1日の撮影作業の最初に撮影する道路沿い画像ごとに教師線用の線状体を写し込ませて教師線を生成させるようにするのが好ましい。これは、撮影車両3へのカメラ6のセット状態が撮影条件に影響し、そのセット状態が1日の撮影作業ごとに微妙に異なる可能性があるからである。なお、道路が傾斜していると、それにより水平面に対しカメラも傾くことになるが、そのカメラの傾きは位置方位情報を用いて検出され、画像上地物計測処理に際して傾きに応じた補正がなされることになる。
画像上地物計測システム5は、データ処理装置12にコンピュータプログラムとして構成される画像上地物計測手段13を搭載して構成される。画像上地物計測手段13は、画像データ管理システム10から取り込んだ道路沿い画像4のデータや道路沿い画像4に地物データを記録した後述のような地物データ付き道路沿い画像を管理する画像データ管理部14、道路沿い画像4に取り込まれている地物について計測して地物データを取得する計測部15、および計測部15が取得した地物データを道路沿い画像4に記録して地物データ付き道路沿い画像を生成させる地物データ記録部16を含んでいる。
以下では画像上地物計測システム5でなされる画像上地物計測処理の例について説明する。本例における画像上地物計測処理は、道路沿い画像4における道路2の側線を地物の輪郭として用いて消失点を求める場合であり、図2にその流れを示すように、ステップS1〜ステップS8の各処理過程を含む。
まずステップS1で処理対象画像の表示処理がなされる。処理対象画像の表示処理は、計測対象の道路沿い画像をデータ処理装置12の表示画面に表示する処理で、ユーザによる指定を受けて行うか、あるいは一連の道路沿い画像を順次的に表示するようにして行われる。
ステップS2では、道路側線の指定を行う。具体的には、ステップS1で表示した道路沿い画像について道路の側線をユーザが指定する。その指定は、例えば図3に示すようにして行う。具体的には、表示画面に表示されている道路沿い画像4における道路2の側線を左右で対応する直線部分のそれぞれについて描画機能によりなぞるようにして2本の指定線LI、LIを描線することで行う。
ステップS3では、消失点の決定処理がなされる。道路2の側線を用いて消失点を求める場合、消失点は2本の指定線LI、LIの交点Vとなる。したがって消失点の特定は、交点Vの道路沿い画像4上での位置を求めることで行う。具体的には、道路沿い画像4の横方向(道路沿い画像4の被写体空間における横方向に対応)をx軸とし、縦方向をy軸とする画像上2次元座標を道路沿い画像4に設定し、その画像上2次元座標における座標値(xv,yv)として交点Vの道路沿い画像4上での位置を求め、それを消失点とする。なお、図3では、x軸がX軸方向の教師線LTxと平行になるように画像上2次元座標を設定する場合としてある。
ステップS4では、計測部位に対する計測線の指定処理がなされる。この処理は、図3に示す例のように、描画機能により計測部位に計測線Sを描線することで行うか、または計測部位の両端に端点A、Bを指定することで行う。
ステップS5では、ステップS4で指定の計測線の計測処理がなされる。この計測処理は、図4に示す例のような道路沿い画像の被写体空間における3次元座標を前提にして行う。ここでは3次元座標について横方向をX軸、奥行き方向をY軸、縦方向をZ軸とする。このような3次元座標を前提にする場合、計測線は、それが道路沿い画像上でとる姿勢に応じて、X、Y、Zの各軸方向の成分の1つだけの場合と2つまたは3つの組合せでなる場合がある。組合せでなる場合は、それぞれの成分から三平方の定理で計測線の長さを求める。
図5に示すのは、X軸成分とY軸成分を含む計測線SのX軸成分CXの算出原理である。X軸方向の教師線LTxの各端点の画像上2次元座標での座標値を(xta,yta)、(xtb,ytb)とし、計測線Sの端点A、Bそれぞれの画像上2次元座標での座標値を(xa,ya)(xb,yb)とする。なお、図5の計測線Sは必ずしも図3の計測線Sと対応していない。
計測線Sの端点A、Bそれぞれの消失点垂線からの距離をSaとSbとすると、これらSa、Sbは、教師線LTxの実際の長さTLに基づいて求めることができ、計測線SのX軸成分CXは、CX=Sa−Sbとして求めることができる。ここで、消失点垂線とは、消失点Vからの垂線であり、図5の場合、x軸が教師線LTxと平行であることから、x軸に直交する線分となっている。
Saを教師線LTxの実際の長さTLから求めるには、座標値yaの位置に仮想される教師線LTx‐aを用いる。具体的には、教師線LTxの画素数がN、教師線LTx‐aの画素数がNa、そしてSaの画素数がnaであるとすると、Saは、Sa=〔(TL/N)・(TL/Na)〕・naとして求めることができる。同様にしてSbも求めることができる。以上がCXの算出原理で、実際には下記の式でCXを求めるようにしている。
CX=|TL・{(xa−xv)・(yb−ya)/(ya−yv)+xa−xb}・(2・yv−yta−ytb)/{2・(xta−xtb)・(yv−yb)}|
図6に示すのは、計測線SのY軸成分CYの算出原理である。CYは、投影図法により求める。すなわち、任意に仮想される投影中心Pからの道路沿い画像上での投影により、Y軸方向の教師線LTyのy軸成分LTy-vと計測線Sのy軸成分svそれぞれをx軸に平行な線分上に投影して教師線投影像LTy-hと計測線投影像vs-hを得る。この場合、教師線投影像LTy-hと計測線投影像vs-hは、それぞれにおける1画素あたりの体現長さが同じになっている。したがって教師線投影像LTy-hと計測線投影像vs-hをそれぞれの画素数について単純に比較することでCYの長さを求めることができる。具体的には、教師線LTyの実際の長さをTLとして、CY=TL・vs-h/LTy-hとしてCYの長さを求めることができる。以上がCYの算出原理で、実際には下記の式でCYを求めるようにしている。
CY=TL・|{(yta−yv)・(ytb−yv)・(yb−ya)}/{(ya−yv)・(yb−yv)・(ytb−yta)}|
以上のようにしてCXとCYが求まれば、計測線Sの実際の長さSLは、SL=(CX+CY1/2として求めることができる。
図7に示すのは、計測線SのZ軸成分CZの算出原理である。図7では計測線SがZ軸方向の教師線LTzと平行な場合としてある。したがって計測線SはX軸成分だけからなり、CZ=Sとなる。CZは、上述のCXの算出と同様な原理で教師線LTzに基づいて長さを求めることができる。具体的には、計測線Sの下側の端点の座標値ybの位置に仮想される教師線LTz‐sを用い、教師線LTzの画素数がN、教師線LTz‐sの画素数がNa、そしてCZ(=S)の画素数がnaであるとすると、CZは、CZ=〔(TL/N)・(TL/Na)〕・naとして求めることができる。
以上がCZの算出原理で、実際には下記の式でCZを求めるようにしている。ただし式中の「ChiHei_Y」は、計測線Sの端点Bを含む地平面の画像上2次元座標におけるy軸の座標値である。この「ChiHei_Y」は、計測線Sが地平面にある場合は端点Bのy軸座標値と同じになる。ただし、計測線Sの端点Bは必ずしも地平面になくともよい。
CZ=|TL・{(yb−ya)・(yv−yta) / { (yta−ytb)・(yv−ChiHei_Y)}|
以上のような消失点と計測部位の位置関係が1画素あたりの体現長さに相関することを利用した計測では、1画素あたりの体現長さの精度がカメラからの距離に応じて異なり、カメラに近過ぎたり、カメラから遠過ぎたりすると精度が不十分になる可能性がある。そこで、図8に示すように、道路沿い画像4に計測領域17を適切に設定し、その計測領域17内についてだけ計測を行えるようにするのが好ましい。この場合、教師線LTxと教師線LTzが計測領域17の外縁となるのが適切である。したがって教師線LTを生成させる画像は、教師線LTxと教師線LTzが計測領域17の外縁となるような条件で撮影された画像を計測対象とするのが好ましい。
図2に戻って、ステップS6では、必要な計測部位の全てについて計測が終了したかを判定する。この判定が否定的な場合にはステップS4に戻って処理を繰り返し、肯定的になった場合にはステップS7に進む。
ステップS7では、計測を終えた道路沿い画像に地物データを記録して地物データ付き画像データを生成する。図9に、地物データ付き画像データの例を示す。図9の(a)の例の地物データ付き画像データ18は、道路2の幅員データと道路沿いの建造物19の高さデータが記録されている場合で、図9の(b)の例の地物データ付き画像データ20は、電線などの道路横断ケーブル21の地上高データが記録されている場合である。
ステップS8では、必要な画像の全てについて計測が終了したかを判定する。この判定が否定的な場合にはステップS1に戻って処理を繰り返し、肯定的になった場合には処理終了となる。
また以上の実施形態は、道路の側線を用いて消失点を求める場合である。これは、例えば不動産の課税評価用の資料あるいはケーブル地上高データ収集用などに地物データ付き画像を利用する場合、画像は、カメラの光軸方向に延びている状態で道路を取り込んで撮影される道路沿い画像となることが通常であること、そしてそのような道路沿い画像では道路の側線が画像面に対して直交する状態になるのが通常であることから、道路の側線を用いて消失点を求めるのが合理的であること、という理由による。つまり消失点を道路の側線で求める方法は、道路沿い画像について特に有効であるということであって、必要に応じて道路以外の地物の輪郭(例えば道路沿いの構造物と道路の境界線など)であっても被写体空間にあって画像面に対し直交する地物の輪郭であればそれを用いて消失点を求めることは可能である。
また計測地物データ例として幅や高さの例を示したが、それ以外に、地物に関しての、ある基準点からの距離、傾き、面積等を含ませることもできる。これらは、広義には画像の地物の、いわゆる幾何学的抽出データとして位置づけることができ、本発明の適用例として加えることができる。
以上、本発明を実施するための形態について説明したが、これは代表的な例に過ぎず、本発明はその趣旨を逸脱することのない範囲で様々な形態で実施することができる。例えば以上の実施形態は、撮影車両を走行させながら取得される道路沿い画像についての場合であったが、本発明はこれに限られず、カメラによる画像一般に適用することが可能である。
一実施形態による画像上地物計測方法の実施に用いる地物データ取得システムの構成を示す図である。 画像上地物計測処理の流れを示す図である。 道路側線や計測線の指定について説明する図である。 被写体空間における3次元座標の例を示す図である。 計測線のX軸成分の算出についての原理を説明する図である。 計測線のY軸成分の算出についての原理を説明する図である。 計測線のZ軸成分の算出についての原理を説明する図である。 計測領域の例を示す図である。 地物データ付き画像データの例を示す図である。
符号の説明
1 地物データ取得システム
2 道路
3 撮影車両
4 道路沿い画像
5 画像上地物計測システム
6 カメラ
7 撮影管理システム
8 測位システム
9 撮影制御システム
10 画像データ管理システム
11 GPSアンテナ
12 データ処理装置
13 画像上地物計測手段
14 画像データ管理部
15 計測部
16 地物データ記録部
17 計測領域
18 地物データ付画像データ
19 建造物
20 地物データ付画像データ
21 道路横断ケーブル
LT 教師線
S 計測線
V 消失点

Claims (10)

  1. カメラによる地物を含む画像上で当該画像に含まれている地物について計測する画像上地物計測方法において、
    前記画像に含まれている地物の輪郭を用いて消失点を求めるとともに、前記消失点に基づいて計測対象の地物の所望計測部位における1画素あたりの体現長さを求め、それによる1画素あたりの体現長さに基づいて地物データの計測をなすようにしたことを特徴とする画像上地物計測方法。
  2. 前記画像は、前記カメラの光軸方向に延びている状態で道路を取り込んで撮影される道路沿い画像であり、前記消失点は、前記道路の側線を用いて求めるようにされていることを特徴とする請求項1に記載の画像上地物計測方法。
  3. 長さが既知の線状体を前記道路沿い画像に取り込ませることで、前記線状体の像として、前記道路沿い画像上での絶対長さが既知となる教師線を前記道路沿い画像中に生成させるようにし、そして計測対象の地物の所望計測部位に対して前記道路沿い画像上で計測線を指定し、前記消失点に対する前記計測線と前記教師線の相対的位置関係の下で前記計測線を前記教師線とそれぞれの画素数について比較することにより地物データの計測をなすようにしたことを特徴とする請求項2に記載の画像上地物計測方法。
  4. 前記教師線は、前記道路沿い画像の被写体空間における3次元座標の各座標軸について生成させるようにしたことを特徴とする請求項2または請求項3に記載の画像上地物計測方法。
  5. 前記被写体空間の3次元座標について横方向をX軸、奥行き方向をY軸、縦方向をZ軸とし、また前記道路沿い画像に設定する画像上2次元座標について横方向をx軸、縦方向をy軸とするとして、
    前記計測線のX軸成分については、前記計測線の端点の前記y軸上での位置における1画素あたりの体現長さを前記X軸方向の教師線に基づいて求めて計測をなし、
    前記計測線のZ軸成分については、前記計測線の端点の前記y軸上での位置における1画素あたりの体現長さを前記Z軸方向の教師線に基づいて求めて計測をなし、
    前記計測線のY軸成分については、任意に仮想される投影中心からの前記道路沿い画像上での投影により、前記Y軸方向の教師線のy軸成分と前記計測線のy軸成分それぞれを前記画像上2次元座標におけるx軸に平行な線分上に投影して得られる教師線投影像と計測線投影像をそれぞれの画素数について比較することで地物データの計測をなすようにされていることを特徴とする請求項4に記載の画像上地物計測方法。
  6. 前記道路沿い画像に計測領域を設定し、その計測領域内についてだけ地物データの計測を行えるようにしたことを特徴とする請求項1〜請求項5のいずれか1項に記載の画像上地物計測方法。
  7. 前記道路沿い画像は、カメラが搭載された車両を走行させながら撮影して得られる画像であることを特徴とする請求項2〜請求項6のいずれか1項に記載の画像上地物計測方法。
  8. 請求項2〜請求項7のいずれか1項に記載の画像上地物計測方法で得られた地物データを前記地物を含む画像上に表示してなる表示方法。
  9. 上記地物データは、地物の長さ、高さ、奥行き、傾き、距離、面積の少なくともいずれか1つを含むものとした請求項1〜8のいずれかに記載の画像上地物計測方法。
  10. カメラにて撮像された地物を含む表示画面に表示する表示手段と、
    この表示画像上で指定された地物の輪郭線をデータとして取り込み、この輪郭線データからその消失点を求める第1の処理手段と、
    この消失点データに基づいて上記表示画像上の計測対象の地物の所望計測部位における1画素当りの体現長さを求める第2の処理手段と、
    この体現長さに基づいて計測部位の長さ、高さ、奥行き、傾き、距離、面積の少なくともいずれか1つを含む地物データを求める第3の処理手段と、
    を備える画像上地物計測装置。
JP2008073481A 2008-03-21 2008-03-21 画像上地物計測方法および表示法並びに計測装置 Expired - Fee Related JP5256464B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008073481A JP5256464B2 (ja) 2008-03-21 2008-03-21 画像上地物計測方法および表示法並びに計測装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008073481A JP5256464B2 (ja) 2008-03-21 2008-03-21 画像上地物計測方法および表示法並びに計測装置

Publications (2)

Publication Number Publication Date
JP2009229182A true JP2009229182A (ja) 2009-10-08
JP5256464B2 JP5256464B2 (ja) 2013-08-07

Family

ID=41244763

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008073481A Expired - Fee Related JP5256464B2 (ja) 2008-03-21 2008-03-21 画像上地物計測方法および表示法並びに計測装置

Country Status (1)

Country Link
JP (1) JP5256464B2 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012225799A (ja) * 2011-04-20 2012-11-15 Acreeg Corp 画像上地物計測用の基準尺
WO2018185807A1 (ja) 2017-04-03 2018-10-11 富士通株式会社 距離情報処理装置、距離情報処理方法および距離情報処理プログラム
CN108700415A (zh) * 2016-02-19 2018-10-23 日本先锋公司 地物数据结构、控制装置、存储装置、控制方法、程序以及存储介质
WO2020166424A1 (ja) * 2019-02-15 2020-08-20 日本電信電話株式会社 位置座標導出装置、位置座標導出方法、位置座標導出プログラム及びシステム
CN112465947A (zh) * 2020-11-18 2021-03-09 李刚 影像的虚拟空间建立方法及***
KR20210149658A (ko) * 2019-11-19 2021-12-09 주식회사 쓰리아이 3d 투어 내에서 실제 거리 측정 방법 및 그를 위한 3d 투어 시스템

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09145362A (ja) * 1995-11-29 1997-06-06 Ikegami Tsushinki Co Ltd ステレオ画像による物体の高さ測定方法
JP2000111320A (ja) * 1998-10-05 2000-04-18 Monorisu:Kk 立体形状情報取得装置
JP2007205937A (ja) * 2006-02-02 2007-08-16 Coo-Net Inc 画像寸法測定方法
JP2007257301A (ja) * 2006-03-23 2007-10-04 Honda Motor Co Ltd 車両用標識認識装置
JP2007264712A (ja) * 2006-03-27 2007-10-11 Fuji Heavy Ind Ltd 車線検出装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09145362A (ja) * 1995-11-29 1997-06-06 Ikegami Tsushinki Co Ltd ステレオ画像による物体の高さ測定方法
JP2000111320A (ja) * 1998-10-05 2000-04-18 Monorisu:Kk 立体形状情報取得装置
JP2007205937A (ja) * 2006-02-02 2007-08-16 Coo-Net Inc 画像寸法測定方法
JP2007257301A (ja) * 2006-03-23 2007-10-04 Honda Motor Co Ltd 車両用標識認識装置
JP2007264712A (ja) * 2006-03-27 2007-10-11 Fuji Heavy Ind Ltd 車線検出装置

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012225799A (ja) * 2011-04-20 2012-11-15 Acreeg Corp 画像上地物計測用の基準尺
CN108700415A (zh) * 2016-02-19 2018-10-23 日本先锋公司 地物数据结构、控制装置、存储装置、控制方法、程序以及存储介质
JPWO2017141414A1 (ja) * 2016-02-19 2018-11-29 パイオニア株式会社 地物データ構造、制御装置、記憶装置、制御方法、プログラム及び記憶媒体
US11971487B2 (en) 2016-02-19 2024-04-30 Pioneer Corporation Feature data structure, control device, storage device, control method, program and storage medium
US11195296B2 (en) 2017-04-03 2021-12-07 Fujitsu Limited Information processing apparatus, method of processing distance information, and recording medium recording distance information processing program
WO2018185807A1 (ja) 2017-04-03 2018-10-11 富士通株式会社 距離情報処理装置、距離情報処理方法および距離情報処理プログラム
JP7159900B2 (ja) 2019-02-15 2022-10-25 日本電信電話株式会社 位置座標導出装置、位置座標導出方法、位置座標導出プログラム及びシステム
JP2020134220A (ja) * 2019-02-15 2020-08-31 日本電信電話株式会社 位置座標導出装置、位置座標導出方法、位置座標導出プログラム及びシステム
WO2020166424A1 (ja) * 2019-02-15 2020-08-20 日本電信電話株式会社 位置座標導出装置、位置座標導出方法、位置座標導出プログラム及びシステム
KR20210149658A (ko) * 2019-11-19 2021-12-09 주식회사 쓰리아이 3d 투어 내에서 실제 거리 측정 방법 및 그를 위한 3d 투어 시스템
KR102500488B1 (ko) 2019-11-19 2023-02-17 주식회사 쓰리아이 3d 투어 내에서 실제 거리 측정 방법 및 그를 위한 3d 투어 시스템
CN112465947A (zh) * 2020-11-18 2021-03-09 李刚 影像的虚拟空间建立方法及***
CN112465947B (zh) * 2020-11-18 2024-04-23 李刚 影像的虚拟空间建立方法及***

Also Published As

Publication number Publication date
JP5256464B2 (ja) 2013-08-07

Similar Documents

Publication Publication Date Title
US11477374B2 (en) Three dimensional image capture system for imaging building facades using a digital camera, a near-infrared camera, and laser range finder
JP5319741B2 (ja) 俯瞰画像生成装置、地図データ生成システム、俯瞰画像生成装置の俯瞰画像生成方法および俯瞰画像生成プログラム
CN102338639B (zh) 信息处理设备和信息处理方法
EP2208021B1 (en) Method of and arrangement for mapping range sensor data on image sensor data
JP4619962B2 (ja) 路面標示計測システム、白線モデル計測システムおよび白線モデル計測装置
JP2002269592A (ja) 画像処理装置及び方法
JP5256464B2 (ja) 画像上地物計測方法および表示法並びに計測装置
JP4102324B2 (ja) 測量データ処理システム、測量データ処理プログラム及び電子地図表示装置
JPWO2020039937A1 (ja) 位置座標推定装置、位置座標推定方法およびプログラム
CN103003666A (zh) 用于三维空间测量的平行的在线-离线重构
JP4077385B2 (ja) 画像処理を用いたグローバル座標取得装置
JP6135972B2 (ja) 標定方法、標定プログラム、及び標定装置
JP5396585B2 (ja) 地物特定方法
JP2010020729A (ja) 車両走行軌跡観測システム、車両走行軌跡観測方法、およびそのプログラム
JP2964402B1 (ja) 三次元地図データベースの作成方法及び装置
JP5262232B2 (ja) 画像上方位表示方法及び装置並びに写真
JP2009204385A (ja) 標定装置、標定方法および標定プログラム
TWI426237B (zh) Instant image navigation system and method
JP6773473B2 (ja) 測量情報管理装置および測量情報管理方法
Stylianidis et al. A digital close-range photogrammetric technique for monitoring slope displacements
JP5749965B2 (ja) 画像上地物計測用の基準尺
JP2020173211A (ja) 角度測定装置、距離測定装置、速度測定装置、標高測定装置、座標測定装置、角度測定方法、およびプログラム
TW201024665A (en) Method of generating a geodetic reference database product
JP2004030011A (ja) 3次元形状データ取得システムおよび方法
Uehara et al. From Digital Map to 3D Map: Creating 3D Map by Motion Stereo Utilizing 3D Map.

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110225

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120822

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120828

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120914

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130115

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130227

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130326

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130329

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160502

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 5256464

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees