JP7002898B2 - Image generator, image generator and shooting vehicle - Google Patents
Image generator, image generator and shooting vehicle Download PDFInfo
- Publication number
- JP7002898B2 JP7002898B2 JP2017181771A JP2017181771A JP7002898B2 JP 7002898 B2 JP7002898 B2 JP 7002898B2 JP 2017181771 A JP2017181771 A JP 2017181771A JP 2017181771 A JP2017181771 A JP 2017181771A JP 7002898 B2 JP7002898 B2 JP 7002898B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- camera
- shooting
- distance
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 claims description 11
- 238000003384 imaging method Methods 0.000 claims description 7
- 238000012545 processing Methods 0.000 description 15
- 238000005259 measurement Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 5
- 238000005286 illumination Methods 0.000 description 5
- NIXOWILDQLNWCW-UHFFFAOYSA-N acrylic acid group Chemical group C(C=C)(=O)O NIXOWILDQLNWCW-UHFFFAOYSA-N 0.000 description 4
- 238000011161 development Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Images
Landscapes
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
- Stereoscopic And Panoramic Photography (AREA)
- Rear-View Mirror Devices That Are Mounted On The Exterior Of The Vehicle (AREA)
- Image Processing (AREA)
Description
本発明は、複数の画像を並べて全体画像を生成する技術に関するものである。 The present invention relates to a technique for arranging a plurality of images to generate an entire image.
トンネルを撮影するための従来の撮影車両には、複数のカメラが扇型状に配置されている。
複数のカメラが同時に撮影を行うことにより、撮影車両の進行方向においてトンネルの同じ位置の内面が映った複数の映像が得られる。つまり、トンネルの入口からの距離が同じ位置におけるトンネルの内面が映った複数の映像が得られる。そのため、展開図を生成することが可能である。
しかし、複数のカメラが扇型状に配置されると、複数のカメラの各視点が一致しない。すると、撮影車両がトンネルの壁に近づいた場合に、撮影されない部分が発生してしまう。
また、複数のカメラを扇型状に配置しようとすると配置場所が限られるため、大型のカメラを使用することが困難である。
In a conventional shooting vehicle for shooting a tunnel, a plurality of cameras are arranged in a fan shape.
By shooting with a plurality of cameras at the same time, it is possible to obtain a plurality of images showing the inner surface of the tunnel at the same position in the traveling direction of the shooting vehicle. That is, a plurality of images showing the inner surface of the tunnel at the same distance from the entrance of the tunnel can be obtained. Therefore, it is possible to generate a development view.
However, when a plurality of cameras are arranged in a fan shape, the viewpoints of the plurality of cameras do not match. Then, when the shooting vehicle approaches the wall of the tunnel, a part that is not shot will occur.
Further, when trying to arrange a plurality of cameras in a fan shape, the arrangement place is limited, so that it is difficult to use a large camera.
本発明は、複数の画像を並べて正しい全体画像を生成できるようにすることを目的とする。 An object of the present invention is to arrange a plurality of images so that a correct overall image can be generated.
本発明の画像生成装置は、車両に設置された複数のカメラから得られる複数の帯状画像を並べて全体画像を生成する画像生成部を備える。
前記複数のカメラは、前記車両の外側に向けられ、且つ、前記車両の長さ方向に基準間隔で並べられ、且つ、前記車両の長さ方向と垂直に交わる縦断面において互いに向きが異なり、且つ、前記車両が基準距離を進む毎に撮影を行う。
各帯状画像は、1つのカメラによって得られる複数の画像を前記車両の長さ方向に対応する方向に並べて得られる画像である。
前記画像生成部は、各帯状画像を前記車両の長さ方向に対応する方向において調整画素数ずつずらして前記全体画像を生成する。
前記調整画素数は、前記基準間隔と前記基準距離とに基づいて得られる画素数である。
The image generation device of the present invention includes an image generation unit that generates an entire image by arranging a plurality of strip-shaped images obtained from a plurality of cameras installed in a vehicle.
The plurality of cameras are directed to the outside of the vehicle, are arranged at reference intervals in the length direction of the vehicle, and are oriented differently from each other in a vertical cross section perpendicular to the length direction of the vehicle. , A photograph is taken every time the vehicle travels a reference distance.
Each band-shaped image is an image obtained by arranging a plurality of images obtained by one camera in a direction corresponding to the length direction of the vehicle.
The image generation unit generates the entire image by shifting each band-shaped image by the number of adjustment pixels in a direction corresponding to the length direction of the vehicle.
The adjustment pixel number is the number of pixels obtained based on the reference interval and the reference distance.
本発明によれば、複数の画像を並べて正しい全体画像を生成することができる。 According to the present invention, a plurality of images can be arranged side by side to generate a correct overall image.
実施の形態および図面において、同じ要素および対応する要素には同じ符号を付している。同じ符号が付された要素の説明は適宜に省略または簡略化する。図中の矢印はデータの流れ又は処理の流れを主に示している。 In embodiments and drawings, the same elements and corresponding elements are designated by the same reference numerals. Descriptions of elements with the same reference numerals are omitted or simplified as appropriate. The arrows in the figure mainly indicate the flow of data or the flow of processing.
実施の形態1.
撮影車両100および画像生成装置300について、図1から図24に基づいて説明する。
The photographing vehicle 100 and the
***構成の説明***
図1、図2および図3に基づいて、撮影車両100を説明する。
図1は、撮影車両100の左側面を示している。
図2は、撮影車両100の上面を示している。
図3は、撮影車両100の右側面を示している。
*** Explanation of configuration ***
The photographing vehicle 100 will be described with reference to FIGS. 1, 2 and 3.
FIG. 1 shows the left side surface of the photographing vehicle 100.
FIG. 2 shows the upper surface of the photographing vehicle 100.
FIG. 3 shows the right side surface of the photographing vehicle 100.
撮影車両100は、走行しながら周囲を撮影するための車両である。具体的には、撮影車両100がトンネルを走行している間に、トンネル内の壁面が撮影される。
撮影車両100は、道路を走行するためのタイヤ101の他に、軌道を走行するための車輪103を備える。これにより、撮影車両100は軌陸車として機能する。
タイヤ101には、後述するオドメータが設置されている。
The photographing vehicle 100 is a vehicle for photographing the surroundings while traveling. Specifically, the wall surface in the tunnel is photographed while the photographing vehicle 100 is traveling in the tunnel.
The photographing vehicle 100 includes
An odometer, which will be described later, is installed on the
撮影車両100は、パネルで覆われた荷台110を備える。
荷台110の中には、後述する撮影装置が設置されている。
荷台110のパネルには、撮影装置の撮影方向に対応する部分にスリット111(U1~U5、R1~R4、L1~L5)が設けられている。
スリット111Uxは、後述するカメラユニット210Uxのためのスリット111である。
スリット111Rxは、後述するカメラユニット210Rxのためのスリット111である。
スリット111Lxは、後述するカメラユニット210Lxのためのスリット111である。
The photographing vehicle 100 includes a
An imaging device described later is installed in the
The panel of the
The slit 111Ux is a
The slit 111Rx is a
The slit 111Lx is a
図3において、スリット111R1とスリット111R2との間隔はDaであり、スリット111R2とスリット111R3との間隔はDbであり、スリット111R3とスリット111R4との間隔はDcである。
スリットの間隔は、カメラユニット210(後述するカメラ)の間隔と一致する。
In FIG. 3, the distance between the slit 111R1 and the slit 111R2 is Da, the distance between the slit 111R2 and the slit 111R3 is Db, and the distance between the slit 111R3 and the slit 111R4 is Dc.
The slit spacing coincides with the spacing of the camera unit 210 (camera described later).
荷台110の前部には、オペレーション室120が設けられている。
オペレーション室120において、オペレータは撮影装置などを操作する。
An operation room 120 is provided at the front of the
In the operation room 120, the operator operates a photographing device or the like.
荷台110の後部には、レーザスキャナ112が設置されている。
A
図4および図5に基づいて、撮影装置200を説明する。
図4は、撮影装置200の左側を示す斜視図である。
図5は、撮影装置200の右側を示す斜視図である。
The photographing apparatus 200 will be described with reference to FIGS. 4 and 5.
FIG. 4 is a perspective view showing the left side of the photographing apparatus 200.
FIG. 5 is a perspective view showing the right side of the photographing apparatus 200.
撮影装置200は、3つのカメラユニット群201(L、R、U)を備える。
カメラユニット群201Lは、上段に配置されて左方向を撮影するカメラユニット群201である。
カメラユニット群201Rは、中段に配置されて右方向を撮影するカメラユニット群201である。
カメラユニット群201Uは、下段に配置されて上方向を撮影するカメラユニット群201である。
The photographing apparatus 200 includes three camera unit groups 201 (L, R, U).
The
The
The
各カメラユニット群201は、複数のカメラユニット210から成る。
カメラユニット群201Lは、5つのカメラユニット210(L1~L5)から成る。
カメラユニット群201Rは、4つのカメラユニット210(R1~R5)から成る。
カメラユニット群201Uは、5つのカメラユニット210(U1~U5)から成る。
Each
The
The
The
図5において、カメラユニット210R1とカメラユニット210R2との間隔はDaであり、カメラユニット210R2とカメラユニット210R3との間隔はDbであり、カメラユニット210R3とカメラユニット210R4との間隔はDcである。 In FIG. 5, the distance between the camera unit 210R1 and the camera unit 210R2 is Da, the distance between the camera unit 210R2 and the camera unit 210R3 is Db, and the distance between the camera unit 210R3 and the camera unit 210R4 is Dc.
図6および図7に基づいて、カメラユニット210を説明する。
カメラユニット210は、フレーム211とカメラ212と制御ボックス213と照明214とアクリル板215とを備える。
カメラ212、制御ボックス213および照明214は、フレーム211に取り付けられている。
アクリル板215は、カメラ212の撮影方向に配置されている。
The
The
The camera 212, the control box 213 and the illumination 214 are attached to the frame 211.
The acrylic plate 215 is arranged in the shooting direction of the camera 212.
カメラ212は、撮影によって画像を得る。
具体的には、カメラ212はラインカメラである。ラインカメラは、1回の撮影で1列の画像を得るカメラである。ラインカメラは、ラインセンサまたはラインセンサカメラともいう。
The camera 212 obtains an image by shooting.
Specifically, the camera 212 is a line camera. A line camera is a camera that obtains a row of images in one shot. The line camera is also referred to as a line sensor or a line sensor camera.
制御ボックス213は、カメラ212を制御するための基板および配線を収納する。 The control box 213 houses a board and wiring for controlling the camera 212.
照明214は、カメラ212の撮影方向を照らす。具体的には、照明214は、レーザ照明である。
壁面にキズがあるか否かを調べる場合、カメラ212の撮影方向に斜めから光を照射するとキズが見えやすくなる。そのため、照明214は、カメラ212からずれた位置に固定され、カメラ212の撮影方向を斜めから照らす。
The illumination 214 illuminates the shooting direction of the camera 212. Specifically, the illumination 214 is laser illumination.
When checking whether or not there are scratches on the wall surface, it is easier to see the scratches by irradiating the camera 212 with light from an angle in the shooting direction. Therefore, the illumination 214 is fixed at a position deviated from the camera 212, and illuminates the shooting direction of the camera 212 at an angle.
アクリル板215は、透明な板であり、カメラ212を保護する。 The acrylic plate 215 is a transparent plate and protects the camera 212.
図4および図5に戻り、カメラユニット群201の説明を続ける。
図4および図5において、前後方向は撮影車両100の長さ方向に相当し、左右方向は撮影車両100の幅方向に相当する。
Returning to FIGS. 4 and 5, the description of the
In FIGS. 4 and 5, the front-rear direction corresponds to the length direction of the photographing vehicle 100, and the left-right direction corresponds to the width direction of the photographing vehicle 100.
各カメラユニット群201において、複数のカメラ212は、以下のように構成されている。
複数のカメラ212は、撮影車両100の外側に向けられている。
複数のカメラ212は、撮影車両100の長さ方向に基準間隔で並べられている。基準間隔は、撮影車両100の長さ方向におけるカメラ212間の距離である。
複数のカメラ212は、撮影車両100の長さ方向と垂直に交わる縦断面において互いに向きが異なる。
複数のカメラ212は、撮影車両100が基準距離を進む毎に撮影を行う。具体的には、複数のカメラ212は、撮影車両100のオドメータからパルスが出力される毎に撮影を行う。オドメータは、撮影車両100が基準距離を進む毎にパルスを出力する。
In each
The plurality of cameras 212 are directed to the outside of the shooting vehicle 100.
The plurality of cameras 212 are arranged at reference intervals in the length direction of the photographing vehicle 100. The reference interval is the distance between the cameras 212 in the length direction of the photographing vehicle 100.
The plurality of cameras 212 have different orientations in a vertical cross section perpendicular to the length direction of the photographing vehicle 100.
The plurality of cameras 212 take pictures each time the shooting vehicle 100 travels a reference distance. Specifically, the plurality of cameras 212 take a picture each time a pulse is output from the odometer of the shooting vehicle 100. The odometer outputs a pulse each time the photographing vehicle 100 travels a reference distance.
図8、図9、図10および図11に基づいて、撮影装置200の撮影範囲209を説明する。
図8は、図4に対応しており、カメラユニット群201Uの撮影範囲209U(1~5)を破線で示している。
図9は、図4に対応しており、カメラユニット群201Lの撮影範囲209L(1~5)を一点鎖線で示している。
図10は、図5に対応しており、カメラユニット群201Rの撮影範囲209R(1~4)を二点鎖線で示している。
The photographing
FIG. 8 corresponds to FIG. 4, and the
FIG. 9 corresponds to FIG. 4, and the
FIG. 10 corresponds to FIG. 5, and the
図11は、撮影車両100の荷台110に設置された撮影装置200を撮影車両100の後方から見た様子を示している。図11が示す平面は、撮影車両100の長さ方向と垂直に交わる縦断面に相当する。
破線はカメラユニット群201Uの撮影範囲209Uを示し、一点鎖線はカメラユニット群201Lの撮影範囲209Lを示し、二点鎖線はカメラユニット群201Rの撮影範囲209Rを示している。
矢印付きの弧は、撮影装置200の全体の撮影範囲209を示している。撮影装置200の全体の撮影範囲209は約268度に及ぶ。
FIG. 11 shows a state in which the photographing apparatus 200 installed on the
The broken line indicates the
The arc with the arrow indicates the entire photographing
図12に基づいて、画像生成装置300の構成を説明する。
画像生成装置300は、プロセッサ901とメモリ902と補助記憶装置903といったハードウェアを備えるコンピュータである。これらのハードウェアは、信号線を介して互いに接続されている。
The configuration of the
The
プロセッサ901は、演算処理を行うIC(Integrated Circuit)であり、他のハードウェアを制御する。例えば、プロセッサ901は、CPU(Central Processing Unit)、DSP(Digital Signal Processor)、またはGPU(Graphics Processing Unit)である。
メモリ902は揮発性の記憶装置である。メモリ902は、主記憶装置またはメインメモリとも呼ばれる。例えば、メモリ902はRAM(Random Access Memory)である。メモリ902に記憶されたデータは必要に応じて補助記憶装置903に保存される。
補助記憶装置903は不揮発性の記憶装置である。例えば、補助記憶装置903は、ROM(Read Only Memory)、HDD(Hard Disk Drive)、またはフラッシュメモリである。補助記憶装置903に記憶されたデータは必要に応じてメモリ902にロードされる。
The
The
The
画像生成装置300は、画像生成部310を備える。画像生成部310は、帯状画像生成部311および全体画像生成部312を備える。これらの要素はソフトウェアで実現される。
The
補助記憶装置903には、画像生成部310としてコンピュータを機能させるための画像生成プログラムが記憶されている。画像生成プログラムは、メモリ902にロードされて、プロセッサ901によって実行される。
さらに、補助記憶装置903にはOS(Operating System)が記憶されている。OSの少なくとも一部は、メモリ902にロードされて、プロセッサ901によって実行される。
つまり、プロセッサ901は、OSを実行しながら、画像生成プログラムを実行する。
画像生成プログラムを実行して得られるデータは、メモリ902、補助記憶装置903、プロセッサ901内のレジスタまたはプロセッサ901内のキャッシュメモリといった記憶装置に記憶される。
The
Further, an OS (Operating System) is stored in the
That is, the
The data obtained by executing the image generation program is stored in a storage device such as a
メモリ902はデータを記憶する記憶部391として機能する。但し、他の記憶装置が、メモリ902の代わりに、又は、メモリ902と共に、記憶部391として機能してもよい。
The
画像生成装置300は、プロセッサ901を代替する複数のプロセッサを備えてもよい。複数のプロセッサは、プロセッサ901の役割を分担する。
The
画像生成プログラムは、光ディスクまたはフラッシュメモリ等の不揮発性の記録媒体にコンピュータで読み取り可能に記録することができる。言い換えると、画像生成プログラムは、不揮発性の記録媒体にコンピュータで読み取り可能に格納することができる。 The image generation program can be computer-readablely recorded on a non-volatile recording medium such as an optical disk or flash memory. In other words, the image generator can be computer-readablely stored in a non-volatile recording medium.
***動作の説明***
画像生成装置300の動作は画像生成方法に相当する。また、画像生成方法の手順は画像生成プログラムの手順に相当する。
*** Explanation of operation ***
The operation of the
画像生成方法において、画像生成部310は、撮影車両100に設置された複数のカメラ212から得られる複数の帯状画像を並べて全体画像を生成する。帯状画像および全体画像については後述する。
In the image generation method, the
図13に基づいて、画像生成方法を説明する。
ステップS110において、帯状画像生成部311は、カメラ212毎に帯状画像を生成する。
An image generation method will be described with reference to FIG.
In step S110, the band-shaped
帯状画像は、1つのカメラ212によって得られる複数の画像を撮影車両100の長さ方向に対応する方向に並べて得られる画像である。
具体的には、帯状画像は、1つのラインカメラによって得られる複数のライン画像を撮影車両100の長さ方向に対応する方向に並べて得られる画像である。
The band-shaped image is an image obtained by arranging a plurality of images obtained by one camera 212 in a direction corresponding to the length direction of the photographing vehicle 100.
Specifically, the strip-shaped image is an image obtained by arranging a plurality of line images obtained by one line camera in a direction corresponding to the length direction of the photographing vehicle 100.
帯状画像生成部311は、カメラ212毎に帯状画像を以下のように生成する。
記憶部391には、ライン画像群が記憶されている。ライン画像群は、1つのラインカメラによって得られた複数のライン画像である。ライン画像は、1回の撮影で得られる1列の画像である。
帯状画像生成部311は、ライン画像群から各ライン画像を撮影時刻順に選択し、各ライン画像を撮影車両100の長さ方向に対応する方向に並べる。これによって得られる画像が帯状画像である。記憶部391は、各帯状画像を記憶する。
The band-shaped
A line image group is stored in the storage unit 391. The line image group is a plurality of line images obtained by one line camera. The line image is a row of images obtained by one shooting.
The band-shaped
図14に、帯状画像301を示す。
帯状画像301は、複数の画像をX軸方向に並べた画像である。Y軸方向に長い各画像がライン画像である。
X軸は、撮影車両100の長さ方向に対応する方向を示す。撮影車両100の長さ方向は、撮影車両100の進行方向に相当する。
Y軸は、撮影車両100の高さ方向または撮影車両100の幅方向に対応する方向を示す。
FIG. 14 shows a strip-shaped image 301.
The band-shaped image 301 is an image in which a plurality of images are arranged in the X-axis direction. Each image long in the Y-axis direction is a line image.
The X-axis indicates a direction corresponding to the length direction of the photographing vehicle 100. The length direction of the photographing vehicle 100 corresponds to the traveling direction of the photographing vehicle 100.
The Y-axis indicates a direction corresponding to the height direction of the photographing vehicle 100 or the width direction of the photographing vehicle 100.
図13に戻り、ステップS120を説明する。
ステップS120において、全体画像生成部312は、複数の帯状画像を並べて全体画像を生成する。
Returning to FIG. 13, step S120 will be described.
In step S120, the whole
全体画像生成部312は、全体画像を以下のように生成する。
全体画像生成部312は、撮影車両100の高さ方向に対応する方向または撮影車両100の幅方向に対応する方向に複数の帯状画像を並べる。
The whole
The whole
但し、全体画像生成部312は、各帯状画像を撮影車両100の長さ方向に対応する方向において調整画素数ずつずらす。これによって得られる画像が全体画像である。
調整画素数は、基準間隔と基準距離とに基づいて得られる画素数である
基準間隔は、撮影車両100の長さ方向におけるカメラ212間の距離である。
基準距離は、前回の撮影時から今回の撮影時までに撮影車両100が進む距離である。
However, the overall
The number of adjusted pixels is the number of pixels obtained based on the reference interval and the reference distance. The reference interval is the distance between the cameras 212 in the length direction of the photographing vehicle 100.
The reference distance is the distance that the shooting vehicle 100 travels from the time of the previous shooting to the time of the current shooting.
図15に、トンネルを走行する撮影車両100を正面から見た様子を示す。
中段のカメラユニット群201は、撮影車両100の右側の壁面を撮影する。
中段のカメラユニット群201において、各カメラは、撮影車両100の高さ方向において向きが異なる。
そのため、全体画像生成部312は、中段のカメラユニット群201の撮影で得られる複数の帯状画像を撮影車両100の高さ方向に対応する方向に並べる。
FIG. 15 shows a front view of the photographing vehicle 100 traveling in the tunnel.
The
In the
Therefore, the overall
また、上段のカメラユニット群は、左方の壁面を撮影する。
上段のカメラユニット群において、各カメラは、撮影車両100の高さ方向において向きが異なる。
そのため、全体画像生成部312は、上段のカメラユニット群の撮影で得られる複数の帯状画像を撮影車両100の高さ方向に対応する方向に並べる。
In addition, the camera unit group in the upper row photographs the wall surface on the left side.
In the upper camera unit group, each camera has a different orientation in the height direction of the shooting vehicle 100.
Therefore, the overall
また、下段のカメラユニット群は、上方の壁面を撮影する。
下段のカメラユニット群において、各カメラは、撮影車両100の幅方向において向きが異なる。
そのため、全体画像生成部312は、下段のカメラユニット群の撮影で得られる複数の帯状画像を撮影車両100の幅方向に対応する方向に並べる。
In addition, the lower camera unit group photographs the upper wall surface.
In the lower camera unit group, each camera has a different orientation in the width direction of the photographing vehicle 100.
Therefore, the overall
なお、各カメラの撮影範囲が撮影車両100の高さ方向または撮影車両100の幅方向において重なる場合、全体画像生成部312は、撮影範囲の重なりに対応する画素数を算出する。そして、全体画像生成部312は、撮影車両100の高さ方向または撮影車両100の幅方向に対応する方向おいて隣り合う帯状画像を算出した画素数だけ重ね合う。
When the shooting ranges of the cameras overlap in the height direction of the shooting vehicle 100 or the width direction of the shooting vehicle 100, the overall
図16に、撮影車両100を上方から見た様子を示す。
撮影車両100の長さ方向において、各カメラ212の位置は異なる。
カメラ(1)とカメラ(2)との距離はDaであり、カメラ(2)とカメラ(3)との距離はDbであり、カメラ(3)とカメラ(4)との距離はDcである。
距離Da、距離Dbおよび距離Dcを基準間隔という。
FIG. 16 shows a state in which the photographing vehicle 100 is viewed from above.
The positions of the cameras 212 are different in the length direction of the shooting vehicle 100.
The distance between the camera (1) and the camera (2) is Da, the distance between the camera (2) and the camera (3) is Db, and the distance between the camera (3) and the camera (4) is Dc. ..
The distance Da, the distance Db, and the distance Dc are referred to as reference intervals.
そのため、同じ時間帯に得られた複数の帯状画像を単純に並べると、カメラ間隔分、各帯状画像に映った壁面がずれる。
つまり、同じ時間帯に得られた複数の帯状画像を単純に並べると、トンネルの展開図として正しい全体画像が得られない。
Therefore, if a plurality of strip-shaped images obtained in the same time zone are simply arranged, the wall surface reflected in each strip-shaped image shifts by the camera interval.
That is, if a plurality of strip-shaped images obtained in the same time zone are simply arranged, the correct overall image cannot be obtained as a developed view of the tunnel.
図17に、同じ時間帯に得られた複数の帯状画像を単純に並べて得られる全体画像309を示す。帯状画像(n)は、カメラ(n)の撮影で得られた帯状画像である。
全体画像309は、以下のように、トンネルの展開図として正しい全体画像ではない。
撮影車両100の長さ方向に対応する方向xにおいて、帯状画像(1)と帯状画像(2)とに映った壁面(のひび割れ)の位置は画素数Saだけずれる。
撮影車両100の長さ方向に対応する方向xにおいて、帯状画像(2)と帯状画像(3)とに映った壁面(のひび割れ)の位置は画素数Sbだけずれる。
撮影車両100の長さ方向に対応する方向xにおいて、帯状画像(3)と帯状画像(4)とに映った壁面(のひび割れ)の位置は画素数Scだけずれる。
画素数Sa、画素数Sbおよび画素数Scを調整画素数という。
FIG. 17 shows an overall image 309 obtained by simply arranging a plurality of band-shaped images obtained in the same time zone. The band-shaped image (n) is a band-shaped image obtained by taking a picture of the camera (n).
The whole image 309 is not a correct whole image as a development view of the tunnel as shown below.
In the direction x corresponding to the length direction of the photographing vehicle 100, the position of the wall surface (crack) reflected in the band-shaped image (1) and the band-shaped image (2) is deviated by the number of pixels Sa.
In the direction x corresponding to the length direction of the photographing vehicle 100, the position of the wall surface (crack) reflected in the band-shaped image (2) and the band-shaped image (3) is deviated by the number of pixels Sb.
In the direction x corresponding to the length direction of the photographing vehicle 100, the positions of the wall surfaces (cracks) reflected in the band-shaped image (3) and the band-shaped image (4) are shifted by the number of pixels Sc.
The number of pixels Sa, the number of pixels Sb, and the number of pixels Sc are referred to as the number of adjusted pixels.
全体画像生成部312は、各帯状画像を撮影車両100の長さ方向に対応する方向において調整画素数ずつずらす。
The overall
図18に、各帯状画像を撮影車両100の長さ方向に対応する方向において調整画素数ずつずらして得られる全体画像302を示す。
全体画像302において、各帯状画像に映った壁面(のひび割れ)の位置は一致している。
撮影車両100の長さ方向に対応する方向xにおいて、帯状画像(2)は帯状画像(1)と画素数Saだけずれている。
撮影車両100の長さ方向に対応する方向xにおいて、帯状画像(3)は帯状画像(2)と画素数Sbだけずれている。
撮影車両100の長さ方向に対応する方向xにおいて、帯状画像(4)と帯状画像(3)と画素数Scだけずれている。
画素数Sa、画素数Sbおよび画素数Scを調整画素数という。
FIG. 18 shows an overall image 302 obtained by shifting each band-shaped image by the number of adjustment pixels in a direction corresponding to the length direction of the photographing vehicle 100.
In the whole image 302, the positions of the wall surfaces (cracks) reflected in each band-shaped image are the same.
In the direction x corresponding to the length direction of the photographing vehicle 100, the band-shaped image (2) is deviated from the band-shaped image (1) by the number of pixels Sa.
In the direction x corresponding to the length direction of the photographing vehicle 100, the band-shaped image (3) is deviated from the band-shaped image (2) by the number of pixels Sb.
In the direction x corresponding to the length direction of the photographing vehicle 100, the band-shaped image (4) and the band-shaped image (3) are deviated by the number of pixels Sc.
The number of pixels Sa, the number of pixels Sb, and the number of pixels Sc are referred to as the number of adjusted pixels.
以下に、調整画素数を算出するための式を説明する。
調整画素数は、予め算出されて記憶部391に記憶される。または、調整画素数は、全体画像生成部312によって算出されて記憶部391に記憶される。
The formula for calculating the number of adjusted pixels will be described below.
The number of adjustment pixels is calculated in advance and stored in the storage unit 391. Alternatively, the number of adjusted pixels is calculated by the overall
<実施例1>
図16の状態における調整画素数の算出式を説明する。
図16の状態において、条件(1-1)から条件(1-4)が成り立つ。
条件(1-1):オドメータ102は撮影車両100が基準距離を進む毎にパルスを出力し、各カメラ212はオドメータ102がパルスを出力する毎に撮影を行う。
条件(1-2):撮影車両100の長さ方向におけるカメラ間の距離(Da、DbおよびDc)、すなわち、基準間隔は既知である。
条件(1-3):撮影車両100の高さ方向と垂直に交わる横断面において、各カメラの向きが撮影車両100の幅方向に対して傾いていないる。図16が示す平面は横断面に相当する。
条件(1-4):撮影車両100は壁面と平行に走行する。
<Example 1>
The formula for calculating the number of adjusted pixels in the state of FIG. 16 will be described.
In the state of FIG. 16, the condition (1-4) is satisfied from the condition (1-1).
Condition (1-1): The odometer 102 outputs a pulse each time the photographing vehicle 100 travels a reference distance, and each camera 212 photographs each time the odometer 102 outputs a pulse.
Condition (1-2): The distances (Da, Db and Dc) between the cameras in the length direction of the photographing vehicle 100, that is, the reference interval is known.
Condition (1-3): In the cross section perpendicular to the height direction of the photographing vehicle 100, the direction of each camera is not tilted with respect to the width direction of the photographing vehicle 100. The plane shown in FIG. 16 corresponds to a cross section.
Condition (1-4): The photographing vehicle 100 travels in parallel with the wall surface.
調整画素数は、以下の式で表すことができる。
調整画素数 = 基準間隔 / 基準距離
The number of adjustment pixels can be expressed by the following equation.
Number of adjustment pixels = Reference interval / Reference distance
例えば、基準間隔が30センチメートルであり、基準距離が0.5ミリメートルである場合、調整画素数は600画素である。 For example, when the reference interval is 30 centimeters and the reference distance is 0.5 millimeters, the number of adjustment pixels is 600 pixels.
<実施例2>
図19の状態における調整画素数の算出式を説明する。
図19の状態において、条件(2-1)から条件(2-4)が成り立つ。
条件(2-1):オドメータ102は撮影車両100が基準距離を進む毎にパルスを出力し、各カメラ212はオドメータ102がパルスを出力する毎に撮影を行う。
条件(2-2):撮影車両100の長さ方向におけるカメラ間の距離(Da、DbおよびDc)、すなわち、基準間隔は既知である。
条件(2-3):撮影車両100の高さ方向と交わる横断面において、各カメラの向きが撮影車両100の幅方向に対して傾いている。横断面における各カメラの傾きは既知である。図19が示す断面は横断面に相当する。
条件(2-4):撮影車両100は壁面と平行に走行する。
<Example 2>
The formula for calculating the number of adjusted pixels in the state of FIG. 19 will be described.
In the state of FIG. 19, the condition (2-1) to the condition (2-4) is satisfied.
Condition (2-1): The odometer 102 outputs a pulse each time the photographing vehicle 100 travels a reference distance, and each camera 212 photographs each time the odometer 102 outputs a pulse.
Condition (2-2): Distances between cameras (Da, Db and Dc) in the length direction of the photographing vehicle 100, that is, a reference interval is known.
Condition (2-3): In the cross section intersecting the height direction of the photographing vehicle 100, the direction of each camera is tilted with respect to the width direction of the photographing vehicle 100. The tilt of each camera in the cross section is known. The cross section shown in FIG. 19 corresponds to a cross section.
Condition (2-4): The photographing vehicle 100 travels in parallel with the wall surface.
被写体距離Lpは、縦断面において各カメラから壁面までの距離である。
計測距離Lmは、縦断面においてレーザスキャナ112から壁面までの距離であり、レーザスキャナ112によって計測される。
相対距離Lrは、縦断面においてレーザスキャナ112から各カメラまでの距離である。
The subject distance Lp is the distance from each camera to the wall surface in the vertical cross section.
The measurement distance Lm is the distance from the
The relative distance Lr is the distance from the
図20に、カメラ(1)とカメラ(2)との被写体間隔Laを示す。
被写体間隔Laは、横断面において、隣り合うカメラのうちの前方のカメラ(1)によって撮影される箇所と、隣り合うカメラのうちの後方のカメラ(2)によって撮影される箇所との距離である。
FIG. 20 shows the subject distance La between the camera (1) and the camera (2).
The subject spacing La is the distance between the part of the adjacent camera taken by the front camera (1) and the part of the adjacent camera taken by the rear camera (2) in the cross section. ..
第1距離差D1は前方のカメラ(1)の距離差であり、第2距離差D2は後方のカメラ(2)の距離差である。カメラの距離差は、実際に撮影される壁面とカメラの向きが撮影車両100の幅方向に対して傾いていない場合にカメラによって撮影される壁面との距離である。
前方のカメラ(1)が前方に傾いている場合、第1距離差D1は正の値となる。前方のカメラ(1)が後方に傾いている場合、第1距離差D1は負の値となる。
後方のカメラ(2)が後方に傾いている場合、第2距離差D2は正の値となる。後方のカメラ(2)が前方に傾いている場合、第2距離差D2は負の値となる。
The first distance difference D 1 is the distance difference of the front camera (1), and the second distance difference D 2 is the distance difference of the rear camera (2). The distance difference between the cameras is the distance between the wall surface actually photographed and the wall surface photographed by the camera when the direction of the camera is not tilted with respect to the width direction of the photographing vehicle 100.
When the front camera (1) is tilted forward, the first distance difference D 1 is a positive value. When the front camera (1) is tilted backward, the first distance difference D1 has a negative value.
When the rear camera (2) is tilted backward, the second distance difference D 2 is a positive value. When the rear camera (2) is tilted forward, the second distance difference D 2 has a negative value.
第1傾き角度ωは前方のカメラ(1)の傾き角度であり、第2傾き角度γは後方のカメラ(2)の傾き角度である。傾き角度は、横断面において撮影車両100の幅方向に対するカメラの傾きの角度である。 The first tilt angle ω is the tilt angle of the front camera (1), and the second tilt angle γ is the tilt angle of the rear camera (2). The tilt angle is the angle of tilt of the camera with respect to the width direction of the photographing vehicle 100 in the cross section.
全体画像生成部312は、以下の式を計算することによって調整画素数を算出する。
調整画素数 = 被写体間隔/基準距離
被写体間隔 = 基準間隔 + 第1距離差 + 第2距離差
第1距離差 = 被写体距離 × tan(ω)
第2距離差 = 被写体距離 × tan(γ)
The whole
Number of adjusted pixels = Subject spacing / Reference distance Subject spacing = Reference spacing + First distance difference + Second distance difference First distance difference = Subject distance x tan (ω)
Second distance difference = subject distance x tan (γ)
<実施例3>
図21の状態における調整画素数の算出式を説明する。
図21の状態において、条件(3-1)から条件(3-4)が成り立つ。
条件(3-1):オドメータ102は撮影車両100が基準距離を進む毎にパルスを出力し、各カメラ212はオドメータ102がパルスを出力する毎に撮影を行う。
条件(3-2):撮影車両100の長さ方向におけるカメラ間の距離(Da、DbおよびDc)、すなわち、基準間隔は既知である。
条件(3-3):撮影車両100の高さ方向と垂直に交わる横断面において、各カメラの向きが撮影車両100の幅方向に対して傾いていない。図21が示す平面は横断面に相当する。
条件(3-4):撮影車両100は壁面と平行に走行しない。
<Example 3>
The formula for calculating the number of adjusted pixels in the state of FIG. 21 will be described.
In the state of FIG. 21, the condition (3-1) to the condition (3-4) is satisfied.
Condition (3-1): The odometer 102 outputs a pulse each time the photographing vehicle 100 travels a reference distance, and each camera 212 photographs each time the odometer 102 outputs a pulse.
Condition (3-2): The distances (Da, Db and Dc) between the cameras in the length direction of the photographing vehicle 100, that is, the reference interval is known.
Condition (3-3): In the cross section perpendicular to the height direction of the photographing vehicle 100, the direction of each camera is not tilted with respect to the width direction of the photographing vehicle 100. The plane shown in FIG. 21 corresponds to a cross section.
Condition (3-4): The photographing vehicle 100 does not run parallel to the wall surface.
被写体距離Lnは、縦断面においてカメラ(n)から壁面までの距離である。
計測距離Lmは、縦断面においてレーザスキャナ112から壁面までの距離であり、レーザスキャナ112によって計測される。
相対距離Lrは、縦断面においてレーザスキャナ112から各カメラまでの距離である。
The subject distance Ln is the distance from the camera (n) to the wall surface in the vertical cross section.
The measurement distance Lm is the distance from the
The relative distance Lr is the distance from the
図22に、壁面角度θを示す。
壁面角度θは、撮影車両100の長さ方向と壁面の長さ方向とが成す角度である。
第1計測距離Lm1は、先の計測で得られた計測距離Lmである。
第2計測距離Lm2は、後の計測で得られた計測距離Lmである。
計測間隔Dmは、先の計測から後の計測までに撮影車両100が進んだ距離である。
FIG. 22 shows the wall surface angle θ.
The wall surface angle θ is an angle formed by the length direction of the photographing vehicle 100 and the length direction of the wall surface.
The first measurement distance Lm 1 is the measurement distance Lm obtained in the previous measurement.
The second measurement distance Lm 2 is the measurement distance Lm obtained in the later measurement.
The measurement interval Dm is the distance traveled by the photographing vehicle 100 from the previous measurement to the subsequent measurement.
全体画像生成部312は、以下の式を計算することによって壁面角度θを算出する。
壁面角度θ = arctan((Lm1-Lm2)/Dm)
計測間隔Dm = パルス数 × 基準距離
パルス数は、先の計測から後の計測までにオドメータ102から出力されたパルスの数である。
The whole
Wall angle θ = arctan ((Lm 1 -Lm 2 ) / Dm)
Measurement interval Dm = number of pulses × reference distance The number of pulses is the number of pulses output from the odometer 102 from the previous measurement to the subsequent measurement.
図23に、カメラ(1)とカメラ(2)との被写体間隔Laを示す。
被写体間隔Laは、横断面において、隣り合うカメラのうちの前方のカメラ(1)によって撮影される箇所と、隣り合うカメラのうちの後方のカメラ(2)によって撮影される箇所との距離である。
FIG. 23 shows the subject distance La between the camera (1) and the camera (2).
The subject spacing La is the distance between the part of the adjacent camera taken by the front camera (1) and the part of the adjacent camera taken by the rear camera (2) in the cross section. ..
全体画像生成部312は、以下の式を計算することによって調整画素数を算出する。
調整画素数 = 被写体間隔/基準距離
被写体間隔 = 基準間隔/cosθ
The whole
Number of adjusted pixels = Subject spacing / Reference distance Subject spacing = Reference spacing / cosθ
<実施例4>
実施例2と実施例3との組み合わせにおける調整画素数の算出式を説明する。
条件(4-1)から条件(4-4)が成り立つ。
条件(4-1):オドメータ102は撮影車両100が基準距離を進む毎にパルスを出力し、各カメラ212はオドメータ102がパルスを出力する毎に撮影を行う。
条件(4-2):撮影車両100の長さ方向におけるカメラ間の距離(Da、DbおよびDc)、すなわち、基準間隔は既知である。
条件(4-3):撮影車両100の高さ方向と交わる横断面において、各カメラの向きが撮影車両100の幅方向に対して傾いている。横断面における各カメラの傾きは既知である。
条件(4-4):撮影車両100は壁面と平行に走行しない。
<Example 4>
The formula for calculating the number of adjusted pixels in the combination of the second embodiment and the third embodiment will be described.
Condition (4-4) is satisfied from condition (4-1).
Condition (4-1): The odometer 102 outputs a pulse each time the photographing vehicle 100 travels a reference distance, and each camera 212 photographs each time the odometer 102 outputs a pulse.
Condition (4-2): The distances (Da, Db and Dc) between the cameras in the length direction of the photographing vehicle 100, that is, the reference interval is known.
Condition (4-3): In the cross section intersecting the height direction of the photographing vehicle 100, the direction of each camera is tilted with respect to the width direction of the photographing vehicle 100. The tilt of each camera in the cross section is known.
Condition (4-4): The photographing vehicle 100 does not run parallel to the wall surface.
図24に、カメラ(1)とカメラ(2)との被写体間隔Laを示す。
第1距離差D1は前方のカメラ(1)の距離差であり、第2距離差D2は後方のカメラ(2)の距離差である。カメラの距離差は、実際に撮影される箇所とカメラが撮影車両100の幅方向に対して傾いていない場合に撮影される箇所との距離である。
FIG. 24 shows the subject distance La between the camera (1) and the camera (2).
The first distance difference D 1 is the distance difference of the front camera (1), and the second distance difference D 2 is the distance difference of the rear camera (2). The distance difference between the cameras is the distance between the actual shooting location and the shooting location when the camera is not tilted with respect to the width direction of the shooting vehicle 100.
暫定間隔Da’は、<実施例3>における被写体間隔である。 The provisional interval Da'is the subject interval in <Example 3>.
第1被写体距離L1は、横断面においてカメラ(1)から壁面までの距離である。
第2被写体距離L2は、横断面においてカメラ(2)から壁面までの距離である。
The first subject distance L 1 is the distance from the camera (1) to the wall surface in the cross section.
The second subject distance L 2 is the distance from the camera (2) to the wall surface in the cross section.
壁面角度θは、撮影車両100の長さ方向と壁面の長さ方向とが成す角度である。
第1傾き角度ωは前方のカメラ(1)の傾き角度であり、第2傾き角度γは後方のカメラ(2)の傾き角度である。傾き角度は、横断面において撮影車両100の幅方向に対するカメラの角度である。
The wall surface angle θ is an angle formed by the length direction of the photographing vehicle 100 and the length direction of the wall surface.
The first tilt angle ω is the tilt angle of the front camera (1), and the second tilt angle γ is the tilt angle of the rear camera (2). The tilt angle is the angle of the camera with respect to the width direction of the photographing vehicle 100 in the cross section.
全体画像生成部312は、以下の式を計算することによって調整画素数を算出する。
調整画素数 = 被写体間隔 / 基準距離
被写体間隔 = 第1距離差 +第2距離差 + 暫定間隔
第1距離差 = 第1被写体距離 × tan(ω)/cos(θ)
第2距離差 = 第2被写体距離 × tan(δ)/cos(θ)
暫定間隔 = 基準間隔/cos(θ)
The whole
Number of adjusted pixels = Subject spacing / Reference distance Subject spacing = First distance difference + Second distance difference + Provisional interval First distance difference = First subject distance x tan (ω) / cos (θ)
Second distance difference = second subject distance x tan (δ) / cos (θ)
Temporary interval = reference interval / cos (θ)
***実施の形態1の効果***
複数のカメラを撮影車両100の長さ方向に並べることにより、各カメラの視点を一致させることができる。その結果、複数の帯状画像を並べて全体画像を生成することが容易になる。また、大型のカメラを使用することが可能になる。
各帯状画像を撮影車両100の長さ方向に対応する方向において調整画素数ずつずらして並べることにより、正しい全体画像を生成することができる。
各カメラがオドメータと同期して撮影を行うことにより、撮影車両100の速度を考慮せずに調整画素数を求めることができる。
*** Effect of
By arranging a plurality of cameras in the length direction of the shooting vehicle 100, the viewpoints of the respective cameras can be matched. As a result, it becomes easy to arrange a plurality of strip-shaped images to generate an entire image. It also makes it possible to use a large camera.
By arranging the strip-shaped images by shifting the number of adjustment pixels in the direction corresponding to the length direction of the photographing vehicle 100, a correct overall image can be generated.
By performing shooting in synchronization with the odometer, each camera can obtain the number of adjusted pixels without considering the speed of the shooting vehicle 100.
***実施の形態の補足***
図25に基づいて、画像生成装置300のハードウェア構成を説明する。
画像生成装置300は処理回路990を備える。
処理回路990は、画像生成部310を実現するハードウェアである。
処理回路990は、専用のハードウェアであってもよいし、メモリ902に格納されるプログラムを実行するプロセッサ901であってもよい。
*** Supplement to the embodiment ***
The hardware configuration of the
The
The
The
処理回路990が専用のハードウェアである場合、処理回路990は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ASIC、FPGAまたはこれらの組み合わせである。
ASICはApplication Specific Integrated Circuitの略称であり、FPGAはField Programmable Gate
Arrayの略称である。
画像生成装置300は、処理回路990を代替する複数の処理回路を備えてもよい。複数の処理回路は、処理回路990の役割を分担する。
When the
ASIC is an abbreviation for Application Specific Integrated Circuit, and FPGA is Field Programmable Gate.
Abbreviation for Array.
The
画像生成装置300において、一部の機能が専用のハードウェアで実現されて、残りの機能がソフトウェアまたはファームウェアで実現されてもよい。
In the
このように、処理回路990はハードウェア、ソフトウェア、ファームウェアまたはこれらの組み合わせで実現することができる。
In this way, the
実施の形態は、好ましい形態の例示であり、本発明の技術的範囲を制限することを意図するものではない。実施の形態は、部分的に実施してもよいし、他の形態と組み合わせて実施してもよい。フローチャート等を用いて説明した手順は、適宜に変更してもよい。 The embodiments are examples of preferred embodiments and are not intended to limit the technical scope of the invention. The embodiment may be partially implemented or may be implemented in combination with other embodiments. The procedure described using the flowchart or the like may be appropriately changed.
100 撮影車両、101 タイヤ、102 オドメータ、103 車輪、110 荷台、111 スリット、112 レーザスキャナ、120 オペレーション室、200 撮影装置、201 カメラユニット群、209 撮影範囲、210 カメラユニット、211 フレーム、212 カメラ、213 制御ボックス、214 照明、215 アクリル板、300 画像生成装置、301 帯状画像、302 全体画像、309 全体画像、310 画像生成部、311 帯状画像生成部、312 全体画像生成部、391 記憶部、901 プロセッサ、902 メモリ、903 補助記憶装置、990 処理回路。 100 shooting vehicle, 101 tires, 102 odometer, 103 wheels, 110 loading platform, 111 slit, 112 laser scanner, 120 operation room, 200 shooting device, 201 camera unit group, 209 shooting range, 210 camera unit, 211 frame, 212 camera, 213 Control box, 214 lighting, 215 acrylic plate, 300 image generator, 301 band image, 302 whole image, 309 whole image, 310 image generator, 311 band image generator, 312 whole image generator, 391 storage, 901 Processor, 902 memory, 903 auxiliary storage, 990 processing circuit.
Claims (10)
前記複数のカメラは、前記車両の外側に向けられ、且つ、前記車両の長さ方向に基準間隔で並べられ、且つ、前記車両の長さ方向と垂直に交わる縦断面において互いに向きが異なり、且つ、前記車両が基準距離を進む毎に撮影を行い、
各帯状画像は、1つのカメラによって得られる複数の画像を前記車両の長さ方向に対応する方向に並べて得られる画像であり、
前記画像生成部は、各帯状画像を前記車両の長さ方向に対応する方向において調整画素数ずつずらして前記全体画像を生成し、
前記調整画素数は、前記基準間隔と前記基準距離とに基づいて得られる画素数である
画像生成装置。 It is an image generation device including an image generation unit that generates an entire image by arranging a plurality of band-shaped images obtained from a plurality of cameras installed in a vehicle.
The plurality of cameras are directed to the outside of the vehicle, are arranged at reference intervals in the length direction of the vehicle, and are oriented differently from each other in a vertical cross section perpendicular to the length direction of the vehicle. , Take a picture every time the vehicle travels the reference distance,
Each band-shaped image is an image obtained by arranging a plurality of images obtained by one camera in a direction corresponding to the length direction of the vehicle.
The image generation unit generates the entire image by shifting each band-shaped image by the number of adjustment pixels in the direction corresponding to the length direction of the vehicle.
The adjustment pixel number is an image generation device which is the number of pixels obtained based on the reference interval and the reference distance.
請求項1に記載の画像生成装置。 When the direction of each camera is not tilted with respect to the width direction of the vehicle in the cross section perpendicular to the height direction of the vehicle and the vehicle travels parallel to the wall surface, the adjustment pixel number is the same. The image generation device according to claim 1, which is a value obtained by dividing a reference interval by the reference distance.
前記第1傾き角度は、隣り合うカメラのうちの前方のカメラの傾きの角度であり、
前記第2傾き角度は、隣り合うカメラのうちの後方のカメラの傾きの角度であり、
前記被写体距離は、前記縦断面における各カメラから前記壁面までの距離であり、
前記被写体間隔は、前記横断面において前記前方のカメラによって撮影される箇所と前記後方のカメラによって撮影される箇所との距離である
請求項1に記載の画像生成装置。 When the direction of each camera is tilted with respect to the width direction of the vehicle in the cross section perpendicular to the height direction of the vehicle and the vehicle travels in parallel with the wall surface, the image generation unit is described. The subject spacing is calculated using the reference spacing, the first tilt angle, the second tilt angle, and the subject distance, and the subject spacing is divided by the reference distance to calculate the number of adjusted pixels.
The first tilt angle is the tilt angle of the camera in front of the adjacent cameras.
The second tilt angle is the tilt angle of the rear camera among the adjacent cameras.
The subject distance is the distance from each camera in the vertical cross section to the wall surface.
The image generation device according to claim 1, wherein the subject spacing is a distance between a portion photographed by the front camera and a portion photographed by the rear camera in the cross section.
前記壁面角度は、前記車両の長さ方向と前記壁面の長さ方向とが成す角度であり、
前記被写体間隔は、前記横断面において隣り合うカメラのうちの前方のカメラによって撮影される箇所と隣り合うカメラのうちの後方のカメラによって撮影される箇所との距離である
請求項1に記載の画像生成装置。 When the direction of each camera is not tilted with respect to the width direction of the vehicle in the cross section perpendicular to the height direction of the vehicle and the vehicle does not run parallel to the wall surface, the image generation unit is said to be the same. The subject spacing is calculated using the reference spacing and the wall surface angle, and the subject spacing is divided by the reference distance to calculate the number of adjusted pixels.
The wall surface angle is an angle formed by the length direction of the vehicle and the length direction of the wall surface.
The image according to claim 1, wherein the subject spacing is a distance between a portion of the adjacent cameras taken by the front camera and a portion of the adjacent cameras taken by the rear camera. Generator.
前記第1傾き角度は、隣り合うカメラのうちの前方のカメラの傾きの角度であり、
前記第1被写体距離は、前記縦断面における前記前方のカメラから前記壁面までの距離であり、
前記第2傾き角度は、隣り合うカメラのうちの後方のカメラの傾きの角度であり、
前記第2被写体距離は、前記縦断面における前記後方のカメラから前記壁面までの距離であり、
前記壁面角度は、前記車両の長さ方向と前記壁面の長さ方向とが成す角度であり、
前記被写体間隔は、前記横断面において前記前方のカメラによって撮影される箇所と前記後方のカメラによって撮影される箇所との距離である
請求項1に記載の画像生成装置。 When the direction of each camera is tilted with respect to the width direction of the vehicle in the cross section perpendicular to the height direction of the vehicle and the vehicle does not travel parallel to the wall surface, the image generation unit is the first. The subject spacing is calculated using the 1 tilt angle, the 1st subject distance, the 2nd tilt angle, the 2nd subject distance, the wall surface angle, and the reference spacing, and the subject spacing is divided by the reference distance to obtain the number of adjusted pixels. Calculate and
The first tilt angle is the tilt angle of the camera in front of the adjacent cameras.
The first subject distance is the distance from the front camera to the wall surface in the vertical cross section.
The second tilt angle is the tilt angle of the rear camera among the adjacent cameras.
The second subject distance is the distance from the rear camera to the wall surface in the vertical cross section.
The wall surface angle is an angle formed by the length direction of the vehicle and the length direction of the wall surface.
The image generation device according to claim 1, wherein the subject spacing is a distance between a portion photographed by the front camera and a portion photographed by the rear camera in the cross section.
前記オドメータは、前記車両が前記基準距離を進む毎にパルスを出力する
請求項1から請求項5のいずれか1項に記載の画像生成装置。 The plurality of cameras take a picture each time a pulse is output from the odometer of the vehicle.
The image generation device according to any one of claims 1 to 5, wherein the odometer outputs a pulse each time the vehicle travels the reference distance.
前記複数のカメラは、前記車両の外側に向けられ、且つ、前記車両の長さ方向に基準間隔で並べられ、且つ、前記車両の長さ方向と垂直に交わる縦断面において互いに向きが異なり、且つ、前記車両が基準距離を進む毎に撮影を行い、
各帯状画像は、1つのカメラによって得られる複数の画像を前記車両の長さ方向に対応する方向に並べて得られる画像であり、
前記画像生成処理は、各帯状画像を前記車両の長さ方向に対応する方向において調整画素数ずつずらして前記全体画像を生成し、
前記調整画素数は、前記基準間隔と前記基準距離とに基づいて得られる画素数である
画像生成プログラム。 It is an image generation program for causing a computer to execute an image generation process of arranging a plurality of band-shaped images obtained from a plurality of cameras installed in a vehicle to generate an entire image.
The plurality of cameras are directed to the outside of the vehicle, are arranged at reference intervals in the length direction of the vehicle, and are oriented differently from each other in a vertical cross section perpendicular to the length direction of the vehicle. , Take a picture every time the vehicle travels the reference distance,
Each band-shaped image is an image obtained by arranging a plurality of images obtained by one camera in a direction corresponding to the length direction of the vehicle.
In the image generation process, each band-shaped image is shifted by the number of adjustment pixels in the direction corresponding to the length direction of the vehicle to generate the entire image.
The adjustment pixel number is an image generation program which is the number of pixels obtained based on the reference interval and the reference distance.
前記荷台の中には、撮影装置が設置され、
前記撮影装置は、カメラユニットを備え、
前記カメラユニットは、複数のカメラを備え、
前記複数のカメラは、前記撮影車両の外側に向けられ、且つ、前記撮影車両の長さ方向に基準間隔で並べられ、且つ、前記撮影車両の長さ方向と垂直に交わる縦断面において互いに向きが異なり、且つ、前記撮影車両が基準距離を進む毎に撮影を行い、
前記荷台は、各カメラの撮影方向に対応する部分にスリットを有する
ことを特徴とする撮影車両。 It is a shooting vehicle equipped with a loading platform covered with panels.
An imaging device is installed in the loading platform.
The photographing device includes a camera unit and is equipped with a camera unit.
The camera unit includes a plurality of cameras and has a plurality of cameras.
The plurality of cameras are directed to the outside of the photographing vehicle, are arranged at reference intervals in the length direction of the photographing vehicle, and are oriented toward each other in a vertical cross section perpendicular to the length direction of the photographing vehicle. It is different, and the shooting is performed every time the shooting vehicle advances the reference distance.
The loading platform is a shooting vehicle characterized by having a slit in a portion corresponding to the shooting direction of each camera.
請求項8に記載の撮影車両。 The shooting vehicle according to claim 8, wherein the slit spacing coincides with the camera spacing in the length direction of the shooting vehicle.
上撮影用のカメラユニットと左撮影用のカメラユニットと右撮影用のカメラユニットとのそれぞれが、複数のカメラを備え、
前記荷台は、前記上撮影用のカメラユニットの各カメラの撮影方向に対応する部分と、前記左撮影用のカメラユニットの各カメラの撮影方向に対応する部分と、前記右撮影用のカメラユニットの各カメラの撮影方向に対応する部分とのそれぞれにスリットを有する
請求項8または請求項9に記載の撮影車両。 The shooting device includes a camera unit for top shooting, a camera unit for left shooting, and a camera unit for right shooting.
Each of the camera unit for top shooting, the camera unit for left shooting, and the camera unit for right shooting is equipped with multiple cameras.
The loading platform has a portion corresponding to the shooting direction of each camera of the upper shooting camera unit, a portion corresponding to the shooting direction of each camera of the left shooting camera unit, and the right shooting camera unit. The shooting vehicle according to claim 8 or 9, which has a slit in each of the portions corresponding to the shooting directions of each camera.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017181771A JP7002898B2 (en) | 2017-09-21 | 2017-09-21 | Image generator, image generator and shooting vehicle |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017181771A JP7002898B2 (en) | 2017-09-21 | 2017-09-21 | Image generator, image generator and shooting vehicle |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019056647A JP2019056647A (en) | 2019-04-11 |
JP7002898B2 true JP7002898B2 (en) | 2022-01-20 |
Family
ID=66107440
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017181771A Active JP7002898B2 (en) | 2017-09-21 | 2017-09-21 | Image generator, image generator and shooting vehicle |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7002898B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7329435B2 (en) * | 2019-12-25 | 2023-08-18 | 三菱電機株式会社 | Vehicle and shooting method |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004012152A (en) | 2002-06-03 | 2004-01-15 | Asia Air Survey Co Ltd | System for investigating wall surface of structure |
JP2010223753A (en) | 2009-03-24 | 2010-10-07 | Tokyo Electric Power Co Inc:The | Image processing device, inspection device for long object, and computer program |
WO2011033569A1 (en) | 2009-09-17 | 2011-03-24 | 富士通株式会社 | Image processing device and image processing method |
KR101079894B1 (en) | 2011-05-04 | 2011-11-04 | 유겐가이샤 지텍 | Development of tunnel wall image acquiring system |
JP2014095627A (en) | 2012-11-09 | 2014-05-22 | West Nippon Expressway Engineering Shikoku Co Ltd | Device for examining surface of road structure |
JP2015170989A (en) | 2014-03-07 | 2015-09-28 | 西日本高速道路エンジニアリング関西株式会社 | Apparatus for capturing image of tunnel wall surface |
JP2016218555A (en) | 2015-05-15 | 2016-12-22 | 三菱電機株式会社 | Imaging device, imaging vehicle, and device for generating image along passage |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05256633A (en) * | 1991-06-13 | 1993-10-05 | East Japan Railway Co | Deformation photographing method for railroad tunnel lining |
JPH0658738A (en) * | 1992-08-06 | 1994-03-04 | Mitsubishi Electric Corp | Three dimensional shape inputting method |
JPH0843055A (en) * | 1994-07-29 | 1996-02-16 | Canon Inc | Method and apparatus for recognizing shape of three dimensional object |
JP4106121B2 (en) * | 1998-02-12 | 2008-06-25 | 東海旅客鉄道株式会社 | Tunnel wall surface photographing device |
-
2017
- 2017-09-21 JP JP2017181771A patent/JP7002898B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004012152A (en) | 2002-06-03 | 2004-01-15 | Asia Air Survey Co Ltd | System for investigating wall surface of structure |
JP2010223753A (en) | 2009-03-24 | 2010-10-07 | Tokyo Electric Power Co Inc:The | Image processing device, inspection device for long object, and computer program |
WO2011033569A1 (en) | 2009-09-17 | 2011-03-24 | 富士通株式会社 | Image processing device and image processing method |
KR101079894B1 (en) | 2011-05-04 | 2011-11-04 | 유겐가이샤 지텍 | Development of tunnel wall image acquiring system |
JP2014095627A (en) | 2012-11-09 | 2014-05-22 | West Nippon Expressway Engineering Shikoku Co Ltd | Device for examining surface of road structure |
JP2015170989A (en) | 2014-03-07 | 2015-09-28 | 西日本高速道路エンジニアリング関西株式会社 | Apparatus for capturing image of tunnel wall surface |
JP2016218555A (en) | 2015-05-15 | 2016-12-22 | 三菱電機株式会社 | Imaging device, imaging vehicle, and device for generating image along passage |
Also Published As
Publication number | Publication date |
---|---|
JP2019056647A (en) | 2019-04-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6444086B2 (en) | Tunnel lining surface inspection system and vehicle used for tunnel lining surface inspection system | |
CN110827199B (en) | Tunnel image splicing method and device based on guidance of laser range finder | |
CN106030680B (en) | Self-position computing device and self-position computational methods | |
JP2016031249A (en) | Tunnel lining face investigation system, and wheeled vehicle for use in the same | |
JP5239611B2 (en) | Projection display apparatus and image correction method | |
CN206279433U (en) | Motor-driven building machinery | |
KR20130048564A (en) | Image processing apparatus and method | |
JP2011128117A5 (en) | Information processing apparatus, pattern data generation apparatus, information processing method, pattern data generation method, and program | |
RU2010144360A (en) | METHOD FOR RESTORING AN IMAGE USING X-RAY 3D VOLUME PHOTOGRAPHY | |
JP3765862B2 (en) | Vehicle environment recognition device | |
CN106030681A (en) | Local location computation device and local location computation method | |
JP2021507205A (en) | 3D-peripheral grasp using projector and camera module | |
JP7002898B2 (en) | Image generator, image generator and shooting vehicle | |
US11022435B2 (en) | Pattern projection depth value 3D scanning device and method | |
CN105993042A (en) | Local location computation device and local location computation method | |
TW201443424A (en) | Imaging system for transparent plate surface inspection | |
CN101446641B (en) | Distance measurement system and distance measurement method | |
JP2002267444A (en) | Method of measuring shape of tunnel pit | |
US20200304724A1 (en) | Imaging apparatus, vehicle and image capturing method | |
JP2007046952A (en) | Measuring ruler, measuring system, measuring method, method for measuring tunnel cross section, and method for measuring separation between platform and rail | |
JP2007327803A (en) | Vehicle surrounding monitoring device | |
JP6541119B2 (en) | Imaging device | |
JP2017220007A (en) | Parking space search device, program and recording medium | |
JP2015135330A (en) | Truck size measurement apparatus | |
JPWO2019114889A5 (en) |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200520 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210331 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210413 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210604 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211130 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211228 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7002898 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |