JP2016200893A - 認識用画像生成装置、物体検出装置及び認識用画像生成方法 - Google Patents
認識用画像生成装置、物体検出装置及び認識用画像生成方法 Download PDFInfo
- Publication number
- JP2016200893A JP2016200893A JP2015079109A JP2015079109A JP2016200893A JP 2016200893 A JP2016200893 A JP 2016200893A JP 2015079109 A JP2015079109 A JP 2015079109A JP 2015079109 A JP2015079109 A JP 2015079109A JP 2016200893 A JP2016200893 A JP 2016200893A
- Authority
- JP
- Japan
- Prior art keywords
- angle
- image
- narrow
- wide
- angle image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 title claims description 40
- 238000000034 method Methods 0.000 title claims description 15
- 238000003384 imaging method Methods 0.000 claims abstract description 19
- 238000006243 chemical reaction Methods 0.000 claims description 46
- 239000002131 composite material Substances 0.000 claims description 25
- 239000000203 mixture Substances 0.000 claims description 5
- 230000009466 transformation Effects 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 15
- 238000004364 calculation method Methods 0.000 description 8
- 101001024442 Cellulomonas fimi Beta-N-acetylglucosaminidase/beta-glucosidase Proteins 0.000 description 7
- 230000015572 biosynthetic process Effects 0.000 description 6
- 238000003786 synthesis reaction Methods 0.000 description 6
- 238000013528 artificial neural network Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000002194 synthesizing effect Effects 0.000 description 4
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 238000012806 monitoring device Methods 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
Abstract
Description
図1を参照して、第1実施形態に係わる認識用画像生成装置2及び物体検出装置1aの構成を説明する。物体検出装置1aは、自車に搭載されたカメラが撮像した画像に基づいて、自車の周囲に存在する物体を検出する装置である。物体検出装置1aは、自車周囲を撮像し、所定の座標変換を行って得られた複数の画像を合成した合成画像(認識用画像)を生成する認識用画像生成装置2と、認識用画像生成装置2により生成された合成画像に対して所定の画像処理を施すことにより、合成画像の中から物体を検出する物体検出部20と、カメラが撮像した画像から、自車が走行する車道の形状を判断する車道形状判断部19とを備える。
u=logρ
v=θ
上記した第1実施形態では、狭角カメラ12が1つである場合について、説明した。この場合、図3、図5及び図6に示したように、狭角画像(Na)及び狭角対数極画像(TNa)も1つずつとなる。変形例では、3つの狭角カメラ12を用いて、3つの狭角画像(Na)及び3つの狭角対数極画像(TNa)を取得し、広角対数極画像(TWd)と3つの狭角対数極画像(TNa)を1つの合成画像に合成する例を説明する。
図13を参照して、第2実施形態に係わる認識用画像生成装置2及び物体検出装置1bの構成を説明する。第2実施形態に係わる物体検出装置1bは、車道形状判断部19の代わりに、他車判断部31を備えている点で、図1の物体検出装置1aと相違している。その他の構成は図1と同じであり、説明を省略する。
2 認識用画像生成装置
11 広角カメラ(広角画像取得部)
12 狭角カメラ(狭角画像取得部)
14 消失点算出部
15 パンチルト制御部(撮像方向制御部)
16、17 座標変換部
18 画像合成部
19 車道形状判断部
20 物体検出部
21 自車
22a 直線路
22b、22c カーブ路
23 他車
31 他車判断部
Cp 合成画像
Na 狭角画像
TNa、TWd 対数極画像
Vp 消失点
Wd 広角画像
Claims (6)
- 自車に搭載され、前記自車の周囲を撮像して、広角画像を取得する広角画像取得部と、
前記自車に搭載され、前記広角画像に含まれ且つ前記広角画像よりも狭い画角で前記自車の周囲を撮像して、1又は2以上の狭角画像を取得する狭角画像取得部と、
前記広角画像上の消失点の位置を算出する消失点算出部と、
前記狭角画像の中心が前記広角画像上の消失点と一致するように、前記狭角画像取得部の撮像方向を制御する撮像方向制御部と、
前記広角画像上の消失点に基づいて、前記広角画像及び前記狭角画像に対して、対数極座標変換をそれぞれ行い、広角対数極画像及び狭角対数極画像を取得する座標変換部と、
前記広角対数極画像及び前記狭角対数極画像を合成して、合成画像を生成する画像合成部と
を備えることを特徴とする認識用画像生成装置。 - 前記狭角画像取得部は、水平方向に隣接する少なくとも3つの前記狭角画像を取得し、
前記撮像方向制御部は、前記3つの狭角画像のうち中央に位置する前記狭角画像の中心が前記広角画像上の消失点と一致するように、前記狭角画像取得部の撮像方向を制御する
ことを特徴とする請求項1に記載の認識用画像生成装置。 - 請求項2に記載の認識用画像生成装置を備える物体検出装置であって、
前記広角画像または前記狭角画像から、前記自車が走行する車道の形状を判断する車道形状判断部と、
前記画像合成部により合成された前記合成画像の中から物体を検出する物体検出部と、を更に備え、
前記車道形状判断部が前記車道の形状を直線路と判断した場合、前記座標変換部は、前記3つの狭角画像のうち中央に位置する狭角画像に対して、対数極座標変換を行い、前記狭角対数極画像を取得する
ことを特徴とする物体検出装置。 - 請求項2に記載の認識用画像生成装置を備える物体検出装置であって、
前記広角画像または前記狭角画像から、前記自車が走行する車道の形状を判断する車道形状判断部と、
前記画像合成部により合成された前記合成画像の中から物体を検出する物体検出部と、を更に備え、
前記車道形状判断部が前記車道の形状をカーブ路と判断した場合、前記座標変換部は、前記3つの狭角画像のうちカーブ側に位置する2つの狭角画像に対して、対数極座標変換を行い、前記狭角対数極画像を取得する
ことを特徴とする物体検出装置。 - 請求項2に記載の認識用画像生成装置を備える物体検出装置であって、
前記広角画像または前記狭角画像から、前記自車の前方に他車が存在するか否かを判断する他車判断部と、
前記画像合成部により合成された前記合成画像の中から物体を検出する物体検出部と、を更に備え、
前記自車の前方に他車が存在すると前記他車判断部が判断した場合、前記座標変換部は、前記3つの狭角画像のうち中央に位置する狭角画像を除く他の2つの狭角画像に対して、対数極座標変換を行い、前記狭角対数極画像を取得する
ことを特徴とする物体検出装置。 - 自車に搭載された広角画像取得部を用いて、前記自車の周囲を撮像して、広角画像を取得し、
前記広角画像上の消失点の位置を算出し、
狭角画像の中心が前記広角画像上の消失点と一致するように、自車に搭載された狭角画像取得部の撮像方向を制御し、
前記狭角画像取得部を用いて、前記広角画像に含まれ且つ前記広角画像よりも狭い画角で前記自車の周囲を撮像して、1又は2以上の前記狭角画像を取得し、
前記広角画像上の消失点に基づいて、前記広角画像及び前記狭角画像に対して、対数極座標変換をそれぞれ行い、広角対数極画像及び狭角対数極画像を取得し、
前記広角対数極画像及び前記狭角対数極画像を合成して、合成画像を生成する
ことを特徴とする認識用画像生成方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015079109A JP6569277B2 (ja) | 2015-04-08 | 2015-04-08 | 認識用画像生成装置、物体検出装置及び認識用画像生成方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015079109A JP6569277B2 (ja) | 2015-04-08 | 2015-04-08 | 認識用画像生成装置、物体検出装置及び認識用画像生成方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016200893A true JP2016200893A (ja) | 2016-12-01 |
JP6569277B2 JP6569277B2 (ja) | 2019-09-04 |
Family
ID=57422666
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015079109A Expired - Fee Related JP6569277B2 (ja) | 2015-04-08 | 2015-04-08 | 認識用画像生成装置、物体検出装置及び認識用画像生成方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6569277B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109937568A (zh) * | 2016-11-17 | 2019-06-25 | 索尼公司 | 图像处理装置和图像处理方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06225197A (ja) * | 1991-07-18 | 1994-08-12 | Nippon Telegr & Teleph Corp <Ntt> | ビデオカメラによる監視装置 |
JP2015050652A (ja) * | 2013-09-02 | 2015-03-16 | 公益財団法人鉄道総合技術研究所 | レール消失点検出装置、鉄道用前方監視カメラ装置、鉄道車両、およびレール消失点検出方法ならびに制御方法 |
-
2015
- 2015-04-08 JP JP2015079109A patent/JP6569277B2/ja not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06225197A (ja) * | 1991-07-18 | 1994-08-12 | Nippon Telegr & Teleph Corp <Ntt> | ビデオカメラによる監視装置 |
JP2015050652A (ja) * | 2013-09-02 | 2015-03-16 | 公益財団法人鉄道総合技術研究所 | レール消失点検出装置、鉄道用前方監視カメラ装置、鉄道車両、およびレール消失点検出方法ならびに制御方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109937568A (zh) * | 2016-11-17 | 2019-06-25 | 索尼公司 | 图像处理装置和图像处理方法 |
CN109937568B (zh) * | 2016-11-17 | 2021-03-09 | 索尼公司 | 图像处理装置和图像处理方法 |
Also Published As
Publication number | Publication date |
---|---|
JP6569277B2 (ja) | 2019-09-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5470886B2 (ja) | 物体検出装置 | |
US20170091565A1 (en) | Object detection apparatus, object detection method, and program | |
US10499014B2 (en) | Image generation apparatus | |
JP2016115305A (ja) | 物体検出装置、物体検出システム、物体検出方法及びプログラム | |
JP2008097126A (ja) | 移動物体認識装置、移動物体認識方法及びコンピュータプログラム | |
JP2006338272A (ja) | 車両挙動検出装置、および車両挙動検出方法 | |
JP6665925B2 (ja) | 画像処理装置、移動体機器制御システム、画像処理用プログラム及び画像処理方法 | |
WO2017104574A1 (ja) | 画像処理装置、物体認識装置、機器制御システム、画像処理方法およびプログラム | |
CN107004250B (zh) | 图像生成装置及图像生成方法 | |
JP2013164351A (ja) | ステレオ視差算出装置 | |
JP5098563B2 (ja) | 物体検出装置 | |
JP2016175586A (ja) | 車両周辺監視装置、車両周辺監視方法、及びプログラム | |
JP2018081628A (ja) | 車両制御装置、車両制御方法 | |
WO2017094300A1 (ja) | 画像処理装置、物体認識装置、機器制御システム、画像処理方法およびプログラム | |
US20140267630A1 (en) | Intersection recognizing apparatus and computer-readable storage medium | |
JP2017098932A (ja) | 車両用表示装置および車両用表示方法 | |
JP2015230703A (ja) | 物体検出装置及び物体検出方法 | |
JP2015172876A (ja) | 車両周辺監視装置、車両周辺監視システム、及びプログラム | |
JP6569277B2 (ja) | 認識用画像生成装置、物体検出装置及び認識用画像生成方法 | |
JP2005156199A (ja) | 車両検知方法及び車両検知装置 | |
JP2013069045A (ja) | 画像認識装置、画像認識方法および画像認識プログラム | |
WO2020213386A1 (ja) | 物***置検出装置、走行制御システム、および走行制御方法 | |
JP2019164098A (ja) | 路面形状推定装置、路面形状推定プログラム、及び移動体 | |
US8983196B2 (en) | Vehicle periphery monitoring apparatus | |
JP6406175B2 (ja) | 車載表示制御装置、車載表示制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180126 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20181214 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181219 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190212 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190709 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190722 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6569277 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |