JP2019185520A - 画像処理装置および方法 - Google Patents
画像処理装置および方法 Download PDFInfo
- Publication number
- JP2019185520A JP2019185520A JP2018077449A JP2018077449A JP2019185520A JP 2019185520 A JP2019185520 A JP 2019185520A JP 2018077449 A JP2018077449 A JP 2018077449A JP 2018077449 A JP2018077449 A JP 2018077449A JP 2019185520 A JP2019185520 A JP 2019185520A
- Authority
- JP
- Japan
- Prior art keywords
- image
- distance
- dimensional object
- conversion
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title abstract description 42
- 238000006243 chemical reaction Methods 0.000 claims abstract description 99
- 238000012937 correction Methods 0.000 claims abstract description 59
- 239000000284 extract Substances 0.000 claims abstract description 9
- 238000012545 processing Methods 0.000 claims description 87
- 230000009466 transformation Effects 0.000 claims description 11
- 238000003672 processing method Methods 0.000 claims 3
- 238000001514 detection method Methods 0.000 description 49
- 238000005259 measurement Methods 0.000 description 47
- 238000010586 diagram Methods 0.000 description 24
- 230000008569 process Effects 0.000 description 18
- 239000011159 matrix material Substances 0.000 description 15
- 238000012986 modification Methods 0.000 description 14
- 230000004048 modification Effects 0.000 description 14
- 239000007787 solid Substances 0.000 description 10
- 230000006870 function Effects 0.000 description 7
- 238000009434 installation Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 4
- 239000003550 marker Substances 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000013519 translation Methods 0.000 description 4
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 240000004050 Pentaglottis sempervirens Species 0.000 description 2
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012886 linear function Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Mechanical Engineering (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Processing (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
Claims (13)
- 平面画像取得部から取得する平面画像から立体物の範囲に相当する立体物領域を抽出する画像認識部と、
前記立体物領域の奥行き情報を、距離画像取得部から取得する奥行き情報を有する距離画像に基づいて算出する距離修正部と、
前記平面画像中の一部領域に該当する奥行き情報を前記距離画像中の一部領域から特定する対応付け部と、
前記平面画像を所定の視点から見える視点変換画像に座標変換する座標変換情報を、前記算出された前記立体物領域の奥行き情報に基づいて補正するテーブル補正部と、
前記補正された座標変換情報を用いて前記平面画像を座標変換することにより、前記視点変換画像を生成する画像変換部と、
を備える画像処理装置。 - 前記距離画像取得部が前記距離画像を取得する距離画像取得範囲は、前記平面画像取得部が前記平面画像を取得する平面画像取得範囲よりも小さく、かつ、前記平面画像取得範囲の一部に重なるように設定されている、
請求項1に記載の画像処理装置。 - 前記画像認識部は、前記平面画像の輝度、明度、彩度、または明度のうち少なくとも1つに基づいて、前記立体物領域を含む複数の領域の輪郭を抽出する、
請求項1または2のいずれか一項に記載の画像処理装置。 - 前記座標変換情報は、前記平面画像上の変換元座標と前記視点変換画像上の変換先座標との組み合わせを複数含み、
前記テーブル補正部は、前記算出された立体物領域の奥行き情報に基づいて、前記変換先座標を補正する、
請求項1または2のいずれか一項に記載の画像処理装置。 - 前記座標変換情報は、前記平面画像が地面の被写体を写した画像であるとして予め作成されており、
前記画像認識部は、前記平面画像に含まれる前記被写体ごとに、前記平面画像を複数の領域に分割し、
前記テーブル補正部は、前記距離画像に基づいて、前記分割された複数の領域が前記立体物領域であるか否かを判断し、前記立体物領域であると判断した領域について、当該領域内の前記変換元座標に対応する前記変換先座標を補正する、
請求項4に記載の画像処理装置。 - 前記座標変換情報は、前記平面画像上の変換元座標と前記視点変換画像上の変換先座標との組み合わせを複数含み、
前記テーブル補正部は、前記変換元座標を前記立体物領域の輪郭の所定範囲内に位置するように補正する、
請求項1または2のいずれか一項に記載の画像処理装置。 - 前記テーブル補正部は、前記立体物領域の輪郭の前記所定範囲内であって、前記立体物領域の外部または内部の少なくともいずれかに前記変換元座標を配置する、
請求項6に記載の画像処理装置。 - 前記座標変換情報は、前記平面画像内の被写体が予め設定される基準高さを持つ基準高さ平面内に存在することを前提に算出されており、
前記テーブル補正部は、
前記距離修正部が算出した前記立体物領域の奥行き情報を用いることにより、前記被写体の前記基準高さ平面からの高さ、および前記被写体の前記基準高さ平面上での位置を算出し、
視点変換の基準位置と、算出した前記被写体の前記基準高さ平面からの高さと、算出した前記被写体の前記基準高さ平面上での位置とを用いることにより、前記座標変換情報を補正する、
請求項1または2のいずれか一項に記載の画像処理装置。 - 前記所定の視点は、前記平面画像取得部の視点と異なるように設定される仮想的な視点である、
請求項1または2のいずれか一項に記載の画像処理装置。 - 前記平面画像取得部が前記平面画像を取得する際の解像度は、前記距離画像取得部が前記距離画像を取得する際の解像度よりも大きく設定されており、
前記距離修正部は、前記立体物領域の奥行き情報を前記距離画像に基づいて補間して算出する、
請求項1または2のいずれか一項に記載の画像処理装置。 - 前記視点変換画像を表示部に表示させる表示制御部をさらに備える、
請求項1または2のいずれか一項に記載の画像処理装置。 - 画像を処理する画像処理方法であって、
カメラを用いて平面画像を取得し、
距離検出部を用いて奥行き情報を有する距離画像を取得し、
前記平面画像から立体物の範囲に相当する立体物領域を抽出し、
前記立体物領域の奥行き情報を前記距離画像に基づいて算出し、
前記算出された前記立体物領域の奥行き情報に基づいて前記平面画像を座標変換することにより、所定の視点から見える視点変換画像を生成する、
画像処理方法。 - 前記距離画像を取得する距離画像取得範囲は、前記平面画像を取得する平面画像取得範囲よりも小さく、かつ、前記平面画像取得範囲の一部に重なるように設定される、
請求項12に記載の画像処理方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018077449A JP7074546B2 (ja) | 2018-04-13 | 2018-04-13 | 画像処理装置および方法 |
PCT/JP2019/009588 WO2019198399A1 (ja) | 2018-04-13 | 2019-03-11 | 画像処理装置および方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018077449A JP7074546B2 (ja) | 2018-04-13 | 2018-04-13 | 画像処理装置および方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2019185520A true JP2019185520A (ja) | 2019-10-24 |
JP2019185520A5 JP2019185520A5 (ja) | 2021-04-15 |
JP7074546B2 JP7074546B2 (ja) | 2022-05-24 |
Family
ID=68163565
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018077449A Active JP7074546B2 (ja) | 2018-04-13 | 2018-04-13 | 画像処理装置および方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7074546B2 (ja) |
WO (1) | WO2019198399A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024134935A1 (ja) * | 2022-12-22 | 2024-06-27 | 株式会社Jvcケンウッド | 三次元情報補正装置及び三次元情報補正方法 |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113436241B (zh) * | 2021-06-25 | 2023-08-01 | 兰剑智能科技股份有限公司 | 一种采用深度信息的干涉校验方法及*** |
CN115434519B (zh) * | 2022-09-29 | 2023-08-22 | 中铁八局集团第一工程有限公司 | 电动式钢筋预绑扎台车 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009118415A (ja) * | 2007-11-09 | 2009-05-28 | Alpine Electronics Inc | 鳥瞰画像生成装置および方法 |
JP2011188335A (ja) * | 2010-03-10 | 2011-09-22 | Clarion Co Ltd | 車両用周囲監視装置 |
JP2012147149A (ja) * | 2011-01-11 | 2012-08-02 | Aisin Seiki Co Ltd | 画像生成装置 |
JP2018014583A (ja) * | 2016-07-20 | 2018-01-25 | クラリオン株式会社 | 画像処理装置 |
-
2018
- 2018-04-13 JP JP2018077449A patent/JP7074546B2/ja active Active
-
2019
- 2019-03-11 WO PCT/JP2019/009588 patent/WO2019198399A1/ja active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009118415A (ja) * | 2007-11-09 | 2009-05-28 | Alpine Electronics Inc | 鳥瞰画像生成装置および方法 |
JP2011188335A (ja) * | 2010-03-10 | 2011-09-22 | Clarion Co Ltd | 車両用周囲監視装置 |
JP2012147149A (ja) * | 2011-01-11 | 2012-08-02 | Aisin Seiki Co Ltd | 画像生成装置 |
JP2018014583A (ja) * | 2016-07-20 | 2018-01-25 | クラリオン株式会社 | 画像処理装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024134935A1 (ja) * | 2022-12-22 | 2024-06-27 | 株式会社Jvcケンウッド | 三次元情報補正装置及び三次元情報補正方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2019198399A1 (ja) | 2019-10-17 |
JP7074546B2 (ja) | 2022-05-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9858639B2 (en) | Imaging surface modeling for camera modeling and virtual view synthesis | |
JP5491235B2 (ja) | カメラキャリブレーション装置 | |
JP5944687B2 (ja) | 外因パラメータのみのサラウンドビューカメラ自動較正 | |
JP5208203B2 (ja) | 死角表示装置 | |
JP5455124B2 (ja) | カメラ姿勢パラメータ推定装置 | |
JP5108605B2 (ja) | 運転支援システム及び車両 | |
JP6079131B2 (ja) | 画像処理装置、方法、及びプログラム | |
JP2009129001A (ja) | 運転支援システム、車両、立体物領域推定方法 | |
JP6891954B2 (ja) | 物体検知装置、物体検知方法、及びプログラム | |
US20080181488A1 (en) | Camera calibration device, camera calibration method, and vehicle having the calibration device | |
US20100165105A1 (en) | Vehicle-installed image processing apparatus and eye point conversion information generation method | |
JP7247173B2 (ja) | 画像処理方法及び装置 | |
JP2004198212A (ja) | 移動体周辺監視装置 | |
JP2002359838A (ja) | 運転支援装置 | |
WO2019198399A1 (ja) | 画像処理装置および方法 | |
JP2013001366A (ja) | 駐車支援装置および駐車支援方法 | |
JP5178454B2 (ja) | 車両周囲監視装置及び車両周囲監視方法 | |
KR20220113781A (ko) | 환경의 지형을 측정하는 방법 | |
JP2022547531A (ja) | センサフュージョンに基づく知覚的に向上したサラウンドビュー | |
KR20170001765A (ko) | Avm 시스템의 공차 보정 장치 및 방법 | |
WO2018016274A1 (ja) | 画像処理装置 | |
WO2015182771A1 (ja) | 撮像装置、画像処理装置、画像処理方法およびコンピュータプログラム | |
TWM591940U (zh) | 全景停車輔助系統及其裝置 | |
JP2009077022A (ja) | 運転支援システム及び車両 | |
WO2019003854A1 (ja) | 画像処理装置、画像変換方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20190801 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210226 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210226 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220208 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220328 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220412 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220512 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7074546 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |