JP7361482B2 - 画像処理装置、撮像装置、移動体及び画像処理方法 - Google Patents
画像処理装置、撮像装置、移動体及び画像処理方法 Download PDFInfo
- Publication number
- JP7361482B2 JP7361482B2 JP2019060152A JP2019060152A JP7361482B2 JP 7361482 B2 JP7361482 B2 JP 7361482B2 JP 2019060152 A JP2019060152 A JP 2019060152A JP 2019060152 A JP2019060152 A JP 2019060152A JP 7361482 B2 JP7361482 B2 JP 7361482B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- adjustment
- recognition
- vehicle
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3667—Display of a road map
- G01C21/367—Details, e.g. road map scale, orientation, zooming, illumination, level of detail, scrolling of road map or positioning of current position marker
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/60—Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/76—Circuitry for compensating brightness variation in the scene by influencing the image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/77—Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Mechanical Engineering (AREA)
- Software Systems (AREA)
- Automation & Control Theory (AREA)
- Studio Devices (AREA)
- Closed-Circuit Television Systems (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Description
本開示の一実施形態の撮像装置10は、移動体に搭載される。図1は、移動体の一例としての車両1における、撮像装置10の搭載位置を例示する図である。車両1に搭載される撮像装置10は、車載カメラと呼ぶことができる。撮像装置10は、車両1の種々の場所に設置することができる。例えば、撮像装置10aは、車両1が走行する際の前方を監視するカメラとして、フロントバンパー又はその近傍に配置することができる。また、前方を監視する撮像装置10bは、車両1の車室内のルームミラー(Inner Rearview Mirror)の近傍に配置することができる。撮像装置10cは、車両1の後方モニター用に車両1の後部に設置することができる。撮像装置10は、これらに限られず、左後ろ側方を撮像する左サイドカメラ及び右後ろ側方を撮像する右サイドカメラ等、種々の位置に設置される撮像装置10を含む。
本開示の一実施形態に係る撮像装置10は、図2に示すように、光学系11、撮像素子12、及び、画像処理装置13を含んで構成される。光学系11、撮像素子12、及び画像処理装置13は、1つの筺体に収容されてよい。あるいは、光学系11及び撮像素子12と、画像処理装置13とは別の筺体に収容されてよい。
画像処理装置13は、撮像素子12から出力された画像に対して種々の処理を行う。光学系11及び撮像素子12と画像処理装置13とが別の筺体に収容されている場合、画像処理装置13は、入力インターフェイス14と、演算部15と、出力インターフェイス16とを含む。光学系11及び撮像素子12と画像処理装置13とが1つの筺体に収容されている場合、入力インターフェイス14は不要となる。以下では、光学系11及び撮像素子12と画像処理装置13とが別の筺体に収容されているものとして説明をする。なお、画像処理装置13は、外部から画像を取得する独立した装置として構成することができる。
演算部15は、取得した車両1の周辺領域を撮像した画像(以下、適宜「周辺画像」とする)に対し、被写体及びフリースペースの検出を含む画像認識処理と、表示装置3に表示するための画像調整及び表示用画像の生成を含む表示用画像生成処理を行う。このため、演算部15は、認識用画像調整部17、画像認識部18、調整用パラメータ算出部19、表示用画像調整部20、表示用画像生成部21の各機能ブロックを含んで構成されることができる。認識用画像調整部17及び画像認識部18は、画像認識処理を実行する。表示用画像調整部20及び表示用画像生成部21は、表示用画像生成処理を実行する。調整用パラメータ算出部19は、表示用画像生成処理に用いる画像調整用のパラメータ(以下、調整パラメータと呼ぶ)を算出する。調整パラメータは、画像認識処理に用いることもできる。
次に、図6を参照して、演算部15が行う画像処理の手順を説明する。画像処理装置13は、以下に説明する演算部15が行う処理を、非一時的なコンピュータ可読媒体に記録されたプログラムを読み込んで実装するように構成されてよい。非一時的なコンピュータ可読媒体は、磁気記憶媒体、光学記憶媒体、光磁気記憶媒体、半導体記憶媒体を含むがこれらに限られない。磁気記憶媒体は、磁気ディスク、ハードディスク、磁気テープを含む。光学記憶媒体は、CD(Compact Disc)、DVD、ブルーレイディスク(Blu-ray(登録商標) Disc)等の光ディスクを含む。半導体記憶媒体は、ROM(Read Only Memory)、EEPROM(Electrically Erasable Programmable Read-Only Memory)、フラッシュメモリを含む。
2 情報処理装置
3 表示装置
10 撮像装置
11 光学系
12 撮像素子
13 画像処理装置
14 入力インターフェイス
15 演算部
16 出力インターフェイス
17 認識用画像調整部
18 画像認識部
19 調整用パラメータ生成部
20 表示用画像調整部
21 表示用画像生成部
22 画像信号処理回路
23 歪み補正回路
24 画像認識回路
25 制御回路
31 路面
32 空
33 人(被写体)
34 他車両(被写体)
25 フリースペース
40 車両
41 情報処理装置
42 表示装置
Claims (1)
- 移動体の周辺領域を撮像した画像を取得する入力インターフェイスと、
前記画像を処理する少なくとも1つのプロセッサと
を備え、
前記少なくとも1つのプロセッサは、ナビゲーション装置から前記移動体がトンネル内を走行していることを示す情報を取得した場合に、前記画像において道路がオレンジの色味がかかった色となるように当該画像を調整する
画像処理装置。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019060152A JP7361482B2 (ja) | 2019-03-27 | 2019-03-27 | 画像処理装置、撮像装置、移動体及び画像処理方法 |
PCT/JP2020/008960 WO2020195610A1 (ja) | 2019-03-27 | 2020-03-03 | 画像処理装置、撮像装置、移動体及び画像処理方法 |
US17/442,964 US20220191449A1 (en) | 2019-03-27 | 2020-03-03 | Image processing device, image capturing device, mobile body, and image processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019060152A JP7361482B2 (ja) | 2019-03-27 | 2019-03-27 | 画像処理装置、撮像装置、移動体及び画像処理方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2020162013A JP2020162013A (ja) | 2020-10-01 |
JP2020162013A5 JP2020162013A5 (ja) | 2021-05-06 |
JP7361482B2 true JP7361482B2 (ja) | 2023-10-16 |
Family
ID=72610043
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019060152A Active JP7361482B2 (ja) | 2019-03-27 | 2019-03-27 | 画像処理装置、撮像装置、移動体及び画像処理方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220191449A1 (ja) |
JP (1) | JP7361482B2 (ja) |
WO (1) | WO2020195610A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2022107235A1 (ja) * | 2020-11-18 | 2022-05-27 | ||
US12027135B2 (en) * | 2021-09-07 | 2024-07-02 | Honda Motor Co., Ltd. | Display device and control method therefor |
DE102021213256A1 (de) | 2021-11-25 | 2023-05-25 | Continental Automotive Technologies GmbH | Anzeigeeinheit in einem Fahrzeug |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005148308A (ja) | 2003-11-13 | 2005-06-09 | Denso Corp | 白線検出用カメラの露出制御装置 |
JP2006209209A (ja) | 2005-01-25 | 2006-08-10 | Honda Elesys Co Ltd | レーンマーク抽出装置 |
JP2006338555A (ja) | 2005-06-03 | 2006-12-14 | Honda Motor Co Ltd | 車両及び路面標示認識装置 |
JP2007011994A (ja) | 2005-07-04 | 2007-01-18 | Toyota Motor Corp | 道路認識装置 |
JP2007243464A (ja) | 2006-03-07 | 2007-09-20 | Aisin Aw Co Ltd | 駐車支援方法及び駐車支援装置 |
JP2016225860A (ja) | 2015-06-01 | 2016-12-28 | 株式会社富士通ゼネラル | 画質調整装置並びにカメラユニット |
WO2018025811A1 (ja) | 2016-08-01 | 2018-02-08 | クラリオン株式会社 | 画像処理装置、外界認識装置 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0613256B2 (ja) * | 1984-08-29 | 1994-02-23 | 日本電装株式会社 | 車載用表示装置 |
JP3742152B2 (ja) * | 1996-08-13 | 2006-02-01 | 日産ディーゼル工業株式会社 | 車両用撮像装置 |
US7831063B2 (en) * | 2007-02-19 | 2010-11-09 | Laughlin Richard H | Small event detector in presence of clutter |
JP5386538B2 (ja) * | 2011-05-12 | 2014-01-15 | 富士重工業株式会社 | 環境認識装置 |
JP6706792B2 (ja) * | 2016-03-31 | 2020-06-10 | パナソニックIpマネジメント株式会社 | 車載用表示装置 |
US9832530B2 (en) * | 2016-05-02 | 2017-11-28 | Echostar Technologies L.L.C. | Reduce blue light at set-top box to assist with sleep |
JP6977887B2 (ja) * | 2018-06-27 | 2021-12-08 | 日本電信電話株式会社 | レーン推定装置、方法およびプログラム |
-
2019
- 2019-03-27 JP JP2019060152A patent/JP7361482B2/ja active Active
-
2020
- 2020-03-03 US US17/442,964 patent/US20220191449A1/en active Pending
- 2020-03-03 WO PCT/JP2020/008960 patent/WO2020195610A1/ja active Application Filing
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005148308A (ja) | 2003-11-13 | 2005-06-09 | Denso Corp | 白線検出用カメラの露出制御装置 |
JP2006209209A (ja) | 2005-01-25 | 2006-08-10 | Honda Elesys Co Ltd | レーンマーク抽出装置 |
JP2006338555A (ja) | 2005-06-03 | 2006-12-14 | Honda Motor Co Ltd | 車両及び路面標示認識装置 |
JP2007011994A (ja) | 2005-07-04 | 2007-01-18 | Toyota Motor Corp | 道路認識装置 |
JP2007243464A (ja) | 2006-03-07 | 2007-09-20 | Aisin Aw Co Ltd | 駐車支援方法及び駐車支援装置 |
JP2016225860A (ja) | 2015-06-01 | 2016-12-28 | 株式会社富士通ゼネラル | 画質調整装置並びにカメラユニット |
WO2018025811A1 (ja) | 2016-08-01 | 2018-02-08 | クラリオン株式会社 | 画像処理装置、外界認識装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2020162013A (ja) | 2020-10-01 |
WO2020195610A1 (ja) | 2020-10-01 |
US20220191449A1 (en) | 2022-06-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11910099B2 (en) | Real-time HDR video for vehicle control | |
KR102554643B1 (ko) | 동적 범위를 확장하기 위한 다수의 동작 모드들 | |
US10377322B2 (en) | In-vehicle camera and vehicle control system | |
US10432847B2 (en) | Signal processing apparatus and imaging apparatus | |
JP7361482B2 (ja) | 画像処理装置、撮像装置、移動体及び画像処理方法 | |
US11082626B2 (en) | Image processing device, imaging device, and image processing method | |
CN104512411A (zh) | 车辆控制***及图像传感器 | |
US11968462B2 (en) | Solid-state image pickup apparatus, correction method, and electronic apparatus | |
CN111345036A (zh) | 图像处理装置、成像装置、驾驶辅助装置、移动体和图像处理方法 | |
JP5716944B2 (ja) | 車載カメラ装置 | |
Kidono et al. | Visibility estimation under night-time conditions using a multiband camera | |
KR20170006443A (ko) | 차량용 영상 처리 장치 및 방법과, 이 방법을 실행하기 위한 프로그램을 기록한 기록 매체 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210323 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210810 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221011 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221208 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230404 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230601 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230912 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231003 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7361482 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |