JP7218216B2 - 画像処理装置、及び、検出方法 - Google Patents
画像処理装置、及び、検出方法 Download PDFInfo
- Publication number
- JP7218216B2 JP7218216B2 JP2019042299A JP2019042299A JP7218216B2 JP 7218216 B2 JP7218216 B2 JP 7218216B2 JP 2019042299 A JP2019042299 A JP 2019042299A JP 2019042299 A JP2019042299 A JP 2019042299A JP 7218216 B2 JP7218216 B2 JP 7218216B2
- Authority
- JP
- Japan
- Prior art keywords
- failure diagnosis
- image processing
- processing unit
- frame
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00002—Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C5/00—Registering or indicating the working of vehicles
- G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
- G07C5/0808—Diagnosing performance data
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C5/00—Registering or indicating the working of vehicles
- G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
- G07C5/0841—Registering performance data
- G07C5/085—Registering performance data using electronic data carriers
- G07C5/0866—Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/21—Intermediate information storage
- H04N1/2104—Intermediate information storage for one or a few pictures
- H04N1/2112—Intermediate information storage for one or a few pictures using still video cameras
- H04N1/215—Recording a sequence of still pictures, e.g. burst mode
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/02—Ensuring safety in case of control system failures, e.g. by diagnosing, circumventing or fixing failures
- B60W50/0205—Diagnosing or detecting failures; Failure detection models
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Image Processing (AREA)
- Facsimiles In General (AREA)
Description
(第1の実施形態)
本実施形態に係わる画像処理装置は、例えば車載カメラのように連続して撮像された画像データをフレームごとに画像処理を行う画像処理部を備えた装置であり、1フレームの画像処理を完了するごとに画像処理部の故障診断を行う機能を備えている。1フレームの画像処理を完了するごとに画像処理部の故障診断を行う目的は、画像処理後の画像データの信頼性を確認し、正常に画像処理が行われた画像データを用いて画像認識を行うことで、安全性の高い運転支援制御を行うことである。
(第2の実施形態)
上述の第1の実施形態では、第1画像処理部12において画像処理が行なわれないフレフレームについては、故障診断許可通知部として機能する信号選択部23は、故障診断処理開始タイミング生成部21から入力される擬似画像処理完了信号に基づき、故障診断開始許可信号を出力していた。これに対し、本実施形態においては、故障診断許可通知部として機能する信号選択部23´は、第2画像処理部14から入力される画像処理完了信号に基づき、故障診断開始許可信号を出力する点が異なっている。図7は、第2の実施形態に係わる画像処理装置1´の構成の一例を示すブロック図である。図7において、図1に示す画像処理装置1と同様の構成要素については、同じ符号を付して説明を省略する。
11…キャプチャ処理部
12…第1画像処理部
13…データ選択部
14…第2画像処理部
15…システムバス
16…システムメモリ
17…画像認識処理部
18…システム制御部
19…制御レジスタ
20…故障診断制御部
21…故障診断処理開始タイミング生成部
22…故障診断開始制御部
23…信号選択部
24…故障診断開始制御部
25、26…故障診断処理部
27…割り込み制御部
Claims (8)
- 連続して撮像された画像データをフレームごとに画像処理する第1画像処理部と、
前記第1画像処理部の故障診断をフレームごとに行なう故障診断処理部と、
前記故障診断処理部に対し、前記故障診断の実行を制御する故障診断制御部と、
を備えた画像処理装置であって、
前記第1画像処理部は、指定された処理対象フレームに対応する前記画像データに対して画像処理を行い、
前記故障診断制御部は、前記第1画像処理部が前記故障診断を実行可能な状態である故障診断許可状態を通知する故障診断許可通知部を有し、前記故障診断許可通知部は、前記処理対象フレームの入力時には、前記第1画像処理部における前記処理対象フレームの画像処理の完了をもって前記故障診断許可状態を通知し、前記処理対象フレーム以外のフレームである処理非対象フレームの入力時には、前記第1画像処理部において前記画像処理が終了状態とみなす旨の通知を取得した時点で前記故障診断許可状態を通知することを特徴とする、画像処理装置。 - 前記故障診断制御部は、前記第1画像処理部の画像処理動作停止期間中に前記故障診断を完了可能なタイミングである故障診断開始タイミングを生成して通知する故障診断処理開始タイミング生成部と、前記故障診断許可状態の通知と前記故障診断開始タイミングの通知に基づき前記故障診断の実行可否を判定して前記故障診断処理部に指示を出力する故障診断開始制御部とを更に有し、前記故障診断処理開始タイミング生成部は、前記処理非対象フレームが入力された場合において、前記故障診断開始タイミングを生成する以前に、前記第1画像処理部において前記画像処理が終了状態であることを、前記故障診断許可通知部に通知することを特徴とする、請求項1に記載の画像処理装置。
- 前記故障診断開始制御部は、前記故障診断開始タイミングの通知を取得する以前に前記
故障診断許可状態の通知を取得した場合に、前記故障診断の実行を前記故障診断制御部に
指示することを特徴とする、請求項2に記載の画像処理装置。 - 前記画像データをフレームごとに画像処理する第2画像処理部を更に備え、前記故障診断許可通知部は、前記処理非対象フレームの入力時には、前記第2画像処理部における前記フレームの画像処理の完了をもって前記第1画像処理部において前記画像処理が終了状態である旨の通知を取得したものとすることを特徴とする、請求項1に記載の画像処理装置。
- 前記故障診断制御部は、前記第1画像処理部の画像処理動作停止期間中に前記故障診断を完了可能なタイミングである故障診断開始タイミングを生成して通知する故障診断処理開始タイミング生成部と、前記故障診断許可状態の通知と前記故障診断開始タイミングの通知に基づき前記故障診断の実行可否を判定して前記故障診断制御部に指示を出力する故障診断開始制御部とを更に有することを特徴とする、請求項4に記載の画像処理装置。
- 前記故障診断開始制御部は、前記故障診断開始タイミングの通知を取得する以前に前記故障診断許可状態の通知を取得した場合に、前記故障診断の実行を前記故障診断制御部に指示することを特徴とする、請求項5に記載の画像処理装置。
- 連続して撮像される画像データのうち処理対象に指定されたフレームに対応する前記画像データについて画像処理する第1画像処理部に関し、入力フレームごとに前記第1画像処理部の故障診断を行なって故障を検知する検出方法であって、
前記フレームの入力の検知により前記第1画像処理部の故障診断許可ステータスを実行不可状態に設定し、
前記フレームの入力を検知してから所定時間経過後に、前記第1画像処理部の画像処理動作停止期間中に前記故障診断を完了可能なタイミングである故障診断開始タイミング信号を出力し、
前記故障診断開始タイミング信号が出力される以前に擬似画像処理完了信号を出力し、
前記検知した入力フレームが前記処理対象に指定されたフレームの場合は、前記第1画像処理部での画像処理が完了したタイミングで前記故障診断許可ステータスを実行可状態に設定し、
前記検知した入力フレームが前記処理対象に指定されていないフレームの場合は、前記擬似画像処理完了信号を受信したタイミングで前記故障診断許可ステータスを実行可状態に設定し、
前記故障診断開始タイミング信号を受信した時点において、前記故障診断許可ステータスが実行可状態である場合に故障診断実行信号を出力し、
前記故障診断実行信号の受信により前記第1画像処理部の故障診断を実行することを特徴とする、検出方法。 - 連続して撮像される画像データのうち処理対象に指定されたフレームに対応する前記画像データについて画像処理する第1画像処理部に関し、入力フレームごとに前記第1画像処理部の故障診断を行なって故障を検知する検出方法であって、
前記フレームの入力の検知により前記第1画像処理部の故障診断許可ステータスを実行不可状態に設定し、
前記フレームの入力を検知してから所定時間経過後に、前記第1画像処理部の画像処理動作停止期間中に前記故障診断を完了可能なタイミングである故障診断開始タイミング信号を出力し、
前記検知した入力フレームが前記処理対象に指定されたフレームの場合は、前記第1画像処理部での画像処理が完了したタイミングで前記故障診断許可ステータスを実行可状態に設定し、
前記検知した入力フレームが前記第1画像処理部に処理対象に指定されていないフレームの場合は、第2画像処理部において前記入力フレームの画像処理が完了したタイミングで前記故障診断許可ステータスを実行可状態に設定し、
前記故障診断開始タイミング信号を受信した時点において、前記故障診断許可ステータスが実行可状態である場合に故障診断実行信号を出力し、
前記故障診断実行信号の受信により前記第1画像処理部の故障診断を実行することを特徴とする、検出方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019042299A JP7218216B2 (ja) | 2019-03-08 | 2019-03-08 | 画像処理装置、及び、検出方法 |
US16/565,659 US10848756B2 (en) | 2019-03-08 | 2019-09-10 | Image processing apparatus and failure detection method for image processing apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019042299A JP7218216B2 (ja) | 2019-03-08 | 2019-03-08 | 画像処理装置、及び、検出方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020144740A JP2020144740A (ja) | 2020-09-10 |
JP7218216B2 true JP7218216B2 (ja) | 2023-02-06 |
Family
ID=72334725
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019042299A Active JP7218216B2 (ja) | 2019-03-08 | 2019-03-08 | 画像処理装置、及び、検出方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10848756B2 (ja) |
JP (1) | JP7218216B2 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018045503A (ja) | 2016-09-15 | 2018-03-22 | ルネサスエレクトロニクス株式会社 | 描画処理装置、診断テスト方法、及びプログラム |
JP2019049884A (ja) | 2017-09-11 | 2019-03-28 | 株式会社東芝 | 画像処理装置、および故障診断制御方法 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6408832B2 (ja) * | 2014-08-27 | 2018-10-17 | ルネサスエレクトロニクス株式会社 | 制御システム、中継装置、及び制御方法 |
JP6458579B2 (ja) | 2014-10-27 | 2019-01-30 | 株式会社デンソー | 画像処理装置 |
JP2016117401A (ja) | 2014-12-22 | 2016-06-30 | 植野 弘志 | 複合車輪付き台車 |
US10152890B2 (en) * | 2015-01-20 | 2018-12-11 | Hitachi Automotive Systems, Ltd. | On-vehicle camera device |
JP6571424B2 (ja) | 2015-07-06 | 2019-09-04 | 株式会社トランストロン | 故障診断装置 |
JP6407176B2 (ja) | 2016-01-22 | 2018-10-17 | 三菱電機株式会社 | 撮像装置及び故障検出方法、並びにプログラム及び記録媒体 |
-
2019
- 2019-03-08 JP JP2019042299A patent/JP7218216B2/ja active Active
- 2019-09-10 US US16/565,659 patent/US10848756B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018045503A (ja) | 2016-09-15 | 2018-03-22 | ルネサスエレクトロニクス株式会社 | 描画処理装置、診断テスト方法、及びプログラム |
JP2019049884A (ja) | 2017-09-11 | 2019-03-28 | 株式会社東芝 | 画像処理装置、および故障診断制御方法 |
Non-Patent Citations (1)
Title |
---|
YAMADA, Yutaka et al.,A 20.5TOPS and 217.3GOPS/mm2 Multicore SoC with DNN Accelerator and Image Signal Processor Complying with ISO26262 for Automotive Applications,2019 IEEE International Solid-State Circuits Conference (ISSCC),米国,IEEE,2019年02月17日,3 pages in total,https://ieeexplore.ieee.org/document/8662459/ |
Also Published As
Publication number | Publication date |
---|---|
US20200288116A1 (en) | 2020-09-10 |
JP2020144740A (ja) | 2020-09-10 |
US10848756B2 (en) | 2020-11-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10911746B2 (en) | Image processing apparatus and failure diagnosis control method | |
US10102006B2 (en) | Method and apparatus for controlling a startup bootstrap program of an intelligent TV set | |
EP3591959B1 (en) | Image sensor and control system | |
CN113038027B (zh) | 曝光控制方法、装置、设备以及存储介质 | |
US11849912B2 (en) | Endoscopic camera system and image signal transmission method thereof | |
US10921366B2 (en) | Detection device and detection method | |
JPWO2016203505A1 (ja) | 半導体装置及び診断テスト方法 | |
JP7218216B2 (ja) | 画像処理装置、及び、検出方法 | |
CN110502369A (zh) | 一种设备死机恢复的方法、装置和存储介质 | |
CN108198124B (zh) | 医学图像处理方法、装置、计算机设备和存储介质 | |
JP2006311748A (ja) | 電源装置および機器 | |
JP2009252104A (ja) | 監視装置、電子制御装置 | |
JP6307425B2 (ja) | エレベータ制御装置及びエレベータ制御方法 | |
CN109542697B (zh) | 运算处理装置以及运算处理方法 | |
CN113347365B (zh) | 图像传感器的触发采集方法及图像采集设备 | |
CN106775635B (zh) | 计算机***及其开机方法 | |
US8780212B2 (en) | Captured image display apparatus and method thereof | |
CN115098427A (zh) | 一种链路宽度自适应的实现方法 | |
US20160246741A1 (en) | Image forming apparatus, control method, and storage medium | |
JP7191237B2 (ja) | センサシステム、画像処理装置、画像処理方法およびプログラム | |
CN106850409B (zh) | 一种消息断链任务处理的方法、设备及*** | |
CN108415862B (zh) | 光模块的通道保存方法、装置及光模块 | |
JP2000010954A5 (ja) | ディジタルシグナルプロセッサ及びプロセッサのセルフテスト方法 | |
CN108683866B (zh) | 图像处理及传输方法、图像处理器及相关存储介质和*** | |
CN108874454B (zh) | 一种目标驱动程序的自适应启动方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210823 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220727 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220809 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220926 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221227 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230125 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7218216 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |