JP2009231921A - 画像処理装置、画像処理方法および画像処理システム - Google Patents
画像処理装置、画像処理方法および画像処理システム Download PDFInfo
- Publication number
- JP2009231921A JP2009231921A JP2008071717A JP2008071717A JP2009231921A JP 2009231921 A JP2009231921 A JP 2009231921A JP 2008071717 A JP2008071717 A JP 2008071717A JP 2008071717 A JP2008071717 A JP 2008071717A JP 2009231921 A JP2009231921 A JP 2009231921A
- Authority
- JP
- Japan
- Prior art keywords
- color
- color information
- light source
- discrimination
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】大規模店舗内に設置された複数の監視カメラにより取得された複数の画像からそれぞれ色情報を抽出し、この抽出した色情報に基づき前記複数の画像内に存在する移動人物を同定あるいは識別する画像処理装置において、人間の色知覚特性をベースとした色分布から色判別用のデータベースを構築することで色判別を行ない、色情報を抽出する。
【選択図】 図3
Description
これらの外にも、移動する人物の顔検出に基づく当該人物の追跡や検索、あるいは、移動する人物の肌色抽出に基づく当該人物の追跡に関する技術が各種提案されている。
まず、第1の実施の形態について説明する。
図1は、本発明に係る画像処理装置および画像処理方法が適用される画像処理システムの監視領域と監視カメラの設置状態を主体に示す模式図である。この画像処理システムは、たとえば、スーパーマーケットやデパート等の大規模店舗内に設置された複数の監視カメラで取得した画像から移動人物(移動物体)を抽出し、抽出した人物が着用する衣服の色情報を基に、各カメラ間で移動人物を同定して当該人物を追跡するものである。
なお、必ずしも照明用光源の影響を除去する必要はなく、照明用光源の影響を除去しなくても一定レベルでロバストに色判別が可能である。
まず、色判別データの基本構造について説明する。
画像に含まれる領域の色判別を行なうにあたり、2種類の色分類を定義する。1つは、同系色の集合を代表する色を意味する基本系統色と、同系色の集合を構成する色を意味する構成色である。基本系統色と構成色の関係は、たとえば、図4に示すようになっている。すなわち、画像を構成する画素の色を判別する際に、細かな色分類が可能な構成色で色を判別した後、限定された色である基本系統色に分類する。1つの基本系統色には、複数の構成色が属する、色情報を管理する際のデータ構造を定義する。
画像の色の分類は、人間が何色に知覚するかに依存する。そこで、様々な環境で撮影された画像に対して、人間が画像の色を決定し、分類すべき基本系統色ごとに色情報を蓄積する色判別用のデータベースを構築する。すなわち、基本系統色の個々の色について、その色に属すると人間が判断する色情報を収集し、データベースとして構築する。たとえば、赤色には鮮やかな赤、黒ずんだ赤、白に近い赤などが含まれる。
上記したようにして作成された色判別用のデータベースを基に、構成色をメッシュ状に配置したメッシュ型色判別用のデータベースを構築する(図6参照)。ここに、図6(a)は、収集した色情報を単純にL*u*v*色空間にプロットして生成される色判別用のデータベースを示し、図6(b)は、図6(a)の色判別用のデータベースを標本化し、色の点を増やしたメッシュ型色判別用のデータベースを示している。
また、有彩色と無彩色、有彩色同士、無彩色同士の違いが僅かな場合、色の判別が困難であることから、画像を構成する画素に対して複数の色を割当てることが可能な仕組みを盛り込むことができる。
なお、図8において、三角マークで示す服の部分21は赤色を示し、丸マークで示すズボンの部分22は黒色を示している。
すなわち、前述したように、画像から切出した人物領域について、画素単位で色判別を行なう。服の領域は、光の当たり方の違い、皺の有無等の影響により、本来同じ色の領域全体が必ずしも1つの色に判別されない。
図14は、第2の実施の形態に係る画像処理装置および画像処理方法が適用される画像処理システムの構成を概略的に示すものである。第2の実施の形態の前述した第1の実施の形態と異なる点は、光源影響除去処理部12a,12bが、光源種類推定手段としての光源種類推定処理部17a,17b、データベース選択手段としてのデータベース選択処理部部18a,18bに置き換わり、かつ、色判別用のデータベース14a,14bがそれぞれ複数個の色判別用のデータベース14a1〜14an,14b1〜14bnに置き換わった点にあり、その他は前述した第1の実施の形態(図3)と同様であるので、その説明は省略する。
ここに、光源の推定処理について簡単に説明しておく。一般に、光源の色みは、光の波長成分の組合せにより変化する。そこで、太陽光や照明などに含まれる光の波長成分を推定することで、光源の色みを推定する。具体的には、たとえば、赤みがかった光源、黄色みがかった光源などである。なお、光源の推定処理の詳細については、たとえば、特開2005−167444号公報、および、特開2006−0908972005−167444号公報などに記載されている。
Claims (8)
- 入力される少なくとも2つの画像からそれぞれ色情報を抽出し、この抽出した色情報に基づき前記2つの画像内に存在する移動物体を同定あるいは識別する画像処理装置であって、
色空間全体を代表色である基本系統色と基本系統色に属する構成色とから構成される色情報を格納した色判別用のデータベースと、
入力される少なくとも2つの画像に対し前記色判別用のデータベースを用いて色判別を行なうことにより色情報を抽出する色判別手段と、
前記入力される少なくとも2つの画像から移動物体の領域を切出す物体切出手段と、
この物体切出手段により切出された移動物体の領域から、前記色判別手段により抽出された色情報に基づき、当該移動物体の色情報を抽出する色情報抽出手段と、
この色情報抽出手段により抽出された色情報に基づき前記2つの画像内に存在する移動物体を同定あるいは識別する処理手段と、
を具備したことを特徴とする画像処理装置。 - 前記入力される2つの画像に対し当該画像を取得する際に用いられた照明用光源の影響を除去する光源影響除去手段をさらに具備し、
前記色判別手段は、前記光源影響除去手段により照明用光源の影響を除去された画象に対し前記色判別用のデータベースを用いて色判別を行なうことを特徴とする請求項1記載の画像処理装置。 - 前記色判別用のデータベースは、前記入力される2つの画像を取得する際に用いられた照明用光源の種類ごとに設けられており、
前記入力される2つの画像に対し当該画像を取得する際に用いられた照明用光源の種類を推定する光源種類推定手段と、
この光源種類推定手段により推定された照明用光源の種類に対応した色判別用のデータベースを前記各色判別用のデータベースの中から選択するデータベース選択手段とをさらに具備し、
前記色判別手段は、前記データベース選択手段により選択された色判別用のデータベースを用いて色判別を行なうことを特徴とする請求項1記載の画像処理装置。 - 前記色判別用のデータベースにおける構成色はメッシュ状に配置されていることを特徴とする請求項1記載の画像処理装置。
- 入力される少なくとも2つの画像からそれぞれ色情報を抽出し、この抽出した色情報に基づき前記2つの画像内に存在する移動物体を同定あるいは識別する画像処理方法であって、
色空間全体を代表色である基本系統色と基本系統色に属する構成色とから構成される色情報を格納した色判別用のデータベースを有し、
入力される少なくとも2つの画像に対し前記色判別用のデータベースを用いて色判別を行なうことにより色情報を抽出する色判別ステップと、
前記入力される少なくとも2つの画像から移動物体の領域を切出す物体切出ステップと、
この物体切出ステップにより切出された移動物体の領域から、前記色判別ステップにより抽出された色情報に基づき、当該移動物体の色情報を抽出する色情報抽出ステップと、
この色情報抽出ステップにより抽出された色情報に基づき前記2つの画像内に存在する移動物体を同定あるいは識別する処理ステップと、
を具備したことを特徴とする画像処理方法。 - 少なくとも2つの撮像手段により取得された画像からそれぞれ色情報を抽出し、この抽出した色情報に基づき前記2つの画像内に存在する移動人物を同定して当該人物を追跡する画像処理システムであって、
色空間全体を代表色である基本系統色と基本系統色に属する構成色とから構成される色情報を格納した色判別用のデータベースと、
少なくとも2つの撮像手段により取得された2つの画像に対し前記色判別用のデータベースを用いて色判別を行なうことにより色情報を抽出する色判別手段と、
前記少なくとも2つの撮像手段により取得された2つの画像から移動人物の領域を切出す人物切出手段と、
この人物切出手段により切出された移動人物の領域から、前記色判別手段により抽出された色情報に基づき、当該移動人物の色情報を抽出する色情報抽出手段と、
この色情報抽出手段により抽出された色情報に基づき前記2つの画像内に存在する移動人物を同定して当該移動人物を追跡する処理手段と、
を具備したことを特徴とする画像処理システム。 - 前記少なくとも2つの撮像手段により取得された2つの画像に対し当該画像を取得する際に用いられた照明用光源の影響を除去する光源影響除去手段をさらに具備し、
前記色判別手段は、前記光源影響除去手段により照明用光源の影響を除去された画象に対し前記色判別用のデータベースを用いて色判別を行なうことを特徴とする請求項6記載の画像処理システム。 - 前記色判別用のデータベースは、前記少なくとも2つの撮像手段により取得された2つの画像を取得する際に用いられた照明用光源の種類ごとに設けられており、
前記少なくとも2つの撮像手段により取得された2つの画像に対し当該画像を取得する際に用いられた照明用光源の種類を推定する光源種類推定手段と、
この光源種類推定手段により推定された照明用光源の種類に対応した色判別用のデータベースを前記各色判別用のデータベースの中から選択するデータベース選択手段とをさらに具備し、
前記色判別手段は、前記データベース選択手段により選択された色判別用のデータベースを用いて色判別を行なうことを特徴とする請求項6記載の画像処理システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008071717A JP5022956B2 (ja) | 2008-03-19 | 2008-03-19 | 画像処理装置、画像処理方法および画像処理システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008071717A JP5022956B2 (ja) | 2008-03-19 | 2008-03-19 | 画像処理装置、画像処理方法および画像処理システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009231921A true JP2009231921A (ja) | 2009-10-08 |
JP5022956B2 JP5022956B2 (ja) | 2012-09-12 |
Family
ID=41246886
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008071717A Expired - Fee Related JP5022956B2 (ja) | 2008-03-19 | 2008-03-19 | 画像処理装置、画像処理方法および画像処理システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5022956B2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016162099A (ja) * | 2015-02-27 | 2016-09-05 | 富士通株式会社 | 画像判定装置、画像判定方法、及びプログラム |
JP2018093445A (ja) * | 2016-12-07 | 2018-06-14 | 株式会社大林組 | 監視システム、監視方法及び監視プログラム |
US10140555B2 (en) | 2013-10-30 | 2018-11-27 | Nec Corporation | Processing system, processing method, and recording medium |
CN111565300A (zh) * | 2020-05-22 | 2020-08-21 | 深圳市百川安防科技有限公司 | 基于对象的视频文件处理方法、设备及*** |
WO2023073851A1 (ja) * | 2021-10-28 | 2023-05-04 | 日本たばこ産業株式会社 | 情報処理システム |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04188377A (ja) * | 1990-11-22 | 1992-07-06 | Oyo Keisoku Kenkyusho:Kk | 色識別装置 |
JPH07322126A (ja) * | 1994-05-30 | 1995-12-08 | Sanyo Electric Co Ltd | 動きベクトル検出回路およびそれを用いた被写体追尾カメラ装置 |
JP2004120092A (ja) * | 2002-09-24 | 2004-04-15 | Canon Inc | 画像処理装置、画像処理システム、画像処理方法、記憶媒体、及びプログラム |
JP2004192129A (ja) * | 2002-12-09 | 2004-07-08 | Fuji Photo Film Co Ltd | 顔領域抽出方法及び装置 |
JP2006229465A (ja) * | 2005-02-16 | 2006-08-31 | Matsushita Electric Ind Co Ltd | 監視装置、監視方法、監視用プログラム |
JP2008017093A (ja) * | 2006-07-05 | 2008-01-24 | Matsushita Electric Ind Co Ltd | 監視システム、監視装置及び監視方法 |
-
2008
- 2008-03-19 JP JP2008071717A patent/JP5022956B2/ja not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04188377A (ja) * | 1990-11-22 | 1992-07-06 | Oyo Keisoku Kenkyusho:Kk | 色識別装置 |
JPH07322126A (ja) * | 1994-05-30 | 1995-12-08 | Sanyo Electric Co Ltd | 動きベクトル検出回路およびそれを用いた被写体追尾カメラ装置 |
JP2004120092A (ja) * | 2002-09-24 | 2004-04-15 | Canon Inc | 画像処理装置、画像処理システム、画像処理方法、記憶媒体、及びプログラム |
JP2004192129A (ja) * | 2002-12-09 | 2004-07-08 | Fuji Photo Film Co Ltd | 顔領域抽出方法及び装置 |
JP2006229465A (ja) * | 2005-02-16 | 2006-08-31 | Matsushita Electric Ind Co Ltd | 監視装置、監視方法、監視用プログラム |
JP2008017093A (ja) * | 2006-07-05 | 2008-01-24 | Matsushita Electric Ind Co Ltd | 監視システム、監視装置及び監視方法 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10140555B2 (en) | 2013-10-30 | 2018-11-27 | Nec Corporation | Processing system, processing method, and recording medium |
JP2016162099A (ja) * | 2015-02-27 | 2016-09-05 | 富士通株式会社 | 画像判定装置、画像判定方法、及びプログラム |
JP2018093445A (ja) * | 2016-12-07 | 2018-06-14 | 株式会社大林組 | 監視システム、監視方法及び監視プログラム |
CN111565300A (zh) * | 2020-05-22 | 2020-08-21 | 深圳市百川安防科技有限公司 | 基于对象的视频文件处理方法、设备及*** |
WO2023073851A1 (ja) * | 2021-10-28 | 2023-05-04 | 日本たばこ産業株式会社 | 情報処理システム |
Also Published As
Publication number | Publication date |
---|---|
JP5022956B2 (ja) | 2012-09-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4746050B2 (ja) | ビデオデータを処理するための方法及びシステム | |
CN101685542B (zh) | 电子设备、模糊图像分拣方法 | |
US11830256B2 (en) | Systems and methods for locating a retroreflective object in a digital image | |
JP4811653B2 (ja) | 物体検出装置 | |
US8922674B2 (en) | Method and system for facilitating color balance synchronization between a plurality of video cameras and for obtaining object tracking between two or more video cameras | |
JP5022956B2 (ja) | 画像処理装置、画像処理方法および画像処理システム | |
US20160321825A1 (en) | Measuring apparatus, system, and program | |
Cavallaro et al. | Change detection based on color edges | |
WO2018179361A1 (ja) | 画像処理装置、画像処理方法、および記録媒体 | |
KR101875891B1 (ko) | 다중 검출 방식을 이용한 얼굴 검출 장치 및 방법 | |
Hadiprakoso et al. | Face anti-spoofing using CNN classifier & face liveness detection | |
JP2004219277A (ja) | 人体検知方法およびシステム、プログラム、記録媒体 | |
WO2013114803A1 (ja) | 画像処理装置及びその画像処理方法、並びにコンピュータ・プログラム、および画像処理システム | |
WO2018179360A1 (ja) | 画像処理装置、画像処理方法、および記録媒体 | |
JP4780564B2 (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
JP4140126B2 (ja) | 領域分割および対象物抽出装置 | |
CN111898448B (zh) | 一种基于深度学习的行人属性识别方法和*** | |
JP5142416B2 (ja) | 物体検出装置 | |
KR101729536B1 (ko) | 이동 물체 검출 장치 및 그 방법 | |
EP3497619B1 (en) | Method for detecting a led light source in a sequence of frames, method for detecting a traffic light which comprises at least one led light source, and vehicle | |
Hadiprakoso | Face anti-spoofing method with blinking eye and hsv texture analysis | |
CN114359776A (zh) | 一种融合光与热成像的火焰检测方法、装置 | |
JP6618438B2 (ja) | 前景領域抽出装置、方法、及びプログラム | |
Ismael | Comparative study for different color spaces of image segmentation based on Prewitt edge detection technique | |
JP7419744B2 (ja) | 組織画像の解析方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100906 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120127 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120306 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120427 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120522 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120618 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5022956 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150622 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |