JP2008059108A - 画像処理装置,画像処理方法、そのプログラムおよび人流監視システム - Google Patents
画像処理装置,画像処理方法、そのプログラムおよび人流監視システム Download PDFInfo
- Publication number
- JP2008059108A JP2008059108A JP2006232990A JP2006232990A JP2008059108A JP 2008059108 A JP2008059108 A JP 2008059108A JP 2006232990 A JP2006232990 A JP 2006232990A JP 2006232990 A JP2006232990 A JP 2006232990A JP 2008059108 A JP2008059108 A JP 2008059108A
- Authority
- JP
- Japan
- Prior art keywords
- image
- attribute
- image processing
- model
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Image Processing (AREA)
- Image Analysis (AREA)
- Processing Or Creating Images (AREA)
Abstract
【課題】本発明の目的は、顔画像を用いて人物を認識する際に従来以上に高精度、かつ本人により近いと考えられる任意角度顔画像を生成することが可能な画像処理装置を提供することにある。
【解決手段】本発明の画像処理装置は、カメラから入力される画像を記憶する画像記憶手段と、画像から顔器官の位置等を検出する顔パーツ抽出手段と、ワイヤフレームで構成された平均的な人物頭部の三次元形状情報を記憶する三次元形状モデル格納手段と、顔パーツ抽出手段から得られた顔パーツ位置に基づき、三次元形状モデルを変形させ、画像に含まれる人物の顔パーツ配置に適合する三次元形状モデルを生成する簡易モデル生成手段と、画像から人物属性を算出する属性算出手段と、属性算出手段から得られた人物属性に基づき、簡易モデル生成手段から得られた三次元形状モデルを変形させて詳紬モデルを生成する属性反映手段と、を備える。
【選択図】図1
【解決手段】本発明の画像処理装置は、カメラから入力される画像を記憶する画像記憶手段と、画像から顔器官の位置等を検出する顔パーツ抽出手段と、ワイヤフレームで構成された平均的な人物頭部の三次元形状情報を記憶する三次元形状モデル格納手段と、顔パーツ抽出手段から得られた顔パーツ位置に基づき、三次元形状モデルを変形させ、画像に含まれる人物の顔パーツ配置に適合する三次元形状モデルを生成する簡易モデル生成手段と、画像から人物属性を算出する属性算出手段と、属性算出手段から得られた人物属性に基づき、簡易モデル生成手段から得られた三次元形状モデルを変形させて詳紬モデルを生成する属性反映手段と、を備える。
【選択図】図1
Description
本発明は、顔画像を用いて人物を認識するための画像処理装置,画像処理方法、そのプログラムおよび人流監視システムに関する。
現在、ビルのエントランスや駐車場,工場や学校などの敷地の入口,大規模店舗やコンビニエンスストアなどの店舗内部などには、監視カメラが設けられ、監視画像が磁気テープや磁気ディスクなどの記憶媒体に記録されるとともに、施設の管理者や警備員などによってリアルタイムで人流監視などが行われている。このような人流監視の主な目的は、テロリスト等の犯罪者や不審者を雑踏の中から発見したり、捜査願いの出ている失踪者等を発見するためである。しかし、四六時中、監視者が監視画面を眺めて、対象者を発見することは人的コストが非常に大きく、また、疲労や集中カ低下により見逃する可能性もあり、確実に発見することは困難である。
このため、監視カメラから得られる監視画像に対して、画像処理および画像認識処理を施して、自動的に対象者を発見することが重要である。
顔を撮影した画像を用いて人物を識別するシステムにおいて、身分証などによって得られる予め登録した顔画像と、識別に用いるカメラで撮影した顔画像との間に、カメラに対する人物の姿勢変動に起因する見かけの歪みや変形が起こり、認証精度が低下する要因となっている。特に、近年市販されるようになった顔認識処理のみを行う製品(以下、顔認識エンジン)においては、正面顔のみを対象にしたものが多く、こうした正面顔の顔認識エンジンでは、見かけの歪みや変形の影響を受けやすい。
そこで、このような間題を解決するために、例えば、特許文献1には、以下の手順で、事前に登録されている正面顔画像を、入力された任意角度の顔画像と同じ向きを向かせるように変換し、照合を行う手法が開示されている。
これは、まず、事前に登録されている正面顔画像から目・鼻・口などの顔器官を、自動もしくは手動で抽出し、その器官の輪郭位置に基づいて、ワイヤフレームで形成された三次元頭部モデルを割り付ける。割り付け後に、入力画像における各点の色情報を三次元頭部モデルに対応させることで、三次元頭部モデルを着色する。こうしてできた三次元頭部モデルを回転して任意の角度を向かせ、再度画像に戻すことにより入力画像と同じ向きの顔画像を生成する。
なお、ワイヤフレームとは、対象とする物体(ここでは眼・鼻などの顔部品など)の輪郭を複数の線分で結んで表現したモデルである。
特許文献1に開示されている顔画像認識方法においては、眼・口等の顔パーツの境界位置に関しては、入力画像から画像のエッジを計算することにより、ワイヤフレームによる三次元頭部モデルを割り付ける計算が可能であったが、額・エラ・頬・下顎頤といった、正確な顔パーツ位置を頭部向きに関わらず画像上から得にくい部分ではワイヤフレーム割当てがうまく行われず、結果として標準モデル等の個人の特徴を反映していない形状モデルを用いて、情報の補完を行うことになる。このため、各個人により異なると考えられるこれらの部位に対して適切な形状復元や変形補正ができなかった。
また、隠れ等によりカメラから直接撮像できない部位に関しては、これらの三次元形状復元においては、事前にシステム内に格納しておいた標準的な三次元頭部モデルの形状を利用して、これらの情報欠損部位に対する補完を行っていた。このため、前記手法により生成された画像には、本人の特徴を反映していない部分が含まれることになり、不正確な顔画像が生成されるという問題があった。
上記課題を達成するために、本発明の画像処理装置,画像処理方法、では観点(人物に対するカメラの向き(上下,左右等)や人物の姿勢あるいは表情,照明,カメラパラメータ(ズーム倍率,レンズ特性)などのいずれかで、ユーザによって設定される)に従って撮影された観点撮影顔画像を入力し、この入力画像に対して、顔パーツ(眼・鼻・口・眉・黒子・外耳,髪生え際などの少なくとも1つを含む)を画像処理により抽出し、顔パーツの抽出結果に基づき、ワイヤフレームで形成された三次元頭部形状モデルを顔パーツ配置に対応させて変形させながら、入力画像に割り付けたモデル(以下、簡易モデルと呼ぶ)を生成する。そして、入力画像もしくは顔パーツ情報から人物属性(頭部大きさ・顔頭部輪郭形状・年齢・性別・体格などの少なくとも1つを含む)を算出し、人物属性に基づき、前記簡易モデルを修正して詳細モデルを作成することにより、より入力画像に対して妥当な三次元個人形状データを作成することを特徴とする。
本発明によれば、顔パーツの配置・形状を抽出し、三次元頭部形状モデルを各個人に適した形に変形・調整した上で、入力画像から得られる色および模様情報(以下、テクスチャと呼ぶ)を貼り付けるため、抽出できた顔パーツ近傍の形状は、各個人の特徴を反映していると考えられる。これは従来技術と同等であるが、人物頭部全体を見た場合には、これだけでは各個人の特徴を十分に反映しているとは言えない。
従って、本発明の画像処理装置,画像処理方法では人物属性を算出し、その算出結果に基づいて、顔パーツのみの配置・形状だけでは欠落してしまう情報を基に、更に三次元頭部形状モデルを修正することにより、より高精度な三次元個人形状データが生成できるようになる。
また、前記の三次元個人形状データが一旦生成されると、以後はその形状データを用いて任意観点の画像を生成することは容易である。このため、監視カメラ等から入力された位置姿勢の不明な頭部画像から、本発明の手段を用いて三次元個人形状データを生成し、例えば正面顔画像を生成することで、正面顔用の顔認識エンジンを利用して人物照合を行うことができるようになる。
また、前記の本発明の画像処理装置,画像処理方法では、算出された人物属性に基づいて、それぞれ異なる特徴を持つ三次元頭部詳細形状モデル(以下、詳細モデル)を選択し、簡易モデルの変形パラメータを用いて、この詳細モデルを変形させることで人物属性を三次元個人形状データに反映させることが可能になる。
更に、前記の本発明の画像処理装置,画像処理方法では、算出された人物属性に基づいて、それぞれ異なる特徴を持つ三次元頭部詳紬形状モデル(以下、詳細モデル)を選択し、この詳細モデル内の変形パラメータを利用して基本モデルを変形させることで人物属性を三次元個人形状データに反映させる構成をとることも考えられる。
尚、本発明は、以上の画像処理装置,画像処理方法を実行させるプログラムを含む。
本発明によれば、顔認識システムにおいて、撮影の上下,左右,斜め方向或いは顔の各種の表情などの色々な観点のそれぞれに対して、三次元個人形状データを生成できる効果がある。
また、その三次元個人形状データから、入力画像とは異なる観点の画像を生成することができ、顔認識システムにおいて、認識精度を高く保持することが可能であるという効果がある。
そのような高精度の顔画像認識装置を用いることにより、信頼性および確度の高い防犯システム,監視システム,セキュリティシステム等を実現する効果がある。
(第1の実施形態)
以下、本発明の第1の実施形態について、図1〜図8を参照しながら詳細に説明する。
以下、本発明の第1の実施形態について、図1〜図8を参照しながら詳細に説明する。
図1は、本発明の第1の実施形態に係る画像処理装置の構成の例を示した図である。
図1に示すように、画像処理装置101は、カメラ102と、表示装置103に接続されている。
また、図2は画像処理装置101の内部を示す例である。画像入力部104,画像記憶部105,顔パーツ抽出部106,三次元形状モデル格納部107,簡易モデル生成部
108,詳細モデル生成部(属性算出部)109,属性反映部110,画像生成部111を含んで構成される。画像入力部は、カメラ102から送られる画像信号を受信し、画像信号がアナログ信号の場合には、A/D(Ana1ogtoDigital) 変換装置を用いてデジタル信号に変換し、変換後の画像データを画像記憶部105に格納する。また、画像信号がデジタル信号の場合には、カメラ102との通信処理,エラー訂正などを行った後、その画像データを画像記憶部105に格納する。画像記憶部105は、画像入力部104によってカメラ102から入力された画像データを記憶するとともに、顔パーツ抽出部106,属性算出部109の要求に応じて、格納された画像データを読み書きし、適宜、画像データの全部または一部を変更または追加する。
108,詳細モデル生成部(属性算出部)109,属性反映部110,画像生成部111を含んで構成される。画像入力部は、カメラ102から送られる画像信号を受信し、画像信号がアナログ信号の場合には、A/D(Ana1ogtoDigital) 変換装置を用いてデジタル信号に変換し、変換後の画像データを画像記憶部105に格納する。また、画像信号がデジタル信号の場合には、カメラ102との通信処理,エラー訂正などを行った後、その画像データを画像記憶部105に格納する。画像記憶部105は、画像入力部104によってカメラ102から入力された画像データを記憶するとともに、顔パーツ抽出部106,属性算出部109の要求に応じて、格納された画像データを読み書きし、適宜、画像データの全部または一部を変更または追加する。
なお、本明細書では、「画像データ」を単に「画像」ということがある。顔パーツ抽出部106では、画像記憶部105に格納されている画像から、目・眉・口などのパーツを抽出する。このパーツ抽出は公知の動的輪郭探索法やテンプレートマッチング法,グラフマッチング法などを用いることで実現可能である。
三次元形状モデル格納部107では、顔の三次元形状を事前にワイヤフレームを用いて表現したモデル情報を保持しておく。ワイヤフレームモデルは図6に示すように、三次元座標を表す頂点133と、その接続情報134とで構成されている。このモデル情報には、ワイヤフレームの各頂点の三次元空間中の座標だけでなく、例えば右目尻点がワイヤフレームのどの頂点に対応しているかなどの、顔器官位置との対応付け情報も含まれる。
簡易モデル生成部108では、顔パーツ抽出部106で得られた顔パーヅ位置に基づいて、前記三次元形状モデルを変形させ、前記入力画像に含まれる人物の顔パーツ配置に適合する三次元形状モデル(以下、簡易モデル)を生成する。
簡易モデル生成部108では、顔パーツ抽出部106で得られた顔パーツ位置に基づいて、前記三次元形状モデルを変形させ、前記入力画像に含まれる人物の顔パーツ配置に適合する三次元形状モデル(以下、簡易モデル)を生成する。この簡易モデルは、顔パーツ抽出部106で抽出できた顔パーツ座標を基にその形状を調整できる。
例えば、簡易モデルの幅に関しては、動的輪郭法を用いて左右の目尻・目頭を見つけることができ、その右目尻と左目尻の間隔から頭部の幅を推測することができる。これは、例えば、顔検出と動的輪郭法による眼輪郭の検出を行うものであり、具体的には以下の流れになる。
まず,非特許文献1に示したViolaらの手法を用いることで、画像中からの顔検出と同時に、顔の位置と大きさから眼の大まかな位置がわかるため、眼の存在する範囲よりも大きく動的輪郭法の初期輪郭線を配置する。その後に画像中のエッジを越えないように輪郭線を収縮させていくことで、眼周辺に輪郭線の位置が収束する。このため、額・エラ・頬・下顎といった、顔上で明確なエッジの無い顔パーツの位置は求めることができず、簡易モデルは、あくまで、眉,眼,鼻,口等のパーツに対して、個人の特徴を反映させたモデルとなる。
属性算出部109では、顔の幅・頭部の大きさ・頭部輪郭形状・年齢・性別・体格・身長などの人物属性を算出する。このとき、入力画像の顔領域だけに限らず、入力画像中に映る人物全体の画像も利用する。例えば、入力画像に対して公知の背景差分法を用いて抽出した人物シルエットと、公知の肌色抽出法を用いて抽出した顔領域との比を使うことで、顔の幅を算出できる。また、人物シルエットと、前記の顔パーツ位置に基づいて頭部位置を求め、頭部位置に相当するシルエットの幅を求めることで頭部の大きさが算出できる。さらに、顔パーツ周囲のしわ量から年齢が、服装から性別がそれぞれ算出できる。
詳細モデル生成部110では、前記属性算出部109から得られた人物属性から類推される形状特徴を、簡易モデルに反映させて詳細モデルを生成する。これは、例えば、顔の幅情報を利用して簡易モデルの横方向のスケールを変化させたり、体格情報を利用して簡易モデルの肉付き量を変化させたり、性別情報を利用してエラの輪郭を変化させたりする。あるいは、属性情報として、機械的に計算できるものだけではなく、他の人間の印象や目撃情報を利用しても良い。例えば,欧米人らしいという情報を基に鼻の高さを高くすることも考えられる。なお、この詳細モデル生成部110には、各属性の特徴を反映させたモデルを保持しておき、属性情報が入力されたときに、簡易モデルに特徴的な形状情報を反映させてもよい。
画像生成部111では、詳細モデルを指定された位置姿勢に移動させて二次元平面に投影し、必要に応じてカメラパラメータや照明条件などを考慮して画像を生成する。
以上に説明した画像処理装置101は、図示しない演算装置などからなるCPU
(Central Processing Unit) と、半導体メモリやハードディスク記憶装置などからなる記憶装置とを含んで構成されたコンピュータによって構成される。その場合、画像記憶部
105,三次元形状モデル格納部107等の実体は、前記記憶装置の一部に割り当てられた記憶領域に構成され、また、顔パーツ抽出部106,簡易モデル生成部108,属性算出部109,詳細モデル生成部(属性反映部)110,画像生成部111は、前記CPUが前記記憶装置に格納されている所定のプログラムを実行することによって実現される。また、画像入力部104および画像生成部111の一部は、入力または出カインターフェース回路と、その回路を駆動・制御するプログラムをCPUが実行することによって実現される。
(Central Processing Unit) と、半導体メモリやハードディスク記憶装置などからなる記憶装置とを含んで構成されたコンピュータによって構成される。その場合、画像記憶部
105,三次元形状モデル格納部107等の実体は、前記記憶装置の一部に割り当てられた記憶領域に構成され、また、顔パーツ抽出部106,簡易モデル生成部108,属性算出部109,詳細モデル生成部(属性反映部)110,画像生成部111は、前記CPUが前記記憶装置に格納されている所定のプログラムを実行することによって実現される。また、画像入力部104および画像生成部111の一部は、入力または出カインターフェース回路と、その回路を駆動・制御するプログラムをCPUが実行することによって実現される。
図3は、本発明の第1の実施形態に係る画像処理装置によって、内部のデータが順次作成されていく様子を表している。
画像入力部で取り込まれた顔画像は入力画像112として、画像記憶部に格納されている。この入力画像112に対し、顔パーツ抽出および簡易モデル生成部により簡易モデル113を作成し、年齢,体格等の人物属性を推定し、属性別の形状情報を反映させて詳細モデル114を作成する。この詳細モデル114を指定した位置姿勢に回転・並進移動させ、二次元画像として個人形状115を作成する行程を表している。
図4は、本発明の第1の実施形態に係る画像処理装置を利用した人流監視システムを現したものである。
カメラ102で撮影された画像は、画像処理装置101に入力され、正面顔を生成した後に、顔照合装置116に渡される。顔照合装置116では、この正面顔から計算される各個人の顔に特有な数値ベクトル(以下、特徴ベクトル)を計算するとともに、事前に登録しておいた照合用の顔画像データベース117(以下、照合用顔DB)に格納されている顔画像の特徴ベクトルを計算し、それらの類似度を算出する。顔照合装置116は、この類似度に基づいて入力画像が照合用顔DB中のどの人物なのかを判定する。判定結果は、例えばインターネットに代表される有線・無線のネットワーク118を通じて蓄積・検索装置119へ送られ、必要に応じて携帯端末120へ警報を送る。このように、本発明により、監視カメラによる自動的な人流監視システムを構築することができ、セキュリティの向上や特定人物の捜索の利便性が向上する効果がある。
図5は、本発明の第1の実施形態に係る画像処理装置を利用した人流監視システムの他の実施例を現したものである。
図5に示すように、Webカメラに代表されるネットワークに接続可能なカメラ102の1台もしくは複数台からの映像を、ネットワーク118経由で画像処理装置101が受け取る構成になっており、多数のカメラからの画像データを1台の画像処理装置101が処理することを実現している。この場合、特に言及する部分以外は前記図4の実施例と同様であるが、装置の設置容積やコストの観点で優れている。
図7は、人物属性が得られなかった場合の顔照合システムの一実施例を現したものである。
入力画像112の人物属性が得られなかった場合、画像処理装置101では、複数の人物属性を仮定して、複数の異なる生成画像121を出カし、それら全てを顔照合装置116へ送る構成になっている。
このような構成を採ることにより、顔照合時に欠落した個人顔に関する情報の複数のバリエーションを考慮して顔照合をかけることができるため、照合見落としを防止することができる効果がある。
図9は、属性推定の結果を照合にも用する場合の構成の一例を表した図である。
照合用顔DB117には顔画像に加え、その人物の年齢・性別・体格といった複数の人物属性が入力されている場合があることが考えられる。この場合、入力画像112から算出された人物属性130と顔照合エンジン129の判定結果の人物の人物属性とを比較することにより、顔照合の照合精度を改善することができる効果がある。
図10は、人物属性を手動で与える場合の顔画像生成システムの一実施例を現したものである。
例えば、犯罪捜査において、カメラ102から画像が得られ、目撃情報132から定性的な人物属性情報130が得られた場合、両者を利用してより正確な手配写真を作成したいという要求がある。このような場合、入力画像から直接人物属性を算出するのではなく、目撃情報132による人物属性130を手動で入力し、これにより属性別詳細形状情報131を選択し、詳細モデル114を作成する構成になっている。
図8にこのときの人物属性を入力するインターフェース画面の例を示す。
GUIインターフェース122には、性別を入力をする欄123,年齢を入力する欄
124,体格を入力する欄125などがあり、それぞれシステムが自動認識した属性値の範囲126が示されている。この属性値の範囲126を参考に、入力値を指定するつまみ127を手動で移動して人物属性を入力する。入力した人物属性を可視化するための属性値を反映させたモデルを表示する欄128を設けることで、より詳細に人物属性のデータを入力することが可能になる。
124,体格を入力する欄125などがあり、それぞれシステムが自動認識した属性値の範囲126が示されている。この属性値の範囲126を参考に、入力値を指定するつまみ127を手動で移動して人物属性を入力する。入力した人物属性を可視化するための属性値を反映させたモデルを表示する欄128を設けることで、より詳細に人物属性のデータを入力することが可能になる。
図11は、入力画像から得られた人物属性算出結果を用いて、顔照合システムの照合用顔画像DBを変換した上で照合するシステムの一実施例を現したものである。
照合用顔画像DBを撮影した観点と、入力画像を撮影した観点は異なる場合があると考えられる。例えば、経年変化が代表的事例として挙げられるが、人物属性算出により得られた人物属性130(経年変化情報など)を用いて、照合用顔画像DB140に登録されている顔画像を経年変化させたものと入力画像を照合する構成になっている。
この場合、例えば経年変化が発生したとしても、顔照合エンジン129の照合精度を改善することができる効果がある。
本発明によれば、顔認識システムに用いることにより、撮影の上下,左右,斜め方向或いは顔の各種の表情などの色々な観点のそれぞれに対して、三次元個人形状データを生成できる。
また、その三次元個人形状データから、入力画像とは異なる観点の画像を生成することができ、顔認識システムにおいて、認識精度を高くすることが可能である。
更に、そのような高精度の顔画像認識システムを用いることにより、信頼性および確度の高い防犯システム,監視システム,セキュリティシステム等を実現することができる。
101…画像処理装置、102…カメラ、103…表示装置、104…画像入力部、
105…画像記憶部、106…顔パーツ抽出部、107…三次元形状モデル格納部、108…簡易モデル生成部、109…属性算出部、110…詳細モデル生成部、111…画像生成部、112…入力画像、113…簡易モデル、114…詳細モデル、115…個人三次元形状、116…顔照合装置、117…照合用顔DB、118…ネットワーク、119…蓄積・検索装置、120…携帯端末、121…生成画像、122…GUIインターフェース、123…性別を入力する欄、124…年齢を入力する欄、125…体格を入力する欄、126…システムが自動認識した属性値の範囲、127…属性入力値を指定するつまみ、128…属性値を反映させたモデルを表示する欄、129…顔照合エンジン、130…人物属性情報、131…属性別詳細形状情報、133…ワイヤフレームモデルの頂点、
134…ワイヤフレームモデルの接続情報。
105…画像記憶部、106…顔パーツ抽出部、107…三次元形状モデル格納部、108…簡易モデル生成部、109…属性算出部、110…詳細モデル生成部、111…画像生成部、112…入力画像、113…簡易モデル、114…詳細モデル、115…個人三次元形状、116…顔照合装置、117…照合用顔DB、118…ネットワーク、119…蓄積・検索装置、120…携帯端末、121…生成画像、122…GUIインターフェース、123…性別を入力する欄、124…年齢を入力する欄、125…体格を入力する欄、126…システムが自動認識した属性値の範囲、127…属性入力値を指定するつまみ、128…属性値を反映させたモデルを表示する欄、129…顔照合エンジン、130…人物属性情報、131…属性別詳細形状情報、133…ワイヤフレームモデルの頂点、
134…ワイヤフレームモデルの接続情報。
Claims (8)
- カメラから入力される画像を加工処理する画像処理装置において、
前記カメラから入力される入力画像を記憶する画像記憶手段と、
前記入力画像から顔器官の位置,形状,特徴を検出する顔パーツ抽出手段と、
ワイヤフレームで構成された平均的な人物頭部の三次元形状情報を記憶する三次元形状モデル格納手段と、
前記顔パーツ抽出手段から得られた顔パーツ位置に基づき、前記三次元形状モデルを変形させ、前記入力画像に含まれる人物の顔パーツ配置に適合する三次元形状モデルを生成する簡易モデル生成手段と、
前記入力画像から人物属性を算出する属性算出手段と、
前記属性算出手段から得られた人物属性に基づき、前記簡易モデル生成手段から得られた三次元形状モデルを変形させて詳紬モデルを生成する属性反映手段と、
該属性反映手段から出カされる詳細モデルから二次元の画像を生成する画像生成手段と、を備えることを特徴とする画像処理装置。 - 請求項1に記載の画像処理装置において、
前記顔器官とは眼・鼻・口・眉・黒子・外耳,髪生え際などのうち少なくとも1つを含み、
前記人物属性とは、顔の幅・頭部の大きさ・頭部輪郭形状・年齢・性別・体格・身長のうち少なくとも1つを含むことを特徴とする画像処理装置。 - 請求項1に記載の画像処理装置において、
前記詳細モデルを生戒する属性反映手段について、手動で任意の人物属性をパラメータとして入力する手段と、
該入力手段により入力された値を属性算出手段の代わりに、もしくは選択的に使用することを特徴とする画像処理装置。 - 請求項1において、
前記画像生成手段により生成された画像を、顔認識エンジンへ入力し、事前に登録しておいた顔画像との類似度を計算することにより該当人物を検出する人流監視システム。 - カメラから入力される画像を加工処理する画像処理方法において、
ワイヤフレームで構成された平均的な人物頭部の三次元形状モデルの情報を記憶するステップと、
前記カメラから入力される入力画像を記憶するステップと、
前記入力画像から顔器官の位置,形状,特徴を検出する顔パーツ抽出ステップと、
前記顔パーツ抽出手段から得られた顔パーツ位置に基づき、前記三次元形状モデルを変形させ、前記入力画像に含まれる人物の顔パーツ配置に適合する三次元形状モデルを生成する簡易モデル生成ステップと、
前記入力画像から人物属性を算出する属性算出ステップと、
前記属性算出手段から得られた人物属性に基づき、前記簡易モデル生成手段から得られた三次元形状モデルを変形させて詳細モデルを生成する属性反映ステップと、
出力される詳細モデルから二次元の画像を生成する画像生成ステップとを備えることを特徴とする画像処理方法。 - 請求項5に記載の画像処理方法をコンピュータに実行させるためのプログラム。
- 請求項5に記載の画像処理方法において、
前記顔器官とは眼・鼻・口・眉・黒子・外耳,髪生え際などのうち少なくとも1つを含み、
前記人物属性とは、顔の幅・頭部の大きさ・頭部輪郭形状・年齢・性別・体格・身長のうち少なくとも1つを含むことを特徴とする画像処理方法。 - 請求項5に記載の画像処理方法において、
前記人物属性を手動で任意のパラメータとして入力することを特徴とする画像処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006232990A JP2008059108A (ja) | 2006-08-30 | 2006-08-30 | 画像処理装置,画像処理方法、そのプログラムおよび人流監視システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006232990A JP2008059108A (ja) | 2006-08-30 | 2006-08-30 | 画像処理装置,画像処理方法、そのプログラムおよび人流監視システム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2008059108A true JP2008059108A (ja) | 2008-03-13 |
Family
ID=39241795
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006232990A Pending JP2008059108A (ja) | 2006-08-30 | 2006-08-30 | 画像処理装置,画像処理方法、そのプログラムおよび人流監視システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2008059108A (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009265922A (ja) * | 2008-04-24 | 2009-11-12 | Toshiba Tec Corp | 人物動線追跡システム |
JP2009268088A (ja) * | 2008-04-04 | 2009-11-12 | Fujifilm Corp | 画像処理システム、画像処理方法、およびプログラム |
JPWO2017179134A1 (ja) * | 2016-04-12 | 2018-11-01 | 株式会社オプティム | 化粧シミュレーションシステム、化粧シミュレーション方法、および化粧シミュレーションプログラム |
CN110222668A (zh) * | 2019-06-17 | 2019-09-10 | 苏州大学 | 基于生成对抗网络的多姿态面部表情识别方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003006645A (ja) * | 2001-06-20 | 2003-01-10 | Secom Co Ltd | 本人認証用の顔画像照合装置 |
JP2003044873A (ja) * | 2001-08-01 | 2003-02-14 | Univ Waseda | 顔の3次元モデルの作成方法及びその変形方法 |
JP2003263639A (ja) * | 2002-03-08 | 2003-09-19 | Koji Fukami | 顔画像認識装置および方法 |
-
2006
- 2006-08-30 JP JP2006232990A patent/JP2008059108A/ja active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003006645A (ja) * | 2001-06-20 | 2003-01-10 | Secom Co Ltd | 本人認証用の顔画像照合装置 |
JP2003044873A (ja) * | 2001-08-01 | 2003-02-14 | Univ Waseda | 顔の3次元モデルの作成方法及びその変形方法 |
JP2003263639A (ja) * | 2002-03-08 | 2003-09-19 | Koji Fukami | 顔画像認識装置および方法 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009268088A (ja) * | 2008-04-04 | 2009-11-12 | Fujifilm Corp | 画像処理システム、画像処理方法、およびプログラム |
JP2009265922A (ja) * | 2008-04-24 | 2009-11-12 | Toshiba Tec Corp | 人物動線追跡システム |
JP4585580B2 (ja) * | 2008-04-24 | 2010-11-24 | 東芝テック株式会社 | 人物動線追跡システム |
JPWO2017179134A1 (ja) * | 2016-04-12 | 2018-11-01 | 株式会社オプティム | 化粧シミュレーションシステム、化粧シミュレーション方法、および化粧シミュレーションプログラム |
CN110222668A (zh) * | 2019-06-17 | 2019-09-10 | 苏州大学 | 基于生成对抗网络的多姿态面部表情识别方法 |
CN110222668B (zh) * | 2019-06-17 | 2020-12-22 | 苏州大学 | 基于生成对抗网络的多姿态面部表情识别方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Wechsler | Reliable Face Recognition Methods: System Design, Impementation and Evaluation | |
JP4653606B2 (ja) | 画像認識装置、方法およびプログラム | |
CN105335722B (zh) | 一种基于深度图像信息的检测***及方法 | |
Kale et al. | Towards a view invariant gait recognition algorithm | |
JP4939968B2 (ja) | 監視画像処理方法、監視システム及び監視画像処理プログラム | |
USRE45768E1 (en) | Method and system for enhancing three dimensional face modeling using demographic classification | |
JP4950787B2 (ja) | 画像処理装置及びその方法 | |
TWI394093B (zh) | 一種影像合成方法 | |
JP5170094B2 (ja) | なりすまし検知システム、なりすまし検知方法およびなりすまし検知用プログラム | |
KR101647803B1 (ko) | 3차원 얼굴모델 투영을 통한 얼굴 인식 방법 및 시스템 | |
JP2009245338A (ja) | 顔画像照合装置 | |
JP2004192378A (ja) | 顔画像処理装置およびその方法 | |
JP2015019162A (ja) | 会議支援システム | |
KR20170092533A (ko) | 얼굴 포즈 교정 방법 및 장치 | |
JP2007058393A (ja) | 認証装置、認証方法及びプログラム | |
JP2010123019A (ja) | 動作認識装置及び方法 | |
CN111652018B (zh) | 一种人脸注册方法和认证方法 | |
JP2002024811A (ja) | 影成分除去装置 | |
KR101053253B1 (ko) | 3차원 정보를 이용한 얼굴 인식 장치 및 방법 | |
JP2008059108A (ja) | 画像処理装置,画像処理方法、そのプログラムおよび人流監視システム | |
JP4659722B2 (ja) | 人体特定領域抽出・判定装置、人体特定領域抽出・判定方法、人体特定領域抽出・判定プログラム | |
CN108875488B (zh) | 对象跟踪方法、对象跟踪装置以及计算机可读存储介质 | |
JP4063556B2 (ja) | 顔画像認識装置および方法 | |
JP5244345B2 (ja) | 顔認証装置 | |
CN116567349A (zh) | 基于多摄像机的视频展示方法、装置及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080925 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110218 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110301 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20111018 |