JP2015201123A - 被写体認識装置、被写体認識方法及び被写体認識プログラム - Google Patents
被写体認識装置、被写体認識方法及び被写体認識プログラム Download PDFInfo
- Publication number
- JP2015201123A JP2015201123A JP2014080928A JP2014080928A JP2015201123A JP 2015201123 A JP2015201123 A JP 2015201123A JP 2014080928 A JP2014080928 A JP 2014080928A JP 2014080928 A JP2014080928 A JP 2014080928A JP 2015201123 A JP2015201123 A JP 2015201123A
- Authority
- JP
- Japan
- Prior art keywords
- image
- inlier
- local feature
- subject
- test image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Analysis (AREA)
Abstract
Description
以下、図面を参照して、本発明の第1実施形態による被写体認識装置を説明する。図1は同実施形態の構成を示すブロック図である。同図に示すように、被写体認識装置1は、データベース(DB)20と、訓練部30と認識部40とを備えている。訓練部30は、前処理部2と、局所特徴抽出部3と、局所特徴量、属性情報保存部4から構成する。また認識部40は、前処理部2、局所特徴抽出部3と、暫定対応点決定部5と、弱幾何検証部6と、強幾何検証部7と、信頼度推定部8と、スコアリング部9とから構成する。前処理部2、局所特徴抽出部3は、訓練部30と認識部40において同一のものである。
参考文献1:J. Morel, G. Yu, "ASIFT: A New Framework for Fully Affine Invariant Image Comparison", Journal SIAM Journal on Imaging Sciences, Volume 2 Issue 2, pp. 438-469, April 2009
次に、本発明の第2実施形態による被写体認識装置を説明する。前述した第1実施形態では、局所特徴の属性情報の変化量投票に基づく幾何検証を行い、続いて局所特徴の位置のみに基づくロバスト推定による幾何検証を行うことで、高速かつ正しく誤対応点を除去し、テスト画像がどの被写体を撮影したかを正確に推定することができる。
参考文献2:Richard Hartley and Andrew Zisserman,「Multiple View Geometry in Computer Vision Second Edition」,Cambridge University Press, March 2004. pp.88~91.
次に、本発明の第3実施形態による被写体認識装置を説明する。第2実施形態では、インライア対応点からアフィン変換もしくはホモグラフィ変換行列を算出することで、該当する訓練画像の領域、つまり被写体の領域がテスト画像上においてどこに存在するかを推定することができる。
参考文献3:山田,金澤,金谷,菅谷,”2画像からの3次元復元の最新アルゴリズム”, 情報処理学会研究報告,CVIM,[コンピュータビジョンとイメージメディア] 2009−CVIM−168(15),1−8,2009−08−24
Claims (7)
- 被写体を撮像した複数の訓練画像から抽出した局所特徴量と、該局所特徴量の属性を示す属性情報とを前記訓練画像毎に関係付けて記憶する画像情報記憶部と、
認識すべき被写体を撮像したテスト画像から局所特徴量と前記属性情報を抽出する局所特徴抽出部と、
前記テスト画像から抽出した前記局所特徴量と、前記画像情報記憶部に記憶された前記居所特徴量とを比較して、暫定対応点を決定する暫定対応点決定部と、
前記属性情報の種類の数と同一の次元数から成る所定のセルサイズで区切られた投票空間を構築し、前記暫定対応点全てについて、前記属性情報間の変化量を算出して該当する前記セルに対して投票する弱幾何検証部と、
前記投票の結果に基づき、票数が所定数以上の全てのセルに対して、前記暫定対応点を所定の幾何モデルを当て嵌め、幾何変換パラメータを推定することにより、外れ値でないインライア対応点を求める強幾何検証部と、
前記インライア対応点の信頼度を算出し、該信頼度値が所定値より低いインライア点群を棄却する信頼度推定部と、
前記棄却されていないインライア対応点数の総和を前記訓練画像のスコアとして出力するスコアリング部と
を備えることを特徴とする被写体認識装置。 - 棄却されていない前記インライア対応点からアフィン変換もしくはホモグラフィ変換の幾何変換行列を求めることにより、前記訓練画像上の点が前記テスト画像上のどこの点に対応するかを示す情報を出力する正対応2D幾何変換行列推定部を
さらに備えたことを特徴とする請求項1に記載の被写体認識装置。 - 棄却されていない前記インライア対応点から基礎行列を算出するとともに、前記テスト画像及び前記訓練画像それぞれを撮影したカメラの焦点距離を推定し、前記基礎行列と前記テスト画像及び前記訓練画像それぞれを撮影したカメラの焦点距離とから、前記カメラの相対的な並進と回転を計算して出力する相対姿勢推定部を
さらに備えたことを特徴とする請求項1または2に記載の被写体認識装置。 - 被写体を撮像した複数の訓練画像から抽出した局所特徴量と、該局所特徴量の属性を示す属性情報とを前記訓練画像毎に関係付けて記憶する画像情報記憶部を備えた被写体認識装置が行う被写体認識方法であって、
認識すべき被写体を撮像したテスト画像から局所特徴量と前記属性情報を抽出する局所特徴抽出ステップと、
前記テスト画像から抽出した前記局所特徴量と、前記画像情報記憶部に記憶された前記居所特徴量とを比較して、暫定対応点を決定する暫定対応点決定ステップと、
前記属性情報の種類の数と同一の次元数から成る所定のセルサイズで区切られた投票空間を構築し、前記暫定対応点全てについて、前記属性情報間の変化量を算出して該当する前記セルに対して投票する弱幾何検証ステップと、
前記投票の結果に基づき、票数が所定数以上の全てのセルに対して、前記暫定対応点を所定の幾何モデルを当て嵌め、幾何変換パラメータを推定することにより、外れ値でないインライア対応点を求める強幾何検証ステップと、
前記インライア対応点の信頼度を算出し、該信頼度値が所定値より低いインライア点群を棄却する信頼度推定ステップと、
前記棄却されていないインライア対応点数の総和を前記訓練画像のスコアとして出力するスコアリングステップと
を有することを特徴とする被写体認識方法。 - 棄却されていない前記インライア対応点からアフィン変換もしくはホモグラフィ変換の幾何変換行列を求めることにより、前記訓練画像上の点が前記テスト画像上のどこの点に対応するかを示す情報を出力する正対応2D幾何変換行列推定部ステップを
さらに有することを特徴とする請求項4に記載の被写体認識方法。 - 棄却されていない前記インライア対応点から基礎行列を算出するとともに、前記テスト画像及び前記訓練画像それぞれを撮影したカメラの焦点距離を推定し、前記基礎行列と前記テスト画像及び前記訓練画像それぞれを撮影したカメラの焦点距離とから、前記カメラの相対的な並進と回転を計算して出力する相対姿勢推定ステップを
さらに有することを特徴とする請求項4または5に記載の被写体認識方法。 - コンピュータを、請求項1から3のいずれか1項に記載の被写体認識装置として機能させるための被写体認識プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014080928A JP6055435B2 (ja) | 2014-04-10 | 2014-04-10 | 被写体認識装置、被写体認識方法及び被写体認識プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014080928A JP6055435B2 (ja) | 2014-04-10 | 2014-04-10 | 被写体認識装置、被写体認識方法及び被写体認識プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015201123A true JP2015201123A (ja) | 2015-11-12 |
JP6055435B2 JP6055435B2 (ja) | 2016-12-27 |
Family
ID=54552305
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014080928A Active JP6055435B2 (ja) | 2014-04-10 | 2014-04-10 | 被写体認識装置、被写体認識方法及び被写体認識プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6055435B2 (ja) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017215768A (ja) * | 2016-05-31 | 2017-12-07 | 日本電信電話株式会社 | パターン識別装置、方法、及びプログラム |
JP2018097795A (ja) * | 2016-12-16 | 2018-06-21 | 日本電信電話株式会社 | 法線推定装置、法線推定方法、及び法線推定プログラム |
JP2018106413A (ja) * | 2016-12-26 | 2018-07-05 | 日本電信電話株式会社 | 被写体識別装置、方法、及びプログラム |
JP2019046184A (ja) * | 2017-09-01 | 2019-03-22 | 日本電信電話株式会社 | 画像処理装置、訓練画像処理装置、画像識別装置、訓練画像処理方法、画像識別方法、及びプログラム |
CN110326279A (zh) * | 2017-02-23 | 2019-10-11 | 日本电信电话株式会社 | 电子水印嵌入装置、电子水印检测装置、电子水印嵌入方法、电子水印检测方法以及程序 |
JP2019207456A (ja) * | 2018-05-28 | 2019-12-05 | 日本電信電話株式会社 | 幾何変換行列推定装置、幾何変換行列推定方法、及びプログラム |
US11809525B2 (en) | 2018-12-11 | 2023-11-07 | Nippon Telegraph And Telephone Corporation | List generation device, photographic subject identification device, list generation method, and program |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010102502A (ja) * | 2008-10-23 | 2010-05-06 | Canon Inc | 画像処理装置、画像処理方法およびプログラム |
JP2014032623A (ja) * | 2012-08-06 | 2014-02-20 | Kddi Corp | 画像処理装置 |
-
2014
- 2014-04-10 JP JP2014080928A patent/JP6055435B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010102502A (ja) * | 2008-10-23 | 2010-05-06 | Canon Inc | 画像処理装置、画像処理方法およびプログラム |
JP2014032623A (ja) * | 2012-08-06 | 2014-02-20 | Kddi Corp | 画像処理装置 |
Non-Patent Citations (1)
Title |
---|
JPN7016003038; David G.Lowe: 'Distinctive Image Features from Scale-Invariant Keypoints' International Journal of Computer Vision 2004 , 2004, pp.1-28 * |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017215768A (ja) * | 2016-05-31 | 2017-12-07 | 日本電信電話株式会社 | パターン識別装置、方法、及びプログラム |
JP2018097795A (ja) * | 2016-12-16 | 2018-06-21 | 日本電信電話株式会社 | 法線推定装置、法線推定方法、及び法線推定プログラム |
JP2018106413A (ja) * | 2016-12-26 | 2018-07-05 | 日本電信電話株式会社 | 被写体識別装置、方法、及びプログラム |
CN110326279A (zh) * | 2017-02-23 | 2019-10-11 | 日本电信电话株式会社 | 电子水印嵌入装置、电子水印检测装置、电子水印嵌入方法、电子水印检测方法以及程序 |
CN110326279B (zh) * | 2017-02-23 | 2021-08-24 | 日本电信电话株式会社 | 电子水印嵌入装置、电子水印检测装置、电子水印嵌入方法、电子水印检测方法、存储介质 |
JP2019046184A (ja) * | 2017-09-01 | 2019-03-22 | 日本電信電話株式会社 | 画像処理装置、訓練画像処理装置、画像識別装置、訓練画像処理方法、画像識別方法、及びプログラム |
JP2019207456A (ja) * | 2018-05-28 | 2019-12-05 | 日本電信電話株式会社 | 幾何変換行列推定装置、幾何変換行列推定方法、及びプログラム |
WO2019230726A1 (ja) * | 2018-05-28 | 2019-12-05 | 日本電信電話株式会社 | 幾何変換行列推定装置、幾何変換行列推定方法、及びプログラム |
US11809525B2 (en) | 2018-12-11 | 2023-11-07 | Nippon Telegraph And Telephone Corporation | List generation device, photographic subject identification device, list generation method, and program |
Also Published As
Publication number | Publication date |
---|---|
JP6055435B2 (ja) | 2016-12-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6055435B2 (ja) | 被写体認識装置、被写体認識方法及び被写体認識プログラム | |
US10776936B2 (en) | Point cloud matching method | |
TWI485650B (zh) | 用於多相機校準之方法及配置 | |
Spreeuwers | Fast and accurate 3D face recognition: using registration to an intrinsic coordinate system and fusion of multiple region classifiers | |
WO2017181899A1 (zh) | 一种人脸活体验证方法及装置 | |
US20150262346A1 (en) | Image processing apparatus, image processing method, and image processing program | |
Tau et al. | Dense correspondences across scenes and scales | |
JP4709668B2 (ja) | 3次元物体認識システム | |
JP2016194895A (ja) | 室内2d平面図の生成方法、装置及びシステム | |
JP6482130B2 (ja) | 幾何検証装置、プログラム及び方法 | |
Seib et al. | Object recognition using hough-transform clustering of surf features | |
JP2014102746A (ja) | 被写体認識装置及び被写体認識プログラム | |
CN104966283A (zh) | 图像分层配准方法 | |
JP2009048516A (ja) | 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム | |
Roth et al. | Wide-baseline image matching with projective view synthesis and calibrated geometric verification | |
JP6793925B2 (ja) | 検証装置、方法、及びプログラム | |
US20150254527A1 (en) | Methods for 3d object recognition and registration | |
JP2011107878A (ja) | 位置検出装置、位置検出方法 | |
JP6393495B2 (ja) | 画像処理装置および物体認識方法 | |
KR20160049639A (ko) | 부분 선형화 기반의 3차원 영상 정합 방법 | |
Bujnak et al. | Robust focal length estimation by voting in multi-view scene reconstruction | |
CN111242992B (zh) | 一种图像配准方法 | |
CN112967398B (zh) | 一种三维数据重建方法、装置及电子设备 | |
CN112184776A (zh) | 一种目标跟踪方法、装置及存储介质 | |
CN112800806A (zh) | 物***姿检测追踪方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20151105 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160930 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161018 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161109 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20161129 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161202 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6055435 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |