JP6127676B2 - 画像認識装置、画像認識プログラム、記録媒体、および画像認識方法 - Google Patents
画像認識装置、画像認識プログラム、記録媒体、および画像認識方法 Download PDFInfo
- Publication number
- JP6127676B2 JP6127676B2 JP2013084370A JP2013084370A JP6127676B2 JP 6127676 B2 JP6127676 B2 JP 6127676B2 JP 2013084370 A JP2013084370 A JP 2013084370A JP 2013084370 A JP2013084370 A JP 2013084370A JP 6127676 B2 JP6127676 B2 JP 6127676B2
- Authority
- JP
- Japan
- Prior art keywords
- recognition
- changed
- image
- pair
- objects
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 27
- 238000012545 processing Methods 0.000 claims description 49
- 238000004891 communication Methods 0.000 description 7
- 230000015654 memory Effects 0.000 description 4
- 238000010187 selection method Methods 0.000 description 4
- 238000007476 Maximum Likelihood Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 241000282326 Felis catus Species 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/768—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using context analysis, e.g. recognition aided by known co-occurring patterns
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Software Systems (AREA)
- Computing Systems (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Evolutionary Computation (AREA)
- Databases & Information Systems (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Computational Linguistics (AREA)
- Image Analysis (AREA)
- Character Discrimination (AREA)
- Image Processing (AREA)
Description
本発明は、上記課題に鑑みてなされたものであり、その目的は、画像に写る表示物体の種類を精度よく特定する画像認識装置等を提供することにある。
以下、本発明の実施形態について、図1〜図5を用いて詳細に説明する。
物体に対応付けられるペア情報には、特に制限は存在しないが、例えば以下のようにして決定してもよい。
図1に示すように、変更物体特定手段10は、変更物体選択手段103、ペア物体選択手段104、および認識処理手段105を含む構成である。
変更物体選択手段103は、画像において、一般物体認識手段102によって認識された物体の中から、認識結果の変更を図る対象となる物体(以下、変更物体と称する)を選択するものである。
ペア物体選択手段104は、変更物体選択手段103によって選択された変更物体のペアとする物体(以下、ペア物体と称する)を選択するものである。ある変更物体のペア物体は、その変更物体と同一の画像内にある確定物体の中から選択される、1つまたは複数の確定物体である。
以下に、ペア物体選択手段104によるペア物体選択処理の実施例を示す。
ペア物体選択方法の一実施例では、ペア物体選択手段104は、画像において、変更物体の周囲にある確定物体のうち、最もスコアの大きい識別候補を有する物体を、上記変更物体のペア物体として選択する。
ペア物体選択方法の他の実施例では、ペア物体選択手段104は、画像において、変更物体の最も近傍にある確定物体を、ペア物体として選択する。
これにより、変更物体により近い位置にあって、変更物体との関連がより大きいと考えられる確定物体を優先して、ペア物体として選択することができる。
ペア物体選択方法の他の一実施例では、変更物体の周囲に複数の確定物体が存在している場合、ペア物体選択手段104は、上記複数の確定物体のうち、最多数の確定物体を、上記ペア物体として選択する。
ペア物体選択方法の他の一実施例では、ペア物体選択手段104は、画像中に複数の変更物体が存在する場合、認識候補の最大スコアが大きい変更物体の順で、ペア物体の選択を行う。すなわち、スコアのより高い認識候補を有する第1の変更物体と、スコアのより低い認識候補を有する第2の変更物体とがある場合、ペア物体選択手段104は、第2の変更物体のペア物体よりも、第1の変更物体のペア物体を先に選択する。その理由は以下のとおりである。
認識処理手段105は、ペア物体のペア情報を記憶部107より取得し、上記ペア情報を用いて、変更物体を特定するものである。
(変更物体特定処理の具体例)
以下に、認識処理手段105による変更物体特定処理の実施例を示す。
変更物体特定処理の一実施例では、認識処理手段105は、スコアの高い認識候補の順で、変更物体の認識候補に対応するペア情報が、ペア物体のペア情報リストに含まれているか探索する。その後、認識処理手段105は、上記探索において検出された認識候補を、変更物体の識別結果として確定する。
変更物体特定処理の他の実施例では、認識処理手段105は、ペア物体のペア情報リストに含まれる一番上のペア情報から順に、該ペア情報が変更物体の認識候補に含まれているか探索する。認識処理手段105は、上記探索において検出された認識候補として、変更物体を特定する。
認識処理手段105は、上記実施例1または2において、ペア情報に対応する認識候補を検出した後、該認識候補として変更物体を特定する代わりに、該認識候補のスコアを(例えば1.5倍に)増加させるスコア変更を行ってもよい。
以下では、図3および図5を用いて、変更物体の変更物体特定処理について説明する。図5は、識別方法の流れを示すフローチャートである。
特許文献1に記載された従来技術では、複数の単語が登録された単語登録情報に含まれる文字の出現回数に基づいて、各候補文字の重み付けを行い、その結果によって候補文字を候補から除外する。
最後に、画像認識装置1の各ブロック、特に変更物体特定手段10は、集積回路(ICチップ)上に形成された論理回路によってハードウェア的に実現してもよいし、CPU(Central Processing Unit)を用いてソフトウェア的に実現してもよい。
103 変更物体選択手段
104 ペア物体選択手段
105 認識処理手段
Claims (13)
- 画像に写る表示物体の種類を認識し、上記表示物体の種類の認識結果としての確からしさを示す信頼度をそれぞれ有する1つまたは複数の認識候補を取得する画像認識装置において、
上記表示物体の中から、上記認識結果を修正する対象となる1つまたは複数の変更物体を選択するとともに、上記認識結果を修正する対象ではない確定物体の種類を、上記1つまたは複数の認識候補のうちで最大の信頼度を有する認識候補の種類に確定する変更物体選択手段と、
上記表示物体のうち、上記確定物体の中から、上記変更物体のペアとなるペア物体を選択するペア物体選択手段と、
上記ペア物体の種類に関連付けられている物体の種類を示すペア情報リストに基づき、上記変更物体の認識結果を修正し、上記変更物体を特定する認識処理手段とを備えたことを特徴とする画像認識装置。 - 上記変更物体選択手段は、上記表示物体のうち、上記1つまたは複数の認識候補の最大信頼度が所定の閾値よりも低い表示物体を、上記変更物体として選択することを特徴とする請求項1に記載の画像認識装置。
- 上記変更物体選択手段は、上記表示物体のうち、上記1つまたは複数の認識候補の最大信頼度が最も低い表示物体を、上記変更物体として選択することを特徴とする請求項1に記載の画像認識装置。
- 上記変更物体選択手段は、上記画像において、上記確定物体が存在しない場合、上記変更物体を、該変更物体の最も信頼度の高い認識候補として特定することを特徴とする請求項1〜3のいずれか1項に記載の画像認識装置。
- 上記ペア物体選択手段は、上記画像において、複数の確定物体が存在する場合、上記信頼度が最も高い確定物体を、上記ペア物体として選択することを特徴とする請求項1〜4のいずれか1項に記載の画像認識装置。
- 上記ペア物体選択手段は、上記画像において、複数の確定物体が存在する場合、上記変更物体に最も近い位置に表示された確定物体を、上記ペア物体として選択することを特徴とする請求項1〜4のいずれか1項に記載の画像認識装置。
- 上記ペア物体選択手段は、上記画像において、複数の確定物体が存在する場合、上記複数の確定物体のうち、最多数の同一種類の確定物体のいずれかを、上記ペア物体として選択することを特徴とする請求項1〜4のいずれか1項に記載の画像認識装置。
- 上記認識処理手段は、上記変更物体の認識候補において、上記信頼度の高い認識候補から順に、該認識候補に対応するペア情報が上記ペア情報リストに含まれているか探索し、該認識候補に対応するペア情報を検出した場合、上記変更物体を該ペア情報として特定することを特徴とする請求項1〜7のいずれか1項に記載の画像認識装置。
- 上記認識処理手段は、上記ペア情報リストにおいて優先度が高いペア情報から順に、該ペア情報に対応する認識候補が上記変更物体の認識候補として含まれているか探索し、該物体に対応する認識候補を検出した場合、上記変更物体を該ペア情報として特定することを特徴とする請求項1〜7のいずれか1項に記載の画像認識装置。
- 上記認識処理手段は、上記ペア情報リストを参照して、上記ペア情報リストに含まれるペア情報に対応する認識候補の信頼度が大きくなるように、上記変更物体の認識候補の信頼度に対して重み付けを行った後、上記変更物体を、上記変更物体の認識候補のうち、最も信頼度の高い認識候補として特定することを特徴とする請求項1〜7のいずれか1項に記載の画像認識装置。
- 請求項1から10のいずれか1項に記載の画像認識装置としてコンピュータを機能させるための画像認識プログラムであって、コンピュータを上記各手段として機能させるための画像認識プログラム。
- 請求項11に記載の画像認識プログラムを記録したコンピュータ読み取り可能な記録媒体。
- 画像に写る表示物体の種類を認識し、上記表示物体の種類の認識結果としての確からしさを示す信頼度をそれぞれ有する1つまたは複数の認識候補を取得する画像認識方法において、
上記表示物体の中から、上記認識結果を修正する対象となる1つまたは複数の変更物体を選択するとともに、上記認識結果を修正する対象ではない確定物体の種類を、上記1つまたは複数の認識候補のうちで最大の信頼度を有する認識候補の種類に確定する変更物体選択ステップと、
上記表示物体のうち、上記確定物体の中から、上記変更物体のペアとなるペア物体を選択するペア物体選択ステップと、
上記ペア物体の種類に関連付けられている物体の種類を示すペア情報リストに基づき、上記変更物体の認識結果を修正し、上記変更物体を特定する認識処理ステップとを含むことを特徴とする画像認識方法。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013084370A JP6127676B2 (ja) | 2013-04-12 | 2013-04-12 | 画像認識装置、画像認識プログラム、記録媒体、および画像認識方法 |
EP14161123.6A EP2790129A3 (en) | 2013-04-12 | 2014-03-21 | Image recognition device, recording medium, and image recognition method |
US14/223,411 US9396407B2 (en) | 2013-04-12 | 2014-03-24 | Image recognition device, recording medium, and image recognition method |
CN201410109852.4A CN104102930B (zh) | 2013-04-12 | 2014-03-24 | 图像识别装置及图像识别方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013084370A JP6127676B2 (ja) | 2013-04-12 | 2013-04-12 | 画像認識装置、画像認識プログラム、記録媒体、および画像認識方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014206878A JP2014206878A (ja) | 2014-10-30 |
JP6127676B2 true JP6127676B2 (ja) | 2017-05-17 |
Family
ID=50396870
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013084370A Active JP6127676B2 (ja) | 2013-04-12 | 2013-04-12 | 画像認識装置、画像認識プログラム、記録媒体、および画像認識方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9396407B2 (ja) |
EP (1) | EP2790129A3 (ja) |
JP (1) | JP6127676B2 (ja) |
CN (1) | CN104102930B (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5927363B1 (ja) * | 2015-02-10 | 2016-06-01 | オリンパス株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
US9740951B2 (en) * | 2015-09-11 | 2017-08-22 | Intel Corporation | Technologies for object recognition for internet-of-things edge devices |
KR101771044B1 (ko) * | 2015-11-27 | 2017-08-24 | 연세대학교 산학협력단 | 공간-물체 관계 그래프에 기반한 객체 인식 방법 및 그 장치 |
WO2018087817A1 (ja) * | 2016-11-08 | 2018-05-17 | 三菱電機株式会社 | 物体検知装置および物体検知方法 |
JP6909022B2 (ja) * | 2017-03-13 | 2021-07-28 | テックファーム株式会社 | プログラム、情報端末、情報表示方法及び情報表示システム |
US10942816B1 (en) * | 2018-09-06 | 2021-03-09 | NortonLifeLock Inc. | Systems and methods for dynamically adjusting a backup policy |
FR3094115B1 (fr) * | 2019-03-22 | 2021-02-26 | Idemia Identity & Security France | Procede d’identification de bagages |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6819783B2 (en) * | 1996-09-04 | 2004-11-16 | Centerframe, Llc | Obtaining person-specific images in a public venue |
JP2000011095A (ja) | 1998-06-19 | 2000-01-14 | Canon Inc | 文字認識装置及び方法 |
US6287197B1 (en) * | 1998-08-18 | 2001-09-11 | Midway Games Inc. | Video game with randomly generated images |
CN1327217A (zh) * | 2000-06-02 | 2001-12-19 | 郭华 | 计算机视觉 |
JP4704601B2 (ja) * | 2000-11-01 | 2011-06-15 | 富士通株式会社 | 文字認識方法,プログラム及び記録媒体 |
JP4098021B2 (ja) * | 2002-07-30 | 2008-06-11 | 富士フイルム株式会社 | シーン識別方法および装置ならびにプログラム |
US7137076B2 (en) * | 2002-07-30 | 2006-11-14 | Microsoft Corporation | Correcting recognition results associated with user input |
JP2006031099A (ja) * | 2004-07-12 | 2006-02-02 | Fujitsu Ltd | 文字認識をコンピュータに行なわせるためのコンピュータ実行可能なプログラム |
EP1780651A1 (en) * | 2005-10-25 | 2007-05-02 | Bracco Imaging, S.P.A. | Method and system for automatic processing and evaluation of images, particularly diagnostic images |
JP5107157B2 (ja) | 2008-06-30 | 2012-12-26 | 富士通フロンテック株式会社 | 文字認識プログラム、文字認識装置および文字認識方法 |
JP2011128992A (ja) * | 2009-12-18 | 2011-06-30 | Canon Inc | 情報処理装置およびその処理方法 |
CN101944181A (zh) * | 2010-06-10 | 2011-01-12 | 复旦大学 | 一种模式分类模型由抽象到具体AtoC模型 |
US8724908B2 (en) * | 2010-09-03 | 2014-05-13 | Adobe Systems Incorporated | System and method for labeling a collection of images |
-
2013
- 2013-04-12 JP JP2013084370A patent/JP6127676B2/ja active Active
-
2014
- 2014-03-21 EP EP14161123.6A patent/EP2790129A3/en not_active Ceased
- 2014-03-24 US US14/223,411 patent/US9396407B2/en active Active
- 2014-03-24 CN CN201410109852.4A patent/CN104102930B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
EP2790129A3 (en) | 2017-03-29 |
CN104102930A (zh) | 2014-10-15 |
EP2790129A2 (en) | 2014-10-15 |
US20140307974A1 (en) | 2014-10-16 |
US9396407B2 (en) | 2016-07-19 |
JP2014206878A (ja) | 2014-10-30 |
CN104102930B (zh) | 2017-07-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6127676B2 (ja) | 画像認識装置、画像認識プログラム、記録媒体、および画像認識方法 | |
US10445562B2 (en) | AU feature recognition method and device, and storage medium | |
CN108460389B (zh) | 一种识别图像中对象的类型预测方法、装置及电子设备 | |
CN104350509B (zh) | 快速姿势检测器 | |
CN105426857B (zh) | 人脸识别模型训练方法和装置 | |
US11341770B2 (en) | Facial image identification system, identifier generation device, identification device, image identification system, and identification system | |
US20210064871A1 (en) | Apparatus and method for recognition of text information | |
US20170185836A1 (en) | Marking analysis system and marking analysis method | |
US9613296B1 (en) | Selecting a set of exemplar images for use in an automated image object recognition system | |
US20190188729A1 (en) | System and method for detecting counterfeit product based on deep learning | |
JP2011134114A (ja) | パターン認識方法およびパターン認識装置 | |
US9082000B2 (en) | Image processing device and image processing method | |
JP2006350434A (ja) | 手形状認識装置及びその方法 | |
US20200242398A1 (en) | Information processing method and information processing system | |
TW201546636A (zh) | 註解顯示器輔助裝置及輔助方法 | |
US20150269135A1 (en) | Language identification for text in an object image | |
US9691004B2 (en) | Device and method for service provision according to prepared reference images to detect target object | |
CN113221718B (zh) | 公式识别方法、装置、存储介质和电子设备 | |
JP2020046819A (ja) | 情報処理装置及びプログラム | |
US9972080B2 (en) | Apparatus and method for food search service | |
CN110633027A (zh) | 一种点读实现方法、***、计算机设备和存储介质 | |
JP2016103759A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
CN108062301A (zh) | 文字翻译方法及其装置 | |
CN109635810A (zh) | 一种确定文本信息的方法、装置、设备及存储介质 | |
US9076035B2 (en) | Image processor, image processing method, control program, and recording medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20151023 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20151028 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160304 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20160527 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170309 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170314 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170327 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6127676 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |