JP7407778B2 - 照合装置および表示方法 - Google Patents
照合装置および表示方法 Download PDFInfo
- Publication number
- JP7407778B2 JP7407778B2 JP2021142582A JP2021142582A JP7407778B2 JP 7407778 B2 JP7407778 B2 JP 7407778B2 JP 2021142582 A JP2021142582 A JP 2021142582A JP 2021142582 A JP2021142582 A JP 2021142582A JP 7407778 B2 JP7407778 B2 JP 7407778B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- unit
- display
- captured image
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012795 verification Methods 0.000 title claims description 65
- 238000000034 method Methods 0.000 title claims description 43
- 238000003384 imaging method Methods 0.000 claims description 43
- 238000012545 processing Methods 0.000 claims description 36
- 238000000605 extraction Methods 0.000 description 30
- 238000001514 detection method Methods 0.000 description 27
- 235000021189 garnishes Nutrition 0.000 description 16
- 238000010586 diagram Methods 0.000 description 15
- 239000000284 extract Substances 0.000 description 14
- 238000012986 modification Methods 0.000 description 8
- 230000004048 modification Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 5
- 238000007689 inspection Methods 0.000 description 5
- 101000879761 Homo sapiens Sarcospan Proteins 0.000 description 4
- 102100037329 Sarcospan Human genes 0.000 description 4
- 101100534121 Schizosaccharomyces pombe (strain 972 / ATCC 24843) spn3 gene Proteins 0.000 description 3
- 101150013335 img1 gene Proteins 0.000 description 3
- 238000010801 machine learning Methods 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- KNMAVSAGTYIFJF-UHFFFAOYSA-N 1-[2-[(2-hydroxy-3-phenoxypropyl)amino]ethylamino]-3-phenoxypropan-2-ol;dihydrochloride Chemical compound Cl.Cl.C=1C=CC=CC=1OCC(O)CNCCNCC(O)COC1=CC=CC=C1 KNMAVSAGTYIFJF-UHFFFAOYSA-N 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 239000000470 constituent Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 101150071665 img2 gene Proteins 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Landscapes
- Image Analysis (AREA)
Description
図1は、実施形態に係る照合システムの全体構成の一例を示す図である。図1を参照しながら、本実施形態に係る照合システム1の全体構成について説明する。
図2は、実施形態に係る照合装置のハードウェア構成の一例を示す図である。図2を参照しながら、本実施形態に係る照合装置10のハードウェア構成について説明する。
図3は、実施形態に係る照合装置の機能的なブロック構成の一例を示す図である。図4は、指示情報を示す撮像画像の一例を示す図である。図5は、エンブレムの撮像画像の一例を示す図である。図6は、実施形態に係る照合システムにおいて識別結果を重畳表示させた撮像画像の表示例を示す図である。図3~図6を参照しながら、本実施形態に係る照合装置10の機能的なブロック構成および動作について説明する。
図7は、実施形態に係る照合システムにおける識別照合処理の流れの一例を示す図である。図7を参照しながら、本実施形態に係る照合システム1の識別照合処理の流れについて説明する。
まず、搬送ライン3を流れる車体である部品30がリミッタスイッチ11により検知され、検知部303によりリミッタスイッチ11から検知信号が受信された場合(ステップS11:Yes)、照合装置10は待機モードから通常の動作モードに復帰し、検知部303は、当該検知信号を受信した旨を第1取得部301および第2取得部302へ出力し、ステップS12へ移行する。部品30がリミッタスイッチ11により検知されない場合(ステップS11:No)、検知されるまで待機する。ここで、待機モードとは、例えば省電力状態の動作モードである。
第1取得部301は、検知部303から検知信号を受信した旨を受け取った場合、第1撮像装置12aにより撮像された第1撮像画像の取得を開始し、取得した第1撮像画像を、抽出部304へ出力する。また、第2取得部302は、検知部303から検知信号を受信した旨を受け取った場合、第2撮像装置12bにより撮像された第2撮像画像の取得を開始し、取得した第2撮像画像を、抽出部304へ出力する。そして、ステップS13へ移行する。
抽出部304は、第1取得部301により取得された第1撮像画像から、エンブレムを識別する指示情報を含む画像を抽出して、当該画像を識別部305へ出力する。また、抽出部304は、第2取得部302により取得された第2撮像画像から、エンブレムを含む画像を抽出して、当該画像を識別部305へ出力する。そして、ステップS14へ移行する。
識別部305は、抽出部304から受け取った指示情報の画像に基づいて、学習モデル102を用いた識別処理により、当該指示情報の画像に対応するメーカ名を示す第1文字情報および当該識別処理の信頼性の程度を示す信頼度を出力する。また、識別部305は、抽出部304から受け取ったエンブレムの画像に基づいて、学習モデル102を用いた識別処理により、当該エンブレムの画像に対応するメーカ名を示す第2文字情報および当該識別処理の信頼性の程度を示す信頼度を出力する。そして、識別部305は、第1文字情報および第2文字情報、ならびにそれぞれの信頼度を、照合部306へ出力する。そして、ステップS15へ移行する。
照合部306は、識別部305から受け取った第1文字情報と第2文字情報とが一致するか否かを照合する。照合部306は、照合結果を、表示制御部307およびサーバ装置20へ出力する。また、照合部306は、第1文字情報および第2文字情報それぞれに対応する信頼度を、表示制御部307およびサーバ装置20へ出力する。そして、ステップS16へ移行する。
表示制御部307は、第2取得部302により取得された第2撮像画像に対して、照合結果である結果表示部RSTを重畳させ、エンブレムの画像部分に、第2文字情報およびその信頼度の表示を含み、当該エンブレムの画像部分を囲う部分を含む重畳表示部を重畳させて表示装置13に表示させる。そして、照合部306による照合処理、および表示制御部307による表示処理が終了すると、照合装置10は待機モードへ移行する。そして、識別照合処理を終了する。
変形例に係る照合システム1について、上述の実施形態に係る照合システム1とは相違する点を中心に説明する。上述の実施形態では、撮像対象となる部品30の所定の対象物がエンブレムであるものとして説明したが、本変形例では、当該対象物が部品30のバックドアに備え付けられたガーニッシュであるものとして説明する。
3 搬送ライン
10 照合装置
11 リミッタスイッチ
12a 第1撮像装置
12b 第2撮像装置
13 表示装置
20 サーバ装置
30 部品
31 電光掲示板
101 画像処理プログラム
102 学習モデル
103 照合プログラム
301 第1取得部
302 第2取得部
303 検知部
304 抽出部
305 識別部
306 照合部
307 表示制御部
308 生成部
309 記憶部
Claims (6)
- 第1撮像装置により撮像された、搬送経路上で搬送される部品を識別する指示情報の表示媒体に対する第1撮像画像を取得する第1取得部と、
第2撮像装置により撮像された、前記部品における所定の対象物に対する第2撮像画像を取得する第2取得部と、
前記第1撮像画像に含まれる前記指示情報の画像を入力として、所定の学習モデルを用いた識別処理により該指示情報に対応する第1情報を出力として得、前記第2撮像画像に含まれる前記対象物の画像を入力として、前記学習モデルを用いた識別処理により該対象物を識別する第2情報を出力として得る識別部と、
前記第1情報と、前記第2情報とを照合する照合部と、
前記学習モデルを用いた処理の結果を、前記第2撮像画像に重畳させて表示装置に表示させる表示制御部と、
を備えた照合装置。 - 前記表示制御部は、前記識別部による前記対象物の画像に対する前記学習モデルを用いた識別処理の結果を、前記第2撮像画像に重畳させて前記表示装置に表示させる請求項1に記載の照合装置。
- 前記表示制御部は、前記識別処理の結果を、前記第2情報に応じた態様で前記表示装置に表示させる請求項2に記載の照合装置。
- 前記表示制御部は、前記識別処理の結果として、前記第2情報、または該識別処理の信頼度のうち少なくともいずれか一方を、前記表示装置に表示させる請求項2または3に記載の照合装置。
- 前記部品を識別する指示情報の画像とラベルとを組み合わせた第1教師データ、および、前記部品における所定の対象物の画像とラベルとを組み合わせた第2教師データを用いて、教師あり学習により前記学習モデルを生成する生成部を、さらに備えた請求項1~4のいずれか一項に記載の照合装置。
- 第1撮像装置により撮像された、搬送経路上で搬送される部品を識別する指示情報の表示媒体に対する第1撮像画像を取得する第1取得ステップと、
第2撮像装置により撮像された、前記部品における所定の対象物に対する第2撮像画像を取得する第2取得ステップと、
前記第1撮像画像に含まれる前記指示情報の画像を入力として、所定の学習モデルを用いた識別処理により該指示情報に対応する第1情報を出力として得、前記第2撮像画像に含まれる前記対象物の画像を入力として、前記学習モデルを用いた識別処理により該対象物を識別する第2情報を出力として得る識別ステップと、
前記第1情報と、前記第2情報とを照合する照合ステップと、
前記学習モデルを用いた処理の結果を、前記第2撮像画像に重畳させて表示装置に表示させる表示制御ステップと、
を有する表示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021142582A JP7407778B2 (ja) | 2021-09-01 | 2021-09-01 | 照合装置および表示方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021142582A JP7407778B2 (ja) | 2021-09-01 | 2021-09-01 | 照合装置および表示方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023035595A JP2023035595A (ja) | 2023-03-13 |
JP7407778B2 true JP7407778B2 (ja) | 2024-01-04 |
Family
ID=85503841
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021142582A Active JP7407778B2 (ja) | 2021-09-01 | 2021-09-01 | 照合装置および表示方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7407778B2 (ja) |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019033174A (ja) | 2017-08-08 | 2019-02-28 | 日本電気株式会社 | 識別システム、識別方法およびプログラム |
-
2021
- 2021-09-01 JP JP2021142582A patent/JP7407778B2/ja active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019033174A (ja) | 2017-08-08 | 2019-02-28 | 日本電気株式会社 | 識別システム、識別方法およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP2023035595A (ja) | 2023-03-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101783337B1 (ko) | 이미지 문서에서 텍스트를 추출하는 방법 및 장치 | |
CN110428028B (zh) | 基于准动态镭射标签的识别验伪方法、装置、设备及介质 | |
WO2015064107A1 (ja) | 管理システム、リスト作成装置、データ構造および印刷ラベル | |
CN105303156A (zh) | 字符检测装置、方法及程序 | |
JP2017208050A (ja) | 画像処理プログラム、画像処理方法および画像処理装置 | |
US9679218B2 (en) | Method and apparatus for image matching | |
JP7407778B2 (ja) | 照合装置および表示方法 | |
JP7407777B2 (ja) | 照合装置および照合方法 | |
JP7219023B2 (ja) | 情報処理装置および対象物判定プログラム | |
JP2016130979A (ja) | 検知装置、検知処理プログラム及び検知システム | |
JP2014115961A (ja) | 情報処理装置、車両識別方法、及び車両識別プログラム | |
JP6674515B2 (ja) | 判定装置および判定方法 | |
JP2015176252A (ja) | 画像処理装置および画像処理方法 | |
US10332272B2 (en) | Systems and methods for testing an automatic perception system | |
JP5169648B2 (ja) | 原画像探索装置及び原画像探索プログラム | |
JPWO2008107985A1 (ja) | パターン検出プログラム、パターン検出方法およびパターン検出装置 | |
JP2007140703A (ja) | 保険証読取方法、そのシステム及び保険証認識装置 | |
US10225432B2 (en) | Facilitating authentication of a void pantograph | |
JP7481173B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP2023035620A (ja) | 異常検知装置および表示方法 | |
JP2020024111A (ja) | 検査装置および検査方法 | |
JP2020024110A (ja) | 検査装置および検査方法 | |
CN106599742A (zh) | 车险标志识别装置 | |
US9292238B2 (en) | Method and apparatus for preventing leakage of printout using security paper | |
JP7507131B2 (ja) | 物品照合システムおよび物品照合方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A80 Effective date: 20210928 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230209 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231121 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231219 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7407778 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |