JP2023126335A - 撮像装置と識別方法 - Google Patents

Abstract

【課題】高品質な教師データを大量に収集するための時間とコストとを低減する。【解決手段】本発明にかかる撮像装置（１，１００Ｂ）は、被写体の複数の種別情報が入力される種別入力部（１１，１１１）と、被写体を撮像して撮像画像を出力する撮像部（１２，１１２）と、種別情報と撮像画像とが関連付けて記憶される記憶部（１３，１２７，１２７Ｂ）と、種別情報と関連付けて記憶部に記憶された撮像画像に基づいて生成された種別情報ごとの識別情報を用いて、被識別体に対応する種別情報を識別する識別部（２３，１２７Ｂ）と、識別部が識別した被識別体の種別情報が特定種別情報のとき、被識別体に対して特定処理を実行する特定処理部（２４，１２４Ｂ）と、を有してなる。特定処理部は、被識別体が特定種別情報に識別されたことを視認可能にする。【選択図】図１

Description

本発明は、撮像装置と識別方法とに関する。

近年、人工知能（ＡＩ：Artificial Intelligence）に関連する技術の発達に伴い、各種製品の製造現場において、人工知能を用いた製造工程の自動化が急速に進んでいる。特に、画像認識（画像識別）の分野において、人工知能の能力は人間の能力を超えてきている。そのため、人工知能は、製品の良・不良を見分ける外観検査（例えば、特許文献１参照）や、製品を種別ごとに分類（識別）する識別処理（例えば、特許文献２参照）などの自動化に用いられている。

特許文献１に開示された技術は、製品の良品と不良品それぞれの教師データ（画像データ）に基づいて、製品の外観検査を実行する。一方、特許文献２に開示された技術は、製品の種別ごとの教師データに基づいて、製品の分類を実行する。

特開２０１８－５６４０号公報 特開平０５－２０４２６号公報

これらの技術では、人工知能を学習させるための教師データの量と質とが、画像識別精度に大きく影響を与える。すなわち、人工知能を用いて外観検査や識別処理を高精度に実行するためには、高品質な教師データが大量に必要となる。

高品質な教師データを大量に収集するためには、製品の良品、不良品、種別などの分類（クラス）ごとの撮像環境の整備や、撮像サンプルの準備が必要となる。これらの準備には、膨大な時間とコストとが必要となる。また、これらの準備は、人工知能を用いた設備を導入する企業や同設備導入のコンサルタント（導入企業等）が行う場合が多く、人工知能を用いた設備の導入に対する導入企業等への負担となる。

また、不良品や、希少種などの特殊な種別の教師データについては、その絶対数が少なく、大量の教師データ（撮像サンプル）を準備することが難しい。

一方、人工知能が教師データから学習するためには、教師データ内における撮像対象が占める領域がある程度精度よく特定されている必要がある。通常、同領域の特定は、教師データごとに人間の目視により行われる。そのため、同領域の特定には、膨大な時間とコストとが必要となる。

本発明は、以上のような従来技術の問題点を解消するためになされたもので、高品質な教師データを大量に収集するための時間とコストとを低減することを目的とする。

本発明にかかる撮像装置は、被写体の複数の種別情報が入力される種別入力部と、被写体を撮像して撮像画像を出力する撮像部と、種別情報と撮像画像とが関連付けて記憶される記憶部と、種別情報と関連付けて記憶部に記憶された撮像画像に基づいて生成された種別情報ごとの識別情報を用いて、被識別体に対応する種別情報を識別する識別部と、識別部が識別した被識別体の種別情報が特定種別情報のとき、被識別体に対して特定処理を実行する特定処理部と、を有してなり、特定処理部は、被識別体が特定種別情報に識別されたことを視認可能にする。

本発明によれば、高品質な教師データを大量に収集するための時間とコストとを低減することができる。

本発明にかかる撮像装置の実施の形態を示す機能ブロック図である。 本発明にかかる撮像方法に含まれる学習モードを示すフローチャートである。 図１の撮像装置が備える記憶部に記憶されている情報の例を示す模式図である。 図２の撮像方法に含まれる識別モードを示すフローチャートである。 図１の撮像装置の実施例を示す模式図である。 図５の撮像装置のＡ矢視における部分模式図である。 図５の撮像装置による被写体の位置情報の決定例を示す模式図である。 図１の撮像装置の別の実施例を示す模式図である。 図１の撮像装置のさらに別の実施例を示す模式図である。 被識別体にレーザ光が照射されている状態を示す模式図である。 図９の撮像装置の変形例を示す模式図である。 図１の撮像装置のさらに別の実施例を示す模式図である。 図１の撮像装置のさらに別の実施例を示す模式図である。 図１の撮像装置のさらに別の実施例を示す模式図である。 図１の撮像装置のさらに別の実施例を示す模式図である。

以下、図面を参照しながら、本発明にかかる撮像装置（以下「本装置」という。）と撮像方法（以下「本方法」という。）との実施の形態について説明する。各図において、同一の部材と要素とについては同一の参照番号を付し、重複する説明は省略する。

本発明は、被写体の向きや姿勢、形状などを変えて被写体を撮像することにより、１つの被写体から向きや姿勢、形状などを変えた複数の撮像画像を撮像し、同撮像画像の中から被写体領域を特定して人工知能用の教師データとして取得するものである。

「被写体」は、本装置により撮像される対象であり、例えば、外観検査において良品・不良品が見分けられる製品や産品、識別処理において種別ごとに分類（識別）される製品（産品）である。種別については、後述する。

「被写体領域」は、撮像画像において、被写体を取り囲む領域である。

「撮像画像」は、例えば、デジタルカメラなどで撮像される静止画像である。撮像画像は、被写体が撮像された画像である被写体画像と、被写体の周囲（例えば、被写体が載置される台やベルトコンベアなどの載置面）が撮像された画像である周囲画像と、を含む。

●撮像装置●
●撮像装置の構成
図１は、本装置の実施の形態を示す機能ブロック図である。

本装置１は、被写体の向き（姿勢）や、形状などを変えて、同被写体を撮像する。本装置１は、種別入力部１１と、撮像部１２と、記憶部１３と、位置決定部１４と、形態変更部１５と、位置関係変更部１６と、被写体情報取得部１７と、載置部１８と、検知部１９と、表示部２０と、撮像環境変更部２１と、識別情報生成部２２と、識別部２３と、第１特定処理部２４と、第２特定処理部２５と、被識別体検知部２６と、制御部２７と、を有してなる。

種別入力部１１は、本装置１の使用者により被写体の種別情報が入力される、例えば、キーボードやタッチパネル、音声入力デバイスなどの使用者が直接入力可能な入力媒体である。種別入力部１１に入力される種別情報は、１つ、または、複数である。

なお、種別入力部は、使用者が直接入力可能な入力媒体に限定されない。すなわち、例えば、種別入力部は、本装置から物理的に離れた場所（例えば、同じ室内や、隣室、遠隔地など）に配置される端末（外部装置）から送信される種別情報を受信する通信機器でもよい。あるいは、種別入力部は、予め種別情報が記憶されているＵＳＢやＳＤカードなどの記憶媒体からの情報を取り込み可能なインターフェイス（ＵＳＢ端子やＳＤカードスロットなど）でもよい。

「種別情報」は、例えば、リンゴ，ねじなどの被写体の種類（名称）、良品，不良品などの被写体の状態など、複数の被写体を区分する種別（ラベル、属性、クラス）を示す情報である。

撮像部１２は、被写体を撮像して撮像画像を出力する。撮像部１２は、例えば、２次元の静止画像を撮像可能なデジタルカメラである。

なお、撮像部は、赤外線ＴｏＦ（Time-of-Flight）方式カメラや３次元レーザスキャナなどの３次元の静止画像や座標情報を取得可能なデバイスでもよい。

記憶部１３は、本装置１が後述する本方法を実行するために必要な情報を記憶する。記憶部１３は、例えば、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）などの記録装置や、ＲＡＭ（Random Access Memory）、フラッシュメモリなどの半導体メモリ素子、などにより構成される。

位置決定部１４は、位置情報を決定して、同位置情報を撮像画像と関連付けて記憶部１３に記憶する。位置決定部１４の具体的な構成や動作については、後述する。

「位置情報」は、撮像画像における被写体の位置を特定する情報である。位置情報は、撮像画像内の基準点からの相対座標を特定する座標情報や、被写体領域を特定する座標情報を含む。「基準点」は、例えば、撮像画像を構成する画素のうち、中央や４隅に位置する画素の座標であり、あるいは、撮像画像に撮像された基準マーカを示す画素の座標である。

形態変更部１５は、例えば、被写体に外力や熱を加えることにより、被写体の形態を変更させる。形態変更部１５は、例えば、被写体を把持して押し潰すロボットアームや、被写体を欠損させる針や刃、被写体に熱を加えるヒータ、被写体を冷却する冷却装置などである。形態変更部１５の具体的な構成や動作については、後述する。

なお、本発明において、「被写体の形態の変更」は、被写体の形状の変形や、被写体の表面の色の変色を含む。すなわち、例えば、形態変更部は、被写体に外力や熱を加えて、被写体の形状を変形させてもよく、あるいは、被写体の表面の色を変色させてもよい。

位置関係変更部１６は、被写体と撮像部１２との位置関係を変更する。位置関係変更部１６は、例えば、被写体を把持するロボットアームや、被写体に振動を加える振動装置、被写体にエア（ガス）を吹き付けるエアガンなど、被写体に外力を加えることにより被写体の向き（姿勢）を変更させる装置（機構）、複数のスライドレールの組み合わせにより構成される撮像部１２を立体的（平面的）に移動させる装置（機構）、ヒンジなどにより構成される撮像部１２の向き（撮像範囲）を変える機構、または、これらの組み合わせを含む。位置関係変更部１６の具体的な構成や動作については、後述する。

なお、位置関係変更部は、形態変更部として機能してもよい。すなわち、例えば、位置関係変更部は、被写体を把持して被写体の向き（姿勢）を変更すると共に、被写体を把持して押し潰す１つのロボットアームで構成されてもよい。

被写体情報取得部１７は、被写体に関する情報（以下「被写体情報」という。）を取得する。被写体情報取得部１７は、例えば、ロードセルやビームセンサ、超音波センサ、深度センサなどのセンサや、これらのセンサからの信号を受信して被写体情報を算出するデバイス、被写体を多面的に写す鏡などである。被写体情報取得部１７の具体的な構成や動作については、後述する。

「被写体情報」は、被写体の長さや重量、体積、鏡により得られる多面的な画像情報など、通常の撮像方法や撮像装置（デジタルカメラ）から直接的に取得することが難しい被写体に関する情報である。

載置部１８は、撮像部１２に撮像される被写体が載置される装置・台である。載置部１８は、例えば、ターンテーブルやベルトコンベア、スライダテーブルなどの被写体を移動させることが可能な装置である。載置部１８は、被写体が載置される載置面（不図示）を備える。載置部１８の具体的な構成や動作については、後述する。

載置面は、周囲画像として撮像され得る。すなわち、周囲画像は、載置面の画像（以下「載置面画像」という。）を含む。そのため、例えば、載置部１８がベルトコンベアである場合において、異なる色のベルト（載置面）に交換することにより、あるいは、ベルトの色がベルトの長さ方向において異なる色に塗り分けられる（異なる色のベルトが連結される）ことにより、被写体が載置される載置面、つまり、周囲画像は、容易に変更可能である。

検知部１９は、載置部１８に載置された被写体の位置を検知して検知信号を出力する。検知部１９は、例えば、ビームセンサである。検知部１９の具体的な構成や動作については、後述する。検知信号は、位置決定部１４に送信される。

表示部２０は、撮像部１２が撮像する被写体の周囲に配置されて、表示画像を表示する。表示部２０は、例えば、被写体の背景として被写体と共に撮像される表示画像を表示する有機ＥＬ（Electro Luminescence）ディスプレイや液晶ディスプレイ、あるいは、表示画像を投影するプロジェクタなどである。

「表示画像」は、例えば、単一の色で構成される壁紙や、被写体（製品）の実際の製造ラインにおいて外観検査や識別処理が実行される際に製品と共に撮像される背景（ベルトコンベアなど）の画像であり、その全部または一部が撮像部１２に周囲画像として撮像される画像である。表示画像の候補となる画像（以下「候補画像」という。）は、予め記憶部１３に記憶されている。

撮像環境変更部２１は、撮像部１２が被写体を撮像する際の撮像環境を変更する。撮像環境変更部２１は、例えば、被写体を照らす照明装置や、撮像部１２が備えるレンズに取り付けられる（レンズを覆う）フィルタなどである。

「撮像環境」は、例えば、被写体を照らす照明装置の明るさや色、撮像部１２のレンズに入光する光の明るさや色、載置部１８の載置面の色、表示部２０に表示される表示画像など、被写体画像に影響を与える環境（要素）のみならず、周囲画像に影響を与える環境（要素）を含む。

なお、撮像環境変更部は、表示画像を変更するデバイスでもよい。

識別情報生成部２２は、種別情報と関連付けられて記憶部１３に記憶された撮像画像に基づいて、種別情報ごとの識別情報を生成する。識別情報生成部２２の具体的な構成や動作については、後述する。

「識別情報」は、例えば、被写体の形状、模様、色彩などの撮像画像から取得可能な情報であって、種別を特徴付ける情報である。識別情報は、識別情報生成部により生成された情報と、本装置とは異なる外部装置により生成された情報と、を含む。

識別部２３は、識別情報に基づいて、被識別体に対応する種別情報を識別する。識別部２３の具体的な構成や動作については、後述する。

「被識別体」は、例えば、本装置１が後述する識別モードで動作するときに、種別ごとに識別（分類）される製品（産品）である。

第１特定処理部２４は、識別部２３により識別された被識別体の種別情報が特定種別情報のとき、被識別体に対して特定処理を実行する。第１特定処理部は、本発明における特定処理部である。第１特定処理部２４の具体的な構成や動作については、後述する。

「特定種別情報」は、例えば、本装置１が後述する識別モードで動作するときに、ある製品の不良品などの特定の種別（特定種別）を示す情報である。すなわち、種別情報は、特定種別情報を含む。「特定処理」は、例えば、本装置１において特定種別に識別された被識別体を、レーザマーカやレーザポインタ、プロジェクタなどを用いてレーザ光により視認可能にする処理や、同被識別体を本装置１から除去する処理などである。

第２特定処理部２５は、第１特定処理部２４が特定処理を実行した被識別体に対して第２特定処理を実行する。

「第２特定処理」は、例えば、本装置１の動作を停止させる処理や、特定種別に識別された被識別体を視認可能にする態様（例えば、後述するレーザ光の照射態様）を変更する処理、警報などの音を発する（報知する）処理などである。

被識別体検知部２６は、特定処理が実行された被識別体を検知する。被識別体検知部２６は、例えば、ビームセンサである。被識別体検知部２６の具体的な構成や動作については、後述する。

制御部２７は、本装置１の全体の動作を制御する。制御部２７は、例えば、ＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro Processing Unit）、ＤＳＰ（Digital Signal Processor）、ＧＰＵ（Graphics Processing Unit）などのプロセッサや、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field Programmable Gate Array）などの集積回路により構成される。制御部２７の動作については、後述する。

なお、制御部は、被写体情報取得部や、位置決定部、撮像環境変更部、識別情報生成部、識別部、第１特定処理部、第２特定処理部として機能してもよい。すなわち、例えば、制御部は、被写体情報取得部や、位置決定部、撮像環境変更部、識別情報生成部、識別部、第１特定処理部、第２特定処理部を備えてもよい。この場合、被写体情報取得部と、位置決定部と、撮像環境変更部と、識別情報生成部と、識別部、第１特定処理部、第２特定処理部とは、制御部と共通するプロセッサや集積回路により構成されてもよく、あるいは、個別のプロセッサや集積回路により構成されてもよい。

●撮像装置の動作
次に、本装置１の動作について、載置部１８がベルトコンベアやスライダテーブルなどの搬送機能を備える場合を例に説明する。

本装置１は、学習モードと識別モードとの２つの動作モードに基づいて動作する。動作モードは、例えば、本装置１の使用者の本装置１に対する操作により、切り替えられる。

●学習モード
「学習モード」は、本装置１が被写体の向きや姿勢、形状などを変えて被写体を撮像することにより、被写体から向きや姿勢、形状などを変えた複数の撮像画像を撮像し、各撮像画像の中から被写体領域を特定して人工知能用の教師データとして取得する動作モードである。

図２は、学習モードのフローチャートである。
同図は、図示の便宜上、「判断」を示すボックスを「準備」を示す六角形のボックスで代用して示す（以下同じ）。すなわち、例えば、後述する処理（Ｓ１０５）は、フローチャート上における「判断」を意味する。

先ず、本装置１の使用者により載置部１８の載置面（不図示）に被写体が載置される（Ｓ１０１）。

次いで、本装置１の使用者により種別入力部１１が操作されることにより、本装置１により撮像される被写体の種別情報が本装置１に入力される（Ｓ１０２）。入力された種別情報は、記憶部１３に記憶される。

次いで、載置部１８は、被写体を撮像部１２の撮像範囲へ搬送する（Ｓ１０３）。このとき、被写体情報取得部１７は、例えば、検知部１９の検知信号と、載置部１８の搬送速度や搬送量と、に基づいて、被写体の長さに関する情報（被写体情報）を取得（算出）する（Ｓ１０４）。「搬送量」は、例えば、ベルトコンベアに取り付けられるエンコーダ（ロータリエンコーダなど）や、ベルトコンベアを駆動させるサーボモータなどのパルスに基づいて算出される。取得された被写体情報は、記憶部１３に記憶される。

なお、被写体情報取得部が取得する被写体情報は、被写体の長さに関する情報に限定されない。すなわち、例えば、被写体情報取得部は、被写体の重量や、高さ、体積、温度分布などセンサを用いて検知可能な情報を被写体情報として取得してもよい。

次いで、制御部２７は、例えば、検知部１９の検知信号に基づいて、被写体が撮像部１２の撮像範囲に入ったか否かを判定する（Ｓ１０５）。

被写体が撮像部１２の撮像範囲に入ったとき（Ｓ１０５の「Ｙｅｓ」）、撮像部１２は、被写体を撮像する（Ｓ１０６）。このとき、位置決定部１４は、例えば、検知部１９の検知信号に基づいて、撮像画像内における被写体領域を特定して、その座標情報（被写体の位置情報）を決定する（Ｓ１０７）。

一方、被写体が撮像部１２の撮像範囲に入っていないとき（Ｓ１０５の「Ｎｏ」）、撮像部１２は、被写体が同撮像範囲に入るまで待機する。

なお、本発明における位置決定部は、例えば、矩形状の被写体領域の４隅の座標のうち、対角に位置する２点の座標を被写体の位置情報として決定してもよい。

また、被写体の側面の画像を撮像部に向けて表示可能な鏡が、撮像部の撮像範囲に配置されてもよい。この場合、鏡は、本発明における被写体情報取得部として機能する。このように鏡が配置されることにより、撮像画像は、被写体情報である被写体の側面の画像を含む。つまり、本装置は、撮像画像内における鏡の領域を予め特定しておくことにより、撮像画像に関連付いた被写体情報を取得することができる。

次いで、位置決定部１４は、位置情報を撮像画像と関連付けて記憶部１３に記憶する（Ｓ１０８）。このとき、本装置１は、例えば、処理（Ｓ１０４）で取得した被写体情報についても、撮像画像と関連付けて記憶部１３に記憶する。

次いで、載置部１８は、被写体を被写***置変更点に搬送する（Ｓ１０９）。

「被写***置変更点」は、位置関係変更部１６が被写体の向きや姿勢を変更する位置である。被写***置変更点は、例えば、被写体に振動を加える装置（振動装置）の上や、被写体を把持するロボットアームの可動範囲内に設定される。

次いで、制御部２７は、撮像部１２が被写体を撮像した回数が撮像回数情報で特定される回数に到達しているか否かを判定する（Ｓ１１０）。

「撮像回数情報」は、本装置１が被写体の向きや姿勢を変更して被写体を撮像する回数（撮像回数）を特定する情報である。撮像回数情報は、例えば、本装置１の使用者による入力手段（例えば、種別入力部１１）の操作により、予め記憶部１３に記憶されている。

撮像部１２が被写体を撮像した回数が撮像回数情報で特定される回数に到達していないとき（Ｓ１１０の「Ｎｏ」）、位置関係変更部１６は、被写体の向きや姿勢を変更する（Ｓ１１１）。

なお、位置関係変更部は、処理（Ｓ１１１）において、カメラの位置や向きを変更してもよく、被写体の向きや姿勢と、カメラの位置や向きと、を同時に変更してもよい。

次いで、載置部１８は、被写体を撮像部１２の撮像範囲に搬送する（戻す）（Ｓ１１２）。本装置１の処理は、処理（Ｓ１０５）に戻る。すなわち、撮像部１２は、撮像回数情報に基づいて、位置関係変更部１６が被写体と撮像部１２との位置関係を変更した後に、被写体を撮像する。

なお、本装置は、被写体を撮像部の撮像範囲に戻すたびに、被写体情報を取得してもよい。

一方、撮像部１２が被写体を撮像した回数が撮像回数情報で特定される回数に到達しているとき（Ｓ１１０の「Ｙｅｓ」）、制御部２７は、撮像環境を変更させる指示（以下「環境変更指示」という。）の有無を確認する（Ｓ１１３）。

「環境変更指示」は、撮像環境変更部２１に撮像部１２の撮像環境を変更させる（例えば、照明の明るさ、色の変更や、被写体の背景（載置面）の変更など）情報である。環境変更指示は、例えば、本装置１の使用者により予め設定されて、記憶部１３に記憶されている。

環境変更指示があるとき（Ｓ１１３の「Ｙｅｓ」）、撮像環境変更部２１は、撮像環境を変更する（Ｓ１１４）。

次いで、制御部２７は、撮像部１２が被写体を撮像した回数をリセットする（Ｓ１１５）。本装置１の処理は、処理（Ｓ１１２）に戻る。撮像環境が変更されたとき、撮像環境変更部２１が撮像環境を変更した後に撮像された撮像画像の周囲画像は、撮像環境変更部２１が撮像環境を変更する前に撮像された撮像画像の周囲画像とは異なる。

一方、環境変更指示がないとき（Ｓ１１３の「Ｎｏ」）、制御部２７は、被写体の形態を変更させる指示（以下「形態変更指示」という。）の有無を確認する（Ｓ１１６）。

「形態変更指示」は、形態変更部１５に、例えば、押圧による被写体の縦横比の変更や、被写体の切断・刺突、熱による被写体の変形・変色などの処理を実行させる情報である。形態変更指示は、例えば、撮像回数情報に基づいて設定される。形態変更指示は、例えば、本装置１の使用者により予め設定されて、記憶部１３に記憶されている。

形態変更指示が有るとき（Ｓ１１６の「Ｙｅｓ」）、形態変更部１５は、形態変更指示に基づいて、被写体の形態を変更させる（Ｓ１１７）。

次いで、制御部２７は、撮像部１２が被写体を撮像した回数をリセットする（Ｓ１１８）。このとき、必要に応じて、制御部２７、または、本装置１の使用者により、被写体の形態が変更されたことを示す種別情報が入力される（Ｓ１１９）。例えば、種別情報が「スイカ良品」と「スイカ不良品」で、良品のスイカが種別情報「スイカ良品」として撮像された後に同スイカが変形されて不良品のスイカとなったとき、種別情報「スイカ不良品」が入力される。本装置１の処理は、処理（Ｓ１１２）に戻る。すなわち、撮像部１２は、形態変更指示があるとき、形態変更部１５が被写体の形態を変更させた後に、被写体を撮像する。

一方、形態変更指示がないとき（Ｓ１１６の「Ｎｏ」）、制御部２７は、処理（Ｓ１０６）で撮像された各撮像画像を、対応する種別情報（処理（Ｓ１０２）や処理（Ｓ１１９）で入力された種別情報）に関連付けて記憶部１３に記憶する（Ｓ１２０）。

次いで、識別情報生成部２２は、記憶部１３から種別情報と、種別情報に関連付けて記憶されている撮像画像と、を読み出し、同種別情報と撮像画像とに基づいて、種別情報ごとの識別情報を生成する（Ｓ１２１）。識別情報は、種別情報に関連付けられて、記憶部１３に記憶される（Ｓ１２２）。

なお、本装置が実行する学習モードの各処理は、本実施の形態に限定されない。すなわち、例えば、本装置は、学習モードにおいて位置情報を決定しなくてもよく、あるいは、被写体情報を取得しなくてもよい。この場合であっても、本装置は、１つの被写体に対して複数の撮像画像を取得可能である。また、例えば、本装置は、学習モードにおいて撮像回数情報をリセットしなくてもよい。この場合、撮像回数情報は、例えば、撮像環境の変更（環境変更指示）ごと、形態の変更（形態変更指示）ごとに設定された個別の撮像回数を含んでもよい。

また、本装置は、学習モードにおいて、種別情報ごとの識別情報を生成しなくてもよい。この場合、例えば、本装置の使用者などが、本装置または外部装置を用いて種別情報ごとの識別情報を生成して、本装置の記憶部に記憶させてもよい。

さらに、本装置は、撮像画像を撮像後、同撮像画像を所定の角度で回転させた画像を同撮像画像に対応する種別情報（同撮像画像の撮像前に、種別入力部から入力された種別情報）に関連付けて記憶部に記憶してもよい。

さらにまた、種別情報の入力は、撮像画像の撮像前（処理Ｓ１０２）に限定されない。すなわち、例えば、種別情報の入力は、撮像回数情報で特定される回数、被写体の向き（姿勢）を変更して撮像画像を撮像した後（処理Ｓ１１３前）や、全ての撮像画像を対応する種別情報と関連付けて記憶部に記憶する（処理Ｓ１２０）前に入力されてもよい。

さらにまた、識別情報生成部は、処理（Ｓ１２１）において、記憶部に記憶された識別情報に基づいて、撮像画像を識別情報の生成に用いるか否かを決定してもよい。すなわち、例えば、撮像画像に基づいて生成される識別情報の確度（後述）が十分に高く（例えば、確度「９０」以上）、識別情報の更新が不要なとき、識別情報生成部は、撮像画像を識別情報の生成に用いない（識別情報を生成しない）。一方、識別情報の確度が低いとき（例えば、確度「９０」未満）、識別情報生成部は、撮像画像を識別情報の生成に用いる（識別情報を生成する）。

さらにまた、本発明における位置決定部は、被写体に目印が付された場合、撮像画像における被写体に付された目印の位置を特定する位置情報を決定して、同位置情報を撮像画像と関連付けて記憶部に記憶してもよい。この場合、「目印」は、例えば、特殊な色や形で被写体の特定箇所を示すように被写体に塗られた塗料である。目印を示す情報は、位置決定部が認識可能な情報として、予め記憶部に記憶されている。このように、目印の位置情報を撮像画像と関連付けて記憶することにより、人工知能（プログラム）に学習させる箇所が明確になる。その結果、例えば、職人が経験や勘で判別する不良（暗黙知として判別される不良）を囲むように目印を付すことで、本装置は、同不良の位置を容易に特定することができる。

さらにまた、「目印」は、紫外線マーカなどの特殊な照明下においてのみ認識可能な塗料で構成されてもよい。この場合、本装置は、同塗料を認識可能な撮像機器を備えてもよく、あるいは、同塗料を可視化する特殊な照明を備えてもよい。撮像機器や照明を切り替えて被写体を撮像する場合、載置部の搬送速度に応じて、撮像画像内における被写体領域のずれ（位置情報のずれ：位置ずれ）が生じ得る。そのため、本装置は、撮像機器や照明の切り替えの際に、載置部の動作を一時的に停止させてもよく、位置ずれ量に応じて載置部を逆送させて被写体を撮像範囲に戻してもよく、あるいは、搬送速度から位置ずれ量を加味した補正情報を算出してもよい。

図３は、記憶部１３に記憶されている情報の例を示す模式図である。
同図は、「種別情報」ごとに「撮像番号」と「撮像画像」と「位置情報」と「被写体情報」とが関連付けられて記憶部１３に記憶されていることを示す。「撮像番号」は、撮像回数情報に基づいて、撮像部１２が被写体を撮像した回数（順番）を示す番号である。同図は、例えば、種別情報「スイカ良品」に対して、撮像番号「０１」と、撮像画像「ｐ１」と、位置情報「ｘ１ｙ１ｚ１」と、被写体情報「Ａ１」と、が関連付けて記憶部１３に記憶されていることを示す。また、同図は、種別情報「スイカ良品」に対して、撮像番号「０１」「０２」・・・「ｎｎ」と、各撮像番号に対応する撮像画像と位置情報と被写体情報とが関連付けられて記憶部１３に記憶されていることを示す。

本装置１は、種別情報を参照することで、種別情報と関連付けて記憶されている撮像画像と、同撮像画像に関連付けられている位置情報と被写体情報と、を記憶部１３から読み出すことができる。また、例えば、本装置１は、被写体情報を参照することで、被写体情報と関連付けて記憶されている種別情報を読み出すことができる。

●識別モード
「識別モード」は、本装置１が学習モードで生成した識別情報、あるいは、本装置１が学習モードで取得した撮像画像などから本装置１の使用者などが生成した識別情報を用いて、製品（産品）を識別する動作モードである。識別モードは、本発明に係る識別方法の例である。

図４は、識別モードのフローチャートである。

先ず、本装置１の使用者などにより、被識別体に対応する識別情報が、記憶部１３から読み出される（Ｓ２０１）。

次いで、被識別体が、例えば、本装置１の使用者により載置部１８に載置される（Ｓ２０２）。

次いで、載置部１８は、被識別体を撮像部１２の撮像範囲へ搬送する（Ｓ２０３）。このとき、被写体情報取得部１７は、例えば、検知部１９の検知信号と、載置部１８の搬送速度と、に基づいて、被識別体の長さに関する情報（被識別体情報）を取得（算出）する（Ｓ２０４）。取得された被識別体情報は、記憶部１３に記憶される。

「被識別体情報」は、例えば、被識別体の長さや色、形状、重量、体積、鏡により得られる多面的な画像情報など、通常の撮像方法や撮像装置（デジタルカメラ）から直接的に取得することが難しい被識別体に関する情報である。

次いで、制御部２７は、例えば、検知部１９の検知信号に基づいて、被識別体が撮像部１２の撮像範囲に入ったか否かを判定する（Ｓ２０５）。

被識別体が撮像部１２の撮像範囲に入ったとき（Ｓ２０５の「Ｙｅｓ」）、撮像部１２は、被識別体を撮像する（Ｓ２０６）。このとき、位置決定部１４は、例えば、検知部１９の検知信号に基づいて、撮像画像内における被識別体の位置情報を決定する（Ｓ２０７）。

一方、被識別体が撮像部１２の撮像範囲に入っていないとき（Ｓ２０５の「Ｎｏ」）、撮像部１２は、被識別体が同撮像範囲に入るまで待機する。

次いで、位置決定部１４は、位置情報を撮像画像と関連付けて記憶部１３に記憶する（Ｓ２０８）。このとき、本装置１は、例えば、処理（Ｓ２０４）で取得した被写体情報についても、撮像画像と関連付けて記憶部１３に記憶する。

次いで、識別部２３は、記憶部１３に記憶されている、被識別体の撮像画像と、同撮像画像に関連付けて記憶されている位置情報と、識別情報と、を用いて、被識別体に対応する種別情報を識別（特定）する（Ｓ２０９）。すなわち、例えば、識別情報が画素値に関する情報の場合、識別部２３は、被写体の撮像画像と位置情報とに基づいて、同撮像画像内の被識別体が撮像されている範囲の画素値を算出して、算出された画素値と種別情報ごとの識別情報とを照合する。識別部２３は、算出された画素値に対応する識別情報の種別情報を、被識別体の種別情報として識別する。被識別体に対応する識別情報は、同被識別体の撮像画像に関連付けられて記憶部１３に記憶される。

次いで、第１特定処理部２４は、識別部２３が識別した被識別体の種別情報が特定種別情報であるか否かを判定する（Ｓ２１０）。

被識別体の種別情報が特定種別情報であるとき（Ｓ２１０の「Ｙｅｓ」）、第１特定処理部２４は、被識別体に対して特定処理（例えば、不良品に対してレーザ光を照射する処理）を実行する（Ｓ２１１）。

次いで、第２特定処理部２５は、特定処理が実行された被識別体を被識別体検知部２６が検知したか否かを確認する（Ｓ２１２）。

特定処理が実行された被識別体を被識別体検知部２６が検知したとき（Ｓ２１２の「Ｙｅｓ」）、第２特定処理部２５は、第２特定処理（例えば、不良品の除去やレーザ光の照射態様の変更など）を実行する（Ｓ２１３）。「レーザ光の照射態様」は、例えば、レーザ光の色や、点灯・点滅などのレーザ光の照射間隔などのレーザ光が被識別体に照射される態様である。

一方、被識別体の種別情報が特定種別情報でないとき（Ｓ２１０の「Ｎｏ」）、または、特定処理が実行された被識別体を被識別体検知部２６が検知しないとき（Ｓ２１２の「Ｎｏ」）、本装置１は、識別モードを終了する。

なお、本装置が実行する識別モードの各処理は、本実施の形態に限定されない。すなわち、例えば、本装置は、識別モードにおいて特定処理や第２特定処理を実行しなくてもよく、あるいは、被写体情報を取得しなくてもよい。

また、識別部は、撮像画像に関連付けて記憶されている被写体情報を記憶部から読み出して、被写体情報と被識別体情報とを比較して、被識別体に対応する種別情報を識別してもよく、あるいは、被識別体に対応する種別情報の識別の参考情報としてもよい。

さらに、第１特定処理部は、被識別体の種別情報が特定種別情報であるとき、

●実施例（１）●
次に、本発明にかかる撮像装置の実施例について、先に説明した実施の形態と異なる部分を中心に説明する。本実施例における撮像装置は、形態変更部と、表示部と、第１特定処理部と、第２特定処理部と、識別体検知部と、を備えていない点において、先に説明した実施の形態における撮像装置と異なる。

●実施例（１）の構成
図５は、本装置の実施例を示す模式図である。

本装置１００は、筐体１０１と、タッチパネル１１１と、カメラ１１２と、振動装置１１６と、重量計１１７ａと、一対の鏡１１７ｂ１，１１７ｂ２（図６参照）と、ベルトコンベア１１８と、４個の第１センサ１１９ａ１，１１９ａ２，１１９ａ３，１１９ａ４と、８個の第２センサ１１９ｂ１，１１９ｂ２，１１９ｂ３，１１９ｂ４，１１９ｂ５，１１９ｂ６，１１９ｂ７，１１９ｂ８（図６参照）と、照明１２１と、制御装置１２７と、を有してなる。

筐体１０１は、カメラ１１２と、振動装置１１６と、重量計１１７ａと、一対の鏡１１７ｂ１，１１７ｂ２と、ベルトコンベア１１８と、第１センサ１１９ａ１－１１９ａ４と、第２センサ１１９ｂ１－１１９ｂ８と、照明１２１と、制御装置１２７と、を収容する。筐体１０１は、例えば、アルミ製のフレームである。

タッチパネル１１１は、本装置１００の使用者により被写体の種別情報が入力される入力デバイスである。タッチパネル１１１は、本発明における種別入力部の例である。タッチパネル１１１は、筐体１０１の外面に取り付けられる。

カメラ１１２は、ベルトコンベア１１８の中央上方に配置されて、ベルトコンベア１１８により搬送される被写体を撮像する。カメラ１１２は、本発明における撮像部の例である。カメラ１１２は、例えば、ラインスキャンカメラである。

振動装置１１６は、ベルトコンベア１１８の搬送方向（以下「搬送方向」という。）の後方側に配置されて、被写体に振動を加えて被写体の向き（姿勢）を変更すると共に、被写体の向きを変更後にベルトコンベア１１８に向けて傾斜することにより同被写体をベルトコンベア１１８に戻す。すなわち、振動装置１１６は、本発明における位置関係変更部の例である。

重量計１１７ａは、ベルトコンベア１１８の下方に配置されて、ベルトコンベア１１８とベルトコンベア１１８の載置面１１８ａに載置された被写体との重量を計測する。重量計１１７ａは、本発明における被写体情報取得部の例である。

図６は、図５の本装置１００のＡ矢視における部分模式図である。
同図は、カメラ１１２の撮像範囲を一点鎖線で示し、第１センサ１１９ａ１－１１９ａ３と第２センサ１１９ｂ１－１１９ｂ８それぞれの光束を二点鎖線で示す。

図５と図６とに戻る。
鏡１１７ｂ１は、ベルトコンベア１１８の中央右方（図６の紙面上方）に配置されて、ベルトコンベア１１８により搬送される被写体の右側面をカメラ１１２に向けて表示する。鏡１１７ｂ２は、ベルトコンベア１１８の中央左方（図６の紙面下方）に配置されて、ベルトコンベア１１８により搬送される被写体の左側面をカメラ１１２に向けて表示する。鏡１１７ｂ１，１１７ｂ２は、本発明における被写体情報取得部の例である。

ベルトコンベア１１８は、ベルトコンベア１１８に載置された被写体を搬送することにより、カメラ１１２に対する被写体の位置を変更する。ベルトコンベア１１８は、本発明における載置部と位置関係変更部との例である。ベルトコンベア１１８は、被写体が載置される載置面１１８ａを備える。ベルトコンベア１１８は、被写体を正方向（図６の紙面左方）と逆方向（図６の紙面右方）とに搬送可能である。ベルトコンベア１１８の載置面１１８ａは、例えば、単色の合成樹脂製である。

第１センサ１１９ａ１－１１９ａ４は、搬送方向（図６の紙面左右方向）において、ベルトコンベア１１８により搬送される被写体の有無を検知する。第１センサ１１９ａ１－１１９ａ４は、一対の投光部と受光部とから構成されるビームセンサである。第１センサ１１９ａ１－１１９ａ４は、本発明における検知部の例である。第１センサ１１９ａ１－１１９ａ４は、ベルトコンベア１１８の搬入部と、搬送方向における鏡１１７ｂ１，１１７ｂ２の前後と、ベルトコンベア１１８の搬出部と、に配置される。第１センサ１１９ａ１－１１９ａ４の光束の向きは、載置面１１８ａに平行かつ搬送方向に対して垂直な方向に沿う（ベルトコンベア１１８上を横断する）。

第２センサ１１９ｂ１－１１９ｂ８は、一対の投光部と受光部とから構成される狭光芒性のビームセンサである。第２センサ１１９ｂ１－１１９ｂ８は、本発明における検知部の例である。第２センサ１１９ｂ１－１１９ｂ８は、例えば、レールとアクチュエータとから構成される昇降機構に取り付けられて、ベルトコンベア１１８の上方を上下方向に移動可能である。第２センサ１１９ｂ１－１１９ｂ８の光束の向きは、搬送方向に沿う。

なお、第１センサと第２センサそれぞれの数は、本実施の形態に限定されない。すなわち、例えば、第１センサの数は「１」や「２」でもよく、第２センサの数は「１０」を超えてもよい。

照明１２１は、カメラ１１２の撮像範囲内に搬送された被写体を照らす。照明１２１は、本発明における撮像環境変更部の例である。

制御装置１２７は、本装置１００の全体の動作の制御や、本方法の動作に必要な情報の記憶、被写体の位置情報の決定、被写体情報の取得、被識別体の識別を実行する。すなわち、制御装置１２７は、本発明における記憶部と、位置決定部と、被写体情報取得部と、識別部と、制御部と、の例である。制御装置１２７は、例えば、パーソナルコンピュータで実現される。

ここで、本装置１００が備える部材のうち、駆動して振動を発生させる部材（振動装置１１６やベルトコンベア１１８）は、同振動により影響を受けやすい部材（筐体１０１やカメラ１１２、鏡１１７ｂ１，１１７ｂ２、第１センサ１１９ａ１－１１９ａ４、第２センサ１１９ｂ１－１１９ｂ８、照明１２１、制御装置１２７など）と分離して配置される。そのため、振動装置１１６やベルトコンベア１１８からの振動は、カメラ１１２や鏡１１７ｂ１，１１７ｂ２、第１センサ１１９ａ１－１１９ａ４、第２センサ１１９ｂ１－１１９ｂ８、照明１２１、制御装置１２７などに伝達されない。

なお、駆動して振動を発生させる部材は、同振動により影響を受けやすい部材に対して、物理的に分離して配置されてもよく、あるいは、ゴムなどの弾性材製の防振材や、制振材などを間に介在させて連結して配置されてもよい。

また、本装置は、例えば、複数のスライドレールを組み合わせた機構など、カメラを立体的な軌道で移動させることができる機構を備えてもよく、あるいは、同機構と共にヒンジのようなカメラの向きを変更可能な機構を備えてもよい。この場合、同機構は、位置関係変更部として機能する。

さらに、本装置は、カメラ（本発明における撮像部）や照明（本発明における撮像環境変更部）を複数備えてもよい。

●実施例（１）の動作
次いで、本実施例（１）における本装置１００の動作について、図２、図５、図６を参照しながら説明する。

本装置１００は、ベルトコンベア１１８の載置面１１８ａに載置された被写体の重量と長さとを計測し（Ｓ１０４）、同被写体を搬送しながら撮像し（Ｓ１０６）、撮像画像内の被写体の位置情報を決定し（Ｓ１０７）、振動装置１１６により被写体の向き（姿勢）を変更し（Ｓ１１１）、向きが変更された被写体を撮像する（Ｓ１０６）。本装置１００は、被写体の向きの変更と撮像とを繰り返すことにより、種別情報ごとに複数の撮像画像を取得することができる。

本装置１００は、例えば、第１センサ１１９ａ１の検知信号と、ベルトコンベア１１８の搬送速度と、に基づいて、ベルトコンベア１１８に搬送される被写体の長さを計測する。すなわち、例えば、本装置１００は、制御装置１２７を用いて、第１センサ１１９ａ１が被写体を検知している時間と、ベルトコンベア１１８の搬送速度と、を計測して、同時間と同搬送速度とから被写体の長さを算出（計測）する。このとき、制御装置１２７は、本発明における被写体情報取得部として機能する。

カメラ１１２は、被写体が正方向に搬送されている場合において、第１センサ１１９ａ２が被写体を検知したとき被写体の撮像を開始し、第１センサ１１９ａ３が被写体を検知しなくなったとき被写体の撮像を終了する。一方、カメラ１１２は、被写体が逆方向に搬送されている場合において、第１センサ１１９ａ３が被写体を検知したとき被写体の撮像を開始し、第１センサ１１９ａ２が被写体を検知しなくなったとき被写体の撮像を終了する。すなわち、カメラ１１２は、第１センサ１１９ａ２，１１９ａ３の検知信号に基づいて、被写体の撮像を開始すると共に、被写体の撮像を終了する。

なお、カメラ（本発明における撮像部）は、例えば、第１センサ１１９ａ１の検知信号と、ベルトコンベアの搬送速度と、に基づいて、撮像時間間隔（タイミングレート）を変更しながら被写体を撮像してもよい。

前述のとおり、カメラ１１２は、ラインスキャンカメラであり、撮像の開始から終了までの間に取得した一連の画像データ（ライン状の画像データ）を合成して撮像画像を生成する。そのため、カメラ１１２の撮像範囲と第１センサ１１９ａ２，１１９ａ３との間隔を狭めることで、搬送方向における撮像画像の長さと、同撮像画像に撮像されている被写体の長さとは、略同じとなる。つまり、本装置１００は、撮像画像において、搬送方向に直交する方向における被写体の位置を特定することにより、撮像画像内の被写体の位置情報を決定することができる。

本実施例では、制御装置１２７が撮像画像内の被写体の位置情報を決定する。すなわち、制御装置１２７は、本発明における位置決定部として機能する。制御装置１２７（位置決定部１４）は、第２センサ１１９ｂ１－１１９ｂ８の検知信号に基づいて、撮像画像内の搬送方向に直交する方向における被写体の位置を特定することにより、撮像画像内における被写体の位置情報を決定する。

図７は、本装置１００による被写体の位置情報の決定例を示す模式図である。
同図は、カメラ１１２により撮像された撮像画像の例を模式的に示す。同図は、第２センサ１１９ｂ１－１１９ｂ８の光束を二点鎖線で示す。同図は、第２センサ１１９ｂ２－１１９ｂ５の光束が被写体により遮られていることを示す。

ここで、カメラ１１２の撮像範囲と、第２センサ１１９ｂ１－１１９ｂ８の検知範囲（光束の位置）とは、予め関連付けられて制御装置１２７（記憶部１３）に記憶されている。そのため、制御装置１２７（位置決定部１４）は、第２センサ１１９ｂ１－１１９ｂ８の光束のうち、被写体に遮られている光束の位置に基づいて、被写体の位置情報を決定することができる。すなわち、例えば、図７に示される例において、制御装置１２７（位置決定部１４）は、撮像画像内において、第２センサ１１９ｂ１，１１９ｂ６の光束と、撮像画像の搬送方向における両端と、により構成される矩形の領域（被写体領域）内に被写体が位置していることを特定することができる。つまり、制御装置１２７（位置決定部１４）は、撮像画像内における被写体領域の座標を被写体の位置情報として決定する。

なお、本発明における位置決定部は、被写体が第１センサ１１９ａ２を通過してからカメラが撮像画像を撮像するまでの時間に基づいて、被写体と第１センサ１１９ａ２との距離を算出して、被写体領域をさらに限定してもよい。また、本発明における位置決定部は、周囲画像に撮像されている基準マーカや、鏡などの位置に基づいて、被写体の位置情報を決定してもよい。

また、同図は、撮像画像に鏡１１７ｂ１，１１７ｂ２と、鏡１１７ｂ１，１１７ｂ２に写り込んでいる被写体の側面と、が撮像されていることを示す。このように鏡１１７ｂ１，１１７ｂ２を撮像範囲に配置することにより、本装置１００は、被写体を撮像するごとに、同被写体の側面の画像を被写体情報として取得することができる。

さらに、カメラ（本発明における撮像部）は、エリアカメラでもよい。この場合、例えば、本装置は、格子状に配置された第２センサの検知信号に基づいて、撮像画像内における被写体の位置情報を決定してもよい。

さらにまた、位置関係変更部と共に、あるいは、位置関係変更部に代えて、本装置の使用者が、被写体の向きや姿勢を変更してもよい。この場合であっても、カメラは、撮像ごとに、被写体とカメラとの位置関係が異なる撮像画像を出力可能である。この構成によれば、使用者は、未取得の教師データや取得機会の少ない教師データを効率的に取得可能である。

さらにまた、制御装置（記憶部）は、複数の識別情報や、識別情報の基となる撮像画像、を記憶していてもよい。この場合、制御装置は、使用者が入力した種別情報に関連付けられて制御装置（記憶部）に記憶されている識別情報（または、撮像画像）を表示装置（例えば、タッチパネルや、本装置に接続されるモニタなど）に出力してもよい。その結果、使用者は、表示装置に表示された識別情報（または、撮像画像）に基づいて、被写体の向きや形状を変更可能である。すなわち、例えば、使用者は、表示装置を確認することにより、未撮像あるいは撮像機会の少ない被写体の向きや形状を把握して、効率的に教師データを取得可能である。

さらにまた、被写体の種別情報は、ネットワークを介して、本装置に接続される外部機器から送信されてもよい。また、本装置が表示装置に出力する識別情報や撮像画像は、ネットワークを介して、本装置に接続される外部機器から送信されてもよい。

●実施例（２）●
次に、本発明にかかる撮像装置の別の実施例について、先に説明した実施例と異なる部分を中心に説明する。本実施例における撮像装置は、ベルトコンベアと制御装置の構成と、表示部を備える点と、において、先に説明した実施例における撮像装置と異なる。

●実施例（２）の構成
図８は、本装置の別の実施例を示す模式図である。

本装置１００Ａは、タッチパネル１１１と、カメラ１１２と、振動装置１１６と、重量計１１７ａと、一対の鏡１１７ｂ１，１１７ｂ２（図６参照）と、ベルトコンベア１１８Ａと、４個の第１センサ１１９ａ１－１１９ａ４と、８個の第２センサ１１９ｂ１－１１９ｂ８（図６参照）と、液晶ディスプレイ１２０Ａと、照明１２１と、制御装置１２７Ａと、を有してなる。

ベルトコンベア１１８Ａは、ベルトコンベア１１８Ａの載置面１１８ａＡに載置された被写体を搬送する。ベルトコンベア１１８Ａは、本発明における載置部の例である。ベルトコンベア１１８Ａは、被写体を正方向（図８の紙面左方向）と逆方向（図８の紙面右方向）とに搬送可能である。ベルトコンベア１１８Ａの載置面１１８ａＡは、例えば、金属製のメッシュである。

なお、ベルトコンベアの載置面は、例えば、透明な合成樹脂製でもよい。

液晶ディスプレイ１２０Ａは、カメラ１１２の撮像範囲、かつ、ベルトコンベア１１８Ａの下方に配置されて、表示画像をカメラ１１２に向けて表示する。液晶ディスプレイ１２０Ａは、本発明における表示部の例である。

制御装置１２７Ａは、本装置１００Ａの全体の動作の制御や、本方法の動作に必要な情報の記憶、被写体の位置情報の決定、表示画像の選択、被写体情報の取得、被識別体の識別を実行する。すなわち、制御装置１２７Ａは、本発明における記憶部と、位置決定部と、被写体情報取得部と、撮像環境変更部と、識別部と、制御部と、の例である。制御装置１２７Ａは、例えば、パーソナルコンピュータで実現される。

●実施例（２）の動作
次いで、本実施例（２）における本装置１００Ａの動作について、図２、図８を参照しながら説明する。

本装置１００Ａは、撮像環境指示に基づいて、カメラ１１２が被写体を撮像するときに周囲画像として撮像される液晶ディスプレイ１２０Ａの表示画像を変更する（Ｓ１１４）。

制御装置１２７Ａ（記憶部１３）は、予め複数の候補画像を記憶している。制御装置１２７Ａは、複数の候補画像の中から表示画像を選択する。すなわち、制御装置１２７Ａ（撮像環境変更部２１）は、液晶ディスプレイ１２０Ａに表示される表示画像を変更する、本発明における撮像環境変更部として機能する。表示画像の選択は、本装置１００Ａの使用者などによる指示や、制御装置１２７Ａ（記憶部１３）に記憶されているプログラムなどの指示（環境変更指示）に従って実行される。候補画像は、例えば、実際の製造ラインの画像や、被写体と同一種別の製品（産品）の画像、被写体のコントラストを明確にする色彩の壁紙、などである。

液晶ディスプレイ１２０Ａは、メッシュであるベルトコンベア１１８Ａの載置面１１８ａＡを介して、表示画像をカメラ１１２に向けて表示する。液晶ディスプレイ１２０Ａは、制御装置１２７Ａ（撮像環境変更部２１）の選択に基づいて、表示画像を変更する。換言すれば、液晶ディスプレイ１２０Ａは、制御装置１２７Ａ（撮像環境変更部２１）の制御により、撮像環境（周囲画像）を変更する。その結果、制御装置１２７Ａ（撮像環境変更部２１）が撮像環境を変更した後に撮像された撮像画像の周囲画像は、制御装置１２７Ａ（撮像環境変更部２１）が撮像環境を変更する前に撮像された撮像画像の周囲画像とは異なる。

なお、液晶ディスプレイは、ベルトコンベアの下方ではなく、ベルトコンベアの側方に立てて配置されてもよい。この場合、カメラは、周囲画像に液晶ディスプレイが撮像されるように、被写体の側方から被写体を撮像する。また、この場合、ベルトコンベアの載置面は、メッシュや透明でなくともよい。

また、本装置は、液晶ディスプレイ１２０Ａに代えて、リアプロジェクション装置（画面に見立てたスクリーンの背面から映像を投影する装置）や、超単焦点プロジェクタ（以下「プロジェクタ」という。）を備えてもよい。前者の場合、リアプロジェクション装置は、ベルトコンベアの下方（載置面の背面側）に配置される。ベルトコンベアの載置面は、例えば、リアプロジェクション装置からの映像が投影可能な透明な合成樹脂製である。後者の場合、プロジェクタは、ベルトコンベアの下方（載置面の背面側）に配置されてもよく、ベルトコンベアの側方に配置されてもよい。ベルトコンベアの載置面は、例えば、プロジェクタからの映像が投影可能な（透明な）合成樹脂製である。

さらに、本発明における撮像環境変更部は、撮像画像を撮像後に周囲画像を候補画像の中から選択した置換画像で置換（合成）してもよい。「置換画像」は、例えば、実際の製造ラインにおいてカメラに撮像され得る製品（産品）の背景の画像や、複数の良品（不良品）の画像、複数の良品（不良品）の画像を所定の角度で回転させた画像である。この場合、回転前の画像は本発明における第１候補画像であり、回転後の画像は本発明における第２候補画像である。置換画像を回転させることで、本装置は、例えば、少数の良品の画像を用いて、様々な角度の良品の画像を置換画像として周囲画像と置換して、多数の良品の中に存在する不良品（被写体）の撮像画像を容易に合成することができる。周囲画像を置換画像で置換する場合、撮像環境変更部は、置換前の撮像画像の被写体画像の位置情報（座標）を、置換画像で置換後の撮像画像と関連付けて記憶部に記憶する。

●実施例（３）●
次に、本発明にかかる撮像装置のさらに別の実施例について、先に説明した実施例（１），（２）と異なる部分を中心に説明する。本実施例における撮像装置は、第１特定処理部と第２特定処理部と被識別体検知部とを備える点において、先に説明した実施例（１），（２）における撮像装置と異なる。

●実施例（３）の構成
図９は、本装置のさらに別の実施例を示す模式図である。

本装置１００Ｂは、筐体１０１と、タッチパネル１１１と、カメラ１１２と、振動装置１１６と、重量計１１７ａと、一対の鏡１１７ｂ１，１１７ｂ２（図６参照）と、ベルトコンベア１１８と、４個の第１センサ１１９ａ１－１１９ａ４と、８個の第２センサ１１９ｂ１－１１９ｂ８（図６参照）と、照明１２１と、レーザポインタ１２４Ｂと、被識別体検知センサ１２６Ｂと、制御装置１２７Ｂと、を有してなる。

レーザポインタ１２４Ｂは、本装置１００Ｂが識別モードで動作しているとき、特定種別に識別された被識別体にレーザ光を照射して、被識別体が特定種別に識別されたことを視認可能にする。レーザポインタ１２４Ｂは、本発明における特定処理部の例である。

被識別体検知センサ１２６Ｂは、ベルトコンベア１１８の所定の位置において、レーザ光が照射された被識別体の有無を検知する。被識別体検知センサ１２６Ｂは、例えば、ビームセンサである。被識別体検知センサ１２６Ｂは、本発明における被識別体検知部の例である。

「所定の位置」は、例えば、第１センサ１１９ａ３と第１センサ１１９ａ４との間であって、レーザ光が照射されている被識別体を本装置１の使用者が除去可能な位置である。

なお、例えば、第１センサ（第１センサ１１９ａ４に相当）が被識別体検知センサとして機能してもよい。

制御装置１２７Ｂは、本装置１００Ｂの全体の動作の制御や、本方法の動作に必要な情報の記憶、被写体の位置情報の決定、被写体情報の取得、被識別体の識別を実行する。すなわち、制御装置１２７Ｂは、本発明における記憶部と、位置決定部と、被写体情報取得部と、識別部と、制御部と、の例である。制御装置１２７Ｂは、例えば、パーソナルコンピュータで実現される。

●実施例（３）の動作
次いで、本実施例（３）における本装置１００Ｂの動作について、図４、図９を参照しながら説明する。

本装置１００Ｂは、被識別体に対応する種別情報を識別し（Ｓ２０９）、同種別情報が特定種別情報であるか否かを判定し（Ｓ２１０）、被識別体の種別情報が特定種別情報であるとき同被識別体にレーザ光を照射し（Ｓ２１１）、レーザ光が照射された被識別体の有無を検知し（Ｓ２１２）、レーザ光の照射態様を変更する（Ｓ２１３）。

制御装置１２７Ｂ（識別部２３）は、被識別体の撮像画像と、識別情報と、に基づいて、被識別体の種別情報を識別して、同種別情報が特定種別情報であるか否かを確認する（Ｓ２１０）。

被識別体の種別情報が特定種別情報である場合（Ｓ２１０の「Ｙｅｓ」）、レーザポインタ１２４Ｂは、同被識別体にレーザ光を照射して、同被識別体を強調して視認可能にする（Ｓ２１１）。このとき、制御装置１２７Ｂ（制御部２７）は、撮像画像内の被識別体の位置情報と、ベルトコンベア１１８の移動速度と、に基づいて、被識別体の移動経路を予測して、予測結果をレーザポインタ１２４Ｂに送信する。すなわち、レーザポインタ１２４Ｂは、ベルトコンベア１１８で搬送される被識別体を追尾するように、同識別体にレーザ光を照射する。

図１０は、被識別体にレーザ光が照射されている状態を示す模式図である。
同図は、被識別体とレーザ光それぞれが移動していく様子を矢印で示す。同図は、点灯しているレーザ光を実線の円で、点滅しているレーザ光を破線の円で、それぞれ示す。

このように、レーザポインタ１２４Ｂは、制御装置１２７Ｂ（制御部２７）の予測結果に基づいて、特定種別に識別された被識別体にレーザ光を照射して、同被識別体が特定種別に識別されたことを本装置１００Ｂの使用者などに視認可能にする。レーザ光の照射は、本発明における特定処理の例である。

なお、制御装置がレーザポインタの動作を制御してもよい。この場合、制御装置は、撮像環境変更部としても機能する。

次いで、制御装置１２７Ｂは、被識別体検知センサ１２６Ｂの検知信号と、予測した被識別体の移動経路と、ベルトコンベア１１８の搬送速度と、に基づいて、被識別体検知センサ１２６Ｂが検知した被識別体がレーザ光が照射されている被識別体か否かを確認する（Ｓ２１２）。

レーザ光が照射された被識別体を被識別体検知センサ１２６Ｂが検知したとき（Ｓ２１２の「Ｙｅｓ」）、レーザポインタ１２４Ｂは、レーザ光の照射態様を変更（例えば、レーザ光の照射態様を点灯から点滅へ変更）する（Ｓ２１３）。換言すれば、レーザポインタ１２４Ｂによるレーザ光の照射態様の変更は、本発明における第２特定処理の例である。すなわち、レーザポインタ１２４Ｂは、本発明における第２特定処理部として機能する。

なお、本装置は、レーザ光が照射された被識別体を被識別体検知センサが検知したとき、ベルトコンベアの動作を停止してもよい。この場合、ベルトコンベアは、本発明における第２特定処理部として機能する。本装置によるベルトコンベアの動作の停止は、即時実行されてもよく、あるいは、所定の条件（例えば、被識別体が使用者により除去可能な位置まで搬送されたとき、被識別体検知センサの検知から所定時間経過したとき）を満たしたときに実行されてもよい。

また、本装置は、例えば、被識別体センサに代えて、レーザ光が照射された被識別体を本装置の使用者などが取り除く動作を検知するセンサ（エリアセンサなど）や、同使用者などの手が被識別体のレーザ光の被照射面を覆ったことを検知するセンサ（第２のカメラなど）の検知結果に基づいて、レーザ光の照射を終了してもよい。

さらに、本装置は、レーザ光が照射された被識別体を被識別体検知センサが検知したとき、同被識別体をベルトコンベアから除去してもよい。この場合、同識別体をベルトコンベアから除去する手段（例えば、ロボットアームや、ベルトコンベア上に配置された選別機など）は、本発明における第２特定処理部として機能する。

さらにまた、レーザポインタ（本発明における特定処理部）は、レーザ光を照射してから所定時間が経過したときに、レーザ光の照射態様を変更（第２特定処理を実行）してもよい。この場合、レーザポインタは、本発明における第２特定処理部として機能する。

さらにまた、本装置は、レーザ光が照射された被識別体を被識別体検知センサが検知したとき、または、レーザ光が照射されてから所定時間が経過したとき、その旨を音により報知する報知部を備えてもよい。この場合、報知部は、本発明における第２特定処理部として機能する。

さらにまた、本装置は、特定種別情報の内容に応じて、異なる特定処理を実行してもよい。すなわち、例えば、本装置は、被識別体の種別情報が形や色の不良品に対応する特定種別情報であるとき、赤色のレーザ光を被識別体に照射し、同種別情報が異物混入に対応する特定種別情報であるとき、青色のレーザ光を被識別体に照射してもよい。

さらにまた、本装置は、レーザポインタに代えて、例えば、プロジェクションマッピングを被識別体に投影可能なプロジェクタを備えてもよい。この場合、プロジェクタは、特定種別情報の内容に応じて、マッピングの投影態様を変更してもよい。すなわち、例えば、プロジェクタは、被識別体の種別情報が形や色の不良品に対応する特定種別情報であるとき、赤色の円を被識別体に投影し、同種別情報が異物混入に対応する特定種別情報であるとき、さらに「！」などの注意喚起を促す文字や、円を強調する図形などを追加投影してもよい。このように、特定種別情報の内容に応じてマッピングの投影態様を変更することにより、本装置の使用者は被識別体の識別作業（不良品の除去作業など）の効率化を図ることができると共に、同使用者は優先して除去すべき被識別体を選択することができる。

さらにまた、本装置は、プロジェクタの投影位置を載置部の載置面に合わせる調整手段を備えてもよい。調整手段は、例えば、載置面に配置される位置決め用のマークと、プロジェクタを移動させる移動機構と、で構成される。この場合、使用者は、例えば、プロジェクタから位置決め用画像を載置面に投影して、載置面のマークと、位置決め用画像と、が重なるように移動機構を操作してプロジェクタの位置を調整する。載置面のマークは、載置面に直接付されてもよく、あるいは、載置面に着脱可能でもよい。また、タッチパネルとプロジェクタの投影補正機能（例えば、台形補正やズーム、焦点など）とを連動させて、タッチパネル操作による投影補正機能を本装置が備えてもよい。

このように、特定種別（例えば、不良品など）に識別された被識別体を視認可能とすることにより、本装置１００Ｂの使用者は、極めて容易に同被識別体を製造ラインなどから除去することが可能となる。

さらにまた、本実施例において、本装置は、識別部の識別の確度を算出し、算出した確度に基づいて、被識別体を分類してもよい。「確度」は、識別部が識別した種別情報の正確性を示す度合である。確度は、例えば、公知の手法を用いて、識別部により算出される。この場合、識別部は、本発明における特定処理部の例である。被識別体の分類は、例えば、本装置が備えるロボットアームにより実行される。ロボットアームは、本発明における第２特定処理部の例である。

図１１は、本装置のさらに別の実施例の変形例を示す模式図である。
同図は、ベルトコンベア１１８により搬送される被識別体がロボットアーム１２５Ｂ１により分類されていることを示す。

ロボットアーム１２５Ｂ１は、例えば、被識別体検知センサ１２６Ｂを通過した被識別体を分類可能な位置に配置される。ロボットアーム１２５Ｂ１は、例えば、制御装置１２７Ｂ１（識別部２３）が算出した確度に基づいて、被識別体検知センサ１２６Ｂに検知された被識別体を分類する。すなわち、例えば、種別情報「不良品」の確度が「８０以上」のとき、ロボットアーム１２５Ｂ１は、被識別体をベルトコンベア１１８の進行方向左側（図１１の紙面上側）に移動させる。一方、同確度が「７９未満」のとき、ロボットアーム１２５Ｂ１は、被識別体をベルトコンベア１１８の進行方向右側（図１１の紙面下側）に移動させる。換言すれば、ロボットアーム１２５Ｂ１は、被識別体が特定種別情報に識別されたこと、および、その確度、を使用者に対して視認可能にする。この構成によれば、使用者は、ベルトコンベア１１８の進行方向右側に位置する被識別体のみを検査することで、本装置による識別が曖昧な被識別体のみを確実に検査可能である。その結果、使用者は、識別の確度が十分ではない種別情報が混在していても、本装置を使用して被識別体の高精度な識別を可能とする。

●実施例（４）●
次に、本発明にかかる撮像装置のさらに別の実施例について、先に説明した実施例（１），（２），（３）と異なる部分を中心に説明する。本実施例における撮像装置は、形態変更部を備える点において、先に説明した実施例（１），（２），（３）における撮像装置と異なる。

●実施例（４）の構成
図１２は、本装置のさらに別の実施例を示す模式図である。

本装置１００Ｃは、タッチパネル１１１と、カメラ１１２と、押圧装置１１５Ｃと、振動装置１１６と、重量計１１７ａと、一対の鏡１１７ｂ１，１１７ｂ２（図６参照）と、ベルトコンベア１１８と、４個の第１センサ１１９ａ１－１１９ａ４と、８個の第２センサ１１９ｂ１－１１９ｂ８（図６参照）と、照明１２１と、制御装置１２７Ｃと、を有してなる。

押圧装置１１５Ｃは、振動装置１１６に配置されて、振動装置１１６に搬入された被写体を押圧して、同被写体の形状を変形させる。すなわち、押圧装置１１５Ｃは、本発明における形態変更部の例である。

なお、本装置は、押圧装置に代えて、あるいは、押圧装置と共に、被写体に熱を加える加熱装置や、被写体を切断する切断装置、被写体に穴をあける刺突装置など、被写体の形態を変更させる他の装置を備えてもよい。

また、本装置は、押圧装置と振動装置とに代えて、例えば、ロボットアームのような被写体の向きを変更させると共に被写体の形状を変形させることが可能な装置（位置関係変更部の機能と形態変更部の機能とを併せ持つ装置）を備えてもよい。

制御装置１２７Ｃは、本装置１００Ｃの全体の動作の制御や、本方法の動作に必要な情報の記憶、被写体の位置情報の決定、被写体情報の取得、被識別体の識別を実行する。すなわち、制御装置１２７Ｃは、本発明における記憶部と、位置決定部と、被写体情報取得部と、識別部と、制御部と、の例である。制御装置１２７Ｃは、例えば、パーソナルコンピュータで実現される。

●実施例（４）の動作
次いで、本実施例（４）における本装置１００Ｃの動作について、図２、図１２を参照しながら説明する。

押圧装置１１５Ｃは、前述した変形指示に基づいて、振動装置１１６に搬送された被写体を押圧して、被写体の形状を変形させる（Ｓ１１７）。次いで、振動装置１１６は、変形した被写体をベルトコンベア１１８に戻す。ベルトコンベア１１８は、変形した被写体をカメラ１１２の撮像範囲に搬送する（Ｓ１１２）。

このように、本装置１００Ｃは、押圧装置１１５Ｃ（本発明における形態変更部）を備えることにより、１つの被写体を用いて、同被写体の複数の撮像画像を撮像すると共に、形状を変形させた同被写体の複数の撮像画像を撮像する。換言すれば、本装置１００Ｃは、１つの製品（産品）から、複数の良品の教師データを取得すると共に、複数の不良品の教師データを取得する。

なお、形態変更部と共に、あるいは、形態変更部に代えて、本装置の使用者が、被写体の形態を変更してもよい。この場合であっても、カメラは、形態が異なる被写体の撮像画像を出力可能である。この構成によれば、使用者は、恣意的に被写体の形態を変更した教師データを取得可能である。

●実施例（５）●
次に、本発明にかかる撮像装置のさらに別の実施例について、先に説明した実施例（１），（２），（３），（４）と異なる部分を中心に説明する。本実施例における撮像装置は、既存のベルトコンベアに取り付けられる点（振動装置と重量計とベルトコンベアとを備えない点）において、先に説明した実施例（１），（２），（３），（４）における撮像装置と異なる。

●実施例（５）の構成
図１３は、本装置のさらに別の実施例を示す模式図である。

本装置１００Ｄは、タッチパネル１１１と、カメラ１１２と、一対の鏡１１７ｂ１，１１７ｂ２と、４個の第１センサ１１９ａ１－１１９ａ４と、８個の第２センサ１１９ｂ１－１１９ｂ８（図６参照）と、照明１２１と、制御装置１２７Ｄと、を有してなる。

本装置１００Ｄは、既存のベルトコンベア（実際の製造ラインに配置されるベルトコンベア）Ｘに取り付けられる。本装置１００Ｄは、被写体の形状を変形させる手段（本発明における形態変更部）と、被写体の向き（姿勢）を変更する手段（位置関係変更部）とを備えていない。そのため、例えば、本装置１００Ｄの使用者が１種の製品（産品）を何度も向きを変えて本装置１００Ｄに投入することにより、本装置１００Ｄは、１つの種別情報に対応する複数の撮像画像を撮像する。このように、本装置１００Ｄは、既存のベルトコンベアＸに取り付けられるだけで、既存のベルトコンベアＸを用いて、複数の教師データの収集と、製品（産品）の種別情報の識別と、を実行する。この場合であっても、カメラ１１２は、撮像ごとに、被写体とカメラ１１２との位置関係、または、被写体の形態、のいずれか一方が異なる撮像画像を出力可能である。

なお、本装置は、例えば、本装置の使用者が本装置に投入した製品（被写体）が、カメラに撮像された後に同製品を投入した位置に戻るように既存のベルトコンベアの動作を制御してもよい。すなわち、例えば、本装置は、第１センサ１１９ａ４が製品を検知したタイミングで、ベルトコンベアを逆回転させて、第１センサ１１９ａ１が製品を検知したタイミングで、ベルトコンベアの回転を戻してもよく、あるいは、ベルトコンベアの動作を一時的に停止してもよい。この構成によれば、本装置の使用者が１種の製品を何度も向きを変えて本装置に投入する作業の効率は、向上する。

また、本装置は、カメラの位置を変更する機構、すなわち、本発明における位置関係変更部を備えてもよい。

さらに、制御装置（記憶部）は、複数の識別情報や、識別情報の基となる撮像画像、を記憶していてもよい。この場合、制御装置は、使用者が入力した種別情報に関連付けられて制御装置（記憶部）に記憶されている識別情報（または、撮像画像）を表示装置に出力してもよい。その結果、使用者は、表示装置に表示された識別情報（または、撮像画像）に基づいて、被写体の向きや形状を変更可能である。すなわち、例えば、使用者は、表示装置を確認することにより、未撮像あるいは撮像機会の少ない被写体の向きや形状を把握して、効率的に教師データを収集可能である。

●実施例（６）●
次に、本発明にかかる撮像装置のさらに別の実施例について、先に説明した実施例（１），（２），（３），（４），（５）と異なる部分を中心に説明する。本実施例における撮像装置は、ベルトコンベアに代えてターンテーブルを備える点において、先に説明した実施例（１），（２），（３），（４），（５）における撮像装置と異なる。

●実施例（６）の構成
図１４は、本装置のさらに別の実施例を示す模式図である。

本装置２００は、筐体２０１と、タッチパネル２１１と、カメラ２１２と、カメラ支持部材２１６と、ロードセル２１７と、ターンテーブル２１８と、照明２２１と、制御基板２２７と、を有してなる。

筐体２０１は、カメラ２１２と、カメラ支持部材２１６と、ロードセル２１７と、ターンテーブル２１８と、照明２２１と、制御基板２２７と、を収容する。

タッチパネル２１１は、本装置２００の使用者により被写体の種別情報が入力される入力デバイスである。タッチパネル２１１は、本発明における種別入力部の例である。タッチパネル２１１は、筐体２０１の外面に取り付けられる。

カメラ２１２は、カメラ支持部材２１６に取り付けられて、ターンテーブル２１８の上方から後述するターンテーブル２１８の載置面２１８ａに載置された被写体を撮像する。カメラ２１２は、本発明における撮像部の例である。カメラ２１２は、例えば、エリアカメラである。

カメラ支持部材２１６は、ターンテーブル２１８の側方に配置されて、カメラ２１２の位置と向きとを変更する。カメラ支持部材２１６のうち、カメラ２１２が取り付けられる部分は、上下方向にスライド可能であると共に搖動可能である。すなわち、カメラ支持部材２１６は、被写体に対するカメラの位置と向きとを変更させる本発明における位置関係変更部の例である。

ロードセル２１７は、ターンテーブル２１８の下方に配置されて、ターンテーブル２１８の重量と、ターンテーブル２１８に載置される被写体の重量と、を計測する。ロードセル２１７は、本発明における被写体情報取得部の例である。

ターンテーブル２１８は、回転することで、カメラ２１２に対する被写体の位置や向きを変更する。ターンテーブル２１８は、被写体が載置される載置面２１８ａを備える。ターンテーブル２１８は、本発明における載置部と位置関係変更部との例である。

照明２２１は、カメラ２１２の撮像範囲内に載置された被写体を照らす。照明２２１は、本発明における撮像環境変更部の例である。

制御基板２２７は、本装置２００の全体の動作の制御や、本方法の動作に必要な情報の記憶、被写体の位置情報の決定、被識別体の識別を実行する。制御基板２２７は、例えば、ＣＰＵとフラッシュメモリとを実装する。制御基板２２７は、本発明における記憶部と、位置決定部と、識別部と、制御部と、の例である。

なお、本装置は、例えば、ターンテーブルを振動させる機構や、ターンテーブルに載置された被写体に触れて同被写体に外力を加える機構など、本発明における位置関係変更部や形態変更部として機能する機構を備えてもよい。

また、本装置は、例えば、ターンテーブルの側方、かつ、カメラの撮像範囲に、本発明における表示部として機能する液晶ディスプレイを配置してもよい。

さらに、本装置は、例えば、ターンテーブルの側方、かつ、カメラの撮像範囲に、本発明における被写体情報取得部として機能する鏡を配置してもよい。

●実施例（６）の動作
次いで、本実施例（６）における本装置２００の動作について、図２、図１４を参照しながら説明する。

本装置２００は、本装置２００の使用者などによりターンテーブル２１８の載置面２１８ａに載置された被写体の重量を計測し（Ｓ１０４）、ターンテーブル２１８を回転させながら被写体を撮像し（Ｓ１０６）、撮像画像内の被写体の位置情報を決定し（Ｓ１０７）、カメラ２１２の位置または向きを変更し（Ｓ１１１）、被写体の撮像を繰り返す（Ｓ１０６）。本装置２００は、被写体の向きの変更と、被写体に対するカメラ２１２の位置と向きとの変更と、を繰り返すことにより、種別情報ごとに複数の撮像画像を取得する。

本装置２００は、例えば、制御基板２２７を用いて、ターンテーブル２１８の外縁部を画像認識などにより認識して、撮像画像内のターンテーブル２１８の位置情報と、ターンテーブル２１８内の被写体の位置情報と、を決定する。このとき、制御基板２２７は、本発明における位置決定部として機能する。

なお、本装置は、ターンテーブルの上方の空間を移動可能なエリアセンサを備え、同エリアセンサの検知結果に基づいて、被写体の位置情報を決定してもよい。この場合、エリアセンサは、本発明における位置決定部として機能する。

図１５は、本発明のさらに別の実施例を示す模式図である。
同図は、本装置２００Ａが、筐体２０１と、タッチパネル２１１と、カメラ２１２と、カメラ支持部材２１６と、ロードセル２１７と、ターンテーブル２１８と、エリアセンサ２１９Ａと、照明２２１と、制御基板２２７Ａと、を有してなることを示す。

エリアセンサ２１９Ａは、ターンテーブル２１８に載置された被写体の位置情報を決定する。エリアセンサ２１９Ａは、本発明における位置決定部の例である。エリアセンサ２１９Ａは、ターンテーブル２１８の上方に配置される。エリアセンサ２１９Ａは、上下方向（図１５の紙面上下方向）に移動可能である。カメラ２１２の撮像範囲と、エリアセンサ２１９Ａの検知範囲（光束の位置）とは、予め関連付けられて制御基板２２７Ａ（記憶部１３）に記憶されている。エリアセンサ２１９Ａがターンテーブル２１８に載置された被写体に対して移動することで、被写体がエリアセンサ２１９Ａの検知光の一部を遮る。エリアセンサ２１９Ａの検知結果は、制御基板２２７Ａに送信される。制御基板２２７Ａは、エリアセンサ２１９Ａの検知結果に基づいて、撮像画像内の被写体の位置情報を決定する。このとき、制御基板２２７Ａは、本発明における位置決定部として機能する。

なお、エリアセンサは、ターンテーブルの側方に配置されてもよい。この場合、エリアセンサは、ターンテーブルの上方であって、水平方向（図１５の紙面左右方向）に移動可能である。

●まとめ●
以上説明した実施の形態によれば、本装置１は、被写体の種別情報が入力される種別入力部１１と、被写体を撮像する撮像部１２と、種別情報と撮像画像とを関連付けて記憶する記憶部１３と、を備える。そのため、本装置１は、種別情報ごとに複数の撮像画像を撮像して、関連付けて記憶することができる。すなわち、本装置１は、教師データを大量に収集するための時間とコストとを低減する。

また、本装置１は、少なくとも、被写体と撮像部１２との位置関係を変更する位置関係変更部１６、または、被写体の形状を変形させる形態変更部１５と、のいずれか一方を備える。撮像部１２は、位置関係変更部１６が被写体と撮像部１２との位置関係を変更した後、または、形態変更部１５が被写体の形態を変更させた後、に被写体を撮像する。そのため、本装置１は、種別情報を変更して、種別情報ごとに複数の撮像画像を撮像して関連付けて記憶することができる。すなわち、本装置１は、高品質な教師データを大量に収集するための時間とコストとを低減する。

さらに、位置関係変更部１６または形態変更部１５は、撮像回数情報に基づいて、被写体と撮像部１２との位置関係を変更し、あるいは、被写体の形態を変更させる。そのため、本装置１は、撮像回数情報に設定された回数、自動的に被写体と撮像部１２との位置関係を変更して被写体を撮像すると共に、自動的に被写体の形態を変更させて被写体を撮像する。すなわち、本装置１は、高品質な教師データを大量に収集するための時間とコストとを低減する。

さらにまた、本装置１は、被写体情報（被写体の重量、長さ、体積、多面的な画像など）を取得する被写体情報取得部１７を備える。記憶部１３は、被写体情報を撮像画像と関連付けて記憶する。そのため、本装置１は、撮像画像に基づいて生成される種別情報ごとの識別情報のみならず、被写体情報をも加味した識別情報を取得・生成することができる。その結果、本装置１は、例えば、被識別体の撮像画像から種別情報を識別するのみならず、被識別体の被識別体情報（被識別体の重量、長さなど）から種別情報を識別することができる。すなわち、本装置１は、撮像画像のみならず、同撮像画像に関連付けられる被写体情報を教師データとして収集することができる。したがって、これらの教師データを用いて学習する人工知能の識別精度が向上する。このように、本装置１は、高品質な教師データを大量に収集するための時間とコストとを低減する。

さらにまた、本装置１は、撮像画像内における被写体の位置情報を決定し、同位置情報を被写体の撮像画像と関連付けて記憶する位置決定部１４を備える。そのため、本装置１は、撮像画像内における被写体の位置情報が決定（特定）された高品質な教師データを大量に収集することができる。すなわち、本装置１は、高品質な教師データを大量に収集するための時間とコストとを低減する。

さらにまた、本装置１は、被写体が載置される載置部１８と、載置部１８に載置された被写体の位置を検知して検知信号を出力する検知部１９と、を備える。位置決定部１４は、検知信号に基づいて、撮像画像内における被写体の位置情報を決定する。そのため、本装置１は、撮像画像内における被写体の位置情報を容易に決定することができる。その結果、本装置１は、高品質な教師データを大量に収集するための時間とコストとを低減する。

さらにまた、位置決定部１４は、周囲画像に基づいて、位置情報を決定する。位置情報は、撮像画像内の基準点からの相対座標を特定する座標情報を含む。そのため、本装置１は、例えば、周囲画像に基準マーカなどの基準点を撮像させることにより、容易に位置情報を決定することができる。

さらにまた、位置決定部１４は、撮像画像内における被写体に付された目印の位置を特定する位置情報を決定し、同位置情報を撮像画像と関連付けて記憶部１３に記憶する。このように、目印の位置情報を撮像画像と関連付けて記憶することにより、人工知能に学習させる箇所が明確になる。その結果、例えば、職人が経験や勘で判別する不良（暗黙知として判別される不良）を囲むように目印を付すことで、本装置１は、同不良の位置を容易に特定することができる。

さらにまた、本装置１は、撮像部１２が被写体を撮像する際の撮像環境を変更する撮像環境変更部２１を備える。撮像環境変更部２１が撮像環境を変更した後に撮像された撮像画像の周囲画像は、撮像環境変更部２１が撮像環境を変更する前に撮像された撮像画像の周知画像とは異なる。そのため、本装置１は、照明の明るさなどの撮像環境を変更し、周囲画像として撮像される被写体の背景（載置部１８の載置面や、表示部２０）などの撮像環境を変更することにより、撮像環境を変更した多数の教師データを取得することができる。すなわち、本装置１は、高品質な教師データを大量に収集するための時間とコストとを低減する。

さらにまた、周囲画像は、載置面の載置面画像を含む。そのため、例えば、本装置１の使用者などにより載置面の色が、被写体に合わせてコントラストが明確になる色や、実際の製造ラインの色などに変更されることにより、人工知能の識別精度が上がる高品質な教師データを収集することができる。すなわち、本装置１は、高品質な教師データを大量に収集するための時間とコストとを低減する。

さらにまた、撮像環境変更部２１は、被写体の周囲に配置される表示部２０に表示される表示画像を、複数の候補画像の中から選択して、変更する。そのため、本装置１は、表示画像を変更するだけで、様々な周囲画像を含む撮像画像を容易に収集することができる。すなわち、本装置１は、高品質な教師データを大量に収集するための時間とコストとを低減する。

さらにまた、撮像環境変更部２１は、周囲画像を複数の候補画像の中から選択された置換画像で置換する。候補画像は、第１候補画像と、第１候補画像を所定の角度で回転させた第２候補画像と、を含む。本装置１は、例えば、１つの第１候補画像から複数の第２候補画像を生成することができる。その結果、本装置１は、例えば、被写体画像に実際の製造ラインの画像を合成し、不良品の被写体画像に複数の角度に回転させた良品の画像を合成し、不良品の画像を任意に回転させて合成するなど、様々な撮像画像を合成することができる。したがって、本装置１は、高品質な教師データを大量に収集するための時間とコストとを低減する。

さらにまた、本装置１は、種別情報と関連付けて記憶部１３に記憶された撮像画像に基づいて生成された種別情報ごとの識別情報を用いて、被識別体に対応する種別情報を識別する識別部２３を備える。すなわち、本装置１は、教師データを大量に取得するのみならず、同教師データに基づいて学習された人工知能（識別部）を用いて、被識別体（製品、産品など）の外観検査や識別処理を実行することができる。一般的に、人工知能を用いた外観検査や識別処理は、実際の製造ラインなどの作業環境の下で確認作業を行うまでは、その実用性を把握することができない。そのため、実用性がないという結果を得た場合、教師データの収集や設備投資に費やした時間と費用とが無駄になる可能性がある。しかし、本装置１は、教師データの収集（学習モード）と、同教師データに基づいて生成された識別情報を用いた識別処理（識別モード）と、を切り替えて実行することができる。したがって、本装置１は、高品質な教師データを大量に収集するための時間とコストとを低減すると共に、本装置１により収集された教師データの有用性を確認することができる。その結果、本装置１は、識別の確度を暫時向上させ、確度の高い（高精度の）識別を可能とする。

さらにまた、本装置１は、種別情報ごとの識別情報を生成する識別情報生成部２２を備える。そのため、本装置１の使用者などは、識別情報の生成を人工知能のベンダーなどに依頼することなく、本装置１を使用して識別情報を生成することができる。その結果、本装置１は、高品質な教師データを大量に収集するための時間とコストとを低減すると共に、本装置１により収集された教師データの有用性の確認に要する時間とコストとを低減する。

さらにまた、本装置１は、識別部２３が識別した被識別体の種別情報が特定種別情報（不良品など）のとき、同被識別体に対して特定処理を実行する第１特定処理部２４を備える。特定処理は、例えば、被識別体が特定種別情報に識別されたことをレーザポインタなどを用いて視認可能にする処理である。この構成によれば、本装置１は、不良品や、異物混入物などをレーザ光で追尾させて、これらの存在と位置とを本装置１の使用者などに報知することができる。その結果、本装置１は、従来、人手で不良品や異物混入物などの有無を検査して取り除いていた工程のうち、不良品や異物混入物などの有無の検査の工程を実行することができ、検査用の人員を削減することができる。

さらにまた、本装置１は、第１特定処理部２４が特定処理を実行した被識別体に対して、第２特定処理を実行する第２特定処理部２５を備える。第２特定処理部２５は、第１特定処理部２４が特定処理を実行してから所定時間が経過したときに、第２特定処理を実行する。第２特定処理は、例えば、レーザ光の照射態様の変更や、被識別体の除去などを実行する処理である。この構成によれば、本装置１は、レーザ光の照射態様の変更などにより、不良品や異物混入物などの除去が実行されていないことを本装置１の使用者などに認知させることができる。

さらにまた、本装置１は、特定処理が実行された被識別体を検知する被識別体検知部２６を備える。第２特定処理部２５は、被識別体検知部２６が被識別体を検知したとき、第２特定処理を実行する。この構成によれば、本装置１は、不良品や異物混入物などの除去が実行されていない場合にのみ、第２特定処理を実行することができる。

さらにまた、以上説明した実施の形態は、特許請求の範囲に記載される発明の内容を不当に限定するものではない。また、以上説明した実施の形態で説明される構成の全てが、本開示の必須構成要件であるとは限らない。

１ 撮像装置
１１ 種別入力部
１２ 撮像部
１３ 記憶部
１４ 位置決定部
１５ 形態変更部
１６ 位置関係変更部
１７ 被写体情報取得部
１８ 載置部
１９ 検知部
２０ 表示部
２１ 撮像環境変更部
２２ 識別情報生成部
２３ 識別部
２４ 第１特定処理部（特定処理部）
２５ 第２特定処理部
２６ 被識別体検知部
２７ 制御部
１００ 撮像装置
１１１ タッチパネル（種別入力部）
１１２ カメラ（撮像部）
１１６ 振動装置（位置関係変更部）
１１７ａ 重量計（被写体情報取得部）
１１７ｂ１ 鏡（被写体情報取得部）
１１７ｂ２ 鏡（被写体情報取得部）
１１８ ベルトコンベア（載置部）
１１８ａ 載置面
１１９ａ１－１１９ａ４ 第１センサ（検知部）
１１９ｂ１－１１９ｂ８ 第２センサ（検知部）
１２１ 照明（撮像環境変更部）
１２７ 制御装置（記憶部、位置決定部、被写体情報取得部、識別部）
１００Ａ 撮像装置
１１８Ａ ベルトコンベア
１１８ａＡ 載置面
１２０Ａ 液晶ディスプレイ（表示部）
１２７Ａ 制御装置（記憶部、位置決定部、被写体情報取得部、環境変更部、識別部）
１００Ｂ 撮像装置
１２４Ｂ レーザポインタ（特定処理部）
１２６Ｂ 被識別体検知センサ（被識別体検知部）
１２７Ｂ 制御装置（記憶部、位置決定部、被写体情報取得部、識別部）
１２５Ｂ１ ロボットアーム（第２特定処理部）
１２７Ｂ１ 制御装置（記憶部、位置決定部、被写体情報取得部、識別部、特定処理部）
１００Ｃ 撮像装置
１１５Ｃ 押圧装置（形態変更部）
１２７Ｃ 制御装置（記憶部、位置決定部、被写体情報取得部、識別部）
１００Ｄ 撮像装置
２００ 撮像装置
２１１ タッチパネル（種別入力部）
２１２ カメラ
２１６ カメラ支持部材（位置関係変更部）
２１７ ロードセル（被写体情報取得部）
２１８ ターンテーブル（載置部）
２１８ａ 載置面
２２１ 照明（撮像環境変更部）
２２７ 制御基板（記憶部、位置決定部、識別部）

Claims (8)

1. 被写体の複数の種別情報が入力される種別入力部と、
   前記被写体を撮像して撮像画像を出力する撮像部と、
   前記種別情報と前記撮像画像とが関連付けて記憶される記憶部と、
   前記種別情報と関連付けて前記記憶部に記憶された前記撮像画像に基づいて生成された前記種別情報ごとの識別情報を用いて、被識別体に対応する前記種別情報を識別する識別部と、
   前記識別部が識別した前記被識別体の前記種別情報が特定種別情報のとき、前記被識別体に対して特定処理を実行する特定処理部と、
   を有してなり、
   前記特定処理部は、前記被識別体が前記特定種別情報に識別されたことを視認可能にする、
   ことを特徴とする撮像装置。
2. 前記種別情報ごとの前記識別情報を生成する識別情報生成部、
   を備える、
   請求項１記載の撮像装置。
3. 前記特定処理部が前記特定処理を実行した前記被識別体に対して第２特定処理を実行する第２特定処理部、
   を備える、
   請求項１記載の撮像装置。
4. 前記第２特定処理部は、前記特定処理部が前記特定処理を実行してから所定時間が経過したときに、前記第２特定処理を実行する、
   請求項３記載の撮像装置。
5. 前記特定処理が実行された前記被識別体を検知する被識別体検知部、
   を備え、
   前記第２特定処理部は、前記被識別体検知部が前記被識別体を検知したとき、前記第２特定処理を実行する、
   請求項３記載の撮像装置。
6. 前記特定処理部は、前記識別部が前記被識別体を識別した確度を算出する、
   請求項１記載の撮像装置。
7. 前記特定処理部が算出した確度に基づいて、前記被識別体を分類する第２特定処理部、
   を備える、
   請求項６記載の撮像装置。
8. 被写体の複数の種別情報が入力される種別入力部と、
   前記被写体を撮像して撮像画像を出力する撮像部と、
   前記種別情報と前記撮像画像とが関連付けて記憶される記憶部と、
   前記種別情報と関連付けて前記記憶部に記憶された前記撮像画像に基づいて生成された前記種別情報ごとの識別情報を用いて、被識別体に対応する前記種別情報を識別する識別部と、
   前記識別部が識別した前記被識別体の前記種別情報が特定種別情報のとき、前記被識別体に対して特定処理を実行する特定処理部と、
   を有してなる撮像装置により実行される識別方法であって、
   前記識別部が、前記被識別体の前記撮像画像と、前記識別情報と、に基づいて、前記被識別体に対応する前記種別情報を識別する工程と、
   前記特定処理部が、前記識別部が識別した前記被識別体の前記種別情報が前記特定種別情報であるか否かを判定する工程と、
   前記識別部が識別した前記被識別体の前記種別情報が前記特定種別情報のとき、前記特定処理部が、前記被識別体に対して前記特定処理を実行する工程と、
   を有してなり、
   前記特定処理部は、前記特定処理として、前記被識別体が前記特定種別情報に識別されたことを視認可能にする、
   ことを特徴とする識別方法。
   
   

Images