JP2014032142A

JP2014032142A - Inspection method and inspection system

Info

Publication number: JP2014032142A
Application number: JP2012173973A
Authority: JP
Inventors: Nobuyuki Ito; 信之伊東
Original assignee: Fujitsu Ltd
Current assignee: Fujitsu Ltd
Priority date: 2012-08-06
Filing date: 2012-08-06
Publication date: 2014-02-20
Anticipated expiration: 2032-08-06
Also published as: JP5891995B2

Abstract

PROBLEM TO BE SOLVED: To simplify processing in LED inspection.SOLUTION: A PC 10 displays information on an alignment sequence of luminescent colors of LEDs 11 to 15 and information on the number of luminescent colors on a display 93 and causes the LEDs 11 to 15 to emit light in a method corresponding to the information displayed on the display 93. An inspection unit 20 acquires a result obtained by photographing the display 93 on which the information is displayed and the LEDs 11 to 15 with cameras 24, 26, and performs inspection on the LEDs 11 to 15 by comparing the result obtained by photographing the display 93 and the result obtained by photographing the LEDs 11 to 15.

Description

本件は、検査方法及び検査システムに関する。 This case relates to an inspection method and an inspection system.

ＰＣ（Personal Computer）や携帯電話などの電子機器、電子装置等では、ランプやＬＥＤ（Light Emitting Diode）の点灯や消灯によって各種の動作状態を可視表示している。このような装置の製造段階においては、ＬＥＤ等の点灯・消灯が適切に行われるか否か、所望の表示色が所望の位置で表示されるか否かなどに関する検査を行う必要がある。 In electronic devices such as PCs (Personal Computers) and mobile phones, electronic devices, and the like, various operation states are visually displayed by turning on and off lamps and LEDs (Light Emitting Diodes). In the manufacturing stage of such an apparatus, it is necessary to inspect whether or not the LED or the like is appropriately turned on / off and whether or not a desired display color is displayed at a desired position.

従来においては、複数のＬＥＤの点灯・消灯、表示色を自動検出するため、カメラで検査対象を撮影し、当該撮影データと別途作成した基準データとを比較する検査装置が知られている（例えば、特許文献１参照）。 Conventionally, in order to automatically detect lighting / extinction of a plurality of LEDs and display color, an inspection apparatus that captures an inspection target with a camera and compares the captured data with separately created reference data is known (for example, , See Patent Document 1).

特開２０１０−２６６４２４号公報JP 2010-266424 A

しかしながら、上記特許文献１では、検査対象の装置ごとにＬＥＤの点灯状態を撮影した画像から基準データを予め作成し、作成した基準データを検査装置にて管理する必要があった。また、基準データと撮影データの比較を正確に行うためには、検査対象の装置を所定位置に精度よく位置決めする必要があった。 However, in Patent Document 1, it is necessary to create reference data in advance from an image obtained by photographing the lighting state of the LED for each device to be inspected, and to manage the created reference data by the inspection device. Further, in order to accurately compare the reference data and the photographing data, it is necessary to accurately position the device to be inspected at a predetermined position.

１つの側面では、本発明は、発光素子の検査における処理を簡素化することが可能な検査方法及び検査システムを提供することを目的とする。 In one aspect, an object of the present invention is to provide an inspection method and an inspection system capable of simplifying processing in inspection of a light emitting element.

本明細書に記載の検査方法は、表示画面及び発光素子を有する被検査装置において、前記表示画面上に前記発光素子の発光色の並び順の情報又は発光色の数の情報を表示する表示工程と、前記表示画面上に表示された情報に対応する方法で前記発光素子を発光させる発光工程と、前記情報が表示された表示画面と、前記発光素子とを撮影する撮影工程と、前記情報が表示された表示画面を撮影した結果と、前記発光素子を撮影した結果とを比較して、前記発光素子の検査を行う検査工程と、を含んでいる。 In the inspection method described in the present specification, in a device to be inspected having a display screen and a light emitting element, a display step of displaying information on an arrangement order of light emitting colors or information on the number of light emitting colors on the display screen. A light emitting step of causing the light emitting element to emit light in a method corresponding to information displayed on the display screen, a display screen on which the information is displayed, a photographing step of photographing the light emitting element, and the information An inspection step of inspecting the light emitting element by comparing a result of photographing the displayed display screen with a result of photographing the light emitting element.

本明細書に記載の検査システムは、表示画面及び発光素子を有する被検査装置の前記表示画面上に表示された前記発光素子の発光色の並び順の情報又は発光色の数の情報を撮影するとともに、前記表示画面上に表示された情報に対応する方法で発光させた前記発光素子を撮影する撮影装置と、前記情報を撮影した結果と、前記発光素子を撮影した結果とを比較して、前記発光素子の検査を行う検査装置と、を備えている。 The inspection system described in this specification captures information on the arrangement order of the emission colors of the light emitting elements or the information on the number of emission colors displayed on the display screen of the device to be inspected having a display screen and the light emitting elements. A comparison is made between a photographing device that photographs the light emitting element that emits light by a method corresponding to information displayed on the display screen, a result of photographing the information, and a result of photographing the light emitting element. An inspection device for inspecting the light emitting element.

本実施例に記載の検査方法及び検査システムは、発光素子の検査における処理を簡素化することができるという効果を奏する。 The inspection method and the inspection system described in the present embodiment have an effect that the processing in the inspection of the light emitting element can be simplified.

一実施形態に係る検査システムの構成を概略的に示す図である。It is a figure showing roughly the composition of the inspection system concerning one embodiment. ＰＣを示す斜視図である。It is a perspective view which shows PC. 図３（ａ）は、ＰＣのハードウェア構成図であり、図３（ｂ）は、検査システムのハードウェア構成図である。FIG. 3A is a hardware configuration diagram of the PC, and FIG. 3B is a hardware configuration diagram of the inspection system. 図４（ａ）は、ＰＣのＣＰＵが有する機能を示すブロック図であり、図４（ｂ）は、検査部のＣＰＵが有する機能を示すブロック図である。FIG. 4A is a block diagram illustrating functions of the CPU of the PC, and FIG. 4B is a block diagram illustrating functions of the CPU of the inspection unit. 図５（ａ）は、ＬＥＤテーブルを示す図であり、図５（ｂ）は、表示色テーブルを示す図である。FIG. 5A is a diagram showing an LED table, and FIG. 5B is a diagram showing a display color table. 図６（ａ）は、色判定テーブルを示す図であり、図６（ｂ）は、画面サイズ判定テーブルを示す図である。FIG. 6A is a diagram illustrating a color determination table, and FIG. 6B is a diagram illustrating a screen size determination table. ＰＣの一連の処理を示すフローチャートである。It is a flowchart which shows a series of processes of PC. 図８（ａ）〜図８（ｃ）は、ＰＣの動作を説明するための図（その１）である。FIG. 8A to FIG. 8C are views (No. 1) for explaining the operation of the PC. 図９（ａ）〜図９（ｃ）は、ＰＣの動作を説明するための図（その２）である。FIG. 9A to FIG. 9C are views (part 2) for explaining the operation of the PC. 図１０（ａ）〜図１０（ｃ）は、ＰＣの動作を説明するための図（その３）である。FIG. 10A to FIG. 10C are views (No. 3) for explaining the operation of the PC. 図１１（ａ）〜図１１（ｃ）は、ＰＣの動作を説明するための図（その４）である。FIG. 11A to FIG. 11C are diagrams (part 4) for explaining the operation of the PC. 検査部の一連の処理を示すフローチャートである。It is a flowchart which shows a series of processes of a test | inspection part. 図１２のステップＳ５０の具体的処理を示すフローチャートである。It is a flowchart which shows the specific process of step S50 of FIG. 図１２のステップＳ５２の具体的処理を示すフローチャートである。It is a flowchart which shows the specific process of step S52 of FIG. 図１４のステップＳ１１６の処理を説明するための図である。It is a figure for demonstrating the process of FIG.14 S116. 図１２のステップＳ５６の具体的処理を示すフローチャートである。It is a flowchart which shows the specific process of step S56 of FIG. 図１２のステップＳ６０の具体的処理を示すフローチャートである。It is a flowchart which shows the specific process of FIG.12 S60. 図１２のステップＳ６２の具体的処理を示すフローチャートである。It is a flowchart which shows the specific process of step S62 of FIG. 図１２のステップＳ６６の具体的処理を示すフローチャートである。It is a flowchart which shows the specific process of step S66 of FIG.

以下、検査システムの一実施形態について、図１〜図１９に基づいて詳細に説明する。図１には、被検査装置（検査対象）としてのノート型ＰＣ（Personal Computer）１０（以下、ＰＣ１０と表記する）の検査システム１００の構成が概略的に示されている。検査システム１００は、一例として、ノートＰＣ１０が有する発光素子としてのＬＥＤ（Light Emitting Diode）の検査を実行するシステムである。具体的には、検査システム１００は、ＬＥＤに点灯不良がないか、配線の間違いがないか、多色ＬＥＤが正常に点灯するかなどの検査を実行する。 Hereinafter, an embodiment of an inspection system will be described in detail with reference to FIGS. FIG. 1 schematically shows the configuration of an inspection system 100 of a notebook PC (Personal Computer) 10 (hereinafter referred to as PC 10) as an apparatus to be inspected (inspection object). As an example, the inspection system 100 is a system that performs inspection of an LED (Light Emitting Diode) as a light emitting element included in the notebook PC 10. Specifically, the inspection system 100 performs inspections such as whether the LED has no lighting failure, whether there is a wiring error, or whether the multicolor LED is normally lit.

（ＰＣ１０）
図２には、検査対象であるＰＣ１０の斜視図が示され、図３（ａ）には、ＰＣ１０のハードウェア構成が示されている。図３（ａ）及び図２に示すように、ＰＣ１０は、ＣＰＵ９０、ＲＯＭ９２、ＲＡＭ９４、記憶部（ここではＨＤＤ（Hard Disk Drive））９６、可搬型記憶媒体用ドライブ９９、表示画面としてのディスプレイ９３、スピーカ９５、入力部９７、ＬＥＤ１１〜１５等を備えており、ＰＣ１０の構成各部は、バス９８に接続されている。ディスプレイ９３は、ＬＣＤ（Liquid Crystal Display）等であり、入力部９７は、キーボードやマウス等を含む。ＰＣ１０では、ＲＯＭ９２あるいはＨＤＤ９６に格納されているプログラム、或いは可搬型記憶媒体用ドライブ９９が可搬型記憶媒体９１から読み取ったプログラムをＣＰＵ９０が実行することにより、図４（ａ）の各部の機能が実現される。 (PC10)
FIG. 2 shows a perspective view of the PC 10 to be inspected, and FIG. 3A shows a hardware configuration of the PC 10. As shown in FIGS. 3A and 2, the PC 10 includes a CPU 90, a ROM 92, a RAM 94, a storage unit (here, HDD (Hard Disk Drive)) 96, a portable storage medium drive 99, and a display 93 as a display screen. , A speaker 95, an input unit 97, LEDs 11 to 15, etc., and each component of the PC 10 is connected to a bus 98. The display 93 is an LCD (Liquid Crystal Display) or the like, and the input unit 97 includes a keyboard and a mouse. In the PC 10, the CPU 90 executes the program stored in the ROM 92 or the HDD 96 or the program read from the portable storage medium 91 by the portable storage medium drive 99, thereby realizing the functions of the respective units shown in FIG. Is done.

図４（ａ）には、ＣＰＵ９０の機能ブロック図が示されている。図４（ａ）に示すように、ＣＰＵ９０は、プログラムを実行することで、主制御部３０、画面制御部３２、及びＬＥＤ制御部３４として機能する。なお、図４（ａ）には、ＨＤＤ９６等に格納されるＬＥＤテーブル４０（図５（ａ）参照）及び表示色テーブル４２（図５（ｂ）参照）も図示されている。 FIG. 4A shows a functional block diagram of the CPU 90. As shown in FIG. 4A, the CPU 90 functions as the main control unit 30, the screen control unit 32, and the LED control unit 34 by executing a program. 4A also shows an LED table 40 (see FIG. 5A) and a display color table 42 (see FIG. 5B) stored in the HDD 96 or the like.

主制御部３０は、ＬＥＤテーブル４０及び表示色テーブル４２を用いて、画面制御部３２に対するディスプレイ９３の表示制御指示や、ＬＥＤ制御部３４に対するＬＥＤ１１〜１５の点灯・消灯制御指示を出力する。画面制御部３２は、主制御部３０からの指示に応じて、ディスプレイ９３の表示制御を実行する。ＬＥＤ制御部３４は、主制御部３０からの指示に応じて、ＬＥＤ１１〜１５の点灯・消灯制御を実行する。 The main control unit 30 uses the LED table 40 and the display color table 42 to output a display control instruction for the display 93 to the screen control unit 32 and a turn-on / off control instruction for the LEDs 11 to 15 to the LED control unit 34. The screen control unit 32 executes display control of the display 93 in response to an instruction from the main control unit 30. The LED control unit 34 performs lighting / extinguishing control of the LEDs 11 to 15 in accordance with an instruction from the main control unit 30.

ここで、ＬＥＤテーブル４０は、各ＬＥＤ１１〜１５の発光色及び位置座標を格納するテーブルである。ＬＥＤテーブル４０は、図５（ａ）に示すように、「Ｎｏ．」、「ＬＥＤ表示色」、「位置Ｘ」、「位置Ｙ」の各フィールドを有する。「Ｎｏ．」のフィールドには、ＬＥＤの通し番号が格納される。「ＬＥＤ表示色」のフィールドには、表示色の番号（図５（ｂ）の表示色テーブル４２で定義される表示色の「Ｎｏ．」）が格納される。「位置Ｘ」及び「位置Ｙ」には、ＰＣ１０上におけるＬＥＤ１１〜１５の位置座標が格納される。 Here, the LED table 40 is a table that stores the emission colors and position coordinates of the LEDs 11 to 15. As shown in FIG. 5A, the LED table 40 has fields of “No.”, “LED display color”, “position X”, and “position Y”. In the “No.” field, the serial number of the LED is stored. In the “LED display color” field, the display color number (“No.” of the display color defined in the display color table 42 in FIG. 5B) is stored. In “position X” and “position Y”, the position coordinates of the LEDs 11 to 15 on the PC 10 are stored.

また、表示色テーブル４２は、図５（ｂ）に示すように、「Ｎｏ．」、「Ｒ」、「Ｇ」、「Ｂ」の各フィールドを有する。「Ｎｏ．」のフィールドには、表示色の通し番号が格納される。「Ｒ」、「Ｇ」、「Ｂ」の各フィールドには、ＲＧＢ値を示す３つの８ビット符号無し整数（０〜２５５）が格納される。 Further, as shown in FIG. 5B, the display color table 42 has fields of “No.”, “R”, “G”, and “B”. In the “No.” field, the serial number of the display color is stored. In each of the fields “R”, “G”, and “B”, three 8-bit unsigned integers (0 to 255) indicating RGB values are stored.

これらＬＥＤテーブル４０と表示色テーブル４２によれば、キーボードの奥側に１列に配置されているＬＥＤ１１〜１３（図２参照）は、それぞれ赤色、赤色、緑色の光を発光する単色ＬＥＤとなっている。また、キーボードの手前側に配置されたＬＥＤ１４は、青色の光を発光する単色ＬＥＤであり、ＬＥＤ１５は、緑色及び赤色の光を発光する多色ＬＥＤとなっている。なお、ＬＥＤ１５は、後述する検査においては、緑色及び赤色のうち、緑色を優先して発光するものとする。 According to the LED table 40 and the display color table 42, the LEDs 11 to 13 (see FIG. 2) arranged in a row on the back side of the keyboard are single-color LEDs that emit red, red, and green light, respectively. ing. The LED 14 arranged on the front side of the keyboard is a monochromatic LED that emits blue light, and the LED 15 is a multicolor LED that emits green and red light. Note that the LED 15 emits light with priority given to green among green and red in the inspection described later.

なお、ＰＣ１０では、上述した各機能のほか、様々な機能を有しているが、それら機能の図示及び説明は省略するものとする。 Note that the PC 10 has various functions in addition to the functions described above, but illustration and description of these functions are omitted.

（検査システム１００）
検査システム１００は、図１に示すように、検査装置としての検査部２０と、撮像装置としての画面監視用カメラ２４及びＬＥＤ検査用カメラ２６と、を備える。また、検査システム１００は、ＰＣ１０が搭載されたパレット６０を所定方向（図１のＸ軸方向）に搬送するベルトコンベア６２と、ベルトコンベア６２近傍に設けられた読取装置２２と、を備える。 (Inspection system 100)
As shown in FIG. 1, the inspection system 100 includes an inspection unit 20 as an inspection device, a screen monitoring camera 24 and an LED inspection camera 26 as imaging devices. The inspection system 100 includes a belt conveyor 62 that conveys the pallet 60 on which the PC 10 is mounted in a predetermined direction (X-axis direction in FIG. 1), and a reading device 22 provided in the vicinity of the belt conveyor 62.

図３（ｂ）には、検査部２０のハードウェア構成が示されている。検査部２０は、ＣＰＵ１９０、ＲＯＭ１９２、ＲＡＭ１９４、記憶部（ここではＨＤＤ（Hard Disk Drive））１９６、可搬型記憶媒体用ドライブ１９９、ディスプレイ１９３、スピーカ１９５、入出力インタフェース１９７等を備えており、検査部２０の構成各部は、バス１９８に接続されている。入出力インタフェース１９７には、読取装置２２、画面監視用カメラ２４及びＬＥＤ検査用カメラ２６が接続されている。検査部２０では、ＲＯＭ１９２あるいはＨＤＤ１９６に格納されているプログラム、或いは可搬型記憶媒体用ドライブ１９９が可搬型記憶媒体１９１から読み取ったプログラムをＣＰＵ１９０が実行することにより、図４（ｂ）の各部の機能が実現される。 FIG. 3B shows a hardware configuration of the inspection unit 20. The inspection unit 20 includes a CPU 190, a ROM 192, a RAM 194, a storage unit (HDD (Hard Disk Drive)) 196, a portable storage medium drive 199, a display 193, a speaker 195, an input / output interface 197, and the like. Each component of the unit 20 is connected to the bus 198. The input / output interface 197 is connected to the reading device 22, the screen monitoring camera 24, and the LED inspection camera 26. In the inspection unit 20, the CPU 190 executes a program stored in the ROM 192 or the HDD 196 or a program read from the portable storage medium 191 by the portable storage medium drive 199, whereby the functions of the respective units in FIG. Is realized.

図４（ｂ）には、検査部２０の機能ブロック図が示されている。図４（ｂ）に示すように、検査部２０は、ＣＰＵ１９０がプログラムを実行することで、画像取得部１３４、画像処理部１３２、主制御部１３０、出力制御部１３６として機能する。なお、図４（ｂ）には、ＨＤＤ１９６等に格納されている色判定テーブル１４０及び画面サイズ判定テーブル１４２についても図示されている。 FIG. 4B shows a functional block diagram of the inspection unit 20. As shown in FIG. 4B, the inspection unit 20 functions as an image acquisition unit 134, an image processing unit 132, a main control unit 130, and an output control unit 136 by the CPU 190 executing a program. FIG. 4B also shows the color determination table 140 and the screen size determination table 142 stored in the HDD 196 or the like.

画像取得部１３４は、画面監視用カメラ２４によって撮影された画像及びＬＥＤ検査用カメラ２６によって撮影された画像を取得し、画像処理部１３２に対して送信する。 The image acquisition unit 134 acquires an image captured by the screen monitoring camera 24 and an image captured by the LED inspection camera 26 and transmits the acquired image to the image processing unit 132.

画像処理部１３２は、画像取得部１３４が取得した画像や、色判定テーブル１４０、画面サイズ判定テーブル１４２に基づいて、画像処理を行い、当該画像処理結果を主制御部１３０に対して送信する。 The image processing unit 132 performs image processing based on the image acquired by the image acquisition unit 134, the color determination table 140, and the screen size determination table 142, and transmits the image processing result to the main control unit 130.

主制御部１３０は、画像処理部１３２から送信されてきた画像処理結果や、読取装置２２の読み取り結果に基づいて、出力制御部１３６に対して出力指示を出す。 The main control unit 130 issues an output instruction to the output control unit 136 based on the image processing result transmitted from the image processing unit 132 and the reading result of the reading device 22.

出力制御部１３６は、主制御部１３０からの出力指示に応じて、ディスプレイ１９３やスピーカ１９５による出力を制御する。例えば、出力制御部１３６は、主制御部１３０からの指示に応じて、検査結果に異常があったことをディスプレイ１９３やスピーカ１９５を介してユーザに通知する。 The output control unit 136 controls output from the display 193 and the speaker 195 in accordance with an output instruction from the main control unit 130. For example, the output control unit 136 notifies the user through the display 193 and the speaker 195 that there is an abnormality in the test result in response to an instruction from the main control unit 130.

ここで、色判定テーブル１４０は、図６（ａ）に示すように、「Ｎｏ．」、「Hue（色調）」、「Saturation（彩度）」、「Value（明度）」の各フィールドを有する。「Ｎｏ．」のフィールドには、色の通し番号が格納される。なお、色判定テーブル１４０の「Ｎｏ．」の通し番号と、図５（ｂ）の表示色テーブル４２の「Ｎｏ．」の通し番号とが一致する場合、同じ色を意味するものとする。「Hue（色調）」、「Saturation（彩度）」、「Value（明度）」の各フィールドには、各色を定義する色調、彩度、明度の範囲（Ｍｉｎ値〜Ｍａｘ値）が格納される。 Here, the color determination table 140 includes fields of “No.”, “Hue (color tone)”, “Saturation (saturation)”, and “Value (brightness)” as shown in FIG. . A color serial number is stored in the “No.” field. When the “No.” serial number in the color determination table 140 and the “No.” serial number in the display color table 42 in FIG. 5B match, it means the same color. The “Hue (color tone)”, “Saturation (saturation)”, and “Value (lightness)” fields each store a color tone, saturation, and lightness range (Min value to Max value) that defines each color. .

また、画面サイズ判定テーブル１４２は、図６（ｂ）に示すように、「Ｎｏ．」、「型名」、「Ｗ」、「Ｈ」、「Ｉｎｃｈ」の各フィールドを有する。「Ｎｏ．」のフィールドには、ＰＣの通し番号が格納され、「型名」のフィールドには、ＰＣの型番が格納される。「Ｗ」、「Ｈ」、「Ｉｎｃｈ」の各フィールドには、型番に対応するＰＣの画面サイズ（幅（ｍｍ）、高さ（ｍｍ）、インチ）が格納される。 Further, as shown in FIG. 6B, the screen size determination table 142 has fields of “No.”, “model name”, “W”, “H”, and “Inch”. The “No.” field stores the PC serial number, and the “model name” field stores the PC model number. In each of the “W”, “H”, and “Inch” fields, the PC screen size (width (mm), height (mm), inch) corresponding to the model number is stored.

画面監視用カメラ２４は、図１に示すように、所定位置（範囲）に存在するＰＣ１０のディスプレイ９３に対向する位置に設けられている。画面監視用カメラ２４は、ディスプレイ９３及びその周辺を撮影し、撮影画像を画像取得部１３４に対して送信する。ＬＥＤ検査用カメラ２６は、所定位置（範囲）に存在するＰＣ１０のキーボードに対向する位置（上方）に設けられている。ＬＥＤ検査用カメラ２６は、キーボード周辺（ＬＥＤ１１〜１５を含む）を撮影し、撮影画像を画像取得部１３４に対して送信する。 As shown in FIG. 1, the screen monitoring camera 24 is provided at a position facing the display 93 of the PC 10 existing at a predetermined position (range). The screen monitoring camera 24 captures the display 93 and its surroundings, and transmits the captured image to the image acquisition unit 134. The LED inspection camera 26 is provided at a position (upper) facing the keyboard of the PC 10 existing at a predetermined position (range). The LED inspection camera 26 captures the periphery of the keyboard (including the LEDs 11 to 15), and transmits the captured image to the image acquisition unit 134.

ベルトコンベア６２は、ＰＣ１０を図１のＸ軸に沿って一定速度で搬送する装置である。読取装置２２は、ベルトコンベア６２によって搬送されているＰＣ１０のディスプレイ９３が画面監視用カメラ２４の撮影視野内に入る前、すなわち検査が行われる前に、ＰＣ１０に貼付されたバーコード等からＰＣ１０の情報（型番等）を読み取る。 The belt conveyor 62 is a device that conveys the PC 10 at a constant speed along the X axis of FIG. The reading device 22 uses the barcode attached to the PC 10 before the display 93 of the PC 10 conveyed by the belt conveyor 62 enters the field of view of the camera 24 for screen monitoring, that is, before the inspection is performed. Read information (model number, etc.).

（処理）
次に、検査対象のＰＣ１０による処理、及び検査部２０による処理について詳細に説明する。 (processing)
Next, processing by the PC 10 to be inspected and processing by the inspection unit 20 will be described in detail.

前提として、ＰＣ１０は、ベルトコンベア６２上にパレット６０を介して載置され、Ｘ軸に沿って搬送されているものとする。また、ＰＣ１０は、画面監視用カメラ２４の撮影視野内にディスプレイ９３の少なくとも一部が入る位置に存在しているものとする。 It is assumed that the PC 10 is placed on the belt conveyor 62 via the pallet 60 and is conveyed along the X axis. Further, it is assumed that the PC 10 is present at a position where at least a part of the display 93 enters the field of view of the screen monitoring camera 24.

（ＰＣ１０の処理）
図７には、ＰＣ１０の処理に関するフローチャートが示されている。図７の処理では、まず、ステップＳ１０において、画面制御部３２が、主制御部３０の指示の下、ディスプレイ９３に白ベタ表示を行う。すなわち、画面制御部３２は、ディスプレイ９３のＲＧＢ値をＲ：２５５、Ｇ：２５５、Ｂ：２５５とする。図８（ａ）には、ステップＳ１０におけるＰＣ１０の状態が示されている。本実施形態では、一例として、白ベタ表示を２秒間継続して行うものとする。なお、２秒間の白ベタ表示の間に、ＰＣ１０のディスプレイ９３の全てが、画面監視用カメラ２４の撮影視野内に入るものとする。 (Processing of PC10)
FIG. 7 shows a flowchart regarding the processing of the PC 10. In the process of FIG. 7, first, in step S 10, the screen control unit 32 displays white solid on the display 93 under the instruction of the main control unit 30. That is, the screen control unit 32 sets the RGB values of the display 93 to R: 255, G: 255, and B: 255. FIG. 8A shows the state of the PC 10 in step S10. In the present embodiment, as an example, white solid display is continuously performed for 2 seconds. It is assumed that all of the display 93 of the PC 10 falls within the photographing field of view of the screen monitoring camera 24 during the white solid display for 2 seconds.

次いで、ステップＳ１２では、ＬＥＤ制御部３４が、主制御部３０の指示の下、全ＬＥＤ１１〜１５を点灯する。また、これと同時に、画面制御部３２が、主制御部３０の指示の下、ディスプレイ９３の画面上（白ベタ表示している領域内）に各ＬＥＤ１１〜１５の表示色（点灯色）の円を描く。この場合、主制御部３０は、ＬＥＤテーブル４０及び表示色テーブル４２を参照し、キーボードの左奥側から右奥側、左手前側から右手前側の順（ＬＥＤ１１→１２→１３→１４→１５の順）に表示色（点灯色）の円を描く。この場合のＰＣ１０の状態が、図８（ｂ）に示されている。なお、図８（ｂ）の状態は、１秒間継続されるものとする。この図８（ｂ）の状態がＰＣ１０において維持されている間に、検査部２０において後述するＬＥＤ点灯不良検査が行われる。 Next, in step S 12, the LED control unit 34 lights all the LEDs 11 to 15 under the instruction of the main control unit 30. At the same time, the screen control unit 32 circles the display colors (lighting colors) of the LEDs 11 to 15 on the screen of the display 93 (in the white solid display area) under the instruction of the main control unit 30. Draw. In this case, the main control unit 30 refers to the LED table 40 and the display color table 42, in order from the left back side to the right back side, and from the left front side to the right front side (LED 11 → 12 → 13 → 14 → 15). ) Draw a circle with the display color (lighting color). The state of the PC 10 in this case is shown in FIG. In addition, the state of FIG.8 (b) shall be continued for 1 second. While the state of FIG. 8B is maintained in the PC 10, the inspection unit 20 performs a later-described LED lighting failure inspection.

次いで、ステップＳ１４では、ＬＥＤ制御部３４が、主制御部３０の指示の下、全ＬＥＤ１１〜１５を点灯した状態からＬＥＤを端から１つ消し、画面上の円も端から１つ消す（黒色表示する）。この場合のＰＣ１０の状態が図８（ｃ）に示されている。図８（ｃ）の状態では、ＬＥＤ１１が消灯されるとともに、画面上の左端の円が黒色表示されている。 Next, in step S14, under the instruction of the main control unit 30, the LED control unit 34 erases one LED from the end from the state in which all the LEDs 11 to 15 are lit, and erases one circle on the screen from the end (black). indicate). The state of the PC 10 in this case is shown in FIG. In the state of FIG. 8C, the LED 11 is turned off and the leftmost circle on the screen is displayed in black.

次いで、ステップＳ１６では、主制御部３０は、所定時間（例えば０．５秒）経過するまで待機する。所定時間経過した後は、ステップＳ１８に移行し、主制御部３０は、全てのＬＥＤ１１〜１５を１度ずつ消し、ディスプレイ９３上の円を１度ずつ消したか（黒色表示したか）否かを判断する。ここでの判断が否定された場合には、ステップＳ１４に戻る。そして、ステップＳ１４に戻った後は、ステップＳ１８の判断が肯定されるまで、ステップＳ１４〜Ｓ１８を繰り返す。これにより、ＰＣ１０では、図９（ａ）、図９（ｂ）、図９（ｃ）、図１０（ａ）の順に、ＬＥＤ点灯又は消灯が行われるとともに、画面表示が実行されることになる。なお、ＰＣ１０において図９（ａ）〜図１０（ａ）のように遷移している間に、検査部２０において後述する配線間違い検査が行われる。 Next, in step S16, the main control unit 30 stands by until a predetermined time (for example, 0.5 seconds) elapses. After the predetermined time has elapsed, the process proceeds to step S18, and the main control unit 30 turns off all the LEDs 11 to 15 once and whether or not the circle on the display 93 is turned off once (displayed in black). to decide. When judgment here is denied, it returns to step S14. Then, after returning to step S14, steps S14 to S18 are repeated until the determination in step S18 is affirmed. As a result, in the PC 10, the LED is turned on or off and the screen display is executed in the order of FIG. 9A, FIG. 9B, FIG. 9C, and FIG. . It should be noted that during the transition in the PC 10 as shown in FIGS. 9A to 10A, the inspection unit 20 performs a wiring error inspection described later.

一方、ステップＳ１８の判断が肯定された場合には、ステップＳ２０に移行する。ステップＳ２０では、画面制御部３２が、主制御部３０の指示の下、ディスプレイ９３に赤ベタ表示を行うとともに、全ＬＥＤ１１〜１５を消灯する。すなわち、画面制御部３２は、ディスプレイ９３のＲＧＢ値をＲ：２５５、Ｇ：０、Ｂ：０とする。図１０（ｂ）には、この場合のＰＣ１０の状態が示されている。なお、赤ベタ表示及び全ＬＥＤの消灯は、１秒間継続して実行されるものとする。なお、赤ベタ表示は、ＰＣ１０におけるＬＥＤ１１〜１５の点灯不良検査及び配線間違い検査が終了したことを意味する表示である。 On the other hand, if the determination in step S18 is affirmative, the process proceeds to step S20. In step S 20, the screen control unit 32 displays red solid on the display 93 under the instruction of the main control unit 30 and turns off all the LEDs 11 to 15. That is, the screen control unit 32 sets the RGB values of the display 93 to R: 255, G: 0, and B: 0. FIG. 10B shows the state of the PC 10 in this case. Note that the solid red display and the turn-off of all LEDs are executed continuously for one second. The red solid display is a display that means that the lighting failure inspection and the wiring error inspection of the LEDs 11 to 15 in the PC 10 are completed.

次いで、ステップＳ２２では、主制御部３０が、表示色の数を設定する。具体的には、主制御部３０は、図５（ａ）のＬＥＤテーブル４０及び図５（ｂ）の表示色テーブル４２を参照し、全ＬＥＤ１１〜１５において表示可能な全色と数とを特定する。図５（ａ）のＬＥＤテーブル４０の場合、赤色（ＬＥＤ表示色＝１）が３つ、緑色（ＬＥＤ表示色＝２）が２つ、青色（ＬＥＤ表示色＝３）が１つと特定される。 Next, in step S22, the main control unit 30 sets the number of display colors. Specifically, the main control unit 30 refers to the LED table 40 in FIG. 5A and the display color table 42 in FIG. 5B to identify all colors and numbers that can be displayed in all the LEDs 11 to 15. To do. In the case of the LED table 40 in FIG. 5A, three red (LED display color = 1), two green (LED display color = 2), and one blue (LED display color = 3) are specified. .

次いで、ステップＳ２４では、主制御部３０は、全ての色を表示したか否かを判断する。ここでは、まだ１色も表示していないので、判断は否定され、ステップＳ２６に移行する。 Next, in step S24, the main control unit 30 determines whether all colors have been displayed. Here, since one color is not displayed yet, the determination is denied and the process proceeds to step S26.

ステップＳ２６に移行すると、ＬＥＤ制御部３４が、主制御部３０の指示の下、ＬＥＤ表示色＝１（赤色）を発光可能なＬＥＤを点灯し、同時に、画面制御部３２が、主制御部３０の指示の下、点灯されるべき色・個数の円を画面上に表示する。この場合、図１０（ｃ）に示すように、ＬＥＤ１１，１２，１５を点灯するとともに、画面上（白ベタ表示している領域内）に３つの赤色の円を表示する。その後は、ステップＳ２４に戻る。 In step S26, the LED control unit 34 turns on an LED capable of emitting LED display color = 1 (red) under the instruction of the main control unit 30, and at the same time, the screen control unit 32 controls the main control unit 30. Under the instruction, display the circle of the color / number to be lit on the screen. In this case, as shown in FIG. 10 (c), the LEDs 11, 12, and 15 are turned on, and three red circles are displayed on the screen (in the area that is white). Thereafter, the process returns to step S24.

そして、ステップＳ２４では、主制御部３０は、再度、全ての色を表示したか否かを判断するが、これまで、赤色しか表示していない（緑色及び青色を表示していない）ので、判断は否定され、ステップＳ２６に移行する。そして、ステップＳ２６では、図１１（ａ）に示すように、ＬＥＤ１３，１５を点灯（緑色）するとともに、画面上（白ベタ表示している領域内）に２つの緑色の円を表示する。また、次にステップＳ２４の判断が否定された場合には、ステップＳ２６において、図１１（ｂ）に示すように、ＬＥＤ１４を点灯（青色）するとともに、画面上（白ベタ表示している領域内）に１つの青色の円を表示する。なお、ＰＣ１０において図１０（ｃ）〜図１１（ｂ）のように遷移している間、検査部２０では、後述する多色ＬＥＤ検査が行われる。 In step S24, the main control unit 30 determines again whether or not all the colors have been displayed. Until now, only red is displayed (green and blue are not displayed). Is denied, and the routine goes to Step S26. Then, in step S26, as shown in FIG. 11A, the LEDs 13 and 15 are turned on (green), and two green circles are displayed on the screen (in the region where the white solid is displayed). If the determination in step S24 is negative next, in step S26, as shown in FIG. 11 (b), the LED 14 is turned on (blue) and on the screen (in the white solid display area). ) Display one blue circle. In addition, in the PC 10, during the transition as shown in FIG. 10C to FIG. 11B, the inspection unit 20 performs a multicolor LED inspection described later.

その後、ステップＳ２４の判断が肯定されると、ステップＳ２８に移行する。ステップＳ２８では、画面制御部３２が、主制御部３０の指示の下、ディスプレイ９３に青ベタ表示を行うとともに、全ＬＥＤ１１〜１５を消灯する（図１１（ｃ）参照）。すなわち、画面制御部３２は、ディスプレイ９３のＲＧＢ値をＲ：０、Ｇ：０、Ｂ：２５５とする。この場合、青ベタ表示及び全ＬＥＤの消灯は、２秒間継続して実行されるものとする。なお、青ベタ表示は、ＰＣ１０におけるＬＥＤ１１〜１５の検査終了を意味する表示である。 Thereafter, when the determination in step S24 is affirmed, the process proceeds to step S28. In step S28, the screen control unit 32 performs a solid blue display on the display 93 under the instruction of the main control unit 30, and turns off all the LEDs 11 to 15 (see FIG. 11C). That is, the screen control unit 32 sets the RGB values of the display 93 to R: 0, G: 0, and B: 255. In this case, the blue solid display and the turn-off of all the LEDs are executed continuously for 2 seconds. In addition, a blue solid display is a display which means completion | finish of a test | inspection of LED11-15 in PC10.

以上のように、本実施形態では、ＰＣ１０は、ベルトコンベア６２に搭載された状態で画面監視用カメラ２４の撮影視野内を移動している間、図８（ａ）〜図１１（ｃ）に示すような画面表示及びＬＥＤ点灯・消灯を実行する。 As described above, in the present embodiment, while the PC 10 is mounted on the belt conveyor 62 and moves within the field of view of the screen monitoring camera 24, the PC 10 moves to FIGS. 8 (a) to 11 (c). The screen display as shown and LED lighting / extinguishing are executed.

（検査部２０の処理）
次に、ＰＣ１０における図７の処理と同時並行的に実行される、検査部２０の処理について、図１２〜図１９のフローチャートに沿って詳細に説明する。 (Processing of the inspection unit 20)
Next, the process of the inspection unit 20 executed in parallel with the process of FIG. 7 in the PC 10 will be described in detail along the flowcharts of FIGS.

なお、図１２の処理の前提として、読取装置２２が、主制御部１３０の指示の下、ＰＣ１０に貼付されたバーコード等から情報（型番等）を読み取り、主制御部１３０は、当該読み取られた情報を取得しているものとする。 As a premise of the processing in FIG. 12, the reading device 22 reads information (such as a model number) from a barcode or the like attached to the PC 10 under the instruction of the main control unit 130, and the main control unit 130 reads the information. Information is acquired.

図１２の処理では、まず、ステップＳ５０において、白ベタ画面検出のサブルーチンが実行される。具体的には、図１３のフローチャートに沿った処理を実行する。図１３の処理では、ステップＳ１００において、画像取得部１３４が画面監視用カメラ２４を用いた連続撮影を開始する。画像取得部１３４は取得した撮影画像を画像処理部１３２に送信する。なお、連続撮影は、５枚／秒程度の撮影であるものとする。 In the process of FIG. 12, first, in step S50, a white solid screen detection subroutine is executed. Specifically, the process according to the flowchart of FIG. 13 is executed. In the processing of FIG. 13, in step S 100, the image acquisition unit 134 starts continuous shooting using the screen monitoring camera 24. The image acquisition unit 134 transmits the acquired captured image to the image processing unit 132. In addition, continuous shooting is assumed to be shooting at about 5 frames / second.

次いで、ステップＳ１０２では、画像処理部１３２が、撮影画像の輝度変換を実行する。この場合、撮影画像（カラー画像）の全ピクセルについて、次式（１）を用いて輝度変換を行う
ｙ（輝度）＝０．３×Ｒ＋０．２９×Ｇ＋０．１１×Ｂ …（１） Next, in step S102, the image processing unit 132 executes luminance conversion of the captured image. In this case, luminance conversion is performed on all pixels of the captured image (color image) using the following equation (1): y (luminance) = 0.3 × R + 0.29 × G + 0.11 × B (1)

次いで、ステップＳ１０４では、画像処理部１３２が、輝度ｙが１２８以上の領域を抽出する。なお、この場合の領域とは、隣接する８つのピクセルで繋がったピクセルの塊であるものとする。また、ステップＳ１０４では、画像処理部１３２は、抽出した領域の外接矩形を求め、当該外接矩形の幅（Ｗ）と高さ（Ｈ）を取得する。 Next, in step S 104, the image processing unit 132 extracts an area where the luminance y is 128 or more. The region in this case is assumed to be a cluster of pixels connected by eight adjacent pixels. In step S104, the image processing unit 132 obtains a circumscribed rectangle of the extracted area, and obtains the width (W) and height (H) of the circumscribed rectangle.

次いで、ステップＳ１０６では、画像処理部１３２が、画面サイズ判定テーブル１４２を参照し、抽出領域（外接矩形）のサイズが、読取装置２２で情報（型番）が読み取られたＰＣの画面サイズと一致するか否かを判断する。このステップＳ１０６では、画面監視用カメラ２４の視野内にディスプレイ９３全体が入ったか否かを判断している。なお、画像処理部１３２では、取得した画像の１ピクセルがディスプレイ９３の何ｍｍに相当するかを定義しておく必要がある。 Next, in step S106, the image processing unit 132 refers to the screen size determination table 142, and the size of the extraction area (circumscribed rectangle) matches the screen size of the PC from which the information (model number) has been read by the reading device 22. Determine whether or not. In step S106, it is determined whether or not the entire display 93 is within the field of view of the screen monitoring camera 24. In the image processing unit 132, it is necessary to define how many mm of the display 93 one pixel of the acquired image corresponds to.

ステップＳ１０６の判断が否定された場合、すなわち画面監視用カメラ２４の撮影視野内にディスプレイ９３全体が入っていない場合には、ステップＳ１０２に戻る。一方、ステップＳ１０６の判断が肯定された場合、すなわち、画面監視用カメラ２４の撮影視野内にディスプレイ９３全体が入った場合には、図１３の全処理を終了して、図１２のステップＳ５２に移行する。このように、本実施形態では、ディスプレイ９３全体が画面監視用カメラ２４の撮影視野内に入った段階から、図１２のステップＳ５２以降の検査が実行されるようになっている。 If the determination in step S106 is negative, that is, if the entire display 93 is not within the field of view of the screen monitoring camera 24, the process returns to step S102. On the other hand, if the determination in step S106 is affirmative, that is, if the entire display 93 is within the field of view of the screen monitoring camera 24, the entire process in FIG. 13 is terminated and the process proceeds to step S52 in FIG. Transition. As described above, in this embodiment, the inspection after step S52 in FIG. 12 is executed from the stage where the entire display 93 is within the field of view of the screen monitoring camera 24.

ステップＳ５２では、ＬＥＤ点灯不良検査のサブルーチンが実行される。具体的には、図１４のフローチャートに沿った処理が実行される。 In step S52, an LED lighting failure inspection subroutine is executed. Specifically, processing according to the flowchart of FIG. 14 is executed.

図１４では、ステップＳ１１０において、画像取得部１３４が、画面監視用カメラ２４及びＬＥＤ検査用カメラ２６を用いた撮影を行い、撮影画像を取得する。画像取得部１３４は、取得した撮影画像を画像処理部１３２に対して送信する。 In FIG. 14, in step S 110, the image acquisition unit 134 performs imaging using the screen monitoring camera 24 and the LED inspection camera 26 and acquires a captured image. The image acquisition unit 134 transmits the acquired captured image to the image processing unit 132.

次いで、ステップＳ１１２では、画像処理部１３２が、画面領域を抽出する。この場合、画像処理部１３２は、ＰＣ１０の移動速度に基づいて撮影画像内の推定領域（画面領域と推定される領域）を求め、誤差を考慮して領域を切り出し、切り出した領域において、ステップＳ１０２、Ｓ１０４と同様の処理を行う。 Next, in step S112, the image processing unit 132 extracts a screen area. In this case, the image processing unit 132 obtains an estimated area (area estimated as a screen area) in the captured image based on the moving speed of the PC 10, cuts out the area in consideration of the error, and performs step S102 in the cut out area. , The same processing as S104 is performed.

次いで、ステップＳ１１４では、画像処理部１３２が、画面監視用カメラ２４の撮影画像（ここでは、図８（ｂ）のような表示状態のディスプレイ９３が撮影される）と、色判定テーブル１４０とを用いて、ＬＥＤ期待値を抽出する。この場合、画像処理部１３２は、ステップＳ１１２で抽出した画面領域と、色判定テーブル１４０とを用いて、ＬＥＤ期待値として、左から「赤、赤、緑、青、緑」という並び順を抽出する。 Next, in step S114, the image processing unit 132 displays the captured image of the screen monitoring camera 24 (here, the display 93 in the display state as illustrated in FIG. 8B is captured) and the color determination table 140. To extract the expected LED value. In this case, the image processing unit 132 uses the screen area extracted in step S112 and the color determination table 140 to extract the arrangement order of “red, red, green, blue, green” from the left as the LED expected value. To do.

次いで、ステップＳ１１６では、画像処理部１３２が、ＬＥＤ検査用カメラ２６の撮影画像と色判定テーブル１４０とを用いて、ＬＥＤ１１〜１５の発光色の並び順を抽出する。この場合、画像処理部１３２は、図１５に矢印にて示すように、キーボード近傍の撮影画像を下方向にシフトしながら左右方向に順次スキャンして、発光色（赤、赤、緑、青、緑）を順に抽出する。 Next, in step S 116, the image processing unit 132 extracts the arrangement order of the emission colors of the LEDs 11 to 15 using the captured image of the LED inspection camera 26 and the color determination table 140. In this case, as indicated by an arrow in FIG. 15, the image processing unit 132 sequentially scans the captured image in the vicinity of the keyboard in the horizontal direction while shifting downward, and the emission colors (red, red, green, blue, (Green) are extracted in order.

次いで、ステップＳ１１８では、画像処理部１３２が、ＬＥＤ期待値と、ＬＥＤの発光色の順番（並び順）とが一致するか否かを判断する。ここでの判断が肯定された場合には、ＬＥＤ点灯不良がないので、画像処理部１３２は、ステップＳ１２０において正常と判定した後、図１４の全処理を終了し、図１２のステップＳ５４に移行する。一方、ステップＳ１１８の判断が否定された場合には、ＬＥＤ点灯不良があるため、画像処理部１３２は、ステップＳ１２２において異常と判定した後、図１４の全処理を終了し、図１２のステップＳ５４に移行する。なお、画像処理部１３２の判定結果は、主制御部１３０に送信される。なお、図１４の処理では、ＬＥＤ１１〜１５を全て点灯すべきところ、点灯できないＬＥＤが存在していたり、異なる並び順になっていたりした場合に「異常」と判定されることから、ＬＥＤの点灯不良の検査が行えているといえる。 Next, in step S118, the image processing unit 132 determines whether or not the LED expected value matches the order of LED emission colors (arrangement order). If the determination here is affirmative, there is no LED lighting failure, so that the image processing unit 132 determines that it is normal in step S120, and then ends all the processing in FIG. 14 and proceeds to step S54 in FIG. To do. On the other hand, if the determination in step S118 is negative, there is an LED lighting failure, so that the image processing unit 132 determines that there is an abnormality in step S122, and then ends all the processing in FIG. 14 and step S54 in FIG. Migrate to Note that the determination result of the image processing unit 132 is transmitted to the main control unit 130. In the process of FIG. 14, when all the LEDs 11 to 15 are to be lit, it is determined as “abnormal” when there is an LED that cannot be lit or in a different arrangement order. It can be said that the inspection is being performed.

ステップＳ５４に移行すると、主制御部１３０は、画像処理部１３２の判定結果が「異常」であったか否かを判断する。ここでの判断が肯定された場合（異常であった場合）には、ステップＳ６８に移行し、主制御部１３０は、検査部２０のディスプレイ１９３やスピーカ１９５を介して異常を通知（発報）した後、図１２の全処理を終了する。一方、ステップＳ５４の判断が否定された場合（正常であった場合）には、ステップＳ５６に移行する。 In step S54, the main control unit 130 determines whether the determination result of the image processing unit 132 is “abnormal”. If the determination here is affirmative (if abnormal), the process proceeds to step S68, and the main control unit 130 notifies the abnormality via the display 193 and the speaker 195 of the inspection unit 20 (reporting). After that, the entire process of FIG. On the other hand, if the determination in step S54 is negative (normal), the process proceeds to step S56.

ステップＳ５６に移行した場合、配線間違い検査のサブルーチンが実行される。このステップＳ５６では、図１６のフローチャートに沿った処理が実行される。 When the process proceeds to step S56, a wiring error inspection subroutine is executed. In step S56, the process according to the flowchart of FIG. 16 is executed.

図１６では、まず、ステップＳ１３０において、画像取得部１３４が、画面監視用カメラ２４及びＬＥＤ検査用カメラ２６を用いて撮影し、撮影画像を取得する。画像取得部１３４は、取得した撮影画像を画像処理部１３２に対して送信する。 In FIG. 16, first, in step S 130, the image acquisition unit 134 captures an image using the screen monitoring camera 24 and the LED inspection camera 26 to acquire a captured image. The image acquisition unit 134 transmits the acquired captured image to the image processing unit 132.

次いで、ステップＳ１３２では、画像処理部１３２が、画面領域を抽出する。この場合、画像処理部１３２は、図１４のステップＳ１１２と同様の処理を実行する。 Next, in step S132, the image processing unit 132 extracts a screen area. In this case, the image processing unit 132 executes the same process as in step S112 in FIG.

次いで、ステップＳ１３４では、画像処理部１３２が、ディスプレイ９３の画面上に赤ベタ表示がなされているか否かを判断する。この場合、画像処理部１３２は、色判定テーブル１４０に基づいて、赤ベタ表示（抽出した画面領域の全てが赤表示）されているか否かを判断する。ここでの判断が肯定された場合には、図１６の全処理を終了して、図１２のステップＳ６０に移行するが、否定された場合には、ステップＳ１３６に移行する。 Next, in step S 134, the image processing unit 132 determines whether a red solid display is made on the screen of the display 93. In this case, based on the color determination table 140, the image processing unit 132 determines whether or not the red solid display (all the extracted screen areas are displayed in red). If the determination here is affirmed, the entire process of FIG. 16 is terminated and the process proceeds to step S60 of FIG. 12, whereas if the determination is negative, the process proceeds to step S136.

ステップＳ１３６に移行した場合、画像処理部１３２は、画面監視用カメラ２４の撮影画像（ここでは図８（ｃ）の表示状態のディスプレイ９３が撮影される）と、色判定テーブル１４０とを用いて、ＬＥＤ期待値を抽出する。この場合、画像処理部１３２は、ＬＥＤ期待値として、左から「黒、赤、緑、青、緑」という並び順を抽出する。また、画像処理部１３２は、抽出したＬＥＤ期待値を用いて消灯位置（黒色：左から１番目）を特定する。 When the process proceeds to step S136, the image processing unit 132 uses the captured image of the screen monitoring camera 24 (here, the display 93 in the display state of FIG. 8C is captured) and the color determination table 140. , LED expected value is extracted. In this case, the image processing unit 132 extracts the arrangement order of “black, red, green, blue, green” from the left as the LED expected value. In addition, the image processing unit 132 specifies the extinguishing position (black: first from the left) using the extracted LED expected value.

次いで、ステップＳ１３８では、画像処理部１３２が、ＬＥＤ検査用カメラ２６の撮影画像と色判定テーブル１４０とを用いて、ＬＥＤ１１〜１５の発光色と並び順を抽出し、当該並び順と全点灯時の並び順を用いて消灯位置を特定する。例えば、全点灯時の発光色の並び順が前述のように「赤、赤、緑、青、緑」であった場合に、今回「赤、緑、青、緑」であったとする。この場合、画像処理部１３２は、左から１番目又は２番目を消灯位置して特定する。 Next, in step S138, the image processing unit 132 uses the captured image of the LED inspection camera 26 and the color determination table 140 to extract the light emission colors and the arrangement order of the LEDs 11 to 15, and the arrangement order and all lighting times. The extinguishing position is specified using the order of arrangement. For example, when the order of the emission colors when all lights are on is “red, red, green, blue, green” as described above, it is assumed that this time is “red, green, blue, green”. In this case, the image processing unit 132 specifies the first or second from the left as the extinguishing position.

次いで、ステップＳ１４０では、主制御部１３０が、ＬＥＤ期待値に基づく消灯位置（ステップＳ１３６で特定）と、ＬＥＤの消灯位置（ステップＳ１３８で特定）と、が一致するか否かを判断する。ここでの判断が肯定された場合には、主制御部１３０は、ステップＳ１４２において正常と判定し、ステップＳ１３０に戻る。一方、ステップＳ１４０の判断が否定された場合には、主制御部１３０は、ステップＳ１４４において異常と判定し、ステップＳ１３０に戻る。 Next, in step S140, the main control unit 130 determines whether or not the turn-off position based on the expected LED value (specified in step S136) matches the LED turn-off position (specified in step S138). If the determination here is affirmed, the main control unit 130 determines normal in step S142 and returns to step S130. On the other hand, if the determination in step S140 is negative, the main control unit 130 determines that there is an abnormality in step S144, and returns to step S130.

以降においては、画像処理部１３２及び主制御部１３０が、図９（ａ）〜図１０（ａ）に示すＰＣ１０の状態を撮影した撮影画像を用いて、ステップＳ１３６〜Ｓ１４４の処理・判断を実行し、各状態が正常であるか否かを判定する。そして、図１０（ａ）の状態の判定が終了し、ＰＣ１０において図１０（ｂ）の赤ベタ表示がなされた段階で、図１６のステップＳ１３４の判断が肯定される。この場合、主制御部１３０は、図１６の全処理を終了し、図１２のステップＳ５８に移行する。なお、図１６の処理では、ＬＥＤ１１〜１５のうち消灯すべきＬＥＤが異なっている場合に「異常」と判定されることから、ＬＥＤに対する配線間違いの検査を行えているといえる。 Thereafter, the image processing unit 132 and the main control unit 130 execute the processing / determination of steps S136 to S144 using the captured image obtained by capturing the state of the PC 10 illustrated in FIGS. 9A to 10A. Then, it is determined whether or not each state is normal. Then, when the determination of the state of FIG. 10A is finished and the red solid display of FIG. 10B is made on the PC 10, the determination in step S134 of FIG. 16 is affirmed. In this case, the main control unit 130 ends all the processes in FIG. 16, and proceeds to step S58 in FIG. In the process of FIG. 16, it is determined as “abnormal” when the LEDs to be turned off among the LEDs 11 to 15 are different.

ステップＳ５８に移行すると、主制御部１３０は、図１６の処理において異常と判定されたか否かを判断する。ここでの判断が肯定された場合（異常があった場合）には、ステップＳ６８に移行し、主制御部１３０は、検査部２０のディスプレイ１９３やスピーカ１９５を介して異常を通知（発報）した後、図１２の全処理を終了する。一方、ステップＳ５８の判断が否定された場合（正常であった場合）には、ステップＳ６０に移行する。 If transfering it to step S58, the main control part 130 will judge whether it was determined that it was abnormal in the process of FIG. If the determination here is affirmative (if there is an abnormality), the process proceeds to step S68, and the main control unit 130 notifies the abnormality via the display 193 and the speaker 195 of the inspection unit 20 (reporting). After that, the entire process of FIG. On the other hand, if the determination in step S58 is negative (normal), the process proceeds to step S60.

ステップＳ６０では、赤ベタ画面検出のサブルーチンが実行される。このステップＳ６０では、図１７のフローチャートに沿った処理が実行される。図１７の処理では、まず、ステップＳ１５０において、主制御部１３０が開始時刻ｔ０を取得する。次いで、ステップＳ１５２では、画像取得部１３４が、画面監視用カメラ２４を用いて撮影を行い、撮影画像を取得する。なお、画像取得部１３４は、撮影画像を画像処理部１３２に対して送信する。 In step S60, a red solid screen detection subroutine is executed. In step S60, the process according to the flowchart of FIG. 17 is executed. In the process of FIG. 17, first, in step S150, the main control unit 130 acquires the start time t0. Next, in step S152, the image acquisition unit 134 performs imaging using the screen monitoring camera 24 and acquires a captured image. Note that the image acquisition unit 134 transmits the captured image to the image processing unit 132.

次いで、ステップＳ１５４では、画像処理部１３２が、図１４のステップＳ１１２と同様にして、撮影画像から画面領域を抽出する。次いで、ステップＳ１５６では、画像処理部１３２は、色判定テーブル１４０に基づいて、赤ベタ（抽出した画面領域の全てが赤表示）であるか否かを判断する。ここでの判断が否定された場合には、ステップＳ１５２に戻るが、肯定された場合には、ステップＳ１５８に移行する。ステップＳ１５８では、主制御部１３０が、現在時刻ｔｎを取得する。そして、ステップＳ１６０では、主制御部１３０が、ｔｎ−ｔ０が１秒を超えたか否かを判断する。ここでの判断が肯定された場合には、図１７の全処理を終了し、図１２のステップＳ６２に移行する。一方、ステップＳ１６０の判断が否定された場合には、ステップＳ１５２に戻り、ステップＳ１５２〜Ｓ１６０の処理・判断が繰り返される。そして、ステップＳ１６０の判断が肯定された段階で、図１７の全処理を終了し、図１２のステップＳ６２に移行する。 Next, in step S154, the image processing unit 132 extracts a screen area from the captured image in the same manner as in step S112 in FIG. Next, in step S 156, the image processing unit 132 determines based on the color determination table 140 whether the color is red solid (all the extracted screen areas are displayed in red). If the determination is negative, the process returns to step S152. If the determination is positive, the process proceeds to step S158. In step S158, the main control unit 130 acquires the current time tn. In step S160, the main control unit 130 determines whether tn-t0 has exceeded 1 second. If the determination here is affirmed, the entire process of FIG. 17 is terminated, and the process proceeds to step S62 of FIG. On the other hand, if the determination in step S160 is negative, the process returns to step S152, and the processes and determinations in steps S152 to S160 are repeated. Then, when the determination in step S160 is affirmed, the entire process in FIG. 17 is terminated, and the process proceeds to step S62 in FIG.

ステップＳ６２では、多色ＬＥＤ検査のサブルーチンが実行される。具体的には、図１８のフローチャートに沿った処理が実行される。 In step S62, a multi-color LED inspection subroutine is executed. Specifically, processing according to the flowchart of FIG. 18 is executed.

図１８の処理では、まず、ステップＳ１７０において、画像取得部１３４が、画面監視用カメラ２４及びＬＥＤ検査用カメラ２６を用いて撮影し、撮影画像を取得する。画像取得部１３４は、取得した撮影画像を画像処理部１３２に対して送信する。 In the process of FIG. 18, first, in step S 170, the image acquisition unit 134 captures an image using the screen monitoring camera 24 and the LED inspection camera 26 and acquires a captured image. The image acquisition unit 134 transmits the acquired captured image to the image processing unit 132.

次いで、ステップＳ１７２では、画像処理部１３２が、ステップＳ１１２と同様にして、画面領域を抽出する。次いで、ステップＳ１７４では、画像処理部１３２が、抽出した画面領域が青ベタか否かを色判定テーブル１４０を用いて判断する。ここでの判断が肯定された場合には、図１８の全処理を終了して、図１２のステップＳ６４に移行するが、否定された場合には、ステップＳ１７６に移行する。 Next, in step S172, the image processing unit 132 extracts a screen area in the same manner as in step S112. In step S174, the image processing unit 132 determines whether the extracted screen area is solid blue using the color determination table 140. If the determination here is affirmed, the entire process of FIG. 18 is terminated and the process proceeds to step S64 in FIG. 12, whereas if the determination is negative, the process proceeds to step S176.

ステップＳ１７６では、画像処理部１３２が、画面監視用カメラ２４の撮影画像（ここでは、図１０（ｃ）の表示状態のディスプレイ９３が撮影される）と、色判定テーブル１４０とを用いて、ＬＥＤ期待値（色と数）を抽出する。この場合、画像処理部１３２は、ＬＥＤ期待値として、「赤２つ」を抽出する。 In step S176, the image processing unit 132 uses the photographed image of the screen monitoring camera 24 (here, the display 93 in the display state of FIG. 10C is photographed) and the color determination table 140 to display the LED. Extract expected values (color and number). In this case, the image processing unit 132 extracts “two red” as the LED expected value.

次いで、ステップＳ１７８では、画像処理部１３２が、ＬＥＤ検査用カメラ２６の撮影画像と色判定テーブル１４０とを用いて、ＬＥＤ１１〜１５の発光色と数を抽出する。 Next, in step S178, the image processing unit 132 uses the captured image of the LED inspection camera 26 and the color determination table 140 to extract the emission colors and the numbers of the LEDs 11 to 15.

次いで、ステップＳ１８０では、主制御部１３０が、ＬＥＤ期待値（赤２つ）と、ＬＥＤの発光色及び数と、が一致するか否かを判断する。ここでの判断が肯定された場合には、主制御部１３０は、ステップＳ１８２において正常と判定し、ステップＳ１７０に戻る。一方、ステップＳ１８０の判断が否定された場合には、主制御部１３０は、ステップＳ１８４において異常と判定し、ステップＳ１７０に戻る。 Next, in step S180, the main control unit 130 determines whether or not the LED expected value (two red) matches the LED emission color and number. If the determination here is affirmed, the main control unit 130 determines normal in step S182 and returns to step S170. On the other hand, if the determination in step S180 is negative, main controller 130 determines that there is an abnormality in step S184, and returns to step S170.

以降、画像処理部１３２と主制御部１３０は、図１１（ａ）、図１１（ｂ）に示すＰＣ１０の状態（画面表示及びＬＥＤ点灯）を撮影した撮影画像を用いて、ステップＳ１７６〜Ｓ１８４の処理・判断を実行し、各状態が正常であるか否かを判定する。そして、図１１（ｂ）の状態の判定が終了し、図１１（ｃ）に示すように、ＰＣ１０のディスプレイ９３上に青ベタが表示された段階で、図１８のステップＳ１７４の判断が肯定される。この場合、主制御部１３０は、図１２のステップＳ６４に移行する。なお、図１８の処理では、ＬＥＤ１１〜１５のうち多色ＬＥＤが正常に動作しないと「異常」と判定されることから、多色ＬＥＤの検査を行えているといえる。 Thereafter, the image processing unit 132 and the main control unit 130 use the captured image obtained by capturing the state of the PC 10 (screen display and LED lighting) illustrated in FIGS. 11A and 11B in steps S176 to S184. Processing / determination is executed to determine whether each state is normal. Then, when the determination of the state of FIG. 11B is completed and the blue solid is displayed on the display 93 of the PC 10 as shown in FIG. 11C, the determination of step S174 of FIG. 18 is affirmed. The In this case, the main control unit 130 proceeds to step S64 in FIG. In the process of FIG. 18, it can be said that the multicolor LED is inspected because it is determined as “abnormal” if the multicolor LED among the LEDs 11 to 15 does not operate normally.

ステップＳ６４に移行すると、主制御部１３０は、図１８の処理において異常と判定されたか否かを判断する。ここでの判断が肯定された場合（異常があった場合）には、ステップＳ６８に移行し、主制御部１３０は、検査部２０のディスプレイ１９３やスピーカ１９５を介して異常を通知（発報）した後、図１２の全処理を終了する。一方、ステップＳ６４の判断が否定された場合（正常であった場合）には、ステップＳ６６に移行する。 If transfering it to step S64, the main control part 130 will judge whether it was determined that it was abnormal in the process of FIG. If the determination here is affirmative (if there is an abnormality), the process proceeds to step S68, and the main control unit 130 notifies the abnormality via the display 193 and the speaker 195 of the inspection unit 20 (reporting). After that, the entire process of FIG. On the other hand, if the determination in step S64 is negative (normal), the process proceeds to step S66.

ステップＳ６６では、青ベタ画面検出のサブルーチンが実行される。具体的には、ステップＳ６６では、図１９のフローチャートに沿った処理が実行される。図１９の処理では、まず、ステップＳ１９０において、主制御部１３０が開始時刻ｔ０を取得する。次いで、ステップＳ１９２では、画像取得部１３４が、画面監視用カメラ２４を用いて撮影を行い、撮影画像を取得する。なお、画像取得部１３４は、撮影画像を画像処理部１３２に対して送信する。 In step S66, a blue solid screen detection subroutine is executed. Specifically, in step S66, processing according to the flowchart of FIG. 19 is executed. In the process of FIG. 19, first, in step S190, the main control unit 130 acquires the start time t0. Next, in step S192, the image acquisition unit 134 performs imaging using the screen monitoring camera 24 and acquires a captured image. Note that the image acquisition unit 134 transmits the captured image to the image processing unit 132.

次いで、ステップＳ１９４では、画像処理部１３２が、ステップＳ１１２と同様にして、撮影画像から画面領域を抽出する。次いで、ステップＳ１９６では、画像処理部１３２が、色判定テーブル１４０に基づいて、青ベタ（抽出された画面領域の全てが青表示）であるか否かを判断する。ここでの判断が否定された場合には、ステップＳ１９２に戻るが、肯定された場合には、ステップＳ１９８に移行する。ステップＳ１９８では、主制御部１３０が、現在時刻ｔｎを取得する。そして、ステップＳ２００では、主制御部１３０が、ｔｎ−ｔ０が２秒を超えたか否かを判断する。ここでの判断が否定された場合には、ステップＳ１９２に戻るが、肯定された場合には、図１９の全処理を終了するとともに、図１２の全処理を終了する。 Next, in step S194, the image processing unit 132 extracts a screen area from the captured image in the same manner as in step S112. Next, in step S196, the image processing unit 132 determines based on the color determination table 140 whether the color is blue solid (all the extracted screen areas are displayed in blue). If the determination is negative, the process returns to step S192. If the determination is positive, the process proceeds to step S198. In step S198, the main control unit 130 acquires the current time tn. In step S200, the main control unit 130 determines whether tn-t0 has exceeded 2 seconds. If the determination here is negative, the process returns to step S192. If the determination is positive, all the processes in FIG. 19 are ended and all the processes in FIG. 12 are ended.

以上のような処理を実行することで、本実施形態では、ＰＣ１０が、画面監視用カメラ２４及びＬＥＤ検査用カメラ２６の撮影視野内を移動している間に、ＬＥＤ点灯不良検査（Ｓ５２）、配線間違い検査（Ｓ５６）、及び多色ＬＥＤ検査（Ｓ６２）を実行することができる。 By executing the processing as described above, in the present embodiment, while the PC 10 is moving within the field of view of the screen monitoring camera 24 and the LED inspection camera 26, the LED lighting failure inspection (S52), Wiring error inspection (S56) and multicolor LED inspection (S62) can be executed.

以上、詳細に説明したように、本実施形態によると、ＰＣ１０において、ディスプレイ９３上にＬＥＤ１１〜１５の発光色の並び順の情報や発光色の数の情報を表示し（ステップＳ１２，Ｓ１４，Ｓ２６）、ディスプレイ９３上に表示された情報に対応する方法でＬＥＤ１１〜１５を発光させ（ステップＳ１２，Ｓ１４，Ｓ２６）、情報が表示されたディスプレイ９３と、ＬＥＤ１１〜１５とを撮影し（ステップＳ１１０、Ｓ１３０、Ｓ１７０）、ディスプレイ９３を撮影した結果と、ＬＥＤ１１〜１５を撮影した結果とを比較して、ＬＥＤ１１〜１５の検査を行う（ステップＳ１１４〜Ｓ１２２、Ｓ１３６〜Ｓ１４４、Ｓ１７６〜Ｓ１８４）。これにより、本実施形態では、ＰＣ１０が所定位置に位置決めされたときのＬＥＤ検査用カメラ２６の撮影視野内におけるＬＥＤのＸＹ座標や、発光色に関する期待値を用意するなどしなくても、ディスプレイ９３上に表示される発光色の並び順の情報や発光色の数の情報（画面監視用カメラ２４で撮影した画像から得られる期待値）と、ＬＥＤを撮影した画像との比較により、ＬＥＤ１１〜１５の検査を行うことができる。また、ＬＥＤ１１〜１５の検査において、画像内のＬＥＤ座標を取得するなどする必要もない。これにより、期待値作成やＬＥＤ座標取得に要する手間や工数を削減することができるとともに、ＰＣ１０の各カメラ２４，２６に対する高精度な位置決め等も不要となるので、検査に要する手間や工数を削減し、処理を簡素化することができる。また、本実施形態では、ＰＣ１０と検査部２０に通信アダプタ等の同期用機器を設ける必要がないため、コスト削減を図ることができる。更に、本実施形態では、検査部２０が期待値を保持する必要がないので、検査部２０の記憶容量の削減を図ることもできる。 As described above in detail, according to the present embodiment, the PC 10 displays information on the order of arrangement of the emission colors of the LEDs 11 to 15 and information on the number of emission colors on the display 93 (steps S12, S14, S26). ), The LEDs 11 to 15 are caused to emit light by a method corresponding to the information displayed on the display 93 (steps S12, S14, S26), and the display 93 on which the information is displayed and the LEDs 11 to 15 are photographed (step S110, S130, S170), the result of photographing the display 93 and the result of photographing the LEDs 11 to 15 are compared, and the LEDs 11 to 15 are inspected (steps S114 to S122, S136 to S144, S176 to S184). As a result, in this embodiment, the display 93 is not required without preparing the XY coordinates of the LED within the field of view of the LED inspection camera 26 when the PC 10 is positioned at a predetermined position and the expected value regarding the emission color. By comparing the information on the arrangement order of the emission colors displayed above and the information on the number of emission colors (expected value obtained from the image captured by the screen monitoring camera 24) with the image captured by the LED, the LEDs 11-15. Can be inspected. Further, in the inspection of the LEDs 11 to 15, it is not necessary to acquire LED coordinates in the image. As a result, it is possible to reduce labor and man-hours required to create expected values and obtain LED coordinates, and also eliminate the need for high-precision positioning with respect to the cameras 24 and 26 of the PC 10, thereby reducing labor and man-hours required for inspection. In addition, the processing can be simplified. Further, in the present embodiment, since there is no need to provide a synchronization device such as a communication adapter in the PC 10 and the inspection unit 20, cost reduction can be achieved. Furthermore, in this embodiment, since the inspection unit 20 does not need to hold the expected value, the storage capacity of the inspection unit 20 can be reduced.

また、本実施形態では、複数のＬＥＤ１１〜１５を全て発光させた場合の発光色の並び順の情報をディスプレイ９３に表示するとともに、複数のＬＥＤ１１〜１５を全て発光させる（Ｓ１２）。これにより、カメラ２４，２６で撮影された結果の比較を行うことで、ＬＥＤの点灯不良を検査することができる。 Moreover, in this embodiment, while displaying the information of the arrangement | sequence order of the luminescent color at the time of making all the LED11-15 light-emit on the display 93, all the LED11-15 is made to light all (S12). Thereby, the lighting failure of LED can be test | inspected by comparing the result image | photographed with the cameras 24 and 26. FIG.

また、本実施形態では、複数のＬＥＤ１１〜１５のうちの特定のＬＥＤ（例えば左端から所定番目のＬＥＤ）を消灯したときの発光色の並び順の情報をディスプレイ９３上に表示するとともに、特定のＬＥＤ以外の発光素子を発光させることとしている（Ｓ１４）。これにより、カメラ２４，２６で撮影された結果の比較を行うことで、配線間違いの検査を行うことができる。 Further, in the present embodiment, information on the arrangement order of the emission colors when a specific LED (for example, a predetermined LED from the left end) of the plurality of LEDs 11 to 15 is turned off is displayed on the display 93 and a specific LED is displayed. A light emitting element other than the LED is caused to emit light (S14). Thereby, by comparing the results photographed by the cameras 24 and 26, it is possible to inspect a wiring error.

また、本実施形態では、ＬＥＤ１５が多色発光可能なＬＥＤ（多色ＬＥＤ）であり、特定の発光色を発光可能なＬＥＤの数の情報を表示するとともに、特定の発光色での発光が可能なＬＥＤを発光させることとしている。これにより、カメラ２４，２６で撮影された結果の比較を行うことで、多色ＬＥＤが正常に発光しているか否かの検査を行うことができる。 In the present embodiment, the LED 15 is an LED capable of emitting multiple colors (multicolored LED), displays information on the number of LEDs capable of emitting a specific emission color, and can emit light in a specific emission color. LED is made to emit light. Thereby, it is possible to inspect whether or not the multi-color LED emits light normally by comparing the results photographed by the cameras 24 and 26.

また、本実施形態では、ＰＣ１０が、ディスプレイ９３への表示と、当該表示に対応するＬＥＤの発光とを同時に行うこととしている（Ｓ１２，Ｓ１４，Ｓ２６）。これにより、検査において用いる期待値を、検査部２０に対して適切なタイミングで提供することができる。 In the present embodiment, the PC 10 simultaneously performs display on the display 93 and light emission of the LED corresponding to the display (S12, S14, S26). Thereby, the expected value used in the inspection can be provided to the inspection unit 20 at an appropriate timing.

なお、上記実施形態では、ＬＥＤ点灯不良検査（Ｓ５２）、配線間違い検査（Ｓ５６）、多色ＬＥＤ検査（Ｓ６２）を行う場合について説明したが、これに限らず、上記検査のうち少なくとも１つを行うこととしてもよい。また、例えば、検査対象のＰＣとして多色ＬＥＤを搭載しているＰＣと搭載していないＰＣとが存在する場合には、多色ＬＥＤの搭載有無に応じて多色ＬＥＤ検査の実行有無を決定することとしてもよい。 In addition, although the said embodiment demonstrated the case where an LED lighting defect test | inspection (S52), a wiring mistake test | inspection (S56), and a multi-color LED test | inspection (S62) were performed, not only this but at least one of the said test | inspections. It may be done. Also, for example, when there are PCs with and without multicolor LEDs as PCs to be inspected, whether or not to perform multicolor LED inspections is determined according to whether or not multicolor LEDs are installed. It is good to do.

なお、上記実施形態では、画面サイズ判定テーブル１４２を用意し、検査対象のＰＣに対応する大きさの画面（白ベタ表示）が撮影された場合に、検査を開始する場合（図１２のステップＳ５０）について説明した。しかしながら、これに限られるものではなく、画面監視用カメラ２４の撮影視野内に白ベタの矩形領域が収まった段階（撮影視野の外縁に白ベタの矩形領域が接しなくなった段階）で、検査を開始するようにしてもよい。 In the above embodiment, the screen size determination table 142 is prepared, and the inspection is started when a screen (white solid display) having a size corresponding to the PC to be inspected is photographed (step S50 in FIG. 12). ) Explained. However, the present invention is not limited to this, and the inspection is performed when the white solid rectangular area is within the photographing field of the screen monitoring camera 24 (the white solid rectangular area is not in contact with the outer edge of the photographing field). You may make it start.

なお、上記実施形態では、図５（ａ）のＬＥＤテーブル４０において、各ＬＥＤを座標（ＰＣ１０上における座標）で管理する場合について説明したが、これに限られるものではない。例えば、ＬＥＤを並び順（図１５のスキャン動作により検出される順）のみで管理することとしてもよい。 In the above embodiment, a case has been described in which each LED is managed by coordinates (coordinates on the PC 10) in the LED table 40 of FIG. 5A. However, the present invention is not limited to this. For example, the LEDs may be managed only in the arrangement order (the order detected by the scan operation in FIG. 15).

なお、上記実施形態では、検査システム１００が、画面監視用カメラ２４と、ＬＥＤ検査用カメラ２６とを備える場合について説明したが、これに限られるものではない。例えば、ディスプレイ９３と、ＬＥＤ１１〜１５とを１つのカメラで同時に撮影することとしてもよい。この場合、撮影視野の上側領域をディスプレイ９３の撮影に用い、下側領域をＬＥＤ１１〜１５の撮影に用いるというように予め領域を用途に応じて分けておいてもよい。 In the above embodiment, the case where the inspection system 100 includes the screen monitoring camera 24 and the LED inspection camera 26 has been described. However, the present invention is not limited to this. For example, it is good also as image | photographing the display 93 and LED11-15 simultaneously with one camera. In this case, the area may be divided in advance according to the application, such that the upper area of the photographing field is used for photographing the display 93 and the lower area is used for photographing the LEDs 11 to 15.

なお、上記実施形態では、ベルトコンベア６２を用いてＰＣ１０を搬送している間に、ＰＣ１０の検査を行う場合について説明したが、これに限られるものではない。例えば、人やロボットがカメラ２４，２６に対向する位置にＰＣ１０を搬送するようにし、その状態でＰＣ１０の検査を行うこととしてもよい。 In addition, although the said embodiment demonstrated the case where the test | inspection of PC10 was performed while conveying PC10 using the belt conveyor 62, it is not restricted to this. For example, the PC 10 may be transported to a position where a person or robot faces the cameras 24 and 26, and the PC 10 may be inspected in that state.

なお、上記実施形態では、検査対象がＰＣ（ノートＰＣ）である場合について説明したが、これに限られるものではなく、ディスプレイと発光素子（ＬＥＤ）を有する装置であれば、その種別は特に問わない。例えば、検査対象としては、デスクトップ型のＰＣやタブレット型のＰＣ、携帯電話などを採用することができる。 In the above embodiment, the case where the inspection object is a PC (notebook PC) has been described. However, the present invention is not limited to this, and the type is not particularly limited as long as it is a device having a display and a light emitting element (LED). Absent. For example, a desktop PC, a tablet PC, a mobile phone, or the like can be used as an inspection target.

なお、上記の処理機能は、コンピュータによって実現することができる。その場合、処理装置が有すべき機能の処理内容を記述したプログラムが提供される。そのプログラムをコンピュータで実行することにより、上記処理機能がコンピュータ上で実現される。処理内容を記述したプログラムは、コンピュータで読み取り可能な記録媒体（ただし、搬送波は除く）に記録しておくことができる。 The above processing functions can be realized by a computer. In that case, a program describing the processing contents of the functions that the processing apparatus should have is provided. By executing the program on a computer, the above processing functions are realized on the computer. The program describing the processing contents can be recorded on a computer-readable recording medium (except for a carrier wave).

プログラムを流通させる場合には、例えば、そのプログラムが記録されたＤＶＤ（Digital Versatile Disc）、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）などの可搬型記録媒体の形態で販売される。また、プログラムをサーバコンピュータの記憶装置に格納しておき、ネットワークを介して、サーバコンピュータから他のコンピュータにそのプログラムを転送することもできる。 When the program is distributed, for example, it is sold in the form of a portable recording medium such as a DVD (Digital Versatile Disc) or a CD-ROM (Compact Disc Read Only Memory) on which the program is recorded. It is also possible to store the program in a storage device of a server computer and transfer the program from the server computer to another computer via a network.

プログラムを実行するコンピュータは、例えば、可搬型記録媒体に記録されたプログラムもしくはサーバコンピュータから転送されたプログラムを、自己の記憶装置に格納する。そして、コンピュータは、自己の記憶装置からプログラムを読み取り、プログラムに従った処理を実行する。なお、コンピュータは、可搬型記録媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することもできる。また、コンピュータは、サーバコンピュータからプログラムが転送されるごとに、逐次、受け取ったプログラムに従った処理を実行することもできる。 The computer that executes the program stores, for example, the program recorded on the portable recording medium or the program transferred from the server computer in its own storage device. Then, the computer reads the program from its own storage device and executes processing according to the program. The computer can also read the program directly from the portable recording medium and execute processing according to the program. Further, each time the program is transferred from the server computer, the computer can sequentially execute processing according to the received program.

上述した実施形態は本発明の好適な実施の例である。但し、これに限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変形実施可能である。 The above-described embodiment is an example of a preferred embodiment of the present invention. However, the present invention is not limited to this, and various modifications can be made without departing from the scope of the present invention.

なお、以上の説明に関して更に以下の付記を開示する。
（付記１）表示画面及び発光素子を有する被検査装置において、前記表示画面上に前記発光素子の発光色の並び順の情報又は発光色の数の情報を表示する表示工程と、
前記表示画面上に表示された情報に対応する方法で前記発光素子を発光させる発光工程と、
前記情報が表示された表示画面と、前記発光素子とを撮影する撮影工程と、
前記情報が表示された表示画面を撮影した結果と、前記発光素子を撮影した結果とを比較して、前記発光素子の検査を行う検査工程と、を含む検査方法。
（付記２）前記被検査装置は、複数の発光素子を有し、
前記表示工程では、前記複数の発光素子を全て発光させた場合の発光色の並び順の情報を表示し、
前記発光工程では、前記複数の発光素子を全て発光させることを特徴とする付記１に記載の検査方法。
（付記３）前記被検査装置は、複数の発光素子を有し、
前記表示工程では、前記複数の発光素子のうちの特定の発光素子を消灯したときの発光色の並び順の情報を表示し、
前記発光工程では、前記特定の発光素子以外の発光素子を発光させることを特徴とする付記１又は２に記載の検査方法。
（付記４）前記被検査装置は、多色発光可能な発光素子を有し、
前記表示工程では、特定の発光色を発光可能な発光素子の数の情報を表示し、
前記発光工程では、前記特定の発光色での発光が可能な発光素子を発光させることを特徴とする付記１〜３のいずれかに記載の検査方法。
（付記５）前記表示工程と前記発光工程は、同時に行われることを特徴とする付記１〜４のいずれかに記載の検査方法。
（付記６）表示画面及び発光素子を有する被検査装置の前記表示画面上に表示された前記発光素子の発光色の並び順の情報又は発光色の数の情報を撮影するとともに、前記表示画面上に表示された情報に対応する方法で発光させた前記発光素子を撮影する撮影装置と、
前記情報を撮影した結果と、前記発光素子を撮影した結果とを比較して、前記発光素子の検査を行う検査装置と、を備える検査システム。
（付記７）前記被検査装置は、複数の発光素子を有し、
前記複数の発光素子を全て発光させた場合の発光色の並び順の情報を表示するとともに、前記複数の発光素子を全て発光することを特徴とする付記６に記載の検査システム。
（付記８）前記被検査装置は、複数の発光素子を有し、
前記複数の発光素子のうちの特定の発光素子を消灯したときの発光色の並び順の情報を表示するとともに、前記特定の発光素子以外の発光素子を発光することを特徴とする付記６又は７に記載の検査システム。
（付記９）前記被検査装置は、多色発光可能な発光素子を有し、
特定の発光色を発光可能な発光素子の数の情報を表示するとともに、前記特定の発光色での発光が可能な発光素子を発光することを特徴とする付記６〜８のいずれかに記載の検査システム。 In addition, the following additional notes are disclosed regarding the above description.
(Additional remark 1) In the to-be-inspected apparatus which has a display screen and a light emitting element, the display process which displays the information of the arrangement order of the light emission color of the said light emitting element, or the information of the number of light emission colors on the said display screen,
A light emitting step of causing the light emitting element to emit light in a method corresponding to the information displayed on the display screen;
A photographing step of photographing the display screen on which the information is displayed and the light emitting element;
An inspection method including an inspection step of inspecting the light emitting element by comparing a result of photographing the display screen on which the information is displayed and a result of photographing the light emitting element.
(Additional remark 2) The said to-be-inspected apparatus has a some light emitting element,
In the display step, information on the order of arrangement of emission colors when all of the plurality of light emitting elements emit light is displayed.
The inspection method according to appendix 1, wherein, in the light emitting step, all of the plurality of light emitting elements emit light.
(Additional remark 3) The said to-be-inspected apparatus has a some light emitting element,
In the display step, information on the arrangement order of emission colors when a specific light-emitting element among the plurality of light-emitting elements is turned off is displayed.
The inspection method according to appendix 1 or 2, wherein in the light emitting step, a light emitting element other than the specific light emitting element is caused to emit light.
(Additional remark 4) The said to-be-inspected apparatus has a light emitting element which can emit multicolor light,
In the display step, information on the number of light emitting elements capable of emitting a specific emission color is displayed,
4. The inspection method according to any one of appendices 1 to 3, wherein in the light emitting step, a light emitting element capable of emitting light in the specific emission color is caused to emit light.
(Additional remark 5) The said display process and the said light emission process are performed simultaneously, The inspection method in any one of Additional remark 1-4 characterized by the above-mentioned.
(Additional remark 6) While photographing the information of the arrangement order of the luminescent color of the said light emitting element displayed on the said display screen of the to-be-inspected apparatus which has a display screen and a light emitting element, or the information of the number of luminescent colors, on the said display screen A photographing device for photographing the light emitting element that emits light by a method corresponding to the information displayed on
An inspection system comprising: an inspection apparatus that inspects the light emitting element by comparing a result of photographing the information with a result of photographing the light emitting element.
(Additional remark 7) The said to-be-inspected apparatus has a some light emitting element,
The inspection system according to appendix 6, wherein information on an arrangement order of emission colors when all the plurality of light emitting elements are caused to emit light is displayed, and all the plurality of light emitting elements emit light.
(Additional remark 8) The said to-be-inspected apparatus has a some light emitting element,
Additional information 6 or 7 characterized by displaying information on an arrangement order of emission colors when a specific light-emitting element of the plurality of light-emitting elements is turned off, and emitting a light-emitting element other than the specific light-emitting element. Inspection system as described in.
(Additional remark 9) The said to-be-inspected apparatus has the light emitting element which can emit multicolor light,
The number of light emitting elements capable of emitting a specific light emission color is displayed, and the light emitting element capable of emitting light of the specific light emission color is caused to emit light. Inspection system.

１０ＰＣ（被検査装置）
１１〜１５ＬＥＤ（発光素子）
２０検査部（検査装置）
２４画面監視用カメラ（撮影装置）
２６ＬＥＤ検査用カメラ（撮影装置）
９３ディスプレイ（表示画面） 10 PC (device to be inspected)
11-15 LED (light emitting element)
20 Inspection Department (Inspection Equipment)
24 Screen surveillance camera (photographing device)
26 LED inspection camera (imaging device)
93 Display (display screen)

Claims

表示画面及び発光素子を有する被検査装置において、前記表示画面上に前記発光素子の発光色の並び順の情報又は発光色の数の情報を表示する表示工程と、
前記表示画面上に表示された情報に対応する方法で前記発光素子を発光させる発光工程と、
前記情報が表示された表示画面と、前記発光素子とを撮影する撮影工程と、
前記情報が表示された表示画面を撮影した結果と、前記発光素子を撮影した結果とを比較して、前記発光素子の検査を行う検査工程と、を含む検査方法。 In a device to be inspected having a display screen and a light emitting element, a display step of displaying on the display screen information on the arrangement order of the light emitting colors of the light emitting elements or information on the number of light emitting colors;
A light emitting step of causing the light emitting element to emit light in a method corresponding to the information displayed on the display screen;
A photographing step of photographing the display screen on which the information is displayed and the light emitting element;
An inspection method including an inspection step of inspecting the light emitting element by comparing a result of photographing the display screen on which the information is displayed and a result of photographing the light emitting element.

前記被検査装置は、複数の発光素子を有し、
前記表示工程では、前記複数の発光素子を全て発光させた場合の発光色の並び順の情報を表示し、
前記発光工程では、前記複数の発光素子を全て発光させることを特徴とする請求項１に記載の検査方法。 The inspected device has a plurality of light emitting elements,
In the display step, information on the order of arrangement of emission colors when all of the plurality of light emitting elements emit light is displayed.
The inspection method according to claim 1, wherein in the light emitting step, all of the plurality of light emitting elements emit light.

前記被検査装置は、複数の発光素子を有し、
前記表示工程では、前記複数の発光素子のうちの特定の発光素子を消灯したときの発光色の並び順の情報を表示し、
前記発光工程では、前記特定の発光素子以外の発光素子を発光させることを特徴とする請求項１又は２に記載の検査方法。 The inspected device has a plurality of light emitting elements,
In the display step, information on the arrangement order of emission colors when a specific light-emitting element among the plurality of light-emitting elements is turned off is displayed.
The inspection method according to claim 1, wherein in the light emitting step, a light emitting element other than the specific light emitting element is caused to emit light.

前記被検査装置は、多色発光可能な発光素子を有し、
前記表示工程では、特定の発光色を発光可能な発光素子の数の情報を表示し、
前記発光工程では、前記特定の発光色での発光が可能な発光素子を発光させることを特徴とする請求項１〜３のいずれか一項に記載の検査方法。 The inspected device has a light emitting element capable of emitting multicolor light,
In the display step, information on the number of light emitting elements capable of emitting a specific emission color is displayed,
The inspection method according to any one of claims 1 to 3, wherein in the light emitting step, a light emitting element capable of emitting light in the specific light emission color is caused to emit light.

表示画面及び発光素子を有する被検査装置の前記表示画面上に表示された前記発光素子の発光色の並び順の情報又は発光色の数の情報を撮影するとともに、前記表示画面上に表示された情報に対応する方法で発光させた前記発光素子を撮影する撮影装置と、
前記情報を撮影した結果と、前記発光素子を撮影した結果とを比較して、前記発光素子の検査を行う検査装置と、を備える検査システム。

The display screen and the light emitting element displayed on the display screen of the inspected apparatus having the light emitting element are photographed and the information on the order of the emission colors of the light emitting elements or the information on the number of the emission colors is displayed on the display screen. A photographing device for photographing the light emitting element that emits light by a method corresponding to information;
An inspection system comprising: an inspection apparatus that inspects the light emitting element by comparing a result of photographing the information with a result of photographing the light emitting element.