JP2020027320A - Monitoring device, monitoring system, and program - Google Patents

Abstract

To provide a monitoring device which allows you to realize that playground equipment for children of specific ages are being used by children who are not targeted children.SOLUTION: The present invention includes a processor 30, a registration unit 301, a recognition unit 302, a specification unit 303, a measurement unit 304, a determination unit 305, and a notification unit 306. A storage unit stores target ages determined for playground equipment. The specification unit specifies the ages of children who are using the playground equipment by using images of the place of the playground equipment taken by the imaging unit. The notification unit issues a warning when children who are using the playground equipment are not of the target ages.SELECTED DRAWING: Figure 5

Description

本発明は、監視装置、監視システム、及びプログラムに関する。   The present invention relates to a monitoring device, a monitoring system, and a program.

子供の行動を監視する技術が提案されている。特許文献１には、カメラによる新たな撮像データにおいて、子供が保護者と一緒に写っているか否かに応じて迷子度を変化させ、迷子度がしきい値に達するとアラームを発生することが記載されている。特許文献２には、幼児が監視領域の危険因子へ接近したことを検出すると、危険因子が存在と対処方法を指導するしつけ情報を提供することが記載されている。特許文献３には、保護者が屋上公園を撮影する監視カメラを操作し、公園内の子供の状況を画像で監視することが記載されている。   Techniques for monitoring child behavior have been proposed. Patent Literature 1 discloses that, in new imaging data obtained by a camera, the degree of lost child is changed depending on whether or not a child is shown together with a parent and an alarm is generated when the degree of lost child reaches a threshold. Has been described. Patent Literature 2 discloses that when detecting that an infant approaches a risk factor in a monitored area, the existence of the risk factor and provision of discipline information for instructing a coping method are provided. Patent Literature 3 describes that a guardian operates a surveillance camera for photographing a rooftop park and monitors the situation of children in the park with images.

特開２０１３−６９１２８号公報JP 2013-69128 A 特開２００４−７８３０４号公報JP-A-2004-78304 特開２００４−２６６４６４号公報JP-A-2004-266644

子供が遊ぶ遊具の中には、対象年齢が定められているものがある。このような遊具を対象年齢外の子供が利用すると、転送や転落等の事故に繋がる恐れがある。しかし、遊具を利用する子供自身も子供の監視者も、子供の年齢が遊具の対象年齢外であることに気付かない場合がある。
本発明は、対象年齢が定められた遊具を対象年齢外の子供が利用していることを気付かせることを目的とする。 Some playground equipment for children has a target age. If a child out of the target age uses such a playground equipment, an accident such as transfer or falling may occur. However, there is a case where neither the child who uses the playground equipment nor the child's monitor observes that the child's age is out of the target age of the playground equipment.
An object of the present invention is to make a child who is not a target age use a playground equipment whose target age is determined.

請求項１に係る発明は、遊具に対して定められた対象年齢を記憶する記憶部と、撮像部により撮影された前記遊具が設置された場所の画像を用いて、前記遊具を利用する子供の年齢を特定する特定部と、前記年齢が前記対象年齢に含まれない場合に、警告を報知する報知部とを備える監視装置である。   The invention according to claim 1 provides a storage unit for storing a target age determined for a playground equipment, and an image of a place where the playground equipment is installed, taken by an imaging unit, for a child using the playground equipment. A monitoring device comprising: a specifying unit that specifies an age; and a notifying unit that notifies a warning when the age is not included in the target age.

請求項２に係る発明は、請求項１に記載の監視装置において、前記記憶部は、前記遊具に対して定められた監視距離の範囲を記憶し、前記画像を用いて前記子供から前記子供の監視者までの距離を測定する測定部をさらに備え、前記報知部は、さらに前記距離が前記監視距離の範囲外である場合に、前記警告を報知する。   According to a second aspect of the present invention, in the monitoring device according to the first aspect, the storage unit stores a range of a monitoring distance defined for the playground equipment, and uses the image to display the range of the child from the child. The apparatus further includes a measurement unit that measures a distance to a monitoring person, and the notification unit further notifies the warning when the distance is out of the range of the monitoring distance.

請求項３に係る発明は、請求項２に記載の監視装置において、前記記憶部は、前記遊具に対して定められた猶予時間を記憶し、前記報知部は、前記距離が前記監視距離の範囲外である状態が前記猶予時間を超えて継続した場合には、前記警告を報知する。   According to a third aspect of the present invention, in the monitoring device according to the second aspect, the storage unit stores a grace period determined for the playground equipment, and the notifying unit determines that the distance is within the range of the monitoring distance. When the outside state continues beyond the grace time, the warning is notified.

請求項４に係る発明は、請求項１から３のいずれか１項に記載の監視装置において、前記画像から前記子供の顔画像を認識する認識部をさらに備え、前記特定部は、前記認識された顔画像を用いて前記年齢を特定する。   The invention according to a fourth aspect is the monitoring device according to any one of the first to third aspects, further comprising a recognition unit configured to recognize the face image of the child from the image, wherein the identification unit includes the recognition unit. The age is specified using the face image.

請求項５に係る発明は、請求項４に記載の監視装置において、前記特定部は、前記顔画像が認識されない場合には、前記画像から認識された前記子供の身体的な又は服装の特徴を用いて前記年齢を特定する。   According to a fifth aspect of the present invention, in the monitoring device according to the fourth aspect, in the case where the face image is not recognized, the identifying unit is configured to display a feature of the physical or clothing of the child recognized from the image. To determine the age.

請求項６に係る発明は、請求項４に記載の監視装置において、前記認識部は、前記画像から前記子供の監視者の顔画像を認識し、前記特定部は、前記子供の前記顔画像が認識されない場合には、前記監視者の前記顔画像を用いて前記年齢を特定する。   According to a sixth aspect of the present invention, in the monitoring device according to the fourth aspect, the recognizing unit recognizes a face image of the child monitor from the image, and the specifying unit determines that the face image of the child is If it is not recognized, the age is specified using the face image of the monitor.

請求項７に係る発明は、請求項４に記載の監視装置において、前記撮像部は、時系列に沿って複数の画像を撮影し、前記認識された顔画像に基づいて識別された前記子供を前記複数の画像において追跡する追跡部をさらに備える。   According to a seventh aspect of the present invention, in the monitoring device according to the fourth aspect, the imaging unit captures a plurality of images in chronological order and identifies the child identified based on the recognized face image. The image processing apparatus further includes a tracking unit that tracks the plurality of images.

請求項８に係る発明は、遊具に対して定められた対象年齢を記憶する記憶部と、前記遊具が設置された場所の画像を撮影する撮像部と、前記画像を用いて前記遊具を利用する子供の年齢を特定する特定部と、前記年齢が前記対象年齢に含まれない場合に、警告を報知する報知部とを備える監視システムである。   The invention according to claim 8 is a storage unit that stores a target age determined for a playground equipment, an imaging unit that captures an image of a place where the playground equipment is installed, and uses the playground equipment by using the image. A monitoring system comprising: a specifying unit that specifies a child's age; and a notifying unit that notifies a warning when the age is not included in the target age.

請求項９に係る発明は、コンピュータに、撮像部により撮影された遊具が設置された場所の画像を用いて、前記遊具を利用する子供の年齢を特定するステップと、記憶部に記憶された前記遊具に対して定められた対象年齢に前記年齢が含まれない場合に、警告を報知する報知部とを実行させるためのプログラムである。   The invention according to claim 9 is a computer, using an image of a place where the playground equipment is installed, photographed by an imaging unit, identifying an age of a child using the playground equipment, and storing the age in the storage unit. It is a program for executing a notifying unit for notifying a warning when the target age defined for the playground equipment does not include the age.

請求項１に係る発明によれば、対象年齢が定められた遊具を対象年齢外の子供が利用していることに気付くことができる。
請求項２に係る発明によれば、監視距離の範囲に子供の監視者が居ないことに気付くことができる。
請求項３に係る発明によれば、監視者が監視距離の範囲外に居る場合であっても、猶予時間内であれば、警告が報知されるのを防ぐことができる。
請求項４に係る発明によれば、子供の顔画像を用いずに年齢を特定する場合に比べて、子供の年齢を特定する精度が向上する。
請求項５に係る発明によれば、撮影された画像から子供の顔画像が認識されない場合でも、子供の年齢を特定することができる。
請求項６に係る発明によれば、撮影された画像から子供の顔画像が認識されない場合でも、子供の年齢を特定することができる。
請求項７に係る発明によれば、撮影された画像から子供の顔画像が認識されなくなった場合でも、子供の年齢を特定することができる。
請求項８に係る発明によれば、対象年齢が定められた遊具を対象年齢外の子供が利用していることに気付くことができる。
請求項９に係る発明によれば、対象年齢が定められた遊具を対象年齢外の子供が利用していることに気付くことができる。 According to the invention according to claim 1, it is possible to notice that a child out of the target age uses a playground equipment whose target age is determined.
According to the invention of claim 2, it is possible to notice that there is no child monitor in the range of the monitor distance.
According to the invention according to claim 3, even if the monitor is outside the range of the monitoring distance, the warning can be prevented from being notified within the grace period.
According to the invention according to claim 4, the accuracy of specifying the age of the child is improved as compared with the case where the age is specified without using the face image of the child.
According to the invention according to claim 5, the age of the child can be specified even when the face image of the child is not recognized from the captured image.
According to the invention according to claim 6, the age of the child can be specified even when the face image of the child is not recognized from the captured image.
According to the invention according to claim 7, the age of the child can be specified even when the face image of the child is no longer recognized from the captured image.
According to the invention according to claim 8, it is possible to notice that a child out of the target age uses a playground equipment whose target age is determined.
According to the ninth aspect of the present invention, it is possible to notice that a child out of the target age uses a playground equipment whose target age is determined.

実施形態に係る監視システム１の一例を示す図である。It is a figure showing an example of monitoring system 1 concerning an embodiment. 処理装置３０のハードウェア構成の一例を示す図である。FIG. 3 is a diagram illustrating an example of a hardware configuration of a processing device 30. 利用規則テーブル３３１の一例を示す図である。FIG. 7 is a diagram illustrating an example of a usage rule table 331. データベース３３２の一例を示す図である。FIG. 9 is a diagram illustrating an example of a database 332. 処理装置３０の機能構成の一例を示す図である。FIG. 2 is a diagram illustrating an example of a functional configuration of a processing device 30. 監視システム１の設置例を示す図である。FIG. 2 is a diagram illustrating an example of installation of the monitoring system 1. 入場処理の一例を示すフローチャートである。It is a flowchart which shows an example of an entrance process. 警告処理の一例を示すフローチャートである。It is a flowchart which shows an example of a warning process. 警告処理の一例を示すフローチャートである。It is a flowchart which shows an example of a warning process. 警告処理の一例を示すフローチャートである。It is a flowchart which shows an example of a warning process. 変形例に係る年齢推定テーブル３３３の一例を示す図である。It is a figure showing an example of age estimation table 333 concerning a modification. 変形例に係る処理装置３０の機能構成の一例を示す図である。FIG. 9 is a diagram illustrating an example of a functional configuration of a processing device 30 according to a modification. 変形例に係る監視システム１の設置例を示す図である。It is a figure showing an example of installation of monitoring system 1 concerning a modification.

１．構成
図１は、本実施形態に係る監視システム１の一例を示す図である。監視システム１は、遊具を利用する子供を監視するシステムである。 1. Configuration FIG. 1 is a diagram illustrating an example of a monitoring system 1 according to the present embodiment. The monitoring system 1 is a system that monitors a child using a playground equipment.

監視システム１は、複数の撮像装置１０と、複数の音出力装置２０と、処理装置３０とを備える。これらの装置は、通信回線４０を介して接続されている。通信回線４０は、これらの装置間の通信を伝送する。通信回線４０には、例えばＬＡＮ（Local Area Network）等のプライベートネットワークが用いられてもよい。   The monitoring system 1 includes a plurality of imaging devices 10, a plurality of sound output devices 20, and a processing device 30. These devices are connected via a communication line 40. The communication line 40 transmits communication between these devices. For the communication line 40, for example, a private network such as a LAN (Local Area Network) may be used.

撮像装置１０は、遊具が設置された場所の画像を撮影する。この画像は、時系列に沿って撮影された動画であってもよいし、時系列に沿って撮影された複数の静止画であってもよい。撮像装置１０には、例えばデジタルビデオカメラが用いられてもよい。デジタルビデオカメラは、光学系を用いて撮像素子上に像を結ばせることにより、動画を撮影して動画データに変換する。   The imaging device 10 captures an image of a place where the playground equipment is installed. This image may be a moving image taken in chronological order or a plurality of still images taken in chronological order. For example, a digital video camera may be used for the imaging device 10. A digital video camera captures a moving image by forming an image on an image sensor using an optical system, and converts the moving image into moving image data.

音出力装置２０は、処理装置３０の制御の下、予め定められた規則に従って遊具を利用していない子供に対して注意を促す音を出力する。音出力装置２０には、例えばスピーカが用いられてもよい。スピーカは、入力された音声信号を音に変換して空間に向けて発する。   The sound output device 20 outputs a sound that calls attention to a child who does not use the playground equipment according to a predetermined rule under the control of the processing device 30. As the sound output device 20, for example, a speaker may be used. The speaker converts the input audio signal into sound and emits the sound toward space.

処理装置３０は、撮像装置１０が撮影した画像を解析して、遊具を利用する子供を監視する処理を行う。処理装置３０は、子供が予め定められた規則に従って遊具を利用していない場合には、音出力装置２０を用いて警告を報知する。処理装置３０には、例えば汎用のコンピュータが用いられてもよい。   The processing device 30 performs a process of analyzing an image captured by the imaging device 10 and monitoring a child using the playground equipment. When the child does not use the playground equipment in accordance with a predetermined rule, the processing device 30 notifies the warning using the sound output device 20. For example, a general-purpose computer may be used as the processing device 30.

図２は、処理装置３０のハードウェア構成の一例を示す図である。処理装置３０は、プロセッサ３１と、メモリ３２と、ストレージ３３と、通信部３４と、操作部３５と、表示部３６とを備える。プロセッサ３１は、プログラムをメモリ３２に読み出して実行することにより、各種の処理を実行する。プロセッサ３１には、例えばＣＰＵ（Central Processing Unit）が用いられてもよい。メモリ３２は、プロセッサ３１により実行されるプログラムを記憶する。メモリ３２には、例えばＲＯＭ（Read Only Memory）及びＲＡＭ（Random Access Memory）が用いられてもよい。ストレージ３３は、各種のデータ及びプログラムを記憶する。このデータには、遊具の利用規則を示す利用規則テーブル３３１と、利用者情報を管理するデータベース３３２とが含まれる。ストレージ３３には、例えばハードディスクドライブ又はソリッドステートドライブが用いられてもよい。通信部３４は、通信回線４０に接続される通信インターフェースであり、通信回線４０を介してデータ通信を行う。操作部３５は、処理装置３０の操作に用いられる。操作部３５には、例えばマウス及びキーボードが用いられてもよい。表示部３６は、各種の情報を表示する。表示部３６には、例えば液晶ディスプレイが用いられてもよい。   FIG. 2 is a diagram illustrating an example of a hardware configuration of the processing device 30. The processing device 30 includes a processor 31, a memory 32, a storage 33, a communication unit 34, an operation unit 35, and a display unit 36. The processor 31 executes various processes by reading the program into the memory 32 and executing the program. For example, a CPU (Central Processing Unit) may be used as the processor 31. The memory 32 stores a program executed by the processor 31. As the memory 32, for example, a ROM (Read Only Memory) and a RAM (Random Access Memory) may be used. The storage 33 stores various data and programs. This data includes a usage rule table 331 indicating usage rules of play equipment, and a database 332 for managing user information. For the storage 33, for example, a hard disk drive or a solid state drive may be used. The communication unit 34 is a communication interface connected to the communication line 40, and performs data communication via the communication line 40. The operation unit 35 is used for operating the processing device 30. For the operation unit 35, for example, a mouse and a keyboard may be used. The display unit 36 displays various information. As the display unit 36, for example, a liquid crystal display may be used.

図３は、ストレージ３３に記憶された利用規則テーブル３３１の一例を示す図である。各遊具には、予め対象年齢が定められている。この対象年齢は、遊具を利用する対象となる子供の年齢である。対象年齢外の子供は、その遊具を利用することができない。また、遊具によっては、監視者による監視が必要であると予め定められているものがある。この監視者は、子供の保護者であってもよいし、保育所や幼稚園の先生であってもよい。監視者による監視が必要であると定められている場合、監視者がいないときは、子供はその遊具を利用することができない。   FIG. 3 is a diagram showing an example of the usage rule table 331 stored in the storage 33. The target age is set in advance for each playground equipment. The target age is the age of a child who is to use the playground equipment. Children outside the target age cannot use the playground equipment. Some playground equipment is determined in advance to require monitoring by a monitor. The observer may be a parent of the child or a teacher in a nursery or kindergarten. If it is determined that monitoring by a monitor is necessary, the child cannot use the playground equipment without the monitor.

例えば砂場５１には、１から３歳という対象年齢が定められている。ただし、砂場５１には、監視者による監視が必要であると定められていない。この場合、利用規則テーブル３３１には、図３に示すように、遊具名「砂場」に対応付けて、対象年齢「１から３歳」と、監視者による監視が「不要」であることを示す情報とが含まれる。ブランコ５２には、３から６歳という対象年齢が定められている。また、ブランコ５２には、監視者による監視が必要であると定められている。さらに、この監視は、基本的には子供から１ｍ以内の距離で行わなければならないが、１０秒以内であればこの距離が１ｍを超えても許容されることが定められている。この場合、利用規則テーブル３３１には、図３に示すように、遊具名「ブランコ」に対応付けて、対象年齢「３から６歳」と、監視者による監視が「必要」であることを示す情報と、監視距離の範囲「１ｍ以内」と、猶予時間「１０秒」とが含まれる。この監視距離の範囲には、例えば監視者が遊具を利用する子供を監視しているとみなすことができるような距離の範囲が用いられる。猶予時間には、例えば監視者が監視対象の子供から監視距離の範囲外に一時的に移動したとみなせるような時間が用いられる。監視距離の範囲及び猶予時間は、遊具によって異なってもよい。   For example, the sandbox 51 has a target age of 1 to 3 years. However, the sandbox 51 is not defined as requiring monitoring by a monitor. In this case, as shown in FIG. 3, the usage rule table 331 correlates with the playground equipment name "sandbox" and indicates that the target age is "1 to 3 years old" and that monitoring by the monitor is "unnecessary". Information. The swing 52 has a target age of 3 to 6 years. In addition, it is specified that the swing 52 requires monitoring by a monitor. Furthermore, this monitoring must basically be performed within a distance of 1 m from the child, but it is specified that if the distance is within 10 seconds, the distance may be greater than 1 m. In this case, as shown in FIG. 3, the usage rule table 331 indicates that the target age is "3 to 6 years old" and that the monitoring by the observer is "necessary" in association with the playground equipment name "swing". Information, a range of the monitoring distance “within 1 m”, and a grace time “10 seconds”. As the range of the monitoring distance, for example, a range of a distance that can be regarded as monitoring the child who uses the playground equipment is used. As the grace time, for example, a time is used in which the monitor can be considered to have temporarily moved out of the monitoring distance from the monitored child. The range of the monitoring distance and the grace time may be different depending on the play equipment.

図４は、ストレージ３３に記憶されたデータベース３３２の一例を示す図である。データベース３３２には、子供のＩＤ（Identification）と対応付けて、子供の顔画像を示す顔データと、この子供に対応する監視者の顔画像を示す顔データと、この子供の年齢とが含まれる。これらの情報は、例えば管理者により予め登録されてもよい。   FIG. 4 is a diagram illustrating an example of the database 332 stored in the storage 33. The database 332 includes, in association with the child's ID (Identification), face data indicating a child's face image, face data indicating a monitor's face image corresponding to the child, and the child's age. . These pieces of information may be registered in advance by, for example, an administrator.

図５は、処理装置３０の機能構成の一例を示す図である。処理装置３０は、登録部３０１と、認識部３０２と、特定部３０３と、測定部３０４と、判定部３０５と、報知部３０６とを有する。これらの機能は、メモリ３２に記憶されたプログラムと、このプログラムを実行するプロセッサ３１との協働により、プロセッサ３１が演算を行い又は通信部３４による通信を制御することにより実現される。   FIG. 5 is a diagram illustrating an example of a functional configuration of the processing device 30. The processing device 30 includes a registration unit 301, a recognition unit 302, a specification unit 303, a measurement unit 304, a determination unit 305, and a notification unit 306. These functions are realized by the processor 31 performing an operation or controlling the communication by the communication unit 34 in cooperation with the program stored in the memory 32 and the processor 31 executing the program.

登録部３０１は、データベース３３２に利用者情報を登録する。この利用者情報は、子供の年齢の特定に用いられる。この利用者情報には、例えば図４に示すように、子供のＩＤと、子供の顔画像を示す顔データと、監視者の顔画像を示す顔データと、子供の年齢とが含まれてもよい。   The registration unit 301 registers user information in the database 332. This user information is used to specify the age of the child. For example, as shown in FIG. 4, the user information may include a child ID, face data indicating a child's face image, face data indicating a monitor's face image, and a child's age. Good.

認識部３０２は、撮像装置１０が撮影した画像に含まれるオブジェクトを認識する。このオブジェクトには、人物の顔画像が含まれる。また、認識部３０２は、この画像から認識された顔画像に基づいて人物を識別する。この人物には、子供及び監視者が含まれてもよい。この顔画像を用いた識別は、顔認証とも呼ばれる。この識別は、例えば周知の顔認識技術を用いて、データベース３３２と照合することにより行われてもよい。   The recognition unit 302 recognizes an object included in an image captured by the imaging device 10. This object includes a face image of a person. Further, the recognition unit 302 identifies a person based on the face image recognized from the image. This person may include a child and a watcher. The identification using the face image is also called face authentication. This identification may be performed by collating with the database 332 using, for example, a well-known face recognition technique.

特定部３０３は、撮像装置１０が撮影した画像を用いて、遊具を利用する子供の年齢を特定する。この年齢の特定は、例えば認識部３０２による子供の識別結果とデータベース３３２とに基づいて行われてもよい。   The specifying unit 303 specifies the age of the child using the playground equipment, using the image captured by the imaging device 10. The identification of the age may be performed based on the identification result of the child by the recognition unit 302 and the database 332, for example.

測定部３０４は、撮像装置１０が撮影した画像を用いて、子供から子供の監視者までの距離を測定する。この距離の測定には、例えばステレオテレビジョン方式、ＴＯＦ（Time Of Flight）方式、パターン照射方式等、周知の方法が用いられてもよい。   The measurement unit 304 measures the distance from the child to the child's monitor using the image captured by the imaging device 10. For the measurement of the distance, a known method such as a stereo television system, a TOF (Time Of Flight) system, and a pattern irradiation system may be used.

判定部３０５は、子供が対象年齢の定められた遊具を利用している場合、特定部３０３が特定したその子供の年齢が対象年齢に含まれるか否かを判定する。また、判定部３０５は、子供が監視者による監視が必要な遊具を利用している場合、測定部３０４が測定したその子供から監視者までの距離が監視距離の範囲内であるか否かを判定する。これらの判定は、例えば利用規則テーブル３３１に基づいて行われてもよい。   When the child uses the playground equipment for which the target age is determined, the determination unit 305 determines whether or not the age of the child specified by the specifying unit 303 is included in the target age. When the child uses a playground equipment that requires monitoring by the monitor, the determination unit 305 determines whether the distance from the child to the monitor measured by the measurement unit 304 is within the range of the monitoring distance. judge. These determinations may be made, for example, based on the usage rule table 331.

報知部３０６は、子供の年齢が対象年齢に含まれないと判定された場合に、警告を報知する。また、報知部３０６は、子供から監視者までの距離が監視距離の範囲外であると判定された場合に、警告を報知する。この警告の報知は、例えば警告する音声を音出力装置２０から出力させることにより実現されてもよい。   The notification unit 306 notifies a warning when it is determined that the child's age is not included in the target age. The notification unit 306 notifies a warning when it is determined that the distance from the child to the monitor is outside the range of the monitor distance. The notification of the warning may be realized by, for example, causing the sound output device 20 to output a warning sound.

２．動作
図６は、監視システム１の設置例を示す図である。この例では、監視システム１は、幼稚園や保育所等の子供が居る場所５０に設置されている。この場所５０には、砂場５１と、ブランコ５２と、ジャングルジム５３とが設置された園庭と、管理者が居る事務所５４とが含まれる。この管理者は、例えば幼稚園や保育所の先生であってもよい。この例では、複数の撮像装置１０には、撮像装置１０Ａ及び１１０Ｂが含まれるものとする。撮像装置１０Ａは、場所５０の入口５５を含む範囲の画像を撮影し得る位置に設置されている。撮像装置１０Ｂは、園庭の画像を撮影し得る位置に設置されている。なお、撮像装置１０Ｂの数は、単数であってもよいし、複数であってもよい。処理装置３０は、事務所５４内に設置されている。また、この例では、複数の音出力装置２０には、音出力装置２０Ａから２０Ｄが含まれるものとする。音出力装置２０Ａ、２０Ｂ、２０Ｃは、それぞれ砂場５１、ブランコ５２、ジャングルジム５３を利用する子供が出力された音を聞こえるような位置に設置されている。音出力装置２０Ｄは、事務所５４内に設置されている。 2. Operation FIG. 6 is a diagram illustrating an example of installation of the monitoring system 1. In this example, the monitoring system 1 is installed in a place 50 where a child is present, such as a kindergarten or a nursery school. The place 50 includes a garden where a sandbox 51, a swing 52, a jungle gym 53 are installed, and an office 54 where a manager is located. This manager may be, for example, a teacher in a kindergarten or nursery school. In this example, it is assumed that the plurality of imaging devices 10 include the imaging devices 10A and 110B. The imaging device 10A is installed at a position where an image in a range including the entrance 55 of the place 50 can be captured. The imaging device 10B is installed at a position where an image of a garden can be taken. The number of imaging devices 10B may be singular or plural. The processing device 30 is installed in the office 54. Further, in this example, the plurality of sound output devices 20 include sound output devices 20A to 20D. The sound output devices 20A, 20B, and 20C are installed at positions where children using the sandbox 51, the swing 52, and the jungle gym 53 can hear the output sound. The sound output device 20D is installed in the office 54.

２．１．入場処理
図７は、入場処理の一例を示すフローチャートである。撮像装置１０Ａは、入口５５を含む範囲の画像を撮影し、その画像を示す画像データを処理装置３０に順次送信する。この入場処理は、子供又は監視者が入口５５から場所５０に入場したときに開始される。 2.1. Entrance processing FIG. 7 is a flowchart showing an example of the entrance processing. The imaging device 10A captures an image of a range including the entrance 55, and sequentially transmits image data indicating the image to the processing device 30. This entry process is started when a child or a supervisor enters the place 50 from the entrance 55.

ステップＳ１１では、認識部３０２において、撮像装置１０Ａから受信した画像データが示す画像から顔画像が認識される。図６に示す例では、子供５０１と子供５０１に同伴する監視者５０２とが入口５５から入場しているため、子供５０１の顔画像と監視者５０２の顔画像とが認識される。   In step S11, the recognition unit 302 recognizes a face image from the image indicated by the image data received from the imaging device 10A. In the example illustrated in FIG. 6, since the child 501 and the monitor 502 accompanying the child 501 enter from the entrance 55, the face image of the child 501 and the face image of the monitor 502 are recognized.

ステップＳ１２では、ステップＳ１１において認識された顔画像により識別される子供の利用者情報が、データベース３３２に登録されているか否かが判定される。図６に示す例では、子供５０１の顔画像を示す顔データと、図４に示すデータベース３３２に含まれる子供の顔データとが比較される。この比較は、顔データから抽出される特徴量を用いて行われてもよい。そして、子供５０１の顔データとの類似度が閾値よりも高い顔データがデータベース３３２に含まれる場合には、ステップＳ１１において認識された顔画像により識別される子供の利用者情報がデータベース３３２に含まれることを示すため、ステップＳ１２の判定はＹＥＳとなる。この場合、この処理は終了する。一方、子供５０１の顔データとの類似度が閾値よりも高い顔データがデータベース３３２に含まれない場合には、ステップＳ１１において認識された顔画像により識別される子供の利用者情報がデータベース３３２に含まれないことを示すため、ステップＳ１２の判定はＮＯとなる。この場合、この処理は次のステップＳ１３に進む。   In step S12, it is determined whether the user information of the child identified by the face image recognized in step S11 is registered in the database 332 or not. In the example illustrated in FIG. 6, the face data indicating the face image of the child 501 is compared with the face data of the child included in the database 332 illustrated in FIG. This comparison may be performed using a feature amount extracted from the face data. When the face data whose similarity to the face data of the child 501 is higher than the threshold is included in the database 332, the user information of the child identified by the face image recognized in step S11 is included in the database 332. Is determined, the determination in step S12 is YES. In this case, this processing ends. On the other hand, if the face data whose similarity to the face data of the child 501 is higher than the threshold is not included in the database 332, the user information of the child identified by the face image recognized in step S11 is stored in the database 332. In order to indicate that it is not included, the determination in step S12 is NO. In this case, the process proceeds to the next step S13.

ステップＳ１３では、登録部３０１において、入場した子供の利用者情報をデータベース３３２に登録する処理が行われる。例えばステップＳ１１において認識された子供５０１の顔画像を示す顔データと、監視者５０２の顔画像を示す顔データとが生成される。また、子供５０１を一意に識別するＩＤが付与される。さらに、管理者が操作部３５を用いて処理装置３０を操作することにより子供５０１の年齢が入力される。子供５０１の年齢は、例えば監視者５０２から管理者に伝えられてもよい。そして、図４に示すデータベース３３２に、ＩＤと、子供の顔データと、監視者の顔データと、子供の年齢とが対応付けて追加される。例えば、「０１０」というＩＤが付与され、「２歳」という年齢が入力された場合、図４に示すように、データベース３３２には、ＩＤ「０１０」と、子供５０１の顔データと、監視者５０２の顔データと、年齢「２歳」とが対応付けて追加される。   In step S <b> 13, the registration unit 301 performs a process of registering the user information of the entered child in the database 332. For example, face data indicating the face image of the child 501 recognized in step S11 and face data indicating the face image of the monitor 502 are generated. An ID for uniquely identifying the child 501 is given. Further, the age of the child 501 is input when the administrator operates the processing device 30 using the operation unit 35. The age of the child 501 may be transmitted from the monitor 502 to the administrator, for example. Then, the ID, the child's face data, the monitor's face data, and the child's age are added to the database 332 shown in FIG. 4 in association with each other. For example, when an ID “010” is given and an age “2 years old” is input, as shown in FIG. 4, the database 332 stores the ID “010”, the face data of the child 501, The face data 502 and the age “2 years old” are added in association with each other.

２．２．警告処理
図８から図１０は、処理装置３０が行う警告処理の一例を示すフローチャートである。撮像装置１０Ｂは、園庭の画像を撮影し、その画像を示す画像データを処理装置３０に順次送信する。この処理は、入場した子供がこれらの遊具の設置された領域に移動したときに開始される。 2.2. Warning Process FIGS. 8 to 10 are flowcharts illustrating an example of a warning process performed by the processing device 30. The imaging device 10B captures an image of the garden, and sequentially transmits image data indicating the image to the processing device 30. This process is started when the entered child moves to the area where these playground equipments are installed.

ステップＳ２１では、撮像装置１０Ｂから受信した画像データに基づいて、子供が遊具を利用しているか否かを判定する。具体的には、まず認識部３０２において、この画像データが示す画像から子供が検出される。この検出は、例えば周知の動体検出技術を用いて行われてもよい。動体検出技術を用いて検出された動体が子供であるか否かは、例えば動体の大きさに基づいて判定されてもよい。なお、以下の説明では、撮像装置１０Ｂから受信した画像データが示す画像を「撮影画像」という。続いて、撮影画像において検出された子供の位置が遊具から定められた範囲内であるか否かが判定される。全ての子供の位置が遊具から定められた範囲外である場合、いずれの子供も遊具を利用していないことを示すため、ステップＳ２１の判定がＮＯになる。この場合、再びステップＳ２１の処理が行われる。一方、図６に示す例では、撮影画像から子供５１１及び子供５２１が検出される。子供５１１、子供５２１の位置は、それぞれ砂場５１、ブランコ５２から定められた範囲内である。この場合、子供５１１、子供５２１がそれぞれ砂場５１、ブランコ５２を利用していることを示すため、ステップＳ２１の判定がＹＥＳになる。この場合、処理は次のステップＳ２２に進む。   In step S21, it is determined based on the image data received from the imaging device 10B whether or not the child uses the playground equipment. Specifically, first, the recognition unit 302 detects a child from the image represented by the image data. This detection may be performed using, for example, a known moving object detection technique. Whether or not the moving object detected using the moving object detection technology is a child may be determined based on, for example, the size of the moving object. In the following description, an image indicated by the image data received from the imaging device 10B is referred to as a “photographed image”. Subsequently, it is determined whether or not the position of the child detected in the captured image is within a range determined from the playground equipment. If all the children's positions are outside the range determined from the playground equipment, it means that none of the children use the playground equipment, and thus the determination in step S21 is NO. In this case, the process of step S21 is performed again. On the other hand, in the example shown in FIG. 6, the children 511 and 521 are detected from the captured image. The positions of the child 511 and the child 521 are within the range determined from the sandbox 51 and the swing 52, respectively. In this case, the determination in step S21 is YES to indicate that the child 511 and the child 521 are using the sandbox 51 and the swing 52, respectively. In this case, the process proceeds to the next step S22.

ステップＳ２２では、利用規則テーブル３３１を参照して、子供が利用している遊具について監視者による監視が必要であるか否かが判定される。具体的には、まず認識部３０２において、撮影画像から子供の利用している遊具が識別される。この遊具の識別は、例えば撮影画像から認識された遊具の形状に基づいて行われてもよいし、撮影画像中の遊具の位置に基づいて行われてもよい。図６に示す例では、子供５１１が利用している砂場５１と、子供５２１が利用しているブランコ５２とが識別される。図３に示す利用規則テーブル３３１において、「砂場」という遊具名には、監視者による監視が「不要」であることを示す情報が対応付けられている。この場合、砂場５１を利用する子供５１１の監視処理については、ステップＳ２２の判定がＮＯになり、処理はステップＳ３１に進む。   In step S22, with reference to the usage rule table 331, it is determined whether or not the monitoring device needs to monitor the playground equipment used by the child. Specifically, the recognizing unit 302 first identifies the playground equipment used by the child from the captured image. The identification of the playground equipment may be performed based on the shape of the playground equipment recognized from the captured image, for example, or may be performed based on the position of the playground equipment in the captured image. In the example shown in FIG. 6, the sandbox 51 used by the child 511 and the swing 52 used by the child 521 are identified. In the usage rule table 331 shown in FIG. 3, information indicating that monitoring by the observer is "unnecessary" is associated with the playground equipment name "sandbox". In this case, in the monitoring process of the child 511 using the sandbox 51, the determination in step S22 is NO, and the process proceeds to step S31.

図９に示すステップＳ３１では、データベース３３２を参照して、子供の年齢が特定される。具体的には、まず認識部３０２において、撮影画像から子供の顔画像が認識され、この顔画像に基づいて子供が識別される。続いて、特定部３０３において、データベース３３２にて、識別された子供のＩＤと対応付けられた年齢が特定される。図６に示す例では、子供５１１の顔画像が認識され、この顔画像を示す顔データと図４に示すデータベース３３２に含まれる子供の顔データとが比較される。この比較は、例えば、顔データから抽出される特徴量を用いて行われてもよい。例えば子供５１１の顔データと、ＩＤ「００１」と対応付けられた子供の顔データとの類似度が閾値より高い場合には、この「００１」というＩＤにより子供５１１が識別される。この場合、図４に示すデータベース３３２においてＩＤ「００１」と対応付けられた「０歳」という年齢が、子供５１１の年齢として特定される。   In step S31 shown in FIG. 9, the age of the child is specified with reference to the database 332. Specifically, first, the recognition unit 302 recognizes a child's face image from the captured image, and identifies the child based on the face image. Subsequently, in the identification unit 303, the age associated with the ID of the identified child is identified in the database 332. In the example illustrated in FIG. 6, the face image of the child 511 is recognized, and the face data indicating the face image is compared with the face data of the child included in the database 332 illustrated in FIG. This comparison may be performed using, for example, a feature value extracted from the face data. For example, when the similarity between the face data of the child 511 and the face data of the child associated with the ID “001” is higher than the threshold, the child 511 is identified by the ID “001”. In this case, the age “0” associated with the ID “001” in the database 332 illustrated in FIG. 4 is specified as the age of the child 511.

ステップＳ３２では、判定部３０５において、利用規則テーブル３３１を参照して、遊具を利用している子供の年齢がその遊具の対象年齢内であるか否かが判定される。図６に示す例では、図３に示す利用規則テーブル３３１において遊具名「砂場」と対応付けられた「１から３歳」が砂場５１の対象年齢になる。例えば子供５１１の年齢が砂場５１の対象年齢「１から３歳」に含まれる場合、ステップＳ３２の判定がＹＥＳになり、処理は終了する。一方、上述したように子供５１１の年齢が「０歳」である場合には、子供５１１の年齢は砂場５１の対象年齢「１から３歳」に含まれない。この場合、ステップＳ３２の判定がＮＯになり、処理はステップＳ３３に進む。   In step S32, the determination unit 305 refers to the usage rule table 331 to determine whether the age of the child using the play equipment is within the target age of the play equipment. In the example illustrated in FIG. 6, “1 to 3 years old” associated with the playground equipment name “sandbox” in the usage rule table 331 illustrated in FIG. 3 is the target age of the sandbox 51. For example, when the age of the child 511 is included in the target age “1 to 3 years” of the sandbox 51, the determination in step S32 is YES, and the process ends. On the other hand, when the age of the child 511 is “0” as described above, the age of the child 511 is not included in the target age “1 to 3” of the sandbox 51. In this case, the determination in step S32 is NO, and the process proceeds to step S33.

ステップＳ３３では、予め定められた規則に従って子供が遊具を利用していないことを警告する音声を示す音声信号が、その遊具に対応する位置に設置された音出力装置２０に報知部３０６から送信される。図６に示す例において、砂場５１の対象年齢外の子供５１１が砂場５１を利用している場合には、砂場５１に対応する位置に設置された音出力装置２０Ａに警告する音声を示す音声信号が送信される。これにより、音出力装置２０Ａから砂場５１で遊ぶ子供５１１に対して警告する音声が出力される。この音声は、例えば「この遊具では１歳から３歳の子供以外は遊ばないで下さい」という音声メッセージであってもよい。   In step S33, a sound signal indicating a sound warning that the child does not use the playground equipment according to a predetermined rule is transmitted from the notification unit 306 to the sound output device 20 installed at a position corresponding to the playground equipment. You. In the example illustrated in FIG. 6, when a child 511 outside the target age of the sandbox 51 uses the sandbox 51, an audio signal indicating a sound to warn the sound output device 20 </ b> A installed at a position corresponding to the sandbox 51. Is sent. As a result, a sound warning the child 511 playing in the sandbox 51 is output from the sound output device 20A. This voice may be, for example, a voice message saying, "Please do not play except for children 1 to 3 years old with this playground equipment".

また、図６に示す例では、上述したステップＳ２２において、砂場５１に加えて、ブランコ５２が識別される。図３に示す利用規則テーブル３３１において、「ブランコ」という遊具名には、監視者による監視が「必要」であることを示す情報が対応付けられている。したがって、ブランコ５２を利用する子供５２１の監視処理については、ステップＳ４１に進む。   In the example shown in FIG. 6, in addition to the sandbox 51, the swing 52 is identified in the above-described step S22. In the usage rule table 331 shown in FIG. 3, information indicating that monitoring by a monitor is "necessary" is associated with the playground equipment name "swing". Therefore, the process of monitoring the child 521 using the swing 52 proceeds to step S41.

図１０に示すステップＳ４１及びＳ４２の処理は、上述したステップＳ３１及びＳ３２と同様である。図６に示す例において、例えば子供５２１の顔画像から「００２」というＩＤにより子供５２１が識別されると、子供５２１の年齢として「３歳」という年齢が特定される。ブランコ５２の対象年齢は「３から６歳」であるため、子供５２１の年齢はブランコ５２の対象年齢に含まれる。この場合、上述したステップＳ４２の判定がＹＥＳになり、処理はステップＳ４３に進む。   The processes in steps S41 and S42 shown in FIG. 10 are the same as those in steps S31 and S32. In the example shown in FIG. 6, for example, when the child 521 is identified by the ID “002” from the face image of the child 521, the age of “3 years old” is specified as the age of the child 521. Since the target age of the swing 52 is “3 to 6 years”, the age of the child 521 is included in the target age of the swing 52. In this case, the determination in step S42 is YES, and the process proceeds to step S43.

ステップＳ４３では、利用規則テーブル３３１を参照して、子供から監視者までの距離が監視距離の範囲外である状態が猶予時間を超えて継続しているか否かが判定される。具体的には、まず認識部３０２において、子供の監視者が識別される。続いて測定部３０４において、撮影画像を用いて、子供の位置からその子供の監視者の位置までの距離が測定される。そして、判定部３０５において、利用規則テーブル３３１を参照して、測定された距離が監視距離の範囲外である状態が猶予時間を超えて継続しているか否かが判定される。図６に示す例では、図４に示すデータベース３３２から、「００２」というＩＤと対応付けられた監視者５２２の顔データが抽出される。続いて、抽出された顔データと、撮影画像から認識された顔画像を示す顔データとが比較される。この比較は、例えば顔データから抽出される特徴量を用いて行われてもよい。抽出された顔データは監視者５２２の顔データであるため、撮影画像から認識された監視者５２２の顔画像を示す顔データとの類似度が閾値より高くなる。これにより、撮影画像において監視者５２２が識別される。続いて、図６に示すように、子供５２１の位置から監視者５２２の位置までの距離Ｌ１が測定される。例えば距離Ｌ１が「１ｍ以内」である場合、又は距離Ｌ１が１ｍより大きい場合でも距離Ｌ１が１ｍより大きい状態が継続している時間が「１０秒」以内であるときは、ステップＳ４３の判定はＮＯになる。この場合、処理は終了する。一方、距離Ｌ１が１ｍより大きく、且つ、距離Ｌ１が１ｍより大きい状態が「１０秒」を超えて継続している場合には、ステップＳ４３の判定はＹＥＳになる。この場合、処理は次のステップＳ４４に進む。また、上述したステップＳ４２の判定がＮＯである場合にも、処理は次のステップＳ４４に進む。   In step S43, with reference to the usage rule table 331, it is determined whether or not the state in which the distance from the child to the monitoring person is outside the monitoring distance continues beyond the grace period. Specifically, first, in the recognition unit 302, a child monitor is identified. Subsequently, the measuring unit 304 measures the distance from the position of the child to the position of the monitor of the child using the captured image. Then, the determining unit 305 refers to the usage rule table 331 to determine whether or not the state in which the measured distance is out of the range of the monitoring distance continues beyond the grace period. In the example shown in FIG. 6, the face data of the monitor 522 associated with the ID “002” is extracted from the database 332 shown in FIG. Subsequently, the extracted face data is compared with face data indicating a face image recognized from the captured image. This comparison may be performed using, for example, a feature value extracted from face data. Since the extracted face data is the face data of the monitor 522, the similarity with the face data indicating the face image of the monitor 522 recognized from the captured image becomes higher than the threshold. Thereby, the monitor 522 is identified in the captured image. Subsequently, as shown in FIG. 6, a distance L1 from the position of the child 521 to the position of the monitor 522 is measured. For example, when the distance L1 is “within 1 m”, or when the time during which the state in which the distance L1 is longer than 1 m continues even if the distance L1 is longer than 1 m is within “10 seconds”, the determination in step S43 is made. It becomes NO. In this case, the process ends. On the other hand, when the state where the distance L1 is greater than 1 m and the distance L1 is greater than 1 m continues for more than “10 seconds”, the determination in step S43 is YES. In this case, the process proceeds to the next step S44. Also, if the determination in step S42 is NO, the process proceeds to the next step S44.

ステップＳ４４では、上述したステップＳ３３と同様に、子供が予め定められた規則に従って遊具を利用していないことを警告する音声を示す音声信号が、その遊具に対応する位置に設置された音出力装置２０に送信される。図６に示す例において、子供５２１が監視者５２２により監視されていない状態でブランコ５２を利用している場合には、これを警告する音声を示す音声信号がブランコ５２に対応する位置に設置された音出力装置２０Ｂに送信される。これにより、音出力装置２０Ｂからブランコ５２で遊ぶ子供５２１に対してこの音声が出力される。この音声は、例えば「この遊具では１人で遊ばないで下さい」という音声メッセージであってもよい。   In step S44, as in step S33 described above, a sound signal indicating a sound warning that the child does not use the playground equipment in accordance with a predetermined rule is output from a sound output device installed at a position corresponding to the playground equipment. 20. In the example illustrated in FIG. 6, when the child 521 uses the swing 52 in a state where the child 521 is not monitored by the monitor 522, an audio signal indicating a sound to warn the child is provided at a position corresponding to the swing 52. Is transmitted to the sound output device 20B. Thus, the sound is output from the sound output device 20B to the child 521 playing on the swing 52. This voice may be, for example, a voice message saying “Please do not play alone with this playground equipment”.

なお、上述した実施形態においては、本発明に係る「記憶部」、「撮像部」、「監視装置」として、それぞれ「ストレージ３３」、「撮像装置１０」、「処理装置３０」が用いられている。   In the above-described embodiment, “storage unit 33”, “imaging unit 10”, and “processing unit 30” are used as the “storage unit”, “imaging unit”, and “monitoring device” according to the present invention, respectively. I have.

以上説明した実施形態によれば、対象年齢外の子供が遊具を利用している場合には警告が報知されるため、監視者又は管理者は、対象年齢外の子供が遊具を利用していることに気付ける。また、監視者による監視が必要な遊具については、子供の監視距離の範囲内に監視者が居ない場合には警告が報知されるため、監視者又は管理者は、監視距離の範囲内に子供の監視者が居ないことに気付ける。このように、監視者又は管理者が定められた規則に従って子供が遊具を使用していないことに気付くことにより、例えば子供が遊具で転倒したり、遊具から転落したりする不慮の事故を未然に防ぐことに繋がる。さらに、監視者による監視が必要な遊具については、子供の監視距離の範囲内に監視者が居ない状態が猶予時間を超えて継続した場合に限り警告が報知されるため、監視者が監視距離の範囲外に居る場合であっても猶予時間内であれば、警告が報知されるのが防止される。さらに、データベース３３２に登録された年齢と、子供の顔画像を用いた識別結果とに基づいて子供の年齢が特定されるため、子供の年齢が精度よく特定される。   According to the embodiment described above, when a child outside the target age is using the playground equipment, a warning is notified. Therefore, the monitor or the manager uses a child outside the target age using the playground equipment. Notice that. In addition, for playground equipment that requires monitoring by a monitor, a warning is issued if the monitor is not within the range of the child's monitoring distance. Notice that there are no observers. In this way, the observer or the manager realizes that the child does not use the playground equipment in accordance with the prescribed rules, thereby preventing an accident such as a child falling down with the playground equipment or falling from the playground equipment. It leads to prevention. Furthermore, for playground equipment that requires monitoring by the observer, a warning is issued only when the state where the observer is not within the range of the child's monitoring distance continues beyond the grace period. Even if it is out of the range, if it is within the grace period, the warning is prevented from being notified. Further, since the age of the child is specified based on the age registered in the database 332 and the identification result using the face image of the child, the age of the child is specified with high accuracy.

３．変形例
上述した実施形態は、本発明の一例である。本発明は、上述した実施形態に限定されない。例えば上述した実施形態を以下のように変形してもよい。また、以下の２つ以上の変形例を組み合わせて実施してもよい。 3. Modifications The embodiment described above is an example of the present invention. The invention is not limited to the embodiments described above. For example, the above-described embodiment may be modified as follows. Further, two or more of the following modifications may be combined.

上述した実施形態において、子供の顔画像が認識されない場合には、子供の身体的な又は服装の特徴を用いて年齢が特定されてもよい。この変形例では、認識部３０２は、撮影画像から子供の身体的な又は服装の特徴を認識する。この身体的な特徴には、例えば身長が含まれる。服装の特徴には、例えば名札の色又は形状、帽子の色、衣服の色が含まれる。ストレージ３３には、例えば図１１に示すように、子供の身体的な又は服装の特徴と子供の推定年齢とを対応付けて記憶する年齢推定テーブル３３３が記憶される。特定部３０３は、子供の顔画像が識別されない場合には、年齢推定テーブル３３３を参照して、認識部３０２が認識した子供の身体的な又は服装の特徴を用いて年齢を特定する。例えば撮影画像から子供に付けられた名札の色がピンク色であると認識された場合を想定する。この場合、年齢推定テーブル３３３において「名札」及び「ピンク色」という特徴と対応付けられた「２歳」という推定年齢が、子供の年齢として特定されてもよい。他の例において撮影画像から子供か被っている帽子の色が緑色であると認識された場合を想定する。この場合、年齢推定テーブル３３３において「帽子」及び「緑色」という特徴と対応付けられた「３歳」という推定年齢が、子供の年齢として特定されてもよい。他の例において撮影画像から子供の衣服の色が黄色であると認識された場合を想定する。この場合、年齢推定テーブル３３３において「衣服」及び「水色」という特徴と対応付けられた「４歳」という推定年齢が、子供の年齢として特定されてもよい。他の例において撮影画像から子供の身長が１００ｃｍであると認識された場合を想定する。この場合、年齢推定テーブル３３３において「身長」及び「９０から１００ｃｍ」という特徴と対応付けられた「３歳」という推定年齢が、子供の年齢として特定されてもよい。この変形例において、子供の身体的な又は服装の特徴によっても子供の年齢が特定されない場合には、警告が報知されてもよい。この警告の報知は、例えば「事務所に行って顔画像の登録をして下さい」という音声を出力することにより実現されてもよい。この変形例によれば、撮影画像から子供の顔画像が認識されない場合でも、子供の年齢が特定される。   In the above-described embodiment, when the child's face image is not recognized, the age may be specified using the physical or clothing characteristics of the child. In this modification, the recognition unit 302 recognizes the physical or clothing characteristics of the child from the captured image. The physical characteristics include, for example, height. The characteristics of the clothes include, for example, the color or shape of the name tag, the color of the hat, and the color of the clothes. For example, as shown in FIG. 11, the storage 33 stores an age estimation table 333 that stores the physical or clothing characteristics of the child and the estimated age of the child in association with each other. When the face image of the child is not identified, the identifying unit 303 refers to the age estimation table 333 and identifies the age using the physical or clothing characteristics of the child recognized by the recognition unit 302. For example, it is assumed that a name tag attached to a child is recognized as pink in a captured image. In this case, the estimated age of “2 years old” associated with the features of “name tag” and “pink” in the age estimation table 333 may be specified as the age of the child. In another example, it is assumed that the color of the hat worn by the child is recognized as green from the captured image. In this case, the estimated age of “3 years old” associated with the features of “hat” and “green” in the age estimation table 333 may be specified as the age of the child. In another example, it is assumed that the color of the child's clothes is recognized as yellow from the captured image. In this case, the estimated age of “four years old” associated with the characteristics of “clothing” and “light blue” in the age estimation table 333 may be specified as the age of the child. In another example, it is assumed that the height of the child is recognized to be 100 cm from the captured image. In this case, the estimated age of “3 years old” associated with the characteristics of “height” and “90 to 100 cm” in the age estimation table 333 may be specified as the age of the child. In this modification, a warning may be issued if the child's age is not specified by the physical or clothing characteristics of the child. The notification of the warning may be realized, for example, by outputting a voice saying “Please go to the office and register the face image”. According to this modification, the age of the child is specified even when the child's face image is not recognized from the captured image.

上述した実施形態において、子供の顔画像が認識されない場合には、監視者の顔画像を認識することにより子供が識別されてもよい。この変形例では、認識部３０２は、撮影画像から監視者の顔画像を認識する。特定部３０３は、子供の顔画像が認識されない場合には、監視者の顔画像を用いてその監視者に対応する子供について予め登録された年齢を特定する。図６に示す例において、子供５２１の顔画像が認識されない場合には、撮影画像から監視者５２２の顔画像が認識される。この顔画像を示す顔データは、図４に示すデータベース３３２に含まれるＩＤ「００２」と対応付けられた監視者の顔データとの類似度が閾値より高くなる。この場合、ＩＤ「００２」と対応付けられた「３歳」という年齢が特定される。この変形例によれば、撮影画像から子供の顔画像が認識されない場合でも、子供の年齢が特定される。   In the embodiment described above, if the child's face image is not recognized, the child may be identified by recognizing the face image of the monitor. In this modification, the recognition unit 302 recognizes the face image of the monitoring person from the captured image. When the face image of the child is not recognized, the specifying unit 303 specifies the age registered in advance for the child corresponding to the monitor using the face image of the monitor. In the example illustrated in FIG. 6, when the face image of the child 521 is not recognized, the face image of the monitor 522 is recognized from the captured image. The face data indicating the face image has a similarity to the monitor face data associated with the ID “002” included in the database 332 illustrated in FIG. In this case, the age “3 years” associated with the ID “002” is specified. According to this modification, the age of the child is specified even when the child's face image is not recognized from the captured image.

上述した実施形態において、認識部３０２により識別された子供が追跡されてもよい。この変形例では、図１２に示すように、処理装置３０は、図５に示す機能に加えて追跡部３０７を有する。追跡部３０７は、撮像装置１０が時系列に沿って撮影した複数の画像において認識部３０２が識別した子供を追跡する。この追跡には、例えば周知の動体追跡技術が用いられてもよい。図６に示す例では、子供５１１、５２１が識別されると、子供５１１、５２１が移動してもそれぞれ追跡される。この場合、例えば子供５２１が撮像装置１０Ｂの死角に移動し、撮影画像から子供５２１の顔画像が認識されなくなっても、子供５１１のＩＤ「００２」から子供５２１の年齢として「３歳」が特定される。また、追従の精度を向上させるために、子供の属性情報を記憶し、この属性情報を用いて追従を行ってもよい。この属性情報には、例えば性別、身長、服装、色、又は髪型が含まれてもよい。さらに、撮影画像において複数の子供が障害物に隠れて顔画像が認識できない状態が定められた時間以上継続した場合には、警告が報知されてもよい。この変形例によれば、撮影画像から子供の顔画像が認識されなくなった場合でも、子供の年齢が特定される。   In the above-described embodiment, the child identified by the recognition unit 302 may be tracked. In this modification, as shown in FIG. 12, the processing device 30 has a tracking unit 307 in addition to the functions shown in FIG. The tracking unit 307 tracks a child identified by the recognition unit 302 in a plurality of images captured by the imaging device 10 in chronological order. For this tracking, for example, a well-known moving object tracking technique may be used. In the example shown in FIG. 6, when the children 511 and 521 are identified, the children 511 and 521 are respectively tracked even if they move. In this case, for example, even if the child 521 moves to the blind spot of the imaging device 10B and the face image of the child 521 is not recognized from the captured image, “3 years old” is specified as the age of the child 521 from the ID “002” of the child 511. Is done. In addition, in order to improve the tracking accuracy, attribute information of a child may be stored, and tracking may be performed using this attribute information. This attribute information may include, for example, gender, height, clothing, color, or hairstyle. Further, when a state in which a plurality of children are hidden by obstacles and cannot recognize a face image in a captured image continues for a predetermined time or more, a warning may be issued. According to this modification, the age of the child is specified even when the face image of the child is no longer recognized from the captured image.

上述した実施形態において、子供と子供の監視者の数の比率は、１対１に限定されない。この比率は、１対複数であってもよいし、複数対１であってもよい。例えば幼稚園又は保育所の先生が、複数の園児の監視者になってもよい。例えば図１３に示すように、監視者５３４が子供５３１、５３２、及び５３３の監視を行ってもよい。この場合、子供５３１から監視者５３４までの距離Ｌ１１及び子供５３２から監視者５３４までの距離Ｌ１２が、いずれもブランコ５２について定められた監視距離の範囲内である場合には、これらの子供５３１及び５３２に対して警告は報知されない。しかし、子供５３３から監視者５３４までの距離Ｌ１３がジャングルジム５３について定められた監視距離の範囲外である場合には、子供５３３に対して音出力装置２０Ｃから警告が報知されてもよい。また、この変形例において、１人の監視者が複数の子供を監視する場合、これらの子供が利用できる遊具が限定されてもよい。例えば、子供が定められた遊具を利用する場合に限り、監視者が複数の子供を監視しているとみなされてもよい。また、１人の監視者が監視できる子供の人数が限定されてもよい。例えば、１人の監視者から定められた範囲内にいる定められた人数の子供に限り、監視者がこれらの子供を監視しているとみなされてもよい。さらに、監視者には、一時的又は恒久的に子供の親兄弟、親戚、友人等の保護者とは別の代替者が含まれてもよい。この場合、データベース３３２には、代替者の顔画像を示す顔データが記憶される。代替者が一時的に登録される場合には、定められた時間が経過した後、データベース３３２から代替者の顔データが削除されてもよい。   In the embodiment described above, the ratio of the number of children and the number of child monitors is not limited to one to one. This ratio may be one to multiple or multiple to one. For example, a teacher at a kindergarten or nursery school may be the watcher of multiple children. For example, as shown in FIG. 13, the monitor 534 may monitor the children 531, 532, and 533. In this case, when the distance L11 from the child 531 to the monitor 534 and the distance L12 from the child 532 to the monitor 534 are both within the range of the monitoring distance defined for the swing 52, these children 531 and No warning is issued to 532. However, if the distance L13 from the child 533 to the monitor 534 is outside the range of the monitoring distance defined for the jungle gym 53, a warning may be issued to the child 533 from the sound output device 20C. In this modification, when one observer monitors a plurality of children, the playground equipment that these children can use may be limited. For example, only when a child uses a predetermined playground equipment, the observer may be regarded as monitoring a plurality of children. Further, the number of children that can be monitored by one monitor may be limited. For example, only a defined number of children within a defined range from a single monitor may be considered as being monitored by the monitor. In addition, the watchers may include temporary or permanent alternatives to their parents, such as siblings, relatives, and friends of the child. In this case, the database 332 stores face data indicating a face image of the substitute. When the substitute is temporarily registered, the face data of the substitute may be deleted from the database 332 after a predetermined time has elapsed.

上述した実施形態において、子供の危険度に応じて警告の仕方が変化してもよい。この危険度は、例えば子供の年齢が対象年齢内であるという第１条件と、子供が監視者により監視されているという第２条件とのうち、充足する条件に応じて設定されてもよい。例えば第１条件だけを満たさない場合には、危険度が「低」に設定されてもよい。第２条件だけを満たさない場合には、危険度が「中」に設定されてもよい。第１条件と第２条件とを両方とも満たさない場合には、危険度が「高」に設定されてもよい。他の例において、危険度は、条件を満たさない程度に応じて設定されてもよい。例えば子供の年齢と対象年齢との差が大きい程、高い危険度が設定されてもよい。他の例において、子供から監視者までの距離が大きい程、又は子供から監視者までの距離が監視距離の範囲外である状態が継続する時間が長い程、高い危険度が設定されてもよい。そして、このように設定された危険度に応じて音声の出力先が変化してもよい。例えば、危険度が「低」である場合には、上述した実施形態と同様に、遊具に対応する位置に設置された音出力装置２０Ａから２０Ｃのいずれかから音声が出力されてもよい。危険度が「中」である場合には、園庭に設置された全ての音出力装置２０Ａ、２０Ｂ、及び２０Ｃから音声が出力されてもよい。危険度が「高」である場合には、これらの音出力装置２０Ａから２０Ｃに加えて、事務所５４に設置された音出力装置２０Ｄから音声が出力されてもよい。他の例において、危険度に応じて出力される音声の音量が変化してもよい。例えば危険度が高くなる程、出力される音声の音量が大きくなってもよい。他の例において、危険度に応じて出力される音が変化してもよい。例えば、危険度が「低」である場合には、上述した実施形態と同様に、音声メッセージだけが出力されてもよい。一方、危険度が「中」又は「高」である場合には、音声メッセージに加えて警告音が出力されてもよい。   In the above-described embodiment, the warning method may be changed according to the degree of danger of the child. This degree of risk may be set, for example, according to a first condition that the child is within the target age and a second condition that the child is being monitored by the monitor, which is satisfied. For example, when only the first condition is not satisfied, the risk may be set to “low”. When only the second condition is not satisfied, the risk may be set to “medium”. When both the first condition and the second condition are not satisfied, the risk level may be set to “high”. In another example, the degree of risk may be set according to the degree of not satisfying the condition. For example, the higher the difference between the child's age and the target age, the higher the risk may be set. In another example, a higher risk may be set as the distance from the child to the monitor becomes larger, or as the time period in which the distance from the child to the monitor is outside the range of the monitoring distance continues becomes longer. . Then, the output destination of the sound may be changed according to the degree of risk set as described above. For example, when the degree of danger is “low”, a sound may be output from any of the sound output devices 20A to 20C installed at positions corresponding to the playground equipment, as in the above-described embodiment. When the risk is “medium”, sound may be output from all the sound output devices 20A, 20B, and 20C installed in the garden. When the risk is “high”, a sound may be output from the sound output device 20D installed in the office 54 in addition to the sound output devices 20A to 20C. In another example, the volume of the output sound may change according to the degree of danger. For example, as the degree of danger increases, the volume of the output sound may increase. In another example, the output sound may change according to the degree of danger. For example, when the risk is “low”, only the voice message may be output as in the above-described embodiment. On the other hand, if the risk is “medium” or “high”, a warning sound may be output in addition to the voice message.

上述した実施形態において、入場処理は、必ずしも子供が場所５０に入場したときに行われなくてもよい。例えば入場処理は、子供が場所５０に入場した後、園庭に移動する前に行われてもよい。   In the above-described embodiment, the entrance processing does not necessarily have to be performed when the child enters the place 50. For example, the entrance process may be performed after the child enters the place 50 and before moving to the garden.

上述した実施形態において、子供の年齢によって監視者による監視の要否が変わってもよい。例えば、３から６歳の子供には監視者による監視が必要であると定められている場合を想定する。この場合、この遊具で遊ぶ子供の年齢が３から６歳である場合には、監視者による監視が必要であると判定されてもよい。一方、この遊具で遊ぶ子供の年齢が６歳よりも大きい場合には、監視者による監視が不要であると判定されてもよい。なお、遊具には、必ずしも対象年齢が定められていなくてもよい。場所５０に設置された遊具には、対象年齢が定められていない遊具が含まれていてもよい。   In the above-described embodiment, the necessity of monitoring by the monitor may vary depending on the age of the child. For example, assume that a child between the ages of 3 and 6 is required to be monitored by a monitor. In this case, if the child playing with the play equipment is 3 to 6 years old, it may be determined that monitoring by a monitor is necessary. On the other hand, when the age of the child playing with this playground equipment is larger than six years, it may be determined that monitoring by the monitor is unnecessary. Note that the target age does not necessarily have to be set for the playground equipment. The playground equipment installed at the place 50 may include a playground equipment whose target age is not determined.

上述した実施形態において、処理装置３０とは異なる外部装置に、利用規則テーブル３３１、データベース３３２、又は年齢推定テーブル３３３が記憶されていてもよい。この外部装置は、通信回線４０を介して処理装置３０に接続されている。例えば外部装置は、クラウドコンピューティングを利用してデータの保存サービスを提供するクラウドサーバであってもよい。この場合、処理装置３０は、通信回線４０を介して外部装置に記憶された利用規則テーブル３３１、データベース３３２、又は年齢推定テーブル３３３にアクセスすることにより、上述した入場処理及び警告処理を行ってもよい。   In the embodiment described above, the usage rule table 331, the database 332, or the age estimation table 333 may be stored in an external device different from the processing device 30. This external device is connected to the processing device 30 via a communication line 40. For example, the external device may be a cloud server that provides a data storage service using cloud computing. In this case, the processing device 30 may access the usage rule table 331, the database 332, or the age estimation table 333 stored in the external device via the communication line 40 to perform the above-described entrance processing and warning processing. Good.

上述した実施形態において、警告を報知する方法は、音声の出力に限定されない。例えば発光又は画像の表示により警告が報知されてもよい。この場合、音出力装置２０に代えて、発光装置又は表示装置が用いられてもよい。   In the above-described embodiment, the method of issuing a warning is not limited to audio output. For example, a warning may be given by emitting light or displaying an image. In this case, a light emitting device or a display device may be used instead of the sound output device 20.

上述した実施形態において、場所５０は、幼稚園や保育所に限定されない。場所５０は、例えば公園やプール等、子供が利用する遊具が設置された場所であればどこでもよい。   In the embodiment described above, the place 50 is not limited to a kindergarten or a nursery school. The place 50 may be any place where a playground equipment used by children is installed, such as a park or a pool.

上述した実施形態において、撮像装置１０は、プリント機能、スキャン機能、コピー機能、ファクシミリ機能等の複数の機能を有する画像処理装置に設けられており、この画像処理装置から取り外して使用されてもよい。   In the above-described embodiment, the imaging device 10 is provided in an image processing device having a plurality of functions such as a print function, a scan function, a copy function, and a facsimile function, and may be detached from the image processing device and used. .

監視システム１において行われる処理のステップは、上述した実施形態で説明した例に限定されない。この処理のステップは、矛盾のない限り、入れ替えられてもよい。また、本発明は、監視システム１において行われる処理のステップを備える方法として提供されてもよい。   The steps of the processing performed in the monitoring system 1 are not limited to the example described in the above embodiment. The steps of this process may be interchanged as long as there is no inconsistency. In addition, the present invention may be provided as a method including steps of processing performed in the monitoring system 1.

本発明は、撮像装置１０、処理装置３０、又は音出力装置２０において実行されるプログラムとして提供されてもよい。このプログラムは、インターネットなどの通信回線を介してダウンロードされてもよいし、磁気記録媒体（磁気テープ、磁気ディスクなど）、光記録媒体（光ディスクなど）、光磁気記録媒体、半導体メモリなどの、コンピュータが読取可能な記録媒体に記録した状態で提供されてもよい。   The present invention may be provided as a program executed in the imaging device 10, the processing device 30, or the sound output device 20. This program may be downloaded via a communication line such as the Internet, or may be a computer such as a magnetic recording medium (such as a magnetic tape or a magnetic disk), an optical recording medium (such as an optical disk), a magneto-optical recording medium, or a semiconductor memory. May be provided in a state recorded on a readable recording medium.

１：監視システム、１０：撮像装置、２０：音出力装置、３０：処理装置、３１：プロセッサ、３２：メモリ、３３：ストレージ、３４：通信部、３５：操作部、３６：表示部、３０１：登録部、３０２：認識部、３０３：特定部、３０４：測定部、３０５：判定部、３０６：報知部、３０７：追跡部 1: monitoring system, 10: imaging device, 20: sound output device, 30: processing device, 31: processor, 32: memory, 33: storage, 34: communication unit, 35: operation unit, 36: display unit, 301: Registration unit, 302: recognition unit, 303: identification unit, 304: measurement unit, 305: determination unit, 306: notification unit, 307: tracking unit

Claims (9)

遊具に対して定められた対象年齢を記憶する記憶部と、
撮像部により撮影された前記遊具が設置された場所の画像を用いて、前記遊具を利用する子供の年齢を特定する特定部と、
前記年齢が前記対象年齢に含まれない場合に、警告を報知する報知部と
を備える監視装置。 A storage unit for storing a target age determined for the playground equipment,
Using an image of a place where the playground equipment is taken by an imaging unit, a specification unit that specifies the age of a child using the playground equipment,
And a notifying unit that notifies a warning when the age is not included in the target age. 前記記憶部は、前記遊具に対して定められた監視距離の範囲を記憶し、
前記画像を用いて前記子供から前記子供の監視者までの距離を測定する測定部をさらに備え、
前記報知部は、さらに前記距離が前記監視距離の範囲外である場合に、前記警告を報知する
請求項１に記載の監視装置。 The storage unit stores a range of a monitoring distance determined for the playground equipment,
The image processing apparatus further includes a measurement unit that measures a distance from the child to the child's supervisor using the image,
The monitoring device according to claim 1, wherein the notification unit further notifies the warning when the distance is out of the range of the monitoring distance. 前記記憶部は、前記遊具に対して定められた猶予時間を記憶し、
前記報知部は、前記距離が前記監視距離の範囲外である状態が前記猶予時間を超えて継続した場合には、前記警告を報知する
請求項２に記載の監視装置。 The storage unit stores a grace time determined for the playground equipment,
The monitoring device according to claim 2, wherein the notification unit notifies the warning when the state in which the distance is out of the range of the monitoring distance continues beyond the grace time. 前記画像から前記子供の顔画像を認識する認識部をさらに備え、
前記特定部は、前記認識された顔画像を用いて前記年齢を特定する
請求項１から３のいずれか１項に記載の監視装置。 A recognition unit that recognizes the child's face image from the image,
The monitoring device according to any one of claims 1 to 3, wherein the specification unit specifies the age using the recognized face image. 前記特定部は、前記顔画像が認識されない場合には、前記画像から認識された前記子供の身体的な又は服装の特徴を用いて前記年齢を特定する
請求項４に記載の監視装置。 The monitoring device according to claim 4, wherein, when the face image is not recognized, the specifying unit specifies the age using physical or clothing characteristics of the child recognized from the image. 前記認識部は、前記画像から前記子供の監視者の顔画像を認識し、
前記特定部は、前記子供の前記顔画像が認識されない場合には、前記監視者の前記顔画像を用いて前記年齢を特定する
請求項４に記載の監視装置。 The recognition unit recognizes a face image of the child monitor from the image,
The monitoring device according to claim 4, wherein the identification unit identifies the age using the face image of the monitor when the face image of the child is not recognized. 前記撮像部は、時系列に沿って複数の画像を撮影し、
前記認識された顔画像に基づいて識別された前記子供を前記複数の画像において追跡する追跡部をさらに備える
請求項４に記載の監視装置。 The imaging unit captures a plurality of images in chronological order,
The monitoring device according to claim 4, further comprising a tracking unit that tracks the child identified based on the recognized face image in the plurality of images. 遊具に対して定められた対象年齢を記憶する記憶部と、
前記遊具が設置された場所の画像を撮影する撮像部と、
前記画像を用いて前記遊具を利用する子供の年齢を特定する特定部と、
前記年齢が前記対象年齢に含まれない場合に、警告を報知する報知部と
を備える監視システム。 A storage unit for storing a target age determined for the playground equipment,
An imaging unit that captures an image of a place where the playground equipment is installed,
A specifying unit that specifies the age of a child who uses the playground equipment by using the image,
And a notifying unit that notifies a warning when the age is not included in the target age. コンピュータに、
撮像部により撮影された遊具が設置された場所の画像を用いて、前記遊具を利用する子供の年齢を特定するステップと、
記憶部に記憶された前記遊具に対して定められた対象年齢に前記年齢が含まれない場合に、警告を報知する報知部と
を実行させるためのプログラム。 On the computer,
Using an image of the place where the playground equipment is installed and taken by the imaging unit, identifying the age of the child using the playground equipment,
And a notifying unit for notifying a warning when the target age set for the playground equipment stored in the storage unit does not include the age.

Images