JP2023161801A - Supervising system, supervising method and program - Google Patents

Abstract

To enable enhancing accuracy of supervision accompanied by continuity of the supervision.SOLUTION: A supervising system is configured to: convert sensor activity data based on output of a sensor detecting a supervision object as an object into text activity data; determine an object activity targeted for supervision on the basis of the text activity data; count the number of times in which an activity of the text activity data corresponding to the determined object activity of the text activity data an activity data storage unit stores has been performed during a unit period; transmit a report reporting on the activity in which a count value is greater than or equal to a threshold to a supervisor terminal; and cause an object activity determination model to be machine-learned so that a content of feedback information indicative of whether the activity the report reports is necessary is reflected on a determination result of the object activity.SELECTED DRAWING: Figure 8

Description

本発明は、看視システム、看視方法、及びプログラムに関する。 The present invention relates to a monitoring system, a monitoring method, and a program.

生活使用機器・設備の使用状況を検出した検出データを蓄積し、蓄積された検出データに基づいて監視対象者の生活行動パターンを登録し、検出データと登録された生活行動パターンとを比較した結果に基づいて、異常の検出を行うようにされた技術が知られている（例えば、特許文献１参照）。 The results of accumulating detection data that detects the usage status of appliances and facilities used in daily life, registering the lifestyle behavior patterns of the person to be monitored based on the accumulated detection data, and comparing the detected data and the registered lifestyle behavior patterns. A technique is known that detects an abnormality based on the following (see, for example, Patent Document 1).

特開２００４－１３３７７７号公報Japanese Patent Application Publication No. 2004-133777

看視対象者をセンサにより看視する看視システムとして、例えば看視を継続していく過程において、看視の精度が高められていくことが好ましい。 In a monitoring system that monitors a person to be monitored using a sensor, it is preferable that the accuracy of monitoring is improved, for example, in the process of continuing monitoring.

そこで、本発明は、看視の継続に伴って看視の精度を高めることができるようにすることを目的とする。 Therefore, an object of the present invention is to make it possible to improve the precision of monitoring as the monitoring continues.

上述した課題を解決する本発明の一態様は、看視対象者を対象として所定の事象の検出を行うように設けられるセンサの出力により示される前記看視対象者の行動であるセンサ行動データをテキストに変換することにより、テキスト行動データを取得する変換部と、前記テキスト行動データを記憶する行動データ記憶部と、所定の行動が所定の単位期間において行われる回数に対する閾値を含む参照行動情報を記憶する参照行動情報記憶部と、前記変換部により取得された前記テキスト行動データに基づいて看視の対象とする対象行動を決定する対象行動決定部と、看視対象者に対応して前記行動データ記憶部が記憶するテキスト行動データのうちで、前記対象行動決定部により決定された対象行動に該当するテキスト行動データについて、当該テキスト行動データが示す行動が前記単位期間において行われた回数をカウントするカウント部と、前記カウント部によるカウント値が閾値以上の行動に関して報告するレポートを、前記看視対象者を看視する看視者の看視者端末に送信するレポート処理部と、前記レポートが報告する行動についての要否を示すフィードバック情報の内容が前記対象行動決定部の決定結果に反映されるように、前記対象行動決定部を学習させる学習処理部とを備える看視システムである。 One aspect of the present invention for solving the above-mentioned problems is to collect sensor behavior data, which is the behavior of the person to be watched, as indicated by the output of a sensor that is provided to detect a predetermined event with respect to the person to be watched. a conversion unit that obtains text behavior data by converting it into text; a behavior data storage unit that stores the text behavior data; and reference behavior information that includes a threshold for the number of times a predetermined behavior is performed in a predetermined unit period. a reference behavior information storage unit for storing reference behavior information; a target behavior determining unit that determines a target behavior to be monitored based on the text behavior data acquired by the conversion unit; Among the text behavior data stored in the data storage unit, the number of times the behavior indicated by the text behavior data is performed in the unit period is counted for the text behavior data that corresponds to the target behavior determined by the target behavior determination unit. a counting unit that transmits a report regarding an action for which the count value by the counting unit is equal to or greater than a threshold value to a viewer terminal of a viewer who watches the person to be monitored; The monitoring system includes a learning processing unit that causes the target behavior determining unit to learn so that the content of feedback information indicating whether or not the behavior to be reported is necessary is reflected in the determination result of the target behavior determining unit.

本発明の一態様は、看視システムにおける看視方法であって、看視対象者を対象として所定の事象の検出を行うように設けられるセンサの出力により示される前記看視対象者の行動であるセンサ行動データをテキストに変換することにより、テキスト行動データを取得する変換ステップと、前記変換ステップにより取得された前記テキスト行動データに基づいて看視の対象とする対象行動を決定する対象行動決定ステップと、看視対象者に対応して行動データ記憶部が記憶するテキスト行動データのうちで、前記対象行動決定ステップにより決定された対象行動に該当するテキスト行動データについて、当該テキスト行動データが示す行動が、参照行動情報記憶部に記憶される参照行動情報により示される単位期間において行われた回数をカウントするカウントステップと、前記カウントステップによるカウント値が前記参照行動情報記憶部に記憶される参照行動情報により示される閾値以上の行動に関して報告するレポートを、前記看視対象者を看視する看視者の看視者端末に送信するレポート処理ステップと、前記レポートが報告する行動についての要否を示すフィードバック情報の内容が前記対象行動決定ステップの決定結果に反映されるように、前記対象行動決定ステップに対応する機械学習モデルを学習させる学習処理ステップとを含む看視方法である。 One aspect of the present invention is a monitoring method in a monitoring system, wherein the behavior of the person to be watched is indicated by the output of a sensor provided to detect a predetermined event with respect to the person to be watched. a conversion step of acquiring text behavior data by converting certain sensor behavior data into text; and a target behavior determination step of determining a target behavior to be monitored based on the text behavior data acquired in the conversion step. step, and among the text behavior data stored in the behavior data storage unit corresponding to the person to be monitored, the text behavior data corresponds to the target behavior determined in the target behavior determination step, the text behavior data indicates. a counting step of counting the number of times an action is performed in a unit period indicated by reference action information stored in a reference action information storage unit; and a reference step in which a count value from the counting step is stored in the reference action information storage unit. a report processing step of transmitting a report reporting on behavior exceeding a threshold value indicated by behavior information to a viewer terminal of a viewer who watches the person to be watched; and whether or not the behavior reported in the report is necessary. This monitoring method includes a learning processing step of learning a machine learning model corresponding to the target behavior determining step so that the content of feedback information indicating the target behavior determining step is reflected in the determination result of the target behavior determining step.

本発明の一態様は、看視システムにおけるコンピュータを、看視対象者を対象として所定の事象の検出を行うように設けられるセンサの出力により示される前記看視対象者の行動であるセンサ行動データをテキストに変換することにより、テキスト行動データを取得する変換部、前記変換部により取得された前記テキスト行動データに基づいて看視の対象とする対象行動を決定する対象行動決定部、看視対象者に対応して行動データ記憶部が記憶するテキスト行動データのうちで、前記対象行動決定部により決定された対象行動に該当するテキスト行動データについて、当該テキスト行動データが示す行動が、参照行動情報記憶部に記憶される参照行動情報により示される単位期間において行われた回数をカウントするカウント部、前記カウント部によるカウント値が前記参照行動情報記憶部に記憶される参照行動情報により示される閾値以上の行動に関して報告するレポートを、前記看視対象者を看視する看視者の看視者端末に送信するレポート処理部、前記レポートが報告する行動についての要否を示すフィードバック情報の内容が前記対象行動決定部の決定結果に反映されるように、前記対象行動決定部を学習させる学習処理部として機能させるためのプログラムである。 One aspect of the present invention provides sensor behavior data, which is the behavior of the person being watched, indicated by the output of a sensor that is configured to cause a computer in the monitoring system to detect a predetermined event with respect to the person being watched. a conversion unit that acquires text behavior data by converting the text into text; a target behavior determination unit that determines a target behavior to be monitored based on the text behavior data acquired by the conversion unit; and a target behavior to be monitored. Among the text behavior data stored in the behavior data storage unit corresponding to the person, regarding the text behavior data that corresponds to the target behavior determined by the target behavior determination unit, the behavior indicated by the text behavior data is the reference behavior information. a counting unit that counts the number of times performed in a unit period indicated by reference behavior information stored in a storage unit, the count value by the counting unit being greater than or equal to a threshold value indicated by the reference behavior information stored in the reference behavior information storage unit; a report processing unit that transmits a report reporting on the behavior of the person to be watched to a viewer terminal of a watcher who watches the person to be watched; This is a program for causing the target behavior determining unit to function as a learning processing unit that causes the target behavior determining unit to learn so as to be reflected in the determination result of the target behavior determining unit.

本発明によれば、看視の継続に伴って看視の精度を高めることができるようになるとの効果が得られる。 According to the present invention, it is possible to obtain the effect that the accuracy of monitoring can be improved as monitoring continues.

本実施形態に係る看視システムの全体的な構成例を示す図である。1 is a diagram showing an example of the overall configuration of a monitoring system according to the present embodiment. 本実施形態に係る看視サーバの機能構成例を示す図である。It is a figure showing an example of functional composition of a monitoring server concerning this embodiment. 本実施形態に係るユーザ情報の一例を示す図である。It is a figure showing an example of user information concerning this embodiment. 本実施形態に係る緊急事態登録情報の一例を示す図である。It is a figure showing an example of emergency situation registration information concerning this embodiment. 本実施形態に係る行動データの一例を示す図である。It is a figure showing an example of behavior data concerning this embodiment. 本実施形態に係る参照行動情報の一例を示す図である。It is a figure showing an example of reference behavior information concerning this embodiment. 本実施形態に係る看視サーバが看視対象者の看視に関連して実行する処理手順例を示すフローチャートである。It is a flowchart which shows the example of a process procedure which the monitoring server based on this embodiment performs in connection with monitoring of a monitoring target person. 本実施形態に係る看視者端末と看視サーバとが、対象行動決定モデルを更新させるための処理手順例を示すフローチャートである。12 is a flowchart illustrating an example of a processing procedure for the viewer terminal and the monitoring server according to the present embodiment to update the target behavior determination model.

＜実施形態＞
図１は、本実施形態の看視システムの全体的な構成例を示している。同図の看視システム、生活空間ＨＳにて居住する看視対象者Ｐの日常生活における行動を検出し、検出した行動に応じて、看視者Ｗが使用する看視者端末２００に報知を行うようにされる。看視者Ｗは、看視対象者Ｐの親族、あるいは介護担当者等であってよい。また、看視対象者Ｐを対象として検出された行動に応じて、看視対象者Ｐ自身の端末に報知が行われるようにしてよい。 <Embodiment>
FIG. 1 shows an example of the overall configuration of a monitoring system according to this embodiment. The monitoring system shown in the figure detects the daily life behavior of the person to be monitored P who resides in the living space HS, and sends a notification to the viewer terminal 200 used by the viewer W according to the detected behavior. be made to do. The watcher W may be a relative of the person to be watched P, a person in charge of care, or the like. Further, depending on the behavior detected for the person to be watched P, notification may be made to the terminal of the person to be watched P himself.

生活空間ＨＳにおいては、１以上のセンサ１０が設けられる。センサ１０は、看視対象者Ｐの生活空間ＨＳでの所定の生活行動に対応する事象として、それぞれ異なる事象を検出する。
具体的に、センサ１０のうちにはカメラが含まれてよい。カメラとしてのセンサ１０は、生活空間ＨＳにおける居間、玄関、キッチン、寝室など各所に設けられてよい。カメラとしてのセンサ１０は、撮像により得られた画像を検出情報として出力してよい。 In the living space HS, one or more sensors 10 are provided. The sensor 10 detects different events as events corresponding to predetermined living activities of the person to be monitored P in the living space HS.
Specifically, the sensor 10 may include a camera. The sensor 10 as a camera may be installed in various places in the living space HS, such as the living room, the entrance, the kitchen, and the bedroom. The sensor 10 as a camera may output an image obtained by imaging as detection information.

また、センサ１０は、生活空間ＨＳにおいて備えられる設備における所定の動作や状態を検出するものであってよい。例えば、このようなセンサ１０としては、部屋の照明器具の点灯・消灯・照度等の状態を検出するものであってよい。また、このようなセンサ１０としては、水道の蛇口の開閉状態を検出するようなものであってもよい。また、このようなセンサ１０としては、ドア、扉、引き戸等の開閉状態を検出するようなものであってもよい。また、コンロなどに備えられ着火状態、火力等を検出するものであってもよい。また、センサ１０は、冷蔵庫、エアコンディショナ等の電化製品であってもよい。
また、センサ１０は、例えばスマートフォン、スマートウォッチ、メガネ型のデバイスなどのように看視対象者Ｐとともに移動する携帯型端末やウェアラブルデバイス等も含まれてよい。
また、センサ１０には、看視対象者Ｐの体温を測定する感熱センサ等が含まれてよい。また、センサ１０には、床や寝床等に設けられて看視対象者Ｐによる荷重を検出する荷重センサ等が設けられてよい。 Moreover, the sensor 10 may detect a predetermined operation or state of equipment provided in the living space HS. For example, such a sensor 10 may be one that detects the states of lighting fixtures in a room, such as turning on, turning off, and illuminance. Moreover, such a sensor 10 may be one that detects the open/closed state of a water faucet. Moreover, such a sensor 10 may be one that detects the open/closed state of a door, a door, a sliding door, or the like. Alternatively, it may be installed in a stove or the like to detect the ignition state, firepower, etc. Further, the sensor 10 may be an electrical appliance such as a refrigerator or an air conditioner.
The sensor 10 may also include a portable terminal or wearable device that moves with the person to be monitored P, such as a smartphone, a smart watch, a glasses-type device, or the like.
Further, the sensor 10 may include a heat-sensitive sensor that measures the body temperature of the person P to be monitored. Further, the sensor 10 may be provided with a load sensor or the like that is installed on the floor, bed, or the like to detect the load exerted by the person to be monitored P.

センサ１０のそれぞれが検出して得られた検出情報は、ゲートウェイ２０からネットワークを経由して看視サーバ１００に送信される。センサ１０から看視サーバ１００に送信される検出情報には、対応の看視対象者Ｐを一意に示す看視対象者ＩＤが含まれる。 Detection information obtained by detection by each of the sensors 10 is transmitted from the gateway 20 to the monitoring server 100 via the network. The detection information transmitted from the sensor 10 to the monitoring server 100 includes a monitoring target person ID that uniquely indicates the corresponding monitoring target person P.

看視サーバ１００は、センサ１０から送信される検出情報に基づいて、看視対象者Ｐの看視に対応する処理を実行する。
同図においては１の看視対象者Ｐに対応する生活空間ＨＳのセンサ１０が示されているが、看視サーバ１００は、複数の看視対象者Ｐごとに対応するセンサ１０からの検出情報の送信に対応し、複数の看視対象者Ｐごとの看視に応じた処理を実行可能とされてよい。 The monitoring server 100 executes processing corresponding to monitoring of the person to be monitored P based on the detection information transmitted from the sensor 10.
In the figure, the sensor 10 of the living space HS corresponding to one monitoring target P is shown, but the monitoring server 100 collects detection information from the sensor 10 corresponding to each of the multiple monitoring targets P. In response to the transmission of , it may be possible to execute processing according to the monitoring of each of the plurality of persons P to be monitored.

看視サーバ１００は、センサ１０から送信される検出情報に基づいて、看視対象者Ｐに緊急事態が生じたか否かを判定する。判定対象となる緊急事態は、予め定義されていてよい。看視サーバ１００は、緊急事態が発生したと判定した場合、看視対象者Ｐに緊急事態が発生したことの通知を、当該看視対象者Ｐに対応する看視者Ｗの看視者端末２００に送信するようにされる。これにより、看視者Ｗは、看視対象者Ｐから離れた場所にいるような状況においても、看視対象者Ｐに緊急事態の生じたことを把握し、即座に対応することができる。 The monitoring server 100 determines whether an emergency situation has occurred in the person to be monitored P based on the detection information transmitted from the sensor 10. The emergency situation to be determined may be defined in advance. When the monitoring server 100 determines that an emergency situation has occurred, the monitoring server 100 sends a notification that an emergency situation has occurred to the monitoring target person P to the viewer terminal of the viewer W corresponding to the monitoring target person P. 200. Thereby, even in a situation where the viewer W is far away from the person to be watched P, the viewer W can understand that an emergency situation has occurred with the person to be watched P, and can respond immediately.

また、看視サーバ１００は、緊急事態が発生していないと判定される平常状態においては、センサ１０から送信される検出情報に基づく行動データ（センサ行動データ）を生成する。センサ行動データは、例えば１つには、「キッチンで蛇口から水を出して食器を洗う」といったように看視対象者Ｐの行動パターンを示す情報である。
看視サーバ１００は、行動データを、看視対象者Ｐごとに蓄積（記憶）する。看視サーバ１００は、行動データを蓄積するにあたり、センサ行動データをテキストに変換したテキスト行動データを蓄積する。 Furthermore, the monitoring server 100 generates behavior data (sensor behavior data) based on detection information transmitted from the sensor 10 in a normal state where it is determined that no emergency situation has occurred. The sensor behavior data is, for example, information indicating the behavior pattern of the person to be monitored P, such as "washing dishes by running water from the faucet in the kitchen."
The monitoring server 100 accumulates (memorizes) behavior data for each person P to be monitored. When accumulating behavior data, the monitoring server 100 accumulates text behavior data obtained by converting sensor behavior data into text.

看視サーバ１００は、蓄積された行動データを用いて、看視対象者Ｐについての看視結果のレポートを作成し、作成したレポートを看視者端末２００に送信する。
レポートにより報告される看視結果の内容としては、例えば、緊急事態までには至らないが、例えば身体的または精神的フレイルの兆候があると判断される、あるいはフレイルに該当すると判断した看視対象者Ｐの行動を提示するものであってよい。 The monitoring server 100 uses the accumulated behavior data to create a report of the monitoring results for the person to be monitored P, and transmits the created report to the viewer terminal 200.
The contents of the monitoring results reported in the report include, for example, although it does not reach the level of an emergency, it is determined that there are signs of physical or mental frailty, or that the monitored subject is judged to be frail. It may be something that presents the behavior of the person P.

また、看視サーバ１００から看視者端末２００へのレポートの送信は、例えば電子メールの送信として行われてもよいし、看視者端末２００に導入される看視アプリケーションにて表示されるレポート画面の送信であってもよい。
このようなレポートが定期的に看視者端末２００に送信されることで、看視者Ｗは、看視対象者Ｐの状況を的確に把握することが可能になる。 Further, the report may be sent from the monitoring server 100 to the viewer terminal 200, for example, by sending an e-mail, or the report may be displayed on a monitoring application installed on the viewer terminal 200. It may also be a screen transmission.
By periodically transmitting such a report to the viewer terminal 200, the viewer W can accurately grasp the situation of the person to be watched P.

看視対象者Ｐごとに個人差があることから、レポートにより報告することが求められる内容についても、看視対象者Ｐごとに異なってくる。例えば同じ行動が行われた場合に、或る看視対象者Ｐの場合には報告する必要性があるが、別の看視対象者Ｐの場合には特に問題にはならないので報告する必要性がないといったことが生じる。
そこで、本実施形態における看視サーバ１００は、送信されたレポートの内容を確認した看視者Ｗが、看視者端末２００を用いて、レポートされた行動についての要否を指定し、指定された行動の要否を示すフィードバック情報を看視サーバ１００に送信可能とされている。
看視サーバ１００は、送信されたフィードバック情報に基づいて、対象の看視対象者のレポートにより報告する必要のある行動と必要の無い行動とを学習し、必要のある行動に限定してレポートで報告を行っていくようにされる。
このようにして学習が行われていくことで、看視対象者Ｐごとに対応して報告が必要なものが記述されるレポートを提供することができる。この結果、本実施形態においては、看視対象者Ｐの看視の継続に伴って、看視の精度を高めていくことが可能となる。 Since there are individual differences among each person P to be monitored, the content required to be reported in a report also differs for each person P to be monitored. For example, if the same behavior is performed, there is a need to report it in the case of a certain person being monitored P, but there is no need to report it in the case of another person P, as there is no particular problem. It happens that there is no one.
Therefore, the monitoring server 100 in this embodiment allows the viewer W who has confirmed the contents of the transmitted report to use the viewer terminal 200 to specify whether or not the reported behavior is necessary. It is possible to send feedback information to the monitoring server 100 indicating whether or not a certain action is necessary.
Based on the sent feedback information, the monitoring server 100 learns the behaviors that need to be reported and the behaviors that are unnecessary in the report of the target person to be monitored, and reports only the behaviors that are necessary. Reports will be made.
By learning in this way, it is possible to provide a report that describes what needs to be reported for each person P to be monitored. As a result, in this embodiment, it becomes possible to improve the accuracy of monitoring as the monitoring target person P continues to be monitored.

図２は、本実施形態の看視サーバ１００の機能構成例を示している。同図の看視サーバ１００は、通信部１０１、制御部１０２、及び記憶部１０３を備える。
通信部１０１は、ネットワーク経由で通信を行う部位である。通信部１０１は、ゲートウェイ２０を介してセンサ１０と通信し、看視者端末２００と通信することができる。 FIG. 2 shows an example of the functional configuration of the monitoring server 100 of this embodiment. The monitoring server 100 in the figure includes a communication section 101, a control section 102, and a storage section 103.
The communication unit 101 is a part that performs communication via a network. The communication unit 101 can communicate with the sensor 10 and the viewer terminal 200 via the gateway 20.

制御部１０２は、看視サーバ１００における各種の制御を実行する。制御部１０２は、緊急事態判定部１２１、変換部１２２、対象行動決定部１２３、カウント部１２４、レポート処理部１２５、及び学習処理部１２６を備える。 The control unit 102 executes various controls in the monitoring server 100. The control unit 102 includes an emergency situation determination unit 121, a conversion unit 122, a target behavior determination unit 123, a counting unit 124, a report processing unit 125, and a learning processing unit 126.

緊急事態判定部１２１は、通信部１０１が１の看視対象者Ｐに対応する生活空間ＨＳのセンサ１０から受信した検出情報に基づく行動データを取得する。一例として、緊急事態判定部１２１は、例えば生活空間ＨＳにおける住宅内のキッチンに設けられたカメラとしてのセンサ１０が検出情報として出力した撮像画像データから、看視対象者Ｐがキッチンにて調理のために行動している様子の撮像画像データを抽出して行動データとして取得することができる。
緊急事態判定部１２１は、取得した行動データと、緊急事態登録情報記憶部１３２が記憶する緊急事態登録情報において緊急事態であるとして登録された事象とを照合する。緊急事態判定部１２１は、照合結果に基づいて、取得した行動データにおいて示される行動が緊急事態に該当するか否かを判定する。
緊急事態に該当すると判定した場合、緊急事態判定部１２１は、緊急事態が発生したことの通知（緊急事態発生通知）を、対応の看視者端末２００に送信する。緊急事態発生通知には、例えば行動データとして取得した撮像画像データを併せて送信してよい。 The emergency situation determination unit 121 acquires behavior data based on the detection information that the communication unit 101 receives from the sensor 10 of the living space HS corresponding to one person P to be monitored. As an example, the emergency situation determination unit 121 determines whether the person to be monitored P is cooking in the kitchen based on captured image data output as detection information by the sensor 10, which is a camera installed in the kitchen of a house in the living space HS. It is possible to extract captured image data of a person taking action and obtain it as behavior data.
The emergency situation determination unit 121 compares the acquired behavioral data with an event registered as an emergency situation in the emergency situation registration information stored in the emergency situation registration information storage unit 132. The emergency situation determination unit 121 determines whether the behavior indicated in the acquired behavior data corresponds to an emergency situation based on the comparison result.
If it is determined that the situation corresponds to an emergency situation, the emergency situation determination unit 121 transmits a notification that an emergency situation has occurred (an emergency situation occurrence notification) to the corresponding viewer terminal 200. For example, captured image data acquired as behavior data may be sent together with the emergency situation notification.

変換部１２２は、センサ１０の検出情報に基づく行動データをテキストに変換する処理（テキスト変換）を実行する。テキスト変換によって、例えば文章構造により行動を示す行動データ（テキスト行動データ）が得られる。
一例として、変換部１２２は、洗面所にて手を洗った看視対象者Ｐが、水栓装置のレバーを開けたままとしている様子の撮像画像データによる行動データを対象として画像認識処理を行い、「手洗いの後に水栓装置を止め忘れる」といったテキストを生成するようしてテキスト変換を行ってよい。
さらに、変換部１２２は、テキスト変換により得られたテキスト行動データから、行動に関する特徴を示すタグを生成し、生成したタグをテキスト行動データに付与する。例えば、変換部１２２は、上記の「手洗いの後に水栓装置を止め忘れる」とのテキストの場合には、「＃手洗い」、「＃水栓装置」、「＃止め忘れ」のタグを生成するようにされてよい。このように生成されたタグがテキスト行動データに付与されることで、テキスト行動データの検索を効率良く行うことができる。具体的に、「止め忘れ」を検索キーとして検索を行うことで、「手洗いの後に水栓装置を止め忘れる」、「ガスコンロを止め忘れる」といったように「＃止め忘れ」のタグが付与されたテキスト行動データをまとめて検索できる。 The conversion unit 122 executes a process of converting behavioral data based on information detected by the sensor 10 into text (text conversion). Through text conversion, behavior data (text behavior data) indicating behavior by, for example, a sentence structure is obtained.
As an example, the conversion unit 122 performs image recognition processing on behavioral data based on captured image data of a person to be monitored P who washes his hands in a washroom and leaves the lever of a faucet device open. , "I forget to turn off the faucet after washing my hands" may be converted into text.
Further, the converting unit 122 generates a tag indicating a characteristic regarding the behavior from the text behavior data obtained by text conversion, and adds the generated tag to the text behavior data. For example, in the case of the above text "I forget to turn off the faucet after washing my hands," the conversion unit 122 generates tags such as "#handwashing,""#faucet," and "#forgetting to turn off the faucet."It's okay to be like that. By adding the tag generated in this manner to the text behavior data, it is possible to efficiently search for the text behavior data. Specifically, by performing a search using "forgetting to turn off" as a search key, tags such as "#forgetting to turn off" such as "forgetting to turn off the faucet after washing hands" and "forgetting to turn off the gas stove" were added. Text behavior data can be searched all at once.

対象行動決定部１２３は、レポートの作成にあたり、対象の看視対象者Ｐに対応して行動データ記憶部１３３に記憶（蓄積）された行動データが示す行動のうちから、レポートへの記述が可能な行動（対象行動）を決定する処理を実行する。このような対象行動は、カウント部１２４がカウント対象とする行動となる。対象行動は、例えば緊急事態までには至らないが、通常とは異なっており、看視対象者Ｐの経過観察を行うにあたり留意しておくべき行動が該当する。
対象行動決定部１２３は、例えば或る単位期間において１の看視対象者Ｐに対応して蓄積される行動データ（テキスト行動データ）群と、行動対象として選択されるべき行動データとの関係を機械学習させることで構築した機械学習モデルを用いることができる。
また、対象行動決定部１２３は、対象行動の決定結果を出力するにあたり、変換部１２２により得られるのと同じ形式のテキスト行動データとして出力してよい。 When creating a report, the target behavior determining unit 123 can write in the report from among the behaviors indicated by the behavior data stored (accumulated) in the behavior data storage unit 133 corresponding to the target person P to be monitored. Execute processing to determine the appropriate behavior (target behavior). Such target behavior becomes a behavior that is counted by the counting unit 124. The target behavior corresponds to, for example, a behavior that does not lead to an emergency situation, but is different from normal behavior and should be kept in mind when performing a follow-up observation of the person P to be monitored.
For example, the target behavior determining unit 123 determines the relationship between a group of behavior data (text behavior data) accumulated corresponding to one monitoring target P in a certain unit period and behavior data to be selected as a behavior target. A machine learning model built by machine learning can be used.
Furthermore, when outputting the determination result of the target behavior, the target behavior determination unit 123 may output it as text behavior data in the same format as that obtained by the conversion unit 122.

カウント部１２４は、対象行動決定部１２３により決定された対象行動のそれぞれについて単位期間において得られた回数をカウントする。また、カウント部１２４は、対象行動ごとにカウントした回数について、参照行動情報記憶部１３４が記憶する対応の対象行動について設定された閾値と比較する。 The counting unit 124 counts the number of times each target behavior determined by the target behavior determining unit 123 is obtained in a unit period. Further, the counting unit 124 compares the number of times counted for each target behavior with a threshold value set for the corresponding target behavior stored in the reference behavior information storage unit 134.

レポート処理部１２５は、レポート処理として、レポートを作成し、作成したレポートを看視者端末２００に送信する。レポート処理部１２５は、レポートの作成にあたり、カウント部１２４によりカウントされた回数が閾値以上であった対象行動をレポートに記述するようにしてレポートを作成する。 As report processing, the report processing unit 125 creates a report and transmits the created report to the viewer terminal 200. When creating the report, the report processing unit 125 creates the report by describing in the report the target behavior for which the number of times counted by the counting unit 124 is equal to or greater than the threshold value.

前述のように、看視者端末２００は、受信したレポートにおいて記述されている行動についての要否を示すフィードバック情報を看視サーバ１００に送信することができる。
学習処理部１２６は、送信されたフィードバック情報が示す行動についての要否が反映されるように対象行動決定部１２３を学習させる。 As described above, the viewer terminal 200 can transmit feedback information indicating whether or not the action described in the received report is necessary to the monitoring server 100.
The learning processing unit 126 causes the target behavior determining unit 123 to learn so that the necessity of the behavior indicated by the transmitted feedback information is reflected.

記憶部１０３は、看視サーバ１００に対応する各種の情報を記憶する。記憶部１０３は、ユーザ情報記憶部１３１、緊急事態登録情報記憶部１３２、行動データ記憶部１３３、及び参照行動情報記憶部１３４を備える。 The storage unit 103 stores various information corresponding to the monitoring server 100. The storage unit 103 includes a user information storage unit 131 , an emergency registration information storage unit 132 , a behavior data storage unit 133 , and a reference behavior information storage unit 134 .

ユーザ情報記憶部１３１は、ユーザ情報を記憶する。ここでのユーザは、看視対象者Ｐと看視者Ｗとを含む概念であってよい。 The user information storage unit 131 stores user information. The user here may be a concept that includes the person to be watched P and the person watching W.

緊急事態登録情報記憶部１３２は、緊急事態登録情報を記憶する。緊急事態登録情報は、緊急事態として定義される行動を登録した情報である。 The emergency situation registration information storage unit 132 stores emergency situation registration information. The emergency situation registration information is information in which actions defined as an emergency situation are registered.

行動データ記憶部１３３は、レポート作成のために蓄積すべき、看視対象者Ｐごとの行動データを記憶する。行動データ記憶部１３３が記憶する行動データは、変換部１２２によりテキストに変換されたことによって得られるテキスト行動データであってよい。 The behavior data storage unit 133 stores behavior data for each person P to be monitored, which should be accumulated for report creation. The behavior data stored in the behavior data storage unit 133 may be text behavior data obtained by being converted into text by the conversion unit 122.

参照行動情報記憶部１３４は、参照行動情報を記憶する。参照行動情報は、看視対象者Ｐについて想定し得るものとして定義した行動ごとに、カウント部がカウントした回数との比較対象とする閾値を示した情報である。 The reference behavior information storage unit 134 stores reference behavior information. The reference behavior information is information indicating, for each behavior defined as a possible behavior of the person to be monitored P, a threshold value to be compared with the number of times counted by the counting unit.

図３は、１ユーザ（ここでの「ユーザ」は、看視対象者Ｐと対応の看視者Ｗを含む概念である）に対応してユーザ情報記憶部１３１が記憶するユーザ情報の一例を示している。同図のユーザ情報は、看視対象者情報、登録センサ情報、看視者情報及び看視者端末情報の領域を含む。
看視対象者情報の領域は、対応のユーザに該当する看視対象者Ｐに関する看視対象者情報を格納する。看視対象者情報は、対応の看視対象者Ｐを一意に識別する看視対象者ＩＤ、看視対象者の氏名、連絡先等の情報が含まれてよい。
登録センサ情報の領域は、対応の看視対象者Ｐに対応して生活空間ＨＳに設けられているものとして登録されたセンサ１０に関する情報である。登録センサ情報は、登録されたセンサ１０に関する情報として、ネットワーク上のセンサ１０のアドレス、センサ１０に固有の識別情報（例えば、シリアル番号、ＭＡＣアドレス等）、センサ１０の名称等が含まれてよい。
看視者情報の領域は、対応のユーザに該当する看視者Ｗに関する看視者情報を格納する。看視者情報は、対応の看視者Ｗを一意に識別する看視者ＩＤ、看視者Ｗの氏名、連絡先等の情報が含まれてよい。
看視者端末情報の領域は、対応の看視者Ｗが使用する看視者端末２００に関する看視者端末情報を格納する。看視者端末情報には、例えば看視者端末２００にて受信可能な電子メールアドレスや看視アプリケーションのアプリケーションＩＤ等が含まれてよい。 FIG. 3 shows an example of user information stored by the user information storage unit 131 corresponding to one user (here, "user" is a concept that includes the person to be watched P and the corresponding viewer W). It shows. The user information in the figure includes areas of viewing target person information, registered sensor information, viewer information, and viewer terminal information.
The monitoring target person information area stores monitoring target person information regarding the monitoring target person P who corresponds to the corresponding user. The monitoring target person information may include information such as a monitoring target ID that uniquely identifies the corresponding monitoring target P, the name of the monitoring target, and contact information.
The area of registered sensor information is information regarding the sensor 10 that is registered as being provided in the living space HS corresponding to the corresponding person P to be monitored. The registered sensor information may include the address of the sensor 10 on the network, identification information unique to the sensor 10 (for example, serial number, MAC address, etc.), the name of the sensor 10, etc., as information regarding the registered sensor 10. .
The viewer information area stores viewer information regarding the viewer W who corresponds to the corresponding user. The viewer information may include information such as a viewer ID that uniquely identifies the corresponding viewer W, the name of the viewer W, and contact information.
The viewer terminal information area stores viewer terminal information regarding the viewer terminal 200 used by the corresponding viewer W. The viewer terminal information may include, for example, an e-mail address that can be received by the viewer terminal 200, an application ID of a monitoring application, and the like.

図４は、緊急事態登録情報記憶部１３２が記憶する緊急事態登録情報の一例を示している。同図の緊急事態登録情報は、緊急事態として定義される事象ごとに一意となる事象ＩＤに対して、定義内容を示す情報を対応付けた構造である。 FIG. 4 shows an example of emergency registration information stored in the emergency registration information storage unit 132. The emergency situation registration information in the figure has a structure in which information indicating the definition content is associated with an event ID that is unique for each event defined as an emergency situation.

図５は、行動データ記憶部１３３が記憶する行動データの一例を示している。同図に示されるように、行動データ記憶部１３３は、看視対象者Ｐを示す看視対象者ＩＤごとに１以上の行動日時とテキスト行動データを対応付けて記憶する。つまり、行動データ記憶部１３３が記憶する行動データによっては、看視対象者Ｐごとに、いつどのような行動をしたのかが示される。 FIG. 5 shows an example of behavior data stored in the behavior data storage unit 133. As shown in the figure, the behavior data storage unit 133 stores one or more behavior dates and times and text behavior data in association with each observation target person ID indicating the observation target person P. That is, depending on the behavior data stored in the behavior data storage unit 133, it is indicated when and what kind of behavior each person P to be monitored has performed.

図６は、参照行動情報記憶部１３４が記憶する参照行動情報の一例を示している。同図の参照行動情報は、参照行動データごとに閾値を対応付けた構造である。
参照行動データの領域は、参照行動データを格納する。参照行動データは、定義された１つの行動示す行動データである。参照行動データは、行動データ記憶部１３３が記憶するテキスト行動データと同じ形式であってよい。
閾値の領域は、対応の参照行動データが示す行動がカウント部によりカウントされる回数に対して設定された閾値を格納する。参照行動情報における閾値は、日、週、月等の所定の単位期間に対応して定められる。 FIG. 6 shows an example of reference behavior information stored in the reference behavior information storage unit 134. The reference behavior information in the figure has a structure in which threshold values are associated with each reference behavior data.
The reference behavior data area stores reference behavior data. The reference behavior data is behavior data indicating one defined behavior. The reference behavior data may be in the same format as the text behavior data stored in the behavior data storage unit 133.
The threshold value area stores a threshold value set for the number of times the behavior indicated by the corresponding reference behavior data is counted by the counting unit. The threshold value in the reference behavior information is determined corresponding to a predetermined unit period such as day, week, month, etc.

図７のフローチャートを参照して、看視サーバ１００が１ユーザに対応する看視対象者Ｐの看視に関連して実行する処理手順例について説明する。
ステップＳ１００：看視サーバ１００において緊急事態判定部１２１は、例えば所定時間ごとに、対象の看視対象者Ｐの生活空間ＨＳに設けられたセンサ１０から送信される検出情報に基づいて、センサ行動データを取得する。 With reference to the flowchart of FIG. 7, an example of a processing procedure executed by the monitoring server 100 in connection with monitoring of the person to be monitored P corresponding to one user will be described.
Step S100: In the monitoring server 100, the emergency situation determination unit 121 determines the sensor behavior based on the detection information transmitted from the sensor 10 installed in the living space HS of the target person P to be monitored, for example, every predetermined time. Get data.

ステップＳ１０２：緊急事態判定部１２１は、看視対象者Ｐに緊急事態が発生したか否かを判定する。
具体的に、緊急事態判定部１２１は、ステップＳ１００により取得したセンサ行動データが示す行動について、緊急事態登録情報記憶部１３２の緊急事態登録情報が示す事象のいずれかに該当しているか否かを判定してよい。この際、緊急事態判定部１２１は、ステップＳ１００により取得したセンサ行動データが示す行動の内容と、緊急事態登録情報が格納する事象ごとの定義内容とを照合する。 Step S102: The emergency situation determination unit 121 determines whether an emergency situation has occurred in the person P to be monitored.
Specifically, the emergency situation determination unit 121 determines whether or not the behavior indicated by the sensor behavior data acquired in step S100 corresponds to any of the events indicated by the emergency situation registration information in the emergency situation registration information storage unit 132. You can judge. At this time, the emergency situation determination unit 121 compares the content of the behavior indicated by the sensor behavior data acquired in step S100 with the definition content for each event stored in the emergency situation registration information.

ステップＳ１０４：ステップＳ１０２により緊急事態が発生したと判定された場合、緊急事態判定部１２１は、緊急事態が発生したことの通知（緊急事態発生通知）を、対応の看視者端末２００に送信する。この際、緊急事態判定部１２１は、ユーザ情報記憶部１３１が記憶する対応のユーザ情報が格納する看視者端末情報を参照することで、緊急事態発生通知の送信先となる看視者端末２００を特定できる。
ステップＳ１０４の処理の後は、ステップＳ１００に処理が戻される。 Step S104: If it is determined in step S102 that an emergency situation has occurred, the emergency situation determination unit 121 transmits a notification that an emergency situation has occurred (emergency occurrence notification) to the corresponding viewer terminal 200. . At this time, the emergency situation determination unit 121 refers to the viewer terminal information in which the corresponding user information stored in the user information storage unit 131 is stored, thereby determining the viewer terminal 200 to which the emergency situation notification is to be sent. can be identified.
After the process in step S104, the process returns to step S100.

ステップＳ１０６：ステップＳ１０２にて緊急事態が発生していないと判定された場合には、レポート送信に対応する処理に移行する。まず、変換部１２２は、ステップＳ１００にて取得されたセンサ行動データをテキストに変換する。 Step S106: If it is determined in step S102 that no emergency situation has occurred, the process moves to processing corresponding to report transmission. First, the conversion unit 122 converts the sensor behavior data acquired in step S100 into text.

ステップＳ１０８：変換部１２２は、ステップＳ１０６により得られたテキストからタグを生成する。変換部１２２は、ステップＳ１０６により得られたテキストにタグを付与した構造のテキスト行動データを得る。なお、例えばテキスト行動データとしては、タグの生成元のテキストは含まずに、当該ステップＳ１０８により生成されたタグのリストによる構造であってもよい。 Step S108: The conversion unit 122 generates a tag from the text obtained in step S106. The conversion unit 122 obtains text behavior data having a structure in which tags are added to the text obtained in step S106. Note that, for example, the text behavior data may have a structure based on a list of tags generated in step S108 without including the text from which the tag is generated.

ステップＳ１１０：変換部１２２は、ステップＳ１０６、Ｓ１０８により得られたテキスト行動データを、対象の看視対象者Ｐに対応付けるようにして行動データ記憶部１３３に記憶させる。この際、変換部１２２は、テキスト行動データとともに行動日時を対応付けて行動データ記憶部１３３に記憶させる。変換部１２２は、行動日時として、ステップＳ１００にて対応のセンサ行動データが取得されたタイミングに応じた日時を取得してよい。 Step S110: The conversion unit 122 stores the text behavior data obtained in steps S106 and S108 in the behavior data storage unit 133 so as to be associated with the target person P to be monitored. At this time, the conversion unit 122 stores the text behavior data in association with the date and time of the behavior in the behavior data storage unit 133. The conversion unit 122 may obtain, as the action date and time, a date and time that corresponds to the timing at which the corresponding sensor action data was obtained in step S100.

ステップＳ１１２：対象行動決定部１２３は、今回のレポート送信に対応する対象行動を決定する。つまり、対象行動決定部１２３は、行動データ記憶部１３３に記憶された行動データのうちから、次のステップＳ１１６によるカウント部１２４がカウント対象とする行動を示す行動データを決定する。 Step S112: The target behavior determining unit 123 determines the target behavior corresponding to the current report transmission. That is, the target behavior determination unit 123 determines behavior data indicating the behavior to be counted by the counting unit 124 in the next step S116 from among the behavior data stored in the behavior data storage unit 133.

ステップＳ１１４：カウント部１２４は、ステップＳ１１２により決定された対象行動ごとに、対象期間において行動された回数をカウントする。具体的に、カウント部１２４は、１つの対象行動に対応する行動の行動データが、それぞれの単位期間において存在する数をカウントする。単位期間は、参照行動情報記憶部１３４が記憶する参照行動情報において、対象行動と同じ行動に対応する参照行動データに対応付けられた閾値において示されている。一例として、参照行動情報における閾値において示される単位期間が１週間である場合には、現在から１週間前までの期間において行動データ記憶部１３３に記憶された行動データがカウント対象となる。
カウント部１２４は、このような行動データのカウントを対象行動ごとに対応して実行する。 Step S114: The counting unit 124 counts the number of times each target behavior determined in step S112 is performed during the target period. Specifically, the counting unit 124 counts the number of behavior data of behaviors corresponding to one target behavior that exist in each unit period. The unit period is indicated by a threshold value associated with reference behavior data corresponding to the same behavior as the target behavior in the reference behavior information stored in the reference behavior information storage unit 134. As an example, if the unit period indicated by the threshold value in the reference behavior information is one week, the behavior data stored in the behavior data storage unit 133 in the period from now until one week ago is counted.
The counting unit 124 counts such behavior data for each target behavior.

ステップＳ１１６：カウント部１２４は、ステップＳ１１４による対象行動ごとに、行動の回数のカウント値と、参照行動情報記憶部１３４が記憶する参照行動情報において、対象行動と同じ行動に対応する参照行動データに対応付けられた閾値とを比較する。カウント部１２４は、比較の結果、カウント値が閾値以上の対象行動が有るか否かを判定する。
カウント値が閾値以上の対象行動がないと判定された場合には、ステップＳ１００に処理が戻される。 Step S116: For each target action in step S114, the counting unit 124 calculates the count value of the number of actions and the reference action data corresponding to the same action as the target action in the reference action information stored in the reference action information storage unit 134. Compare with the associated threshold. As a result of the comparison, the counting unit 124 determines whether there is a target action whose count value is equal to or greater than the threshold value.
If it is determined that there is no target action whose count value is equal to or greater than the threshold value, the process returns to step S100.

ステップＳ１１８：ステップＳ１１６にてカウント値が閾値以上の対象行動が有ると判定された場合、レポート処理部１２５は、レポートを作成する。作成されるレポートには、ステップＳ１１６にてカウント値が閾値以上であると判定された対象行動を看視対象者Ｐが行ったことが記述される。 Step S118: If it is determined in step S116 that there is a target action whose count value is greater than or equal to the threshold value, the report processing unit 125 creates a report. The created report describes that the person to be monitored P performed the target behavior whose count value was determined to be equal to or greater than the threshold value in step S116.

ステップＳ１２０：レポート処理部１２５は、ステップＳ１１８により作成されたレポートを、対応の看視者端末２００に送信する。 Step S120: The report processing unit 125 transmits the report created in step S118 to the corresponding viewer terminal 200.

なお、図７の処理手順例では、ステップＳ１１４により対象行動の回数をカウントした結果、ステップＳ１１６にてカウント値が閾値以上の対象行動が有った場合に、レポートの作成、送信が行われるようにしている。
本実施形態の変形例として、看視者端末２００へのレポートの送信は、定期的に行われるようにされてもよい。この場合、レポートの送信のタイミングは、例えば看視者Ｗにより設定されたレポート送信スケジュールに従ってよい。 In the processing procedure example of FIG. 7, as a result of counting the number of target actions in step S114, if there is a target action whose count value is equal to or higher than the threshold in step S116, a report is created and sent. I have to.
As a modification of this embodiment, the report may be sent to the viewer terminal 200 periodically. In this case, the timing of transmitting the report may follow a report transmitting schedule set by the viewer W, for example.

図８のフローチャートを参照して、本実施形態の看視者端末２００と看視サーバ１００とが、対象行動決定部１２３に対応する機械学習モデルを更新させるための処理手順例について説明する。 An example of a processing procedure for the viewer terminal 200 and the monitoring server 100 of this embodiment to update the machine learning model corresponding to the target behavior determining unit 123 will be described with reference to the flowchart in FIG. 8 .

まず、看視者端末２００の処理手順例について説明する。
ステップＳ２００：看視者Ｗは、看視者端末２００に送信されたレポートの内容を確認したところ、レポートにより報告されている行動のうち、自分が対象とする看視対象者Ｐに関しては問題がないため、今後のレポートによる報告は不要なものが含まれていた。この場合、看視者Ｗは、看視者端末２００を操作して、レポートによる報告が不要な行動を記述したフィードバック情報を作成する操作を行う。
あるいは、看視者Ｗは、これまでにおいてはレポートにより報告されていないが、最近の看視対象者Ｐの様子から、レポートにより報告されるべき行動があると判断した。この場合、看視者Ｗは、看視者端末２００を操作して、レポートによる報告が必要な行動を記述したフィードバック情報を作成する操作を行う。
看視者端末２００は、上記のような操作に応じてレポートによる報告が不要あるいは必要な行動を示したフィードバック情報を作成する。
フィードバック情報は、例えば電子メールとして作成されてよい。あるいは、フィードバック情報は、看視者端末２００上で動作する看視アプリケーションにより提供されるフィードバック情報の入力フォームに必要事項を入力する操作に応じて看視アプリケーションが作成してもよい。 First, an example of the processing procedure of the viewer terminal 200 will be described.
Step S200: The viewer W checks the contents of the report sent to the viewer terminal 200, and finds that there are no problems with the person to be watched P who is the target of the behavior reported in the report. Therefore, future reports contained information that was unnecessary. In this case, the viewer W operates the viewer terminal 200 to create feedback information that describes actions that do not require a report.
Alternatively, the watcher W has determined that there is a behavior that has not been reported in a report so far, but should be reported in a report based on the recent behavior of the person to be watched P. In this case, the viewer W operates the viewer terminal 200 to create feedback information that describes the behavior that requires a report.
The viewer terminal 200 creates feedback information indicating actions that do not require or require reporting in response to the above operations.
Feedback information may be created as an e-mail, for example. Alternatively, the feedback information may be created by the monitoring application in response to an operation of inputting necessary items into a feedback information input form provided by the monitoring application running on the viewer terminal 200.

ステップＳ２０２：看視者端末２００は、ステップＳ２００により作成されたフィードバック情報を看視サーバ１００に送信する。 Step S202: The viewer terminal 200 transmits the feedback information created in step S200 to the monitoring server 100.

次に、看視サーバ１００の処理手順例について説明する。
ステップＳ２１０：看視サーバ１００において通信部１０１は、ステップＳ２０２により送信されたフィードバック情報を受信する。 Next, an example of the processing procedure of the monitoring server 100 will be described.
Step S210: The communication unit 101 in the monitoring server 100 receives the feedback information transmitted in step S202.

ステップＳ２１２：看視サーバ１００において学習処理部１２６は、対象行動決定部１２３に対応して用いられる機械学習モデル（対象行動決定モデル）に、ステップＳ２０２により受信されたフィードバック情報において示される、レポートによる報告が必要な行動、あるいは不要な行動を対象行動決定モデルに入力して機械学習を実行させる。 Step S212: In the monitoring server 100, the learning processing unit 126 uses the report indicated in the feedback information received in step S202 to apply the machine learning model (target behavior determination model) used in correspondence to the target behavior determination unit 123. Input actions that require reporting or unnecessary actions into the target action determination model and run machine learning.

ステップＳ２１４：機械学習の実行により対象行動決定モデルの更新が行われる。以降において、対象行動決定部１２３は、更新された対象行動決定モデルを用いて対象行動を決定する。
具体的に、ステップＳ２１２にて報告が必要な行動が入力された場合、対象行動決定部１２３は、入力された行動が単位期間内の行動データに含まれている場合には、当該入力された行動を対象行動として決定する。また、ステップＳ２１２にて報告が不要な行動が入力された場合、対象行動決定部１２３は、入力された行動が単位期間内の行動データに含まれていても、当該入力された行動を対象行動として決定しないようにする。 Step S214: The target behavior determination model is updated by executing machine learning. Thereafter, the target behavior determination unit 123 determines the target behavior using the updated target behavior determination model.
Specifically, when a behavior that requires reporting is input in step S212, the target behavior determination unit 123 determines that if the input behavior is included in the behavior data within the unit period, Determine the behavior as the target behavior. Further, when an action that does not require reporting is input in step S212, the target behavior determination unit 123 selects the input behavior as the target behavior even if the input behavior is included in the behavior data within the unit period. Do not decide as such.

なお、上述の看視サーバ１００、看視者端末２００等としての機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより上述の看視サーバ１００、看視者端末２００としての処理を行ってもよい。ここで、「記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行する」とは、コンピュータシステムにプログラムをインストールすることを含む。ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、インターネットやＷＡＮ、ＬＡＮ、専用回線等の通信回線を含むネットワークを介して接続された複数のコンピュータ装置を含んでもよい。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ－ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるＨＤＤ、ＳＳＤ等の記憶装置のことをいう。このように、プログラムを記憶した記録媒体は、ＣＤ－ＲＯＭ等の非一過性の記録媒体であってもよい。また、記録媒体には、当該プログラムを配信するために配信サーバからアクセス可能な内部または外部に設けられた記録媒体も含まれる。配信サーバの記録媒体に記憶されるプログラムのコードは、端末装置で実行可能な形式のプログラムのコードと異なるものでもよい。すなわち、配信サーバからダウンロードされて端末装置で実行可能な形でインストールができるものであれば、配信サーバで記憶される形式は問わない。なお、プログラムを複数に分割し、それぞれ異なるタイミングでダウンロードした後に端末装置で合体される構成や、分割されたプログラムのそれぞれを配信する配信サーバが異なっていてもよい。さらに「コンピュータ読み取り可能な記録媒体」とは、ネットワークを介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。また、上記プログラムは、上述した機能の一部を実現するためのものであってもよい。さらに、上述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であってもよい。 Note that a program for realizing the functions of the above-mentioned monitoring server 100, the monitoring terminal 200, etc. is recorded on a computer-readable recording medium, and the program recorded on this recording medium is read into a computer system. , the above-mentioned monitoring server 100 and viewer terminal 200 may perform the processing by executing the above. Here, "reading a program recorded on a recording medium into a computer system and executing it" includes installing the program on the computer system. The "computer system" here includes hardware such as an OS and peripheral devices. Further, a "computer system" may include a plurality of computer devices connected via a network including the Internet, a WAN, a LAN, a communication line such as a dedicated line, etc. Furthermore, the term "computer-readable recording medium" refers to portable media such as flexible disks, magneto-optical disks, ROMs, and CD-ROMs, and storage devices such as HDDs and SSDs built into computer systems. In this way, the recording medium storing the program may be a non-transitory recording medium such as a CD-ROM. The recording medium also includes a recording medium provided internally or externally that can be accessed from the distribution server to distribute the program. The code of the program stored in the recording medium of the distribution server may be different from the code of the program in a format executable by the terminal device. That is, as long as it can be downloaded from the distribution server and installed in an executable form on the terminal device, the format in which it is stored on the distribution server does not matter. Note that the program may be divided into a plurality of parts, downloaded at different timings, and then combined on a terminal device, or the distribution servers that deliver each of the divided programs may be different. Furthermore, a ``computer-readable recording medium'' refers to a storage medium that retains a program for a certain period of time, such as volatile memory (RAM) inside a computer system that serves as a server or client when a program is transmitted via a network. This shall also include things. Moreover, the above-mentioned program may be for realizing a part of the above-mentioned functions. Furthermore, it may be a so-called difference file (difference program) that can realize the above-mentioned functions in combination with a program already recorded in the computer system.

＜付記＞
（１）本実施形態の一態様は、看視対象者を対象として所定の事象の検出を行うように設けられるセンサの出力により示される前記看視対象者の行動であるセンサ行動データをテキストに変換することにより、テキスト行動データを取得する変換部と、前記テキスト行動データを記憶する行動データ記憶部と、所定の行動が所定の単位期間において行われる回数に対する閾値を含む参照行動情報を記憶する参照行動情報記憶部と、前記変換部により取得された前記テキスト行動データに基づいて看視の対象とする対象行動を決定する対象行動決定部と、看視対象者に対応して前記行動データ記憶部が記憶するテキスト行動データのうちで、前記対象行動決定部により決定された対象行動に該当するテキスト行動データについて、当該テキスト行動データが示す行動が前記単位期間において行われた回数をカウントするカウント部と、前記カウント部によるカウント値が閾値以上の行動に関して報告するレポートを、前記看視対象者を看視する看視者の看視者端末に送信するレポート処理部と、前記レポートが報告する行動についての要否を示すフィードバック情報の内容が前記対象行動決定部の決定結果に反映されるように、前記対象行動決定部を学習させる学習処理部とを備える看視システムである。 <Additional notes>
(1) One aspect of the present embodiment is to convert sensor behavior data, which is the behavior of the person to be watched, which is the behavior of the person to be watched indicated by the output of a sensor provided to detect a predetermined event with respect to the person to be watched, into text. a conversion unit that acquires text behavior data by converting it; a behavior data storage unit that stores the text behavior data; and a behavior data storage unit that stores reference behavior information including a threshold for the number of times a predetermined behavior is performed in a predetermined unit period. a reference behavior information storage unit, a target behavior determination unit that determines a target behavior to be monitored based on the text behavior data acquired by the conversion unit, and the behavior data storage corresponding to the target person to be monitored. A count that counts the number of times an action indicated by the text action data is performed in the unit period, with respect to text action data that corresponds to the target action determined by the target action determination unit among the text action data stored by the unit. a report processing unit that transmits a report reporting on an action for which the count value by the counting unit is equal to or greater than a threshold value to a viewer terminal of a viewer who watches the person to be watched; The monitoring system includes a learning processing unit that causes the target behavior determining unit to learn so that the content of feedback information indicating whether or not the behavior is necessary is reflected in the determination result of the target behavior determining unit.

（２）本実施形態の一態様は、（１）に記載の看視システムであって、前記変換部は、前記センサ行動データから変換したテキストの内容に基づいて１以上のタグを生成し、生成したタグを前記テキストに付与したテキストを前記テキスト行動データとして取得し、前記参照行動情報における行動は１以上のタグによって表され、前記対象行動決定部は、決定した対象行動に対応するタグを出力する。 (2) One aspect of the present embodiment is the monitoring system according to (1), in which the conversion unit generates one or more tags based on the content of the text converted from the sensor behavior data, The text obtained by adding the generated tag to the text is acquired as the text behavior data, the behavior in the reference behavior information is represented by one or more tags, and the target behavior determining unit selects a tag corresponding to the determined target behavior. Output.

（３）本実施形態の一態様は、（１）または（２）に記載の看視システムであって、前記対象行動決定部は、前記レポート処理部により送信されたレポートにおいて示される行動の要否の通知に基づいて、前記変換部により取得された前記テキスト行動データに基づいて決定する対象行動を変更する。 (3) One aspect of the present embodiment is the monitoring system according to (1) or (2), in which the target behavior determining unit is configured to perform an action summary indicated in a report transmitted by the report processing unit. Based on the notification of no, the target behavior determined based on the text behavior data acquired by the conversion unit is changed.

（４）本実施形態の一態様は、（１）から（３）のいずれか１つに記載の看視システムであって、前記センサ行動データに基づいて、予め登録された緊急事態としての事象が発生したか否かを判定する緊急事態判定部をさらに備え、前記緊急事態判定部により前記緊急事態としての事象が発生していないと判定された場合に、前記変換部、前記対象行動決定部、前記カウント部、及び前記レポート処理部の処理が実行される。 (4) One aspect of the present embodiment is the monitoring system according to any one of (1) to (3), in which an event as an emergency situation is registered in advance based on the sensor behavior data. further comprising an emergency situation determination unit that determines whether or not an event has occurred, and when the emergency situation determination unit determines that the event as the emergency situation has not occurred, the conversion unit and the target action determination unit , the counting unit, and the report processing unit are executed.

（５）本実施形態の一態様は、看視システムにおける看視方法であって、看視対象者を対象として所定の事象の検出を行うように設けられるセンサの出力により示される前記看視対象者の行動であるセンサ行動データをテキストに変換することにより、テキスト行動データを取得する変換ステップ、前記変換ステップにより取得された前記テキスト行動データに基づいて看視の対象とする対象行動を決定する対象行動決定ステップ、看視対象者に対応して行動データ記憶部が記憶するテキスト行動データのうちで、前記対象行動決定ステップにより決定された対象行動に該当するテキスト行動データについて、当該テキスト行動データが示す行動が、参照行動情報記憶部に記憶される参照行動情報により示される単位期間において行われた回数をカウントするカウントステップ、前記カウントステップによるカウント値が前記参照行動情報記憶部に記憶される参照行動情報により示される閾値以上の行動に関して報告するレポートを、前記看視対象者を看視する看視者の看視者端末に送信するレポート処理ステップ、前記レポートが報告する行動についての要否を示すフィードバック情報の内容が前記対象行動決定ステップの決定結果に反映されるように、前記対象行動決定ステップに対応する機械学習モデルを学習させる学習処理ステップを含む看視方法である。 (5) One aspect of the present embodiment is a monitoring method in a monitoring system, wherein the monitoring target is indicated by the output of a sensor provided to detect a predetermined event with respect to the monitoring target. a conversion step of acquiring text behavior data by converting sensor behavior data, which is the behavior of a person, into text; and determining a target behavior to be monitored based on the text behavior data acquired in the conversion step. In the target behavior determination step, among the text behavior data stored in the behavior data storage unit corresponding to the person to be monitored, regarding the text behavior data that corresponds to the target behavior determined in the target behavior determination step, the text behavior data is a counting step of counting the number of times the action indicated by is performed in a unit period indicated by the reference action information stored in the reference action information storage unit, and a count value obtained by the counting step is stored in the reference action information storage unit a report processing step of transmitting a report reporting on behavior exceeding a threshold value indicated by the reference behavior information to a viewer terminal of a viewer who watches the person to be watched; and whether or not the behavior reported in the report is necessary. The monitoring method includes a learning processing step of learning a machine learning model corresponding to the target behavior determining step so that the content of feedback information indicating the target behavior is reflected in the determination result of the target behavior determining step.

（６）本実施形態の一態様は、看視システムにおけるコンピュータを、看視対象者を対象として所定の事象の検出を行うように設けられるセンサの出力により示される前記看視対象者の行動であるセンサ行動データをテキストに変換することにより、テキスト行動データを取得する変換部、前記変換部により取得された前記テキスト行動データに基づいて看視の対象とする対象行動を決定する対象行動決定部、看視対象者に対応して行動データ記憶部が記憶するテキスト行動データのうちで、前記対象行動決定部により決定された対象行動に該当するテキスト行動データについて、当該テキスト行動データが示す行動が、参照行動情報記憶部に記憶される参照行動情報により示される単位期間において行われた回数をカウントするカウント部、前記カウント部によるカウント値が前記参照行動情報記憶部に記憶される参照行動情報により示される閾値以上の行動に関して報告するレポートを、前記看視対象者を看視する看視者の看視者端末に送信するレポート処理部、前記レポートが報告する行動についての要否を示すフィードバック情報の内容が前記対象行動決定部の決定結果に反映されるように、前記対象行動決定部を学習させる学習処理部として機能させるためのプログラムである。 (6) One aspect of the present embodiment is that the computer in the monitoring system detects the behavior of the person to be watched, which is indicated by the output of a sensor provided to detect a predetermined event with respect to the person to be watched. a conversion unit that acquires text behavior data by converting certain sensor behavior data into text; a target behavior determination unit that determines a target behavior to be monitored based on the text behavior data acquired by the conversion unit; , among the text behavior data stored in the behavior data storage unit corresponding to the person to be monitored, regarding the text behavior data corresponding to the target behavior determined by the target behavior determination unit, the behavior indicated by the text behavior data is determined. , a counting unit that counts the number of times performed in a unit period indicated by the reference behavior information stored in the reference behavior information storage unit; a count value by the counting unit is based on the reference behavior information stored in the reference behavior information storage unit; a report processing unit that transmits a report reporting on behavior exceeding a indicated threshold to a viewer terminal of a viewer who watches the person to be watched; feedback information indicating whether or not the behavior reported in the report is necessary; This is a program for causing the target behavior determining unit to function as a learning processing unit that causes the target behavior determining unit to learn so that the content of the target behavior determining unit is reflected in the determination result of the target behavior determining unit.

１０ センサ、２０ ゲートウェイ、１００ 看視サーバ、１０１ 通信部、１０２ 制御部、１０３ 記憶部、１２１ 緊急事態判定部、１２２ 変換部、１２３ 対象行動決定部、１２４ カウント部、１２５ レポート処理部、１２６ 学習処理部、１３１ ユーザ情報記憶部、１３２ 緊急事態登録情報記憶部、１３３ 行動データ記憶部、１３４ 参照行動情報記憶部、２００ 看視者端末 10 sensor, 20 gateway, 100 monitoring server, 101 communication unit, 102 control unit, 103 storage unit, 121 emergency situation determination unit, 122 conversion unit, 123 target behavior determination unit, 124 count unit, 125 report processing unit, 126 learning Processing unit, 131 User information storage unit, 132 Emergency registration information storage unit, 133 Behavior data storage unit, 134 Reference behavior information storage unit, 200 Watcher terminal

Claims (6)

看視対象者を対象として所定の事象の検出を行うように設けられるセンサの出力により示される前記看視対象者の行動であるセンサ行動データをテキストに変換することにより、テキスト行動データを取得する変換部と、
前記テキスト行動データを記憶する行動データ記憶部と、
所定の行動が所定の単位期間において行われる回数に対する閾値を含む参照行動情報を記憶する参照行動情報記憶部と、
前記変換部により取得された前記テキスト行動データに基づいて看視の対象とする対象行動を決定する対象行動決定部と、
看視対象者に対応して前記行動データ記憶部が記憶するテキスト行動データのうちで、前記対象行動決定部により決定された対象行動に該当するテキスト行動データについて、当該テキスト行動データが示す行動が前記単位期間において行われた回数をカウントするカウント部と、
前記カウント部によるカウント値が閾値以上の行動に関して報告するレポートを、前記看視対象者を看視する看視者の看視者端末に送信するレポート処理部と、
前記レポートが報告する行動についての要否を示すフィードバック情報の内容が前記対象行動決定部の決定結果に反映されるように、前記対象行動決定部を学習させる学習処理部と
を備える看視システム。 Text behavior data is obtained by converting sensor behavior data, which is the behavior of the person being watched, indicated by the output of a sensor that is provided to detect a predetermined event with respect to the person being watched, into text. A conversion section;
a behavior data storage unit that stores the text behavior data;
a reference behavior information storage unit that stores reference behavior information including a threshold value for the number of times a predetermined behavior is performed in a predetermined unit period;
a target behavior determining unit that determines a target behavior to be monitored based on the text behavior data acquired by the converting unit;
Among the text behavior data stored in the behavior data storage unit corresponding to the person to be monitored, regarding the text behavior data that corresponds to the target behavior determined by the target behavior determination unit, the behavior indicated by the text behavior data is a counting unit that counts the number of times the operation is performed in the unit period;
a report processing unit that transmits a report reporting on actions for which the count value by the counting unit is equal to or higher than a threshold value to a viewer terminal of a viewer who watches the person to be watched;
A monitoring system comprising: a learning processing unit that causes the target behavior determining unit to learn so that the content of feedback information indicating whether or not the behavior reported by the report is necessary is reflected in the determination result of the target behavior determining unit. 前記変換部は、前記センサ行動データから変換したテキストの内容に基づいて１以上のタグを生成し、生成したタグを前記テキストに付与したテキストを前記テキスト行動データとして取得し、
前記参照行動情報における行動は１以上のタグによって表され、
前記対象行動決定部は、決定した対象行動に対応するタグを出力する
請求項１に記載の看視システム。 The conversion unit generates one or more tags based on the content of the text converted from the sensor behavior data, and acquires the text with the generated tag added to the text as the text behavior data,
The behavior in the reference behavior information is represented by one or more tags,
The monitoring system according to claim 1, wherein the target behavior determination unit outputs a tag corresponding to the determined target behavior. 前記対象行動決定部は、前記レポート処理部により送信されたレポートにおいて示される行動の要否の通知に基づいて、前記変換部により取得された前記テキスト行動データに基づいて決定する対象行動を変更する
請求項１または２に記載の看視システム。 The target behavior determining unit changes the target behavior determined based on the text behavior data acquired by the converting unit, based on the notification of necessity of the behavior indicated in the report transmitted by the report processing unit. The monitoring system according to claim 1 or 2. 前記センサ行動データに基づいて、予め登録された緊急事態としての事象が発生したか否かを判定する緊急事態判定部をさらに備え、
前記緊急事態判定部により前記緊急事態としての事象が発生していないと判定された場合に、前記変換部、前記対象行動決定部、前記カウント部、及び前記レポート処理部の処理が実行される
請求項１または２に記載の看視システム。 further comprising an emergency situation determination unit that determines whether an event registered in advance as an emergency situation has occurred based on the sensor behavior data,
When the emergency situation determining unit determines that the event as the emergency situation has not occurred, the processing of the converting unit, the target action determining unit, the counting unit, and the report processing unit is executed. The monitoring system according to item 1 or 2. 看視システムにおける看視方法であって、
看視対象者を対象として所定の事象の検出を行うように設けられるセンサの出力により示される前記看視対象者の行動であるセンサ行動データをテキストに変換することにより、テキスト行動データを取得する変換ステップと、
前記変換ステップにより取得された前記テキスト行動データに基づいて看視の対象とする対象行動を決定する対象行動決定ステップと、
看視対象者に対応して行動データ記憶部が記憶するテキスト行動データのうちで、前記対象行動決定ステップにより決定された対象行動に該当するテキスト行動データについて、当該テキスト行動データが示す行動が、参照行動情報記憶部に記憶される参照行動情報により示される単位期間において行われた回数をカウントするカウントステップと、
前記カウントステップによるカウント値が前記参照行動情報記憶部に記憶される参照行動情報により示される閾値以上の行動に関して報告するレポートを、前記看視対象者を看視する看視者の看視者端末に送信するレポート処理ステップと、
前記レポートが報告する行動についての要否を示すフィードバック情報の内容が前記対象行動決定ステップの決定結果に反映されるように、前記対象行動決定ステップに対応する機械学習モデルを学習させる学習処理ステップと
を含む看視方法。 A monitoring method in a monitoring system, comprising:
Text behavior data is obtained by converting sensor behavior data, which is the behavior of the person being watched, indicated by the output of a sensor that is provided to detect a predetermined event with respect to the person being watched, into text. a conversion step;
a target behavior determining step of determining a target behavior to be monitored based on the text behavior data acquired in the converting step;
Among the text behavior data stored in the behavior data storage unit corresponding to the person to be monitored, regarding the text behavior data that corresponds to the target behavior determined in the target behavior determination step, the behavior indicated by the text behavior data is a counting step of counting the number of times performed in a unit period indicated by the reference behavior information stored in the reference behavior information storage unit;
A viewer terminal of a viewer who watches the person to be watched sends a report reporting on a behavior whose count value obtained in the counting step is equal to or higher than a threshold value indicated by the reference behavior information stored in the reference behavior information storage unit. a report processing step to send to;
a learning processing step for learning a machine learning model corresponding to the target behavior determining step so that the content of feedback information indicating the necessity of the behavior reported in the report is reflected in the determination result of the target behavior determining step; monitoring methods including 看視システムにおけるコンピュータを、
看視対象者を対象として所定の事象の検出を行うように設けられるセンサの出力により示される前記看視対象者の行動であるセンサ行動データをテキストに変換することにより、テキスト行動データを取得する変換部、
前記変換部により取得された前記テキスト行動データに基づいて看視の対象とする対象行動を決定する対象行動決定部、
看視対象者に対応して行動データ記憶部が記憶するテキスト行動データのうちで、前記対象行動決定部により決定された対象行動に該当するテキスト行動データについて、当該テキスト行動データが示す行動が、参照行動情報記憶部に記憶される参照行動情報により示される単位期間において行われた回数をカウントするカウント部、
前記カウント部によるカウント値が前記参照行動情報記憶部に記憶される参照行動情報により示される閾値以上の行動に関して報告するレポートを、前記看視対象者を看視する看視者の看視者端末に送信するレポート処理部、
前記レポートが報告する行動についての要否を示すフィードバック情報の内容が前記対象行動決定部の決定結果に反映されるように、前記対象行動決定部を学習させる学習処理部
として機能させるためのプログラム。 computers in the surveillance system,
Text behavior data is obtained by converting sensor behavior data, which is the behavior of the person being watched, indicated by the output of a sensor that is provided to detect a predetermined event with respect to the person being watched, into text. conversion section,
a target behavior determining unit that determines a target behavior to be monitored based on the text behavior data acquired by the converting unit;
Among the text behavior data stored in the behavior data storage unit corresponding to the person to be monitored, regarding the text behavior data that corresponds to the target behavior determined by the target behavior determination unit, the behavior indicated by the text behavior data is a counting unit that counts the number of times performed in a unit period indicated by the reference behavior information stored in the reference behavior information storage unit;
The viewer terminal of the viewer who watches the person to be watched sends a report reporting on the behavior whose count value by the counting unit is equal to or higher than the threshold value indicated by the reference behavior information stored in the reference behavior information storage unit. a report processing unit that sends to
A program for functioning as a learning processing unit that causes the target behavior determining unit to learn so that the content of feedback information indicating the necessity or non-necessity of the behavior reported in the report is reflected in the determination result of the target behavior determining unit.

Images