JP7090327B2 - Information processing equipment, information processing method, program - Google Patents

Information processing equipment, information processing method, program Download PDF

Info

Publication number
JP7090327B2
JP7090327B2 JP2018114218A JP2018114218A JP7090327B2 JP 7090327 B2 JP7090327 B2 JP 7090327B2 JP 2018114218 A JP2018114218 A JP 2018114218A JP 2018114218 A JP2018114218 A JP 2018114218A JP 7090327 B2 JP7090327 B2 JP 7090327B2
Authority
JP
Japan
Prior art keywords
person
distance image
bed
monitoring
movement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018114218A
Other languages
Japanese (ja)
Other versions
JP2019216807A5 (en
JP2019216807A (en
Inventor
徹 安川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
AI Viewlife Co Ltd
Original Assignee
AI Viewlife Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by AI Viewlife Co Ltd filed Critical AI Viewlife Co Ltd
Priority to JP2018114218A priority Critical patent/JP7090327B2/en
Priority to PCT/JP2019/023347 priority patent/WO2019240196A1/en
Publication of JP2019216807A publication Critical patent/JP2019216807A/en
Publication of JP2019216807A5 publication Critical patent/JP2019216807A5/ja
Application granted granted Critical
Publication of JP7090327B2 publication Critical patent/JP7090327B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/113—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb occurring during breathing
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/04—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using a single signalling line, e.g. in a closed loop

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Physiology (AREA)
  • Dentistry (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • General Physics & Mathematics (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Emergency Alarm Devices (AREA)
  • Alarm Systems (AREA)

Description

本発明は、情報処理装置及び情報処理方法に関する。 The present invention relates to an information processing apparatus and an information processing method.

近年、高齢者の人口が増加し、介護の需要が高まっている。一方で、介護には、多くの介護者が必要となり、介護者の作業負担や人件費の増加という問題が生じる。そこで、特許文献１に記載のような、距離画像センサで撮影した画像を用いて、被介護者といった人物を監視する監視システムが多く開発されている。 In recent years, the elderly population has increased and the demand for long-term care has increased. On the other hand, long-term care requires many long-term caregivers, which causes problems such as an increase in the work burden and labor costs of the long-term caregivers. Therefore, many monitoring systems have been developed for monitoring a person such as a care recipient by using an image taken by a distance image sensor as described in Patent Document 1.

特許文献１に開示の監視システムでは、距離画像からベッドの位置を抽出し、また、人の領域を検出し、人の動作を判別している。具体的に、ベッドの位置は、ベッドの長手方向及び短手方向における高さの度数分布から求めている。また、人の動作は、所定の高さ位置に対する物体の位置を検出することで、臥床の状態、上半身を起こした状態、起立の状態、といった人の動作を判別している。 In the monitoring system disclosed in Patent Document 1, the position of the bed is extracted from the distance image, the area of the person is detected, and the movement of the person is discriminated. Specifically, the position of the bed is obtained from the frequency distribution of the height in the longitudinal direction and the lateral direction of the bed. Further, the human movement determines the human movement such as the state of lying down, the state of raising the upper body, and the state of standing up by detecting the position of the object with respect to the predetermined height position.

特開２０１２－０３００４２号公報Japanese Unexamined Patent Publication No. 2012-030042

しかしながら、上述した特許文献１の技術では、被介護者である人物の生体情報をより正確に検出することができない、という問題が生じる。例えば、ベッド上に呼吸や心拍などの生体情報を検出する計測装置を装備している場合であっても、ベッド上の人物の動作によっては正確な生体情報を検出することができない場合がある。 However, the technique of Patent Document 1 described above has a problem that the biological information of a person who is a care recipient cannot be detected more accurately. For example, even when the bed is equipped with a measuring device for detecting biological information such as respiration and heartbeat, accurate biological information may not be detected depending on the movement of a person on the bed.

このため、本発明の目的は、上述した課題である、人物の生体情報を正確に検出することができない、ということを解決することができる情報処理装置を提供することにある。 Therefore, an object of the present invention is to provide an information processing apparatus capable of solving the above-mentioned problem that the biological information of a person cannot be accurately detected.

本発明の一形態である情報処理装置は、
寝床を含む所定領域の距離画像を取得する距離画像取得手段と、
前記距離画像に基づいて、当該距離画像内の人物の動作を検出する検出手段と、
前記寝床に設置された計測装置から当該寝床上の人物の生体情報を検出する計測手段と、
前記人物の動作と前記生体情報とに基づいて、当該生体情報に対する監視処理を行う監視手段と、
を備えた、
という構成をとる。 The information processing device, which is one embodiment of the present invention, is
A distance image acquisition means for acquiring a distance image of a predetermined area including a bed, and
A detection means for detecting the movement of a person in the distance image based on the distance image, and
A measuring means for detecting the biological information of a person on the bed from a measuring device installed on the bed, and a measuring means.
A monitoring means that performs monitoring processing on the biological information based on the movement of the person and the biological information.
With,
It takes the composition.

また、上記情報処理装置では、
前記監視手段は、前記人物の動作が特定の動作である場合に、前記生体情報に対する監視処理を行う、
という構成をとる。 In addition, in the above information processing device,
The monitoring means performs monitoring processing on the biometric information when the movement of the person is a specific movement.
It takes the composition.

また、上記情報処理装置では、
前記監視手段は、前記生体情報と予め設定された前記寝床上に人物が存在していない状態における前記計測装置からの計測値である不在時基準値情報および前記寝床上に人物が存在している状態における前記計測装置からの計測値である予め設定された正常基準値情報との比較結果に基づいて、前記生体情報に対する監視処理を行う、
という構成をとる。 In addition, in the above information processing device,
The monitoring means includes the biological information, reference value information when absent, which is a measured value from the measuring device in a state where no person is present on the bed, and a person on the bed. The monitoring process for the biological information is performed based on the comparison result with the preset normal reference value information which is the measured value from the measuring device in the state.
It takes the composition.

また、上記情報処理装置では、
前記監視手段は、前記生体情報が前記不在時基準値情報と異なる場合に、前記生体情報に対する監視処理を行う、
情報処理装置。 In addition, in the above information processing device,
When the biometric information is different from the absent reference value information, the monitoring means performs monitoring processing on the biometric information.
Information processing equipment.

また、上記情報処理装置では、
前記監視手段は、前記監視処理を行っているときに前記人物の動作が変化した場合に、当該監視処理を停止し、その後、改めて前記人物の動作と前記生体情報とに基づいて当該生体情報に対する監視処理を行う、
という構成をとる。 In addition, in the above information processing device,
When the movement of the person changes while the monitoring process is being performed, the monitoring means stops the monitoring process, and then again, based on the movement of the person and the biometric information, the monitoring means with respect to the biometric information. Perform monitoring process,
It takes the composition.

また、本発明の一形態である情報処理方法は、
情報処理装置が、
寝床を含む所定領域の距離画像を取得し、前記距離画像に基づいて当該距離画像内の人物の動作を検出すると共に、
前記寝床に設置された計測装置から当該寝床上の人物の生体情報を検出し、
前記人物の動作と前記生体情報とに基づいて、当該生体情報に対する監視処理を行う、
という構成をとる。 Further, the information processing method, which is one embodiment of the present invention, is
Information processing equipment
A distance image of a predetermined area including a bed is acquired, the movement of a person in the distance image is detected based on the distance image, and the movement of the person is detected.
The biological information of the person on the bed is detected from the measuring device installed on the bed.
Monitoring processing for the biological information is performed based on the movement of the person and the biological information.
It takes the composition.

また、上記情報処理方法では、
前記監視処理を行っているときに前記人物の動作が変化した場合に、当該監視処理を停止し、
その後、改めて前記人物の動作の検出と前記生体情報の検出とを行い、前記人物の動作と前記生体情報とに基づいて当該生体情報に対する監視処理を行う、
という構成をとる。 In addition, in the above information processing method,
If the behavior of the person changes while the monitoring process is being performed, the monitoring process is stopped.
After that, the motion of the person and the biometric information are detected again, and the monitoring process for the biometric information is performed based on the motion of the person and the biometric information.
It takes the composition.

また、本発明の一形態であるプログラムは、
情報処理装置に、
寝床を含む所定領域の距離画像を取得する距離画像取得手段と、
前記距離画像に基づいて、当該距離画像内の人物の動作を検出する検出手段と、
前記寝床に設置された計測装置から当該寝床上の人物の生体情報を検出する計測手段と、
前記人物の動作と前記生体情報とに基づいて、当該生体情報に対する監視処理を行う監視手段と、
を実現させる、
という構成をとる。 Further, the program which is one form of the present invention is
For information processing equipment
A distance image acquisition means for acquiring a distance image of a predetermined area including a bed, and
A detection means for detecting the movement of a person in the distance image based on the distance image, and
A measuring means for detecting the biological information of a person on the bed from a measuring device installed on the bed, and a measuring means.
A monitoring means that performs monitoring processing on the biological information based on the movement of the person and the biological information.
To realize,
It takes the composition.

本発明は、以上のように構成されることにより、人物の生体情報を正確に検出することできる、情報処理装置、情報処理方法、プログラムを提供することができる。 The present invention can provide an information processing apparatus, an information processing method, and a program capable of accurately detecting the biological information of a person by being configured as described above.

本発明の実施形態１における情報処理システムの構成を示す概略図である。It is a schematic diagram which shows the structure of the information processing system in Embodiment 1 of this invention. 図１に開示した監視サーバの構成を示すブロック図である。It is a block diagram which shows the structure of the monitoring server disclosed in FIG. 図１に開示した監視サーバによる画像処理の様子を示す図である。It is a figure which shows the state of the image processing by the monitoring server disclosed in FIG. 図１に開示した監視サーバによる画像処理の様子を示す図である。It is a figure which shows the state of the image processing by the monitoring server disclosed in FIG. 図１に開示した監視サーバによる生体情報の処理の様子を示す図である。It is a figure which shows the state of processing of the biological information by the monitoring server disclosed in FIG. 図１に開示した監視サーバによる生体情報の処理の様子を示す図である。It is a figure which shows the state of processing of the biological information by the monitoring server disclosed in FIG. 図１に開示した監視サーバの処理動作を示すフローチャートである。It is a flowchart which shows the processing operation of the monitoring server disclosed in FIG.

＜実施形態１＞
本発明の第１の実施形態を、図１乃至図７を参照して説明する。図１乃至図２は、情報処理システムの構成を示す図である。図３乃至図７は、情報処理システムの処理動作を説明するための図である。以下、各図を参照して、情報処理システムの構成及び動作を説明する。 <Embodiment 1>
The first embodiment of the present invention will be described with reference to FIGS. 1 to 7. 1 to 2 are diagrams showing the configuration of an information processing system. 3 to 7 are diagrams for explaining the processing operation of the information processing system. Hereinafter, the configuration and operation of the information processing system will be described with reference to each figure.

本発明における情報処理システムは、被介護者や被監視者といった監視対象となる人物Ｐの行動及び生体情報を監視するための情報処理システムである。そして、情報処理システムは、監視サーバ１０と、距離画像カメラＣと、生体センサＳと、携帯端末２０と、監視端末３０と、を備えて構成されている。 The information processing system in the present invention is an information processing system for monitoring the behavior and biological information of a person P to be monitored, such as a care recipient or a monitored person. The information processing system includes a monitoring server 10, a distance image camera C, a biosensor S, a mobile terminal 20, and a monitoring terminal 30.

上記距離画像カメラＣ（撮影装置）は、監視対象となる人物Ｐが横たわるベッドＢが配置された領域Ｒ内の距離画像を撮影可能な位置に配置されている。例えば、距離画像カメラＣは、医療施設や介護施設、宅内の一室の天井に設けられ、ベッドＢ全体が画像内に収まる位置に配置されている。なお、距離画像カメラＣは、必ずしも天井に設置されていることに限定されず、壁やスタンドなど、いかなる場所に設置されていてもよい。また、撮影されるベッドＢは、布団などのいかなる寝床であってもよい。 The distance image camera C (shooting device) is arranged at a position where a distance image can be captured in the area R in which the bed B on which the person P to be monitored lies lies. For example, the distance image camera C is provided on the ceiling of a room in a medical facility, a nursing facility, or a house, and the entire bed B is arranged at a position within the image. The distance image camera C is not necessarily limited to being installed on the ceiling, and may be installed in any place such as a wall or a stand. Further, the bed B to be photographed may be any bed such as a futon.

距離画像カメラＣは、画素値を距離値とした距離画像を撮影するものである。例えば、距離画像カメラＣは、赤外線レーザをターゲットに投射した際の往復の時間から距離を計測する形式のものであってもよく、いかなる方式の撮影装置であってもよい。そして、距離画像カメラＣは、一定の時間間隔で、あるいは、撮影指示を受けたタイミングで、距離画像を撮影し、かかる距離画像を後述する監視サーバ１０に送信する機能を有する。なお、上記監視サーバ１０の機能については、上記距離画像カメラＣに搭載することもできる。つまり、距離画像カメラＣに搭載された情報処理装置にて監視サーバ１０の機能を実現してもよい。 The distance image camera C captures a distance image in which the pixel value is used as the distance value. For example, the distance image camera C may be of a type that measures the distance from the round-trip time when the infrared laser is projected onto the target, or may be an imaging device of any type. Then, the distance image camera C has a function of taking a distance image at a fixed time interval or at a timing when a shooting instruction is received, and transmitting the distance image to a monitoring server 10 described later. The function of the monitoring server 10 can also be mounted on the distance image camera C. That is, the function of the monitoring server 10 may be realized by the information processing device mounted on the distance image camera C.

上記生体センサＳ（計測装置）は、監視対象となる人物Ｐが横たわるベッドＢに設置されている。そして、生体センサＳは、例えば、マイクロ波センサであり、ベッドＢに横たわる人物Ｐに対してマイクロ波を照射し、その反射波を用いて人物Ｐの心拍や呼吸などによる体動を波形で表した生体情報を検出する、というものである。但し、生体センサＳは、いかなる方法で人物Ｐの心拍や呼吸などの生体情報を検出する計測装置であってもよく、また、検出する生体情報は必ずしも心拍や呼吸を表す情報であることに限定されない。 The biosensor S (measuring device) is installed on the bed B on which the person P to be monitored lies. The biological sensor S is, for example, a microwave sensor, which irradiates a person P lying on the bed B with microwaves and uses the reflected waves to represent the body movements of the person P due to heartbeat, breathing, etc. in a waveform. It is to detect the biometric information. However, the biological sensor S may be a measuring device that detects biological information such as the heartbeat and respiration of the person P by any method, and the biological information to be detected is not necessarily limited to information representing the heartbeat and respiration. Not done.

上記携帯端末２０は、被介護者である人物の介護を行ったり、監視する監視者であるユーザＵが保持して操作するスマートフォンなどの情報処理端末である。携帯端末２０は、監視サーバ１０と無線通信を介して接続され通信可能であり、後述するように、監視サーバ１０に対してユーザＵの操作指示を入力することが可能である。例えば、携帯端末２０は、表示画面に、距離画像カメラＣにて撮影された距離画像を表示すると共に、監視に関する操作指示を入力可能な操作画面を表示する。かかる画面に対してユーザＵからタッチ操作によって指示が入力されることで、かかる操作指示が携帯端末２０から監視サーバ１０に送信されることとなる。また、携帯端末２０は、監視サーバ１０から発せられる被介護者である人物の異常の通知を受信して、ユーザＵに報知する機能も有する。 The mobile terminal 20 is an information processing terminal such as a smartphone held and operated by a user U who is a monitor who cares for or monitors a person who is a care recipient. The mobile terminal 20 is connected to and can communicate with the monitoring server 10 via wireless communication, and as will be described later, it is possible to input an operation instruction of the user U to the monitoring server 10. For example, the mobile terminal 20 displays a distance image taken by the distance image camera C on the display screen, and displays an operation screen on which operation instructions related to monitoring can be input. When an instruction is input from the user U to the screen by a touch operation, the operation instruction is transmitted from the mobile terminal 20 to the monitoring server 10. Further, the mobile terminal 20 also has a function of receiving a notification of an abnormality of a person who is a care recipient issued from the monitoring server 10 and notifying the user U of the abnormality.

上記監視端末３０は、被介護者である人物の介護を行ったり、監視する監視者であるユーザＵが操作する情報処理端末である。監視端末３０は、監視者などのユーザＵが在籍する監視ルームなどの場所に設置されており、複数のユーザＵによって操作可能である。監視端末３０は、上述した携帯端末２０と同様に、表示画面に距離画像を表示すると共に、監視に関する操作指示を入力可能とし、かかる操作指示を監視サーバ１０に送信したり、監視サーバ１０から発せられる人物の異常の通知を受信して、ユーザＵに報知する機能を有する。 The monitoring terminal 30 is an information processing terminal operated by a user U who is a monitor who cares for or monitors a person who is a care recipient. The monitoring terminal 30 is installed in a place such as a monitoring room in which a user U such as a monitor is enrolled, and can be operated by a plurality of users U. Similar to the mobile terminal 20 described above, the monitoring terminal 30 displays a distance image on the display screen and enables input of operation instructions related to monitoring, and sends such operation instructions to the monitoring server 10 or issues them from the monitoring server 10. It has a function of receiving a notification of an abnormality of a person to be notified and notifying the user U.

上記監視サーバ１０は、演算装置及び記憶装置を有するサーバ装置（情報処理装置）である。そして、監視サーバ１０は、図２に示すように、演算装置がプログラムを実行することで構築された、距離画像取得部１１、生体情報計測部１２、動作検出部１３、監視部１４、通知部１５、を備えている。また、監視サーバ１０は、記憶装置に形成された、基準情報記憶部１６を備えている。以下、各構成について詳述するが、併せて監視サーバ１０の動作も、図７のフローチャートを参照して併せて説明する。 The monitoring server 10 is a server device (information processing device) having an arithmetic unit and a storage device. Then, as shown in FIG. 2, the monitoring server 10 has a distance image acquisition unit 11, a biological information measurement unit 12, an motion detection unit 13, a monitoring unit 14, and a notification unit, which are constructed by executing a program by an arithmetic unit. It is equipped with 15. Further, the monitoring server 10 includes a reference information storage unit 16 formed in the storage device. Hereinafter, each configuration will be described in detail, but the operation of the monitoring server 10 will also be described with reference to the flowchart of FIG.

上記距離画像取得部１１（距離画像取得手段）は、上述したように距離画像カメラＣにて撮影されたベッドＢ及び監視対象となる人物Ｐを含む距離画像を、定期的に距離画像カメラＣから取得する。そして、取得した距離画像を動作検出部１３に渡すことで、当該距離画像は後述する動作検出処理や監視処理に用いられる。 As described above, the distance image acquisition unit 11 (distance image acquisition means) periodically obtains a distance image including the bed B and the person P to be monitored taken by the distance image camera C from the distance image camera C. get. Then, by passing the acquired distance image to the motion detection unit 13, the distance image is used for the motion detection process and the monitoring process described later.

上記生体情報計測部１２（計測手段）は、定期的に生体センサＳにて検出されたベッドＢ上の人物Ｐの心拍や呼吸の生体情報（計測値）を取得する。例えば、生体情報は、図５の上図に示すように、呼吸の際に人物Ｐに生じる体動の波形にて表される。そして、取得した生体情報を監視部１４に渡すことで、当該生体情報は後述する監視処理に用いられる。なお、生体センサＳではベッドＢ上に生じる事象を計測しているため、生体情報計測部１２は、ベッドＢ上に人物Ｐが存在しない場合でも計測値を取得し、かかる計測値を監視部１４に渡している。 The biological information measuring unit 12 (measuring means) periodically acquires biological information (measured values) of the heartbeat and respiration of the person P on the bed B detected by the biological sensor S. For example, the biological information is represented by the waveform of the body movement generated in the person P during breathing, as shown in the upper figure of FIG. Then, by passing the acquired biological information to the monitoring unit 14, the biological information is used for the monitoring process described later. Since the biosensor S measures the event that occurs on the bed B, the biometric information measuring unit 12 acquires the measured value even when the person P does not exist on the bed B, and the monitoring unit 14 obtains the measured value. Passed to.

上記動作検出部１３（検出手段）は、距離画像を用いて、当該距離画像内の人物Ｐを検出して、当該人物Ｐの動作を検出する動作検出処理を行う。具体的に、動作検出部１３は、距離画像内におけるベッドＢの領域と、人物Ｐと、を検出する。例えば、動作検出部１３は、まず、予め指定されているベッドＢの領域を指定する距離画像内の座標に基づいて、ベッドＢの領域を特定する。そして、動作検出部１３は、ベッドＢの領域内に存在する物体を検出し、かかる物体から人物Ｐの最頂点と重心位置を検出する（図７のステップＳ１）。このとき、人物検出部１３は、例えば、距離画像２１内における個々の塊からなる物体を検出し、検出した物体の質量や、物体間の位置関係や体積比（面積比）などから、人物を検出する。 The motion detection unit 13 (detection means) detects a person P in the distance image using a distance image, and performs motion detection processing for detecting the motion of the person P. Specifically, the motion detection unit 13 detects the area of the bed B and the person P in the distance image. For example, the motion detection unit 13 first identifies the area of the bed B based on the coordinates in the distance image that specifies the area of the bed B that is designated in advance. Then, the motion detection unit 13 detects an object existing in the area of the bed B, and detects the highest apex and the position of the center of gravity of the person P from the object (step S1 in FIG. 7). At this time, the person detection unit 13 detects, for example, an object composed of individual lumps in the distance image 21, and determines a person from the mass of the detected object, the positional relationship between the objects, the volume ratio (area ratio), and the like. To detect.

そして、動作検出部１３は、検出された人物Ｐの最頂点と重心位置の位置関係から、人物Ｐの動作を検出する（図７のステップＳ２）。このとき、動作検出部１３は、人物Ｐの高さと重心位置を検出し、当該高さと重心位置と距離画像２１内の位置関係から、人物Ｐの動作を判定する。 Then, the motion detection unit 13 detects the motion of the person P from the positional relationship between the highest apex of the detected person P and the position of the center of gravity (step S2 in FIG. 7). At this time, the motion detection unit 13 detects the height and the position of the center of gravity of the person P, and determines the motion of the person P from the positional relationship between the height and the position of the center of gravity and the distance image 21.

特に、動作検出部１３は、人物ＰがベッドＢ上において横たわっている動作、つまり、「臥位」であるか否かを検出する（図７のステップＳ３でＹｅｓ）。例えば、動作検出部１３は、図３に示すように、人物Pの最頂点と重心位置がベッドＢの平面上で連結した位置関係となり、それぞれベッドＢの臥位高さ位置よりもやや高く設定された位置を超えていない場合に、人物Ｐの動作が「臥位」であると判定する。ここで、図３は、上図が距離画像２１を示しており、下図がベッドＢを側方から見た図を示している。以下に説明する図４も同様である。 In particular, the motion detection unit 13 detects the motion of the person P lying on the bed B, that is, whether or not the person P is in the “lying position” (Yes in step S3 of FIG. 7). For example, as shown in FIG. 3, the motion detection unit 13 has a positional relationship in which the highest apex of the person P and the position of the center of gravity are connected on the plane of the bed B, and each is set slightly higher than the recumbent height position of the bed B. If the position does not exceed the position, it is determined that the movement of the person P is the "lying position". Here, in FIG. 3, the upper figure shows the distance image 21, and the lower figure shows the view of the bed B from the side. The same applies to FIG. 4 described below.

なお、動作検出部１３は、人物ＰがベッドＢ上において動作を変化させたか否かの検出も行う。例えば、動作検出部１３は、距離画像から検出した人物の最頂点と重心の位置が変化したことを検出することで、動作に変化があったことを検出する。一例としては、人物の最頂点や重心位置が所定値以上変化した場合に、動作が変化したことを検出する。このとき、動作検出部１３は、人物Ｐが、図３に示すような仰向けの臥位状態から、図４に示す横向きの臥位状態に変化させた場合も、動作変化として検出する。なお、上述した人物Ｐの動作の検出は、いかなる方法で行われてもよい。 The motion detection unit 13 also detects whether or not the person P has changed the motion on the bed B. For example, the motion detection unit 13 detects that the motion has changed by detecting that the positions of the highest apex and the center of gravity of the person detected from the distance image have changed. As an example, when the apex or the position of the center of gravity of a person changes by a predetermined value or more, it is detected that the movement has changed. At this time, the motion detection unit 13 also detects the change in motion when the person P changes from the supine lying position as shown in FIG. 3 to the lateral lying position shown in FIG. The above-mentioned movement of the person P may be detected by any method.

上記監視部１４（監視手段）は、上述したように検出した人物Ｐの動作と、当該人物Ｐの生体情報とに基づいて、当該生体情報に対する監視処理を行う。特に、監視部１４は、検出した人物Ｐの動作が、上述した「臥位」である場合に、生体センサＳから検出した生体情報の監視処理を行う。つまり、監視部１４は、臥位状態以外の場合には、生体情報に対する監視処理は行わない。そして、監視部１４は、具体的には、生体センサＳから検出した生体情報が、予め基準情報記憶部１６に記憶された不在時基準値情報と比較して、当該不在時基準値情報と異なり、生体情報が人物Ｐの有効値であると判断された場合に、検出した生体情報に対する監視処理を行う（図７のステップＳ４でＹｅｓ、ステップＳ５）。逆に、監視部１４は、生体センサＳから検出した生体情報が不在時基準値情報と同等である場合には、検出した生体情報に対する監視処理は行わない。 The monitoring unit 14 (monitoring means) performs monitoring processing on the biological information based on the operation of the person P detected as described above and the biological information of the person P. In particular, the monitoring unit 14 monitors the biometric information detected from the biosensor S when the detected movement of the person P is the above-mentioned "recumbent position". That is, the monitoring unit 14 does not perform monitoring processing on the biological information except in the lying position. Then, specifically, the monitoring unit 14 compares the biological information detected from the biological sensor S with the absent reference value information stored in the reference information storage unit 16 in advance, and is different from the absent reference value information. When it is determined that the biological information is a valid value of the person P, the detected biological information is monitored (Yes in step S4 of FIG. 7, step S5). On the contrary, when the biological information detected from the biological sensor S is equivalent to the reference value information at the time of absence, the monitoring unit 14 does not perform monitoring processing on the detected biological information.

ここで、上記不在時基準値情報は、図５の下図に示すように、予め記憶されたベッドＢ上に人物Ｐが存在していない状態における生体センサＳからの計測値である。このように、不在時基準値情報は、外部振動などにより多少の波形が表されているが、明らかにベッドＢ上に人物Ｐが存在している場合の波形とは異なる。このため、生体情報と不在時基準値情報との一定期間の振幅や振動数との差異を調べることで、生体情報が不在時基準値情報とは異なることを判断することができる。その結果、人物Ｐが存在していない場合の生体センサＳからの計測値を監視処理することを抑制することができ、より確実に人物Ｐの心拍や呼吸などを計測した生体情報に対する監視処理を行うことができる。 Here, the absent reference value information is a measured value from the biological sensor S in a state where the person P does not exist on the bed B stored in advance, as shown in the lower figure of FIG. As described above, the reference value information at the time of absence represents a slight waveform due to external vibration or the like, but is clearly different from the waveform when the person P is present on the bed B. Therefore, it can be determined that the biological information is different from the absent reference value information by examining the difference between the amplitude and the frequency of the biological information and the absent reference value information for a certain period. As a result, it is possible to suppress the monitoring processing of the measured value from the biological sensor S when the person P does not exist, and the monitoring processing for the biological information obtained by measuring the heartbeat, respiration, etc. of the person P more reliably can be performed. It can be carried out.

そして、監視部１４は、生体情報の監視処理に入ると、一定時間における生体センサＳからの計測値を正常基準値として予め設定して記憶しておく。そして、この正常基準値と、その後に検出した生体情報とを比較して、当該生体情報が正常か異常かの判定を行う。例えば、検出した生体情報である心拍や呼吸の波形の振幅や周波数が、正常基準値よりも大きすぎたり小さすぎる場合には、検出した生体情報が異常であると判定する。図６に示す呼吸の生体情報の例では、領域Ｒ１の波形は正常時を表しているが、領域Ｒ２の波形は異常時を表している。このため、領域Ｒ２のような波形を検出した場合には、異常であると判定する。そして、監視部１４は、生体情報が異常であると判定した場合には（図７のステップＳ７でＹｅｓ）、その旨を通知部１５に通知する（図７のステップＳ８）。すると、通知部１５は、人物Ｐの生体情報に異常があった旨を、携帯端末２０や監視端末３０に通知する。 Then, when the monitoring unit 14 enters the monitoring process of the biological information, the measured value from the biological sensor S at a certain time is set in advance as a normal reference value and stored. Then, the normal reference value is compared with the biological information detected thereafter, and it is determined whether the biological information is normal or abnormal. For example, if the amplitude or frequency of the heartbeat or respiration waveform that is the detected biological information is too large or too small than the normal reference value, it is determined that the detected biological information is abnormal. In the example of the biological information of respiration shown in FIG. 6, the waveform of the region R1 represents the normal time, but the waveform of the region R2 represents the abnormal time. Therefore, when a waveform such as the region R2 is detected, it is determined to be abnormal. Then, when the monitoring unit 14 determines that the biological information is abnormal (Yes in step S7 of FIG. 7), the monitoring unit 14 notifies the notification unit 15 to that effect (step S8 of FIG. 7). Then, the notification unit 15 notifies the mobile terminal 20 and the monitoring terminal 30 that there is an abnormality in the biological information of the person P.

また、監視部１４は、上述した生体情報の監視処理中に、動作検出部１３にて常に人物Ｐの動作検出が行われているが、当該動作検出部１３にて人物Ｐの動作が変化した場合には（図７のステップＳ６でＹｅｓ）、監視処理を一旦停止する。例えば、動作検出部１３により、図３に示すように人物Ｐが仰向けの臥位の状態から、図４に示すように寝返りを打って横向きの臥位の状態に動作が変化した場合であっても、監視部１４は監視処理を停止する。 Further, in the monitoring unit 14, the motion detection unit 13 constantly detects the motion of the person P during the above-mentioned biometric information monitoring process, but the motion detection unit 13 changes the motion of the person P. In that case (Yes in step S6 of FIG. 7), the monitoring process is temporarily stopped. For example, when the motion detection unit 13 changes the motion from the supine position as shown in FIG. 3 to the lateral recumbent position by turning over as shown in FIG. However, the monitoring unit 14 stops the monitoring process.

その後、監視部１４は、再度、人物Ｐの動作と、当該人物Ｐの生体情報とに基づいて、当該生体情報に対する監視処理を行う（図７のステップＳ２～Ｓ８）。例えば、監視部１４は、図３に示す仰向けの臥位から、図４に示す横向きの臥位に変化した後には、動作検出部１３で人物Ｐの動作が「臥位」と判断され（図７のステップＳ３でＹｅｓ）、計測した生体情報が人物の値であると判断されるため（図７のステップＳ４でＹｅｓ）、再度、生体情報の監視処理に入る（図７のステップＳ５）。このように、同じ臥位状態に動作が変化した場合であっても、一旦、監視処理を停止することにより、動作変化に伴う生体状態の変化を異常と誤検出することを抑制することができる。 After that, the monitoring unit 14 again performs monitoring processing for the biological information based on the operation of the person P and the biological information of the person P (steps S2 to S8 in FIG. 7). For example, after the monitoring unit 14 changes from the supine position shown in FIG. 3 to the lateral decubitus position shown in FIG. 4, the motion detection unit 13 determines that the movement of the person P is the “supine position” (FIG. 4). Since it is determined that the measured biometric information is the value of a person (Yes in step S4 of FIG. 7), the biometric information monitoring process is started again (step S5 of FIG. 7). In this way, even when the movement changes to the same lying position, by temporarily stopping the monitoring process, it is possible to suppress erroneous detection of the change in the biological state due to the movement change as an abnormality. ..

以上のように、本発明によると、ベッドＢに装備した生体センサＳにてより正確に人物Ｐの生体情報を検出することができる。その結果、人物Ｐの異常をより高精度に検出して通知することができる。 As described above, according to the present invention, the biological information of the person P can be detected more accurately by the biological sensor S equipped on the bed B. As a result, the abnormality of the person P can be detected and notified with higher accuracy.

なお、上述したプログラムは、記憶装置に記憶されていたり、コンピュータが読み取り可能な記録媒体に記録されている。例えば、記録媒体は、フレキシブルディスク、光ディスク、光磁気ディスク、及び、半導体メモリ等の可搬性を有する媒体である。 The above-mentioned program is stored in a storage device or recorded on a recording medium that can be read by a computer. For example, the recording medium is a portable medium such as a flexible disk, an optical disk, a magneto-optical disk, and a semiconductor memory.

以上、上記実施形態等を参照して本願発明を説明したが、本願発明は、上述した実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明の範囲内で当業者が理解しうる様々な変更をすることができる。 Although the invention of the present application has been described above with reference to the above-described embodiments and the like, the invention of the present application is not limited to the above-described embodiments. Various changes that can be understood by those skilled in the art can be made to the structure and details of the present invention within the scope of the present invention.

１０ 監視サーバ
１１ 距離画像取得部
１２ 生体情報計測部
１３ 動作検出部
１４ 監視部
１５ 通知部
１６ 基準情報記憶部
２０ 携帯端末
２１ 距離画像
３０ 監視端末
Ｂ ベッド
Ｃ 距離画像カメラ
Ｓ 生体センサ
Ｐ 人物
Ｕ ユーザ
10 Monitoring server 11 Distance image acquisition unit 12 Biometric information measurement unit 13 Motion detection unit 14 Monitoring unit 15 Notification unit 16 Reference information storage unit 20 Mobile terminal 21 Distance image 30 Monitoring terminal B Bed C Distance image camera S Biosensor P Person U User

Claims (7)

寝床を含む所定領域の距離画像を取得する距離画像取得手段と、
前記距離画像に基づいて、当該距離画像内の人物の動作を検出する検出手段と、
前記寝床に設置された計測装置から当該寝床上の人物の生体情報を検出する計測手段と、
前記人物の動作と前記生体情報とに基づいて、当該生体情報に対する監視処理を行う監視手段と、
を備え、
前記監視手段は、前記距離画像に基づいて検出した前記人物の動作が前記寝床上で臥位状態である場合に、前記生体情報に対する監視処理を行うと共に、前記監視処理を行っているときに前記距離画像に基づいて前記人物の動作が前記寝床上で変化したことを検出した場合に、当該監視処理を停止し、その後、改めて前記距離画像に基づいて検出した前記人物の動作が前記寝床上で臥位状態である場合に、前記生体情報に対する監視処理を行う、
情報処理装置。 A distance image acquisition means for acquiring a distance image of a predetermined area including a bed, and
A detection means for detecting the movement of a person in the distance image based on the distance image, and
A measuring means for detecting the biological information of a person on the bed from a measuring device installed on the bed, and a measuring means.
A monitoring means that performs monitoring processing on the biological information based on the movement of the person and the biological information.
Equipped with
The monitoring means performs monitoring processing on the biological information when the movement of the person detected based on the distance image is in a lying state on the bed, and when the monitoring processing is performed, the monitoring means is performed. When it is detected that the movement of the person has changed on the bed based on the distance image, the monitoring process is stopped, and then the movement of the person detected again based on the distance image is performed on the bed. When the person is in the lying position, the monitoring process for the biometric information is performed.
Information processing equipment. 請求項１に記載の情報処理装置であって、
前記検出手段は、前記距離画像に基づいて少なくとも前記人物の高さから当該人物の動作を検出し、
前記監視手段は、前記距離画像に基づいて検出した前記人物の動作が前記寝床上で臥位状態である場合に、前記生体情報に対する監視処理を行うと共に、前記監視処理を行っているときに前記距離画像に基づいて前記人物の高さが変化することで当該人物の動作が前記寝床上で変化したことを検出した場合に、当該監視処理を停止し、その後、改めて前記距離画像に基づいて検出した前記人物の動作が前記寝床上で臥位状態である場合に、前記生体情報に対する監視処理を行う、
情報処理装置。 The information processing apparatus according to claim 1.
The detection means detects the movement of the person from at least the height of the person based on the distance image, and determines the movement of the person.
The monitoring means performs monitoring processing on the biological information when the movement of the person detected based on the distance image is in a lying state on the bed, and when the monitoring processing is performed, the monitoring means is performed. When it is detected that the movement of the person has changed on the bed due to the change in the height of the person based on the distance image, the monitoring process is stopped, and then the detection is performed again based on the distance image. When the movement of the person is in a lying position on the bed, the monitoring process for the biometric information is performed.
Information processing equipment. 請求項１又は２に記載の情報処理装置であって、
前記検出手段は、前記距離画像に基づいて少なくとも前記人物の重心位置から当該人物の動作を検出し、
前記監視手段は、前記距離画像に基づいて検出した前記人物の動作が前記寝床上で臥位状態である場合に、前記生体情報に対する監視処理を行うと共に、前記監視処理を行っているときに前記距離画像に基づいて前記人物の重心位置が変化することで当該人物の動作が前記寝床上で変化したことを検出した場合に、当該監視処理を停止し、その後、改めて前記距離画像に基づいて検出した前記人物の動作が前記寝床上で臥位状態である場合に、前記生体情報に対する監視処理を行う、
情報処理装置。 The information processing apparatus according to claim 1 or 2.
The detection means detects the movement of the person from at least the position of the center of gravity of the person based on the distance image.
The monitoring means performs monitoring processing on the biological information when the movement of the person detected based on the distance image is in a lying state on the bed, and when the monitoring processing is performed, the monitoring means is performed. When it is detected that the movement of the person has changed on the bed due to the change in the position of the center of gravity of the person based on the distance image, the monitoring process is stopped, and then the detection is performed again based on the distance image. When the movement of the person is in a lying position on the bed, the monitoring process for the biometric information is performed.
Information processing equipment. 請求項１乃至３のいずれかに記載の情報処理装置であって、
前記監視手段は、前記距離画像に基づいて検出した前記人物の動作が前記寝床上で臥位状態である場合に、前記生体情報に対する監視処理を行うと共に、前記監視処理を行っているときに前記距離画像に基づいて前記人物の動作が前記寝床上で寝返りを打って変化したことを検出した場合に、当該監視処理を停止し、その後、改めて前記距離画像に基づいて検出した前記人物の動作が前記寝床上で臥位状態である場合に、前記生体情報に対する監視処理を行う、
情報処理装置。 The information processing apparatus according to any one of claims 1 to 3.
The monitoring means performs monitoring processing on the biological information when the movement of the person detected based on the distance image is in a lying state on the bed, and when the monitoring processing is performed, the monitoring means is performed. When it is detected that the movement of the person is changed by turning over on the bed based on the distance image, the monitoring process is stopped, and then the movement of the person detected based on the distance image is performed again. When the person is in a lying position on the bed, the biometric information is monitored.
Information processing equipment. 請求項１乃至４のいずれかに記載の情報処理装置であって、
前記監視手段は、前記生体情報が、予め設定された前記寝床上に人物が存在していない状態における前記計測装置からの計測値である不在時基準値情報と異なる場合に、前記生体情報に対する監視処理を行う、
情報処理装置。 The information processing apparatus according to any one of claims 1 to 4.
The monitoring means monitors the biometric information when the biometric information is different from the absence reference value information which is the measured value from the measuring device in a state where no person is present on the preset bed. Do the processing,
Information processing equipment. 情報処理装置が、
寝床を含む所定領域の距離画像を取得し、前記距離画像に基づいて当該距離画像内の人物の動作を検出すると共に、
前記寝床に設置された計測装置から当該寝床上の人物の生体情報を検出し、
前記人物の動作と前記生体情報とに基づいて、当該生体情報に対する監視処理を行う際に、前記距離画像に基づいて検出した前記人物の動作が前記寝床上で臥位状態である場合に、前記生体情報に対する監視処理を行い、前記監視処理を行っているときに前記距離画像に基づいて前記人物の動作が前記寝床上で変化したことを検出した場合に、当該監視処理を停止し、その後、改めて前記距離画像に基づいて検出した前記人物の動作が前記寝床上で臥位状態である場合に、前記生体情報に対する監視処理を行う、
情報処理方法。 Information processing equipment
A distance image of a predetermined area including a bed is acquired, the movement of a person in the distance image is detected based on the distance image, and the movement of the person is detected.
The biological information of the person on the bed is detected from the measuring device installed on the bed.
When the motion of the person detected based on the distance image is in a lying position on the bed when the monitoring process for the biological information is performed based on the motion of the person and the biometric information, the said. When the monitoring process for biometric information is performed and it is detected that the movement of the person has changed on the bed based on the distance image during the monitoring process, the monitoring process is stopped, and then the monitoring process is stopped. When the movement of the person detected based on the distance image is in the lying position on the bed, the monitoring process for the biometric information is performed.
Information processing method. 情報処理装置に、
寝床を含む所定領域の距離画像を取得する距離画像取得手段と、
前記距離画像に基づいて、当該距離画像内の人物の動作を検出する検出手段と、
前記寝床に設置された計測装置から当該寝床上の人物の生体情報を検出する計測手段と、
前記人物の動作と前記生体情報とに基づいて、当該生体情報に対する監視処理を行う監視手段と、
を実現させると共に、
前記監視手段は、前記距離画像に基づいて検出した前記人物の動作が前記寝床上で臥位状態である場合に、前記生体情報に対する監視処理を行うと共に、前記監視処理を行っているときに前記距離画像に基づいて前記人物の動作が前記寝床上で変化したことを検出した場合に、当該監視処理を停止し、その後、改めて前記距離画像に基づいて検出した前記人物の動作が前記寝床上で臥位状態である場合に、前記生体情報に対する監視処理を行う、
ことを実現させるためのプログラム。 For information processing equipment
A distance image acquisition means for acquiring a distance image of a predetermined area including a bed, and
A detection means for detecting the movement of a person in the distance image based on the distance image, and
A measuring means for detecting the biological information of a person on the bed from a measuring device installed on the bed, and a measuring means.
A monitoring means that performs monitoring processing on the biological information based on the movement of the person and the biological information.
Along with realizing
The monitoring means performs monitoring processing on the biological information when the movement of the person detected based on the distance image is in a lying state on the bed, and when the monitoring processing is performed, the monitoring means is performed. When it is detected that the movement of the person has changed on the bed based on the distance image, the monitoring process is stopped, and then the movement of the person detected again based on the distance image is performed on the bed. When the person is in the lying position, the monitoring process for the biometric information is performed.
A program to make that happen.
JP2018114218A 2018-06-15 2018-06-15 Information processing equipment, information processing method, program Active JP7090327B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2018114218A JP7090327B2 (en) 2018-06-15 2018-06-15 Information processing equipment, information processing method, program
PCT/JP2019/023347 WO2019240196A1 (en) 2018-06-15 2019-06-12 Information processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018114218A JP7090327B2 (en) 2018-06-15 2018-06-15 Information processing equipment, information processing method, program

Publications (3)

Publication Number Publication Date
JP2019216807A JP2019216807A (en) 2019-12-26
JP2019216807A5 JP2019216807A5 (en) 2021-07-26
JP7090327B2 true JP7090327B2 (en) 2022-06-24

Family

ID=68842970

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018114218A Active JP7090327B2 (en) 2018-06-15 2018-06-15 Information processing equipment, information processing method, program

Country Status (2)

Country Link
JP (1) JP7090327B2 (en)
WO (1) WO2019240196A1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111803769A (en) * 2020-06-19 2020-10-23 周建 Patient position abnormity management system and corresponding terminal
JP7396215B2 (en) 2020-06-26 2023-12-12 沖電気工業株式会社 Information processing device, information processing method, and information processing system

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014147594A (en) 2013-02-01 2014-08-21 Daikin Ind Ltd Living body monitoring system
WO2015037269A1 (en) 2013-09-13 2015-03-19 コニカミノルタ株式会社 Monitor subject monitoring device and method, and monitor subject monitoring system
JP2017023232A (en) 2015-07-17 2017-02-02 ジャスト株式会社 Health condition monitoring system
WO2017061371A1 (en) 2015-10-06 2017-04-13 コニカミノルタ株式会社 Action detecting system, action detecting device, action detecting method, and action detecting program
JP2017134037A (en) 2016-01-29 2017-08-03 パナソニックＩｐマネジメント株式会社 Watching system and control program
WO2017213136A1 (en) 2016-06-09 2017-12-14 コニカミノルタ株式会社 Living body monitoring device and living body monitoring method

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180000408A1 (en) * 2014-12-16 2018-01-04 Koninklijke Philips N.V. Baby sleep monitor

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014147594A (en) 2013-02-01 2014-08-21 Daikin Ind Ltd Living body monitoring system
WO2015037269A1 (en) 2013-09-13 2015-03-19 コニカミノルタ株式会社 Monitor subject monitoring device and method, and monitor subject monitoring system
JP2017023232A (en) 2015-07-17 2017-02-02 ジャスト株式会社 Health condition monitoring system
WO2017061371A1 (en) 2015-10-06 2017-04-13 コニカミノルタ株式会社 Action detecting system, action detecting device, action detecting method, and action detecting program
JP2017134037A (en) 2016-01-29 2017-08-03 パナソニックＩｐマネジメント株式会社 Watching system and control program
WO2017213136A1 (en) 2016-06-09 2017-12-14 コニカミノルタ株式会社 Living body monitoring device and living body monitoring method

Also Published As

Publication number Publication date
WO2019240196A1 (en) 2019-12-19
JP2019216807A (en) 2019-12-26

Similar Documents

Publication Publication Date Title
KR101070389B1 (en) System for monitoring patient condition
JP2009279076A (en) Monitoring system
CN111538030A (en) Method, system, and non-transitory computer readable medium for detecting human activity
JP6086468B2 (en) Subject monitoring system
WO2016186160A1 (en) Image processing system, image processing device, image processing method, and image processing program
JP7090327B2 (en) Information processing equipment, information processing method, program
WO2020145380A1 (en) Care recording device, care recording system, care recording program, and care recording method
JP7468350B2 (en) Condition monitoring device and control method for condition monitoring device
US20180322334A1 (en) Person Monitoring Device And Method, And Person Monitoring System
CN110799090A (en) Sleeping abnormality notification system, sleeping abnormality notification method, and program
JP2020187389A (en) Mobile body locus analysis apparatus, mobile body locus analysis program, and mobile body locus analysis method
JP7095870B2 (en) Information processing equipment
JP2020052826A (en) Information provision device, information provision system, information provision method, and program
JP7090328B2 (en) Information processing equipment
US20220148334A1 (en) Breathing detection apparatus and methods for detecting breathing
JP7232497B2 (en) Information processing equipment
WO2020149126A1 (en) Information processing device
JP7342863B2 (en) Computer-executed programs, information processing systems, and computer-executed methods
JP7033305B2 (en) Information processing equipment
JP6565468B2 (en) Respiration detection device, respiration detection method, and respiration detection program
JP7039011B2 (en) Information processing equipment
JP7364179B2 (en) robot
JP2020052808A (en) Supervision device, supervision system, supervision program, and supervision method
JP2022126069A (en) Image processing method
JP2022126071A (en) Image processing method

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210602

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210602

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220419

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220425

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220531

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220607

R150 Certificate of patent or registration of utility model

Ref document number: 7090327

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150