JP2022126070A - 画像処理方法 - Google Patents
画像処理方法 Download PDFInfo
- Publication number
- JP2022126070A JP2022126070A JP2021023927A JP2021023927A JP2022126070A JP 2022126070 A JP2022126070 A JP 2022126070A JP 2021023927 A JP2021023927 A JP 2021023927A JP 2021023927 A JP2021023927 A JP 2021023927A JP 2022126070 A JP2022126070 A JP 2022126070A
- Authority
- JP
- Japan
- Prior art keywords
- tracked
- moving object
- tracking
- detected
- distance image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims description 19
- 230000010365 information processing Effects 0.000 claims description 14
- 238000000034 method Methods 0.000 claims description 12
- 230000033001 locomotion Effects 0.000 description 56
- 238000001514 detection method Methods 0.000 description 52
- 238000012544 monitoring process Methods 0.000 description 38
- 238000010586 diagram Methods 0.000 description 8
- 230000002159 abnormal effect Effects 0.000 description 4
- 230000000474 nursing effect Effects 0.000 description 3
- 230000007423 decrease Effects 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 238000012806 monitoring device Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Length Measuring Devices By Optical Means (AREA)
- Image Analysis (AREA)
Abstract
【課題】距離画像からより精度よく移動体を検出すること。【解決手段】本発明の画像処理装置10は、距離画像に対して、追従対象である移動体と予め設定された追従基準により同一であると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行う追従処理部12を備える。そして、追従処理部12は、追従対象である移動体の追従に失敗したときに、追従基準を変更して距離画像から物体を検出して、当該検出した物体を追従対象である移動体として追従する処理を行う。【選択図】図1
Description
本発明は、距離画像から移動体を検出する処理を行う画像処理方法及び画像処理装置に関する。
近年、高齢者の人口が増加し、介護の需要が高まっている。一方で、介護には、多くの介護者が必要となり、介護者の作業負担や人件費の増加という問題が生じる。そこで、特許文献1に記載のような、距離画像センサで撮影した距離画像を用いて、被介護者といった人物を監視する監視システムが多く開発されている。
特許文献1に開示の監視システムでは、距離画像からベッドの位置を抽出し、また、人物の領域を検出し、人物の動作を判別している。具体的に、ベッドの位置は、ベッドの長手方向及び短手方向における高さの度数分布から求めている。また、人物の動作は、所定の高さ位置に対する物体の位置検出することで、臥床の状態、上半身を起こした状態、起立の状態、といった人の動作を判別している。
ここで、上述したように距離画像から人物の動作を検出する場合には、人物の頭部や胴体部、脚部などの各部位を検出し、各部位の位置関係を特定することで行う。このため、人物の向きや位置が変化すると、人物の各部位の大きさも変化し、各部位を精度よく検出することができず、人物の動作をより精度よく検出することが困難となる。また、人物に限らず、あらゆる移動体の動作を検出する際にも、同様の問題が生じる。
このため、本発明の目的は、上述した課題である、距離画像からより精度よく移動体の動作を検出するが困難である、ことを解決することにある。
本発明の一形態である画像処理方法は、
距離画像に対して、追従対象である移動体と予め設定された追従基準により同一であると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して距離画像から物体を検出して、当該検出した物体を追従対象である移動体として追従する処理を行う、
という構成をとる。
距離画像に対して、追従対象である移動体と予め設定された追従基準により同一であると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して距離画像から物体を検出して、当該検出した物体を追従対象である移動体として追従する処理を行う、
という構成をとる。
また、上記画像処理方法では、
距離画像に対して、前記追従基準により、追従対象である移動体と略同一の大きさであると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の大きさよりも小さい物体を距離画像から検出し、当該検出した物体を追従対象である移動体として追従する処理を行う、
という構成をとる。
距離画像に対して、前記追従基準により、追従対象である移動体と略同一の大きさであると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の大きさよりも小さい物体を距離画像から検出し、当該検出した物体を追従対象である移動体として追従する処理を行う、
という構成をとる。
また、上記画像処理方法では、
前記距離画像に対して、前記追従基準により、追従対象である移動体の各部位と略同一の大きさであると判断される物体を検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行い、
移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の各部位の大きさよりも小さい物体を距離画像から検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行う、
という構成をとる。
前記距離画像に対して、前記追従基準により、追従対象である移動体の各部位と略同一の大きさであると判断される物体を検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行い、
移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の各部位の大きさよりも小さい物体を距離画像から検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行う、
という構成をとる。
また、上記画像処理方法では、
距離画像に対して、前記追従基準により、追従対象である移動体と略同一の高さ位置に位置すると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の高さ位置よりも低い位置に位置する物体を距離画像から検出し、当該検出した物体を追従対象である移動体として追従する処理を行う、
という構成をとる。
距離画像に対して、前記追従基準により、追従対象である移動体と略同一の高さ位置に位置すると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の高さ位置よりも低い位置に位置する物体を距離画像から検出し、当該検出した物体を追従対象である移動体として追従する処理を行う、
という構成をとる。
また、上記画像処理方法では、
距離画像に対して、前記追従基準により、追従対象である移動体の各部位と略同一の高さ位置に位置すると判断される物体を検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の各部位の高さ位置よりも低い位置に位置する物体を距離画像から検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行う、
という構成をとる。
距離画像に対して、前記追従基準により、追従対象である移動体の各部位と略同一の高さ位置に位置すると判断される物体を検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の各部位の高さ位置よりも低い位置に位置する物体を距離画像から検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行う、
という構成をとる。
また、上記画像処理方法では、
前記距離画像に対して、前記追従基準により、追従対象である移動体の各部位と略同一の形状であると判断される物体を検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行い、
追従対象である移動体の追従に失敗したときであっても、追従対象である移動体の各部位と略同一の形状であると判断される物体を検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行う、
という構成をとる。
前記距離画像に対して、前記追従基準により、追従対象である移動体の各部位と略同一の形状であると判断される物体を検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行い、
追従対象である移動体の追従に失敗したときであっても、追従対象である移動体の各部位と略同一の形状であると判断される物体を検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行う、
という構成をとる。
また、本発明の一形態である画像処理装置は、
距離画像に対して、追従対象である移動体と予め設定された追従基準により同一であると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行う追従処理部を備え、
前記追従処理部は、追従対象である移動体の追従に失敗したときに、前記追従基準を変更して距離画像から物体を検出して、当該検出した物体を追従対象である移動体として追従する処理を行う、
という構成をとる。
距離画像に対して、追従対象である移動体と予め設定された追従基準により同一であると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行う追従処理部を備え、
前記追従処理部は、追従対象である移動体の追従に失敗したときに、前記追従基準を変更して距離画像から物体を検出して、当該検出した物体を追従対象である移動体として追従する処理を行う、
という構成をとる。
また、上記画像処理装置では、
前記追従処理部は、
距離画像に対して、前記追従基準により、追従対象である移動体と略同一の大きさであると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の大きさよりも小さい物体を距離画像から検出し、当該検出した物体を追従対象である移動体として追従する処理を行う、
という構成をとる。
前記追従処理部は、
距離画像に対して、前記追従基準により、追従対象である移動体と略同一の大きさであると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の大きさよりも小さい物体を距離画像から検出し、当該検出した物体を追従対象である移動体として追従する処理を行う、
という構成をとる。
また、上記画像処理装置では、
前記追従処理部は、
距離画像に対して、前記追従基準により、追従対象である移動体と略同一の高さ位置に位置すると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の高さ位置よりも低い位置に位置する物体を距離画像から検出し、当該検出した物体を追従対象である移動体として追従する処理を行う、
という構成をとる。
前記追従処理部は、
距離画像に対して、前記追従基準により、追従対象である移動体と略同一の高さ位置に位置すると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の高さ位置よりも低い位置に位置する物体を距離画像から検出し、当該検出した物体を追従対象である移動体として追従する処理を行う、
という構成をとる。
また、本発明の一形態であるプログラムは、
情報処理装置に、
距離画像に対して、追従対象である移動体と予め設定された追従基準により同一であると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して距離画像から物体を検出して、当該検出した物体を追従対象である移動体として追従する処理を行う、
処理を実行させる、
という構成をとる。
情報処理装置に、
距離画像に対して、追従対象である移動体と予め設定された追従基準により同一であると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して距離画像から物体を検出して、当該検出した物体を追従対象である移動体として追従する処理を行う、
処理を実行させる、
という構成をとる。
本発明は、以上のように構成されることにより、距離画像からより精度よく移動体を検出することができる。
<実施形態1>
本発明の第1の実施形態を、図1乃至図7を参照して説明する。図1乃至図2は、情報処理システムの構成を示す図である。図3乃至図7は、情報処理システムの処理動作を説明するための図である。以下、各図を参照して、情報処理システムの構成及び動作を説明する。
本発明の第1の実施形態を、図1乃至図7を参照して説明する。図1乃至図2は、情報処理システムの構成を示す図である。図3乃至図7は、情報処理システムの処理動作を説明するための図である。以下、各図を参照して、情報処理システムの構成及び動作を説明する。
本発明における情報処理システムは、被介護者や被監視者といった監視対象となる人物Pの行動を監視するための情報処理システムである。そして、情報処理システムは、監視サーバ10と、距離画像カメラCと、監視端末30と、携帯端末40と、を備えて構成されている。
上記距離画像カメラC(撮影装置)は、監視対象となる人物Pが横たわるベッドBが配置された領域である部屋R1(第一領域)内の距離画像を撮影可能な位置に配置されている。例えば、距離画像カメラCは、医療施設や介護施設、住宅などの部屋R1の天井に設けられ、部屋R1の大部分が画像内に収まる位置に配置されている。なお、距離画像カメラCは、必ずしも天井に設置されていることに限定されず、壁やスタンドなど、いかなる場所に設置されていてもよい。但し、部屋R1に設置されるベッドBは、布団などのいかなる寝床であってもよい。
距離画像カメラCは、画素値を距離値とした距離画像を撮影するものである。例えば、距離画像カメラCは、赤外線レーザをターゲットに投射した際の往復の時間から距離を計測する形式のものであってもよく、いかなる方式の撮影装置であってもよい。そして、距離画像カメラCは、一定の時間間隔で、あるいは、撮影指示を受けたタイミングで、距離画像を撮影し、かかる距離画像を後述する監視サーバ10に送信する機能を有する。なお、後述する監視サーバ10の機能については、上記距離画像カメラCに搭載することもできる。つまり、距離画像カメラCに搭載された情報処理装置にて監視サーバ10の機能を実現してもよい。
上記監視端末30(監視装置)は、被介護者である人物Pの介護を行う介護者や、監視する監視者であるユーザUが操作する情報処理端末である。監視端末30は、介護者などのユーザUが在籍する監視ルームR2など、人物Pの部屋R1(第一領域)とは離れた場所(第二領域)に設置されており、複数のユーザUによって操作可能である。監視端末30は、表示画面に距離画像を表示すると共に、監視に関する操作指示を入力可能とし、かかる操作指示を監視サーバ10に送信したり、監視サーバ10から発せられる人物Pの状態の通知を受信して、ユーザUに報知する機能を有する。
上記携帯端末40(監視装置)は、上記ユーザUが保持して操作するスマートフォンなどの情報処理端末である。携帯端末40は、監視サーバ10と無線通信を介して接続される通信可能であり、介護者などのユーザUが在籍する監視ルームR2や他の被介護者の部屋など、人物Pの部屋R1(第一領域)とは離れた場所(第二領域)に位置し、複数のユーザUによって操作可能である。携帯端末40は、表示画面に距離画像を表示すると共に、監視に関する操作指示を入力可能とし、かかる操作指示を監視サーバ10に送信したり、監視サーバ10から発せられる人物Pの状態の通知を受信して、ユーザUに報知する機能を有する。
上記監視サーバ10は、距離画像カメラCからの距離画像を用いて人物Pの部屋における当該人物Pの特定の動作状態を検知する機能を主に有する。そして、監視サーバ10は、演算装置及び記憶装置を有する1台又は複数台の情報処理装置で構成される。具体的に、監視サーバ10は、図2に示すように、演算装置がプログラムを実行することで構築された、画像取得部11、動作検知部12、通知部13、を備えている。また、監視サーバ10は、記憶装置に形成された、判定基準記憶部16を備えている。以下、各構成について詳述するが、併せて監視サーバ10の動作も図7のフローチャートを参照して説明する。なお、監視サーバ10の機能については、上記距離画像カメラCに搭載することもできる。つまり、距離画像カメラCに搭載された情報処理装置にて監視サーバ10の機能を実現してもよい。
上記画像取得部11は、上述したように距離画像カメラCにて撮影されたベッドBを含む部屋R1内の距離画像を、当該距離画像カメラCから取得する。そして、取得した距離画像を動作検知部12に渡すことで、当該距離画像は後述する処理に用いられる。なお、画像取得部11は、常に取得した距離画像をそのまま監視端末30や携帯端末40に送信し、監視端末30や携帯端末40の表示装置に表示するよう出力してもよい。
上記動作検知部12(追従処理部)は、距離画像内における人物Pを検出する処理を行う。具体的に、動作検知部12は、まず、時間的に前後する距離画像の差分を用いて、かかる差分が所定値よりも小さい箇所を背景部分として検出する(図7のステップS1)。例えば、部屋R1の距離画像において、床面や壁面、ベッドBといった固定物が映る箇所は、背景部分として検出される。このとき、動作検知部12は、検出した背景部分から、ベッドB(寝床)の領域であるベッド領域を検出する。例えば、動作検知部12は、距離画像から、所定の高さ位置に水平方向に所定の広さをもって広がる平面を検出し、かかる平面のうち、予め記憶しているベッド情報に対応する平面領域をベッド領域として検出する。例えば、ベッド情報は判定基準記憶部16に記憶されており、当該ベッド情報には、ベッドの広さや矩形である外形の長辺及び短辺の長さ、床面Fからの高さ、といった情報が含まれる。そして、動作検知部12は、特に、ベッド領域の外形を形成する端であるエッジ部分を検出する。例えば、動作検知部12は、ベッドBの外形付近に位置する箇所であって、近隣する画素同士の距離値が急激に変化する直線形状の箇所を、エッジ部分として検出する。
そして、動作検知部12は、新たに撮影された距離画像の各画素において背景部分と距離の差分を算出し、かかる差分が所定値よりも大きい箇所に移動する物体(移動体)が存在することを検出する(図7のステップS2)。そして、動作検知部12は、さらに、検出した物体の形状に基づいて人物Pを検出して、その後に順次撮影される距離画像において人物Pを追従する(図7のステップS3)。例えば、動作検知部12は、検出した物体の形状(一例として、アスペクト比)や、物体間の位置関係や体積比(面積比)などから、頭部と胴体部との対といった複数の人体部位からなる人物Pを検出する。そして、例えば、動作検知部12は、新たな距離画像に対して、人体部位の形状をパターンマッチングしたり、部位の特徴点のオプティカルフローなども用いて、同一と判断できる人物Pの部位(頭部や胴体部など)を追従する。このとき、動作検知部12は、新たな距離画像に対して、直前に検出した人物Pの位置の近隣に存在する物体を検出して、パターンマッチングなどを用いて追従する。
ここで、図3乃至図6を参照して、本実施形態における動作検知部12による追従処理の具体例を説明する。なお、図3乃至図6の例では、動作検知部12は、人物Pの頭部である部位を追従する処理を一例に挙げて説明する。但し、動作検知部12は、人物Pの頭部や胴体部といった各部位を検出して、かかる各部位の組み合わせを追従対象である人物Pとして追従することとしている。
まず、動作検知部12は、図3(1),(2)に示すように、新たな距離画像に対して検出領域Aを設定し、かかる検出領域A内で追従対象である人物Pの頭部であると判断できる物体を検出する。なお、検出領域Aは、追従対象である人物Pの頭部を、図3(1)に示すように直前の距離画像で追従した位置の周囲領域であり、かかる頭部位置を中心とした事前に設定された大きさの領域であることとする。そして、動作検知部12は、検出領域A内において、追従対象である人物Pの頭部と同一の形状かつ同一の大きさの物体を検出する。例えば、動作検知部12は、図3(1)に示す直前の距離画像で追従した人物Pの頭部と略同一の形状かつ同一の大きさとなる矩形のテンプレートTを用意し、図3(2)に示すその後の距離画像においてテンプレートTと合致する物体を検出する。このとき、動作検知部12は、テンプレートTに対して予め設定された許容範囲内で大きさが異なる物体も、略同一の大きさの物体として検出する。例えば、テンプレートTの縦横それぞれにおいて許容範囲内で長さが異なっている物体であっても、略同一の大きさの物体として検出する。また、動作検知部12は、テンプレートTの向きをあらゆる角度に回転させて略同一の大きさの物体を検出することで、略同一の形状の物体を検出する。このようにして、動作検知部12は、図3(2)の例では、新たな距離画像内で検出した物体を、人物Pの頭部として追従する。なお、上述したような人物Pの部位の追従方法は、予め追従基準として設定されていることとする。
一方で、図4(1)に示す人物Pが立っている状態から、図4(2)に示す人物Pがうずくまっている状態に急に動作した場合には、距離画像カメラCから頭部までの距離が遠くなり、また、距離画像カメラCに対する頭部の向きが変化することで、距離画像内における頭部の大きさが小さくなる。すると、距離画像内の頭部の大きさは、テンプレートTと略同一の大きさと判断されず、頭部の追従に失敗することとなる(図7のステップS4でYes)。この場合、動作検知部12は、追従基準を変更し、特に、テンプレートTの大きさを変更して(図7のステップS11)、再度、頭部の追従を行う(図7のステップS3)。
例えば、動作検知部12は、テンプレートTの大きさを小さく変更し、変更したテンプレートT’と略同一の大きさと判断される物体を検出する。つまり、動作検知部12は、頭部の追従に失敗すると、これまで追従してきた頭部の大きさよりも小さい物体を検出する。一例として、動作検知部12は、矩形であるテンプレートTの縦横の長さを、その比率を変えずに、それぞれ2/3や1/2というように短く変更して、テンプレートT’の大きさを小さく変更する。なお、変更前のテンプレートTと変更後のテンプレートT’とは、縦横比(アスペクト比)を変更しないことで、各テンプレートT,T’は略同一の形状であると言える。但し、テンプレートT’は、変更前のテンプレートTに対して、その形状が変更となってもよい。このようにテンプレートT’の大きさを小さく変更することで、動作検知部12は、図5(2)に示すように、急に人物Pの頭部の大きさが小さくなった場合でも、かかる頭部である物体を検出でき、人物Pの頭部として追従することができる(図7のステップS4でNo)。なお、動作検知部12は、テンプレートTの大きさを複数回、段階的に小さくなるよう変更して、それぞれ変更したテンプレートT’で物体の検出を行ってもよい。
また、一方で、図6(1)に示す人物Pが立っている状態から、図6(2)に示す人物Pが床面に倒れた状態に急に動作した場合には、距離画像内における頭部の位置が検出領域Aから外れることとなる。すると、動作検知部12は、頭部の追従に失敗することとなる(図7のステップS4でYes)。この場合、動作検知部12は、追従基準を変更し、特に、距離画像内の高さ方向において検出領域Aよりもさらに低い位置で、再度、頭部の追従を行う(図7のステップS11)。つまり、動作検知部12は、通常は、検出領域A内に位置する物体は、直前に検出された頭部の位置と略同一の高さ位置に位置する物体であると判断して検出するが、追従に失敗した場合には、検出領域Aよりもさらに低い位置に位置する物体を検出することとなる(図7のステップS3)。
例えば、動作検知部12は、検出領域Aの下端よりも下方の全ての範囲を対象に、テンプレートTと略同一の大きさと判断される物体を検出する。このとき、動作検知部12は、上述したように、テンプレートTを回転させて検出を行ってもよく、テンプレートTの大きさを小さくして検出を行ってもよい。このように、動作検知部12は、直前に追従した頭部の位置よりも低い位置の物体も検出することで、図6(2)に示すように、急に人物Pの頭部の位置が低い位置に移動した場合であっても、かかる頭部である物体を検出でき、人物Pの頭部として追従することができる(図7のステップS4でNo)。
以上のようにして、動作検知部12は、人物Pの頭部等の部位の追従が成功すると(図7のステップS4でNo)、追従した人物Pの動作状態を検出し(図7のステップS5)、特定の動作状態であるどうかを判定する(図7のステップS6)。例えば、動作検知部12は、追従した人物Pの人体部位(頭部や胴体部など)の位置関係に基づいて、かかる人物Pの動作状態を検出する。一例として、動作検知部12は、頭部から検出できる人物Pの高さと、胴体部から検出できる重心位置と、距離画像内のベッドBと、の位置関係に基づいて、人物Pの動作状態を検出し、かかる動作状態が予め設定された特定の動作状態であるか否かを判定する。例えば、人物PがベッドBに横たわっている状態(臥位状態)である場合には、人物Pがかかる状態(ベッドB上に位置して横たわっている)であることを認識するだけで、特定の動作状態とは判定しない(図7のステップS6でNo)。一方で、動作検知部12は、例えば、人物PがベッドBの境界に位置する状態や、人物PがベッドBから離れてうずくまっている状態、人物PがベッドBから離れて横たわっている状態、である場合には、人物Pの動作状態が異常と判断できる可能性のある特定の動作状態であると判定する(図7のステップS6でYes)。なお、上述したように人物Pの高さ、重心位置、ベッドBなどとの位置関係に基づいて人物Pの動作状態が特定の動作状態であると判断する基準は、予め判定基準記憶部16に記憶されていることとする。
上記通知部13は、上述したように動作検知部12にて人物Pが特定の動作状態であると判定すると(図7のステップS6でYes)、ユーザUに対して人物Pが異常状態である可能性がある旨の通知を行う(図7のステップS7)。例えば、通知部13は、監視端末30や携帯端末40に対して、人物Pが異常状態である可能性があることを通知する通知情報を送信する。但し、本発明で判定する特定の動作状態は、上述した状態に限定されず、他の動作状態を特定の動作状態として判定してもよい。例えば、人物PがベッドBに立つ状態(立位状態)、人物PがベッドB上に座っている状態(起き上がり状態)、を異常と判断できる可能性のある特定の動作状態として判定してもよい。
以上のように、本発明によると、追従している人物Pの部位の大きさが急に変化した場合であっても、追従する部位の大きさを小さくしたり、追従位置の高さを低く変更するなど、追従する部位の追従基準を変更して、かかる部位を追従している。このため、距離画像からより精度よく移動体を検出することができる。
なお、上述したプログラムは、記憶装置に記憶されていたり、コンピュータが読み取り可能な記録媒体に記録されている。例えば、記録媒体は、フレキシブルディスク、光ディスク、光磁気ディスク、及び、半導体メモリ等の可搬性を有する媒体である。
以上、上記実施形態等を参照して本願発明を説明したが、本願発明は、上述した実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明の範囲内で当業者が理解しうる様々な変更をすることができる。
10 監視サーバ
11 画像取得部
12 動作検知部
13 通知部
16 判定基準記憶部
30 監視端末
40 携帯端末
B ベッド
C 距離画像カメラ
P 人物
U ユーザ
11 画像取得部
12 動作検知部
13 通知部
16 判定基準記憶部
30 監視端末
40 携帯端末
B ベッド
C 距離画像カメラ
P 人物
U ユーザ
Claims (10)
- 距離画像に対して、追従対象である移動体と予め設定された追従基準により同一であると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して距離画像から物体を検出して、当該検出した物体を追従対象である移動体として追従する処理を行う、
画像処理方法。 - 請求項1に記載の画像処理方法であって、
距離画像に対して、前記追従基準により、追従対象である移動体と略同一の大きさであると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の大きさよりも小さい物体を距離画像から検出し、当該検出した物体を追従対象である移動体として追従する処理を行う、
画像処理方法。 - 請求項2に記載の画像処理方法であって、
前記距離画像に対して、前記追従基準により、追従対象である移動体の各部位と略同一の大きさであると判断される物体を検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行い、
移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の各部位の大きさよりも小さい物体を距離画像から検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行う、
画像処理方法。 - 請求項1乃至3のいずれかに記載の画像処理方法であって、
距離画像に対して、前記追従基準により、追従対象である移動体と略同一の高さ位置に位置すると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の高さ位置よりも低い位置に位置する物体を距離画像から検出し、当該検出した物体を追従対象である移動体として追従する処理を行う、
画像処理方法。 - 請求項4に記載の画像処理方法であって、
距離画像に対して、前記追従基準により、追従対象である移動体の各部位と略同一の高さ位置に位置すると判断される物体を検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の各部位の高さ位置よりも低い位置に位置する物体を距離画像から検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行う、
画像処理方法。 - 請求項1乃至5のいずれかに記載の画像処理方法であって、
前記距離画像に対して、前記追従基準により、追従対象である移動体の各部位と略同一の形状であると判断される物体を検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行い、
追従対象である移動体の追従に失敗したときであっても、追従対象である移動体の各部位と略同一の形状であると判断される物体を検出し、当該検出した物体を追従対象である移動体の各部位として追従する処理を行う、
画像処理方法。 - 距離画像に対して、追従対象である移動体と予め設定された追従基準により同一であると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行う追従処理部を備え、
前記追従処理部は、追従対象である移動体の追従に失敗したときに、前記追従基準を変更して距離画像から物体を検出して、当該検出した物体を追従対象である移動体として追従する処理を行う、
画像処理装置。 - 請求項7に記載の画像処理装置であって、
前記追従処理部は、
距離画像に対して、前記追従基準により、追従対象である移動体と略同一の大きさであると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の大きさよりも小さい物体を距離画像から検出し、当該検出した物体を追従対象である移動体として追従する処理を行う、
画像処理装置。 - 請求項7又は8に記載の画像処理装置であって、
前記追従処理部は、
距離画像に対して、前記追従基準により、追従対象である移動体と略同一の高さ位置に位置すると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して、追従対象である移動体の高さ位置よりも低い位置に位置する物体を距離画像から検出し、当該検出した物体を追従対象である移動体として追従する処理を行う、
画像処理装置。 - 情報処理装置に、
距離画像に対して、追従対象である移動体と予め設定された追従基準により同一であると判断される物体を検出し、当該検出した物体を追従対象である移動体として追従する処理を行い、
追従対象である移動体の追従に失敗したときに、前記追従基準を変更して距離画像から物体を検出して、当該検出した物体を追従対象である移動体として追従する処理を行う、
処理を実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021023927A JP2022126070A (ja) | 2021-02-18 | 2021-02-18 | 画像処理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021023927A JP2022126070A (ja) | 2021-02-18 | 2021-02-18 | 画像処理方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2022126070A true JP2022126070A (ja) | 2022-08-30 |
Family
ID=83058992
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021023927A Pending JP2022126070A (ja) | 2021-02-18 | 2021-02-18 | 画像処理方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2022126070A (ja) |
-
2021
- 2021-02-18 JP JP2021023927A patent/JP2022126070A/ja active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6137425B2 (ja) | 画像処理システム、画像処理装置、画像処理方法、および画像処理プログラム | |
JP6182917B2 (ja) | 監視装置 | |
JP2014236896A (ja) | 情報処理装置、情報処理方法、及び、プログラム | |
JPWO2016181837A1 (ja) | 画像処理システム、画像処理装置、画像処理方法、および画像処理プログラム | |
JP7090327B2 (ja) | 情報処理装置、情報処理方法、プログラム | |
JP7347577B2 (ja) | 画像処理システム、画像処理プログラム、および画像処理方法 | |
JP2022126070A (ja) | 画像処理方法 | |
JPWO2020008726A1 (ja) | 対象物体検出プログラム、および対象物体検出装置 | |
JP2022126071A (ja) | 画像処理方法 | |
JP7232497B2 (ja) | 情報処理装置 | |
JP2022126069A (ja) | 画像処理方法 | |
JPWO2018030024A1 (ja) | 見守りシステム、見守り装置、見守り方法、および見守りプログラム | |
JP2023548886A (ja) | カメラを制御するための装置及び方法 | |
JP7095870B2 (ja) | 情報処理装置 | |
JP6565468B2 (ja) | 呼吸検知装置、呼吸検知方法、及び呼吸検知プログラム | |
JP7090328B2 (ja) | 情報処理装置 | |
JP6115693B1 (ja) | 対象物検出装置および対象物検出方法ならびに被監視者監視装置 | |
JP2021033379A (ja) | 画像処理システム、画像処理プログラム、および画像処理方法 | |
WO2019163561A1 (ja) | 情報処理装置 | |
JP7039011B2 (ja) | 情報処理装置 | |
JP2019204366A (ja) | 行動監視装置及び行動監視方法 | |
WO2020145145A1 (ja) | 情報処理装置 | |
WO2020149126A1 (ja) | 情報処理装置 | |
JP2023051151A (ja) | ナースコールシステム | |
JP2023051147A (ja) | ナースコールシステム、および状態判断システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20231201 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20240612 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240625 |