KR101927373B1 - 거주자 모니터링 방법, 장치 및 시스템 - Google Patents

거주자 모니터링 방법, 장치 및 시스템 Download PDF

Info

Publication number
KR101927373B1
KR101927373B1 KR1020180071346A KR20180071346A KR101927373B1 KR 101927373 B1 KR101927373 B1 KR 101927373B1 KR 1020180071346 A KR1020180071346 A KR 1020180071346A KR 20180071346 A KR20180071346 A KR 20180071346A KR 101927373 B1 KR101927373 B1 KR 101927373B1
Authority
KR
South Korea
Prior art keywords
resident
biometric data
song
biometric
management server
Prior art date
Application number
KR1020180071346A
Other languages
English (en)
Inventor
최준형
이용은
김현정
Original Assignee
주식회사 씨앤더블유커뮤니케이션
김현정
최준형
이용은
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 씨앤더블유커뮤니케이션, 김현정, 최준형, 이용은 filed Critical 주식회사 씨앤더블유커뮤니케이션
Priority to KR1020180071346A priority Critical patent/KR101927373B1/ko
Application granted granted Critical
Publication of KR101927373B1 publication Critical patent/KR101927373B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/04Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons
    • G08B21/0438Sensor means for detecting
    • G08B21/0476Cameras to detect unsafe condition, e.g. video cameras
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/0202Child monitoring systems using a transmitter-receiver system carried by the parent and the child
    • G08B21/0277Communication between units on a local network, e.g. Bluetooth, piconet, zigbee, Wireless Personal Area Networks [WPAN]
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/04Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons
    • G08B21/0438Sensor means for detecting
    • G08B21/0461Sensor means for detecting integrated or attached to an item closely associated with the person but not worn by the person, e.g. chair, walking stick, bed sensor
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/14Central alarm receiver or annunciator arrangements

Landscapes

  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Gerontology & Geriatric Medicine (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Child & Adolescent Psychology (AREA)
  • Alarm Systems (AREA)

Abstract

본 발명은 카메라 또는 모션 감지기로부터 수신된 데이터를 이용하여 거주자의 움직임을 포착 시도하는 단계, 지정시간 동안 움직임이 포착되지 않는 경우, 알람 신호를 출력하는 단계, 알람 신호에 후속하여, 거주자의 움직임을 포착 시도하는 단계 및 지정시간 이내에 움직임이 포착되지 않는 경우, 광대역 통신망을 통해 관리 서버로 알람 메시지를 전송하는 단계를 포함하는, 거주자 모니터링 방법, 장치 및 시스템에 관한 것이다.

Description

거주자 모니터링 방법, 장치 및 시스템{METHOD, APPARATUS AND SYSTEM FOR MONITERING RESIDENT}
본 발명은 거주자 모니터링 방법, 장치 및 시스템에 관한 것으로서, 구체적으로는 각종 센서로부터의 데이터를 이용하는 인공지능 기술을 활용하여 독거 생활인에 특화하여 건강한 삶을 유지하고 돌볼 수 있도록 하는 거주자 모니터링 방법, 장치 및 시스템에 관한 것이다.
저출산 현상과 의학 기술의 발전에 따라 인구의 노령화 현상이 두드러지고 고령사회로 진입하고 있다. 또한, 저출산 현상과 핵가족화로 인해 1인 세대가 증가하고 있다.
고령화 현상과 핵가족화로 인해 1인(독거) 세대에 대해 관리가 필요하다. 특히, 1인 노인 세대의 독거노인은 부양자 등의 지속적인 관리가 필요한 실정이고 관리를 받지 못하는 특정 노인은 사망 후 수개월 후에 발견되는 실정에 처해 있다.
독거노인 관리를 위해 기존 알려진 발명들은 주로 독거노인의 움직임 여부를 모니터링하고 일정 시간 움직임이 없는 경우에 긴급 호출을 관리자나 소방서 등으로 전달한다. 이러한 발명들은 독거노인의 직접적인 비상상황을 인식할 수 있어 일면 유의미한 점이 있다.
그러나 1인 세대, 특히 독거노인은 다양한 케어가 필요하다. 즉, 독거노인은 건강관리, 정신적인 관리 등이 지속적으로 필요하고 지속적인 모니터링에 따라 독거노인의 현재 상태를 판단할 수 있는 방안이 필요하다.
예를 들어, 독거노인의 건강을 자연스럽게 체크하고 건강상태 변화 추이에 따라 질병을 진단하거나 예측하면 독거노인의 건강관리에 많은 도움이 된다. 또한, 독거노인의 정신적 또는 심리적 상태를 자연스럽게 체크하고 예측된 심리(정신) 상태에 다양한 반응을 제공할 수 있다면 독거노인의 심리(정신)적 안정에 많은 도움이 될 수 있다.
이와 같이 기존에 알려진 독거노인의 모니터링 방안과는 달리 1인 거주자의 다양한 상태를 모니터링하고 그에 따른 관리를 거주자에게 제공할 수 있는 거주자 모니터링 방법, 장치 및 시스템이 필요하다.
10-2016-0041203(A), 2016년04월18일
본 발명은, 상술한 문제점을 해결하기 위해서 안출한 것으로서, 원격에서 거주자의 다양한 상태를 모니터링하고 모니터링 결과에 따라 거주자를 관리 가능토록 하는 거주자 모니터링 방법, 장치 및 시스템을 제공하는 데 그 목적이 있다.
또한, 본 발명은 거주자로부터 인식된 생체 데이터로부터 거주자의 건강상태를 인공지능 기술을 이용하여 판단하고 판단 결과에 따라 건강관리를 받을 수 있도록 하는 거주자 모니터링 방법, 장치 및 시스템을 제공하는 데 그 목적이 있다.
또한, 본 발명은 거주자가 부르는 노래를 통해 거주자의 심리(정신)상태를 인공지능 기술을 이용하여 판단하고 판단 결과에 따라 심리(정신)상태 개선이나 치유를 위한 관리를 받을 수 있도록 하는 거주자 모니터링 방법, 장치 및 시스템을 제공하는 데 그 목적이 있다.
또한, 본 발명은 노래를 부를 때 이용하는 마이크를 통해 자연스럽게 인식된 생체 데이터를 활용하여 거주자의 건강상태의 체크가 가능하고 부르는 노래 유형과 가사에 따라 판단되는 심리(정신)상태에 따라 추천되는 노래를 부를 수 있도록 유도하는 거주자 모니터링 방법, 장치 및 시스템을 제공하는 데 그 목적이 있다.
본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 양상에 따른 거주자 모니터링 방법은 거주자 모니터링 장치가 카메라 또는 모션 감지기로부터 수신된 데이터를 이용하여 거주자의 움직임을 포착 시도하는 단계, 지정시간 동안 움직임이 포착되지 않는 경우, 거주자 모니터링 장치가 알람 신호를 출력하는 단계, 알람 신호에 후속하여, 거주자 모니터링 장치가 거주자의 움직임을 포착 시도하는 단계 및 지정시간 이내에 움직임이 포착되지 않는 경우, 거주자 모니터링 장치가 광대역 통신망을 통해 관리 서버로 알람 메시지를 전송하는 단계를 포함한다.
상기한 거주자 모니터링 방법에 있어서, 거주자 모니터링 장치가 근거리 개인 통신망을 통해 리모컨으로부터 센싱된 생체 데이터를 수신하는 단계, 거주자 모니터링 장치가 생체 데이터를 포함하는 생체 센싱 메시지를 광대역 통신망을 통해 관리 서버로 전송하는 단계 및 관리 서버가 거주자 모니터링 장치로부터 수신된 복수의 생체 센싱 메시지를 이용하여 거주자의 건강상태를 인공지능 알고리즘을 통해 추측하는 단계를 더 포함한다.
상기한 거주자 모니터링 방법에 있어서, 근거리 개인 통신망을 통해 거주자 모니터링 장치에 연결된 마이크가 마이크 그릴 내에 내장된 생체신호 센서를 통해 생체 데이터를 센싱하는 단계, 마이크가 센싱된 생체 데이터를 근거리 개인 통신망을 통해 거주자 모니터링 장치로 전송하는 단계 거주자 모니터링 장치가 재생중인 노래 정보를 이용하여 수신된 생체 데이터를 필터링하는 단계 및 거주자 모니터링 장치가 필터링 후의 생체 데이터를 포함하는 생체 센싱 메시지를 광대역 통신망을 통해 관리 서버로 전송하는 단계를 더 포함한다.
상기한 거주자 모니터링 방법에 있어서, 마이크는 구비된 압력 센서를 통해 센싱된 압력 신호가 임계치 이상인 경우에 생체신호 센서를 통해 센싱된 생체 데이터를 거주자 모니터링 장치로 전송한다.
상기한 거주자 모니터링 방법에 있어서, 필터링 단계는 재생중인 노래의 노래 구간 중 지정된 음높이 이하의 노래 구간에서 센싱된 생체 데이터를 필터링하고, 생체 센싱 메시지는 필터링 후의 생체 데이터에 대응하는 노래 구간에서의 음높이 정보를 더 포함한다.
상기한 거주자 모니터링 방법에 있어서, 거주자 모니터링 장치가 근거리 개인 통신망을 통해 리모컨으로부터 노래 선곡 정보를 수신하는 단계 및 거주자 모니터링 장치가 복수의 선곡된 노래 정보의 가사 아이템의 반복 회수에 기초하여 추천 노래 유형을 결정하고 추천 노래 유형의 노래 정보를 출력하는 단계를 더 포함한다.
상기한 거주자 모니터링 방법에 있어서, 거주자 움직임의 포착 시도 단계 이전에, 거주자 모니터링 장치가 카메라 또는 모션 감지기로부터의 데이터에 대한 머신 러닝 지도학습 알고리즘에 따라 생활 패턴을 학습하는 단계를 더 포함하고, 알람 신호 출력 단계는 거주자 모니터링 장치가 학습한 생활 패턴에 기초하여 움직임 예측 시간 동안에 움직임이 포착되지 않는 경우 알람 신호를 출력하며, 생활 패턴은 근거리 개인 통신망을 통해 연결된 리모컨으로부터의 사용자 입력에 따라 갱신된다.
본 발명의 일 양상에 따른 거주자 모니터링 장치는 카메라 또는 모션 감지기로부터 데이터를 수신하는 근거리 통신부, 거주자 모니터링을 위한 제어 프로그램을 저장하는 저장부, 거주자가 인식 가능한 신호를 출력하는 신호 출력부, 광대역 통신망을 통해 통신 데이터를 송수신하는 광대역 통신부 및 제어 프로그램을 로딩하여 거주자 모니터링 장치를 제어하는 제어부로서, 근거리 통신부로부터의 데이터를 이용하여 지정시간 동안 거주자의 움직임을 포착 시도하고 지정시간 동안 움직임이 포착되지 않는 경우 신호 출력부를 통해 알람 신호를 출력하며, 알람 신호의 출력에 후속하여 거주자의 움직임을 지정시간 동안 다시 포착 시도하고 지정시간 동안 움직임이 포착되지 않는 경우 광대역 통신부를 통해 알람 메시지를 관리 서버로 전송하는, 제어부를 포함한다.
상기한 거주자 모니터링 장치에 있어서, 근거리 통신부는 연결된 리모컨으로부터 센싱된 생체 데이터를 수신하고, 제어부는 센싱된 생체 데이터를 포함하는 생체 센싱 메시지를 구성하여 광대역 통신부를 통해 관리 서버로 전송하고, 생체 센싱 메시지는 관리 서버로 하여금 거주자의 건강상태를 인공지능 알고리즘을 통해 추정 가능토록 한다.
상기한 거주자 모니터링 장치에 있어서, 근거리 통신부는 연결된 마이크로부터 센싱한 생체 데이터를 수신하고, 제어부는 재생중인 노래의 노래 구간 중 지정된 음높이 이하의 노래 구간에서 센싱된 생체 데이터를 필터링하고 필터링 후의 생체 데이터와 대응하는 노래 구간의 음높이 정보를 포함하는 생체 센싱 메시지를 광대역 통신부를 통해 관리 서버로 전송한다.
본 발명의 일 양상에 따른 거주자 모니터링 시스템은 상기한 거주자 모니터링 장치 및 광대역 통신망을 통해 상기 거주자 모니터링 장치에 연결된 관리 서버를 포함하고, 거주자 모니터링 장치는 근거리 개인 통신망을 통해 리모컨 또는 마이크로부터 센싱된 생체 데이터를 수신하고 센싱된 생체 데이터를 포함하는 생체 센싱 메시지를 관리 서버로 광대역 통신망을 통해 전송하고, 관리 서버는 거주자 모니터링 장치로부터 수신된 복수의 생체 센싱 메시지를 이용하여 거주자의 건강상태를 인공지능 알고리즘을 통해 추측한다.
상기와 같은 본 발명에 따른 거주자 모니터링 방법, 장치 및 시스템은 원격에서 거주자의 다양한 상태를 모니터링하고 모니터링 결과에 따라 거주자를 관리 가능토록 하는 효과가 있다.
또한, 상기와 같은 본 발명에 따른 거주자 모니터링 방법, 장치 및 시스템은 거주자로부터 인식된 생체 데이터로부터 거주자의 건강상태를 인공지능 기술을 이용하여 판단하고 판단 결과에 따라 건강관리를 받을 수 있도록 하는 효과가 있다.
또한, 상기와 같은 본 발명에 따른 거주자 모니터링 방법, 장치 및 시스템은 주자가 부르는 노래를 통해 거주자의 심리(정신)상태를 인공지능 기술을 이용하여 판단하고 판단 결과에 따라 심리(정신)상태 개선이나 치유를 위한 관리를 받을 수 있도록 하는 효과가 있다.
또한, 상기와 같은 본 발명에 따른 거주자 모니터링 방법, 장치 및 시스템은 노래를 부를 때 이용하는 마이크를 통해 자연스럽게 인식된 생체 데이터를 활용하여 거주자의 건강상태의 체크가 가능하고 부르는 노래 유형과 가사에 따라 판단되는 심리(정신)상태에 따라 추천되는 노래를 부를 수 있도록 유도하는 효과가 있다.
본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
도 1은 거주자 모니터링 시스템에 구성되는 장치가 연결 구성의 예를 도시한 도면이다.
도 2는 로컬 거주자 시스템에 구성되는 장치간 연결 구성의 예를 도시한 도면이다.
도 3은 거주자 모니터링 장치의 예시적인 블록도를 도시한 도면이다.
도 4는 관리 서버의 예시적인 블록도를 도시한 도면이다.
도 5는 거주자 움직임 인식에 따라 알람 신호를 보호 단말로 출력하는 예시적인 제어 흐름을 도시한 도면이다.
도 6은 리모컨이나 마이크를 활용하여 거주자의 건강을 관리하는 예시적인 제어 흐름을 도시한 도면이다.
상술한 목적, 특징 및 장점은 첨부된 도면을 참조하여 상세하게 후술 되어 있는 상세한 설명을 통하여 더욱 명확해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시 예를 상세히 설명하기로 한다.
도 1은 거주자 모니터링 시스템에 구성되는 장치가 연결 구성의 예를 도시한 도면이다.
도 1의 예와 같이 거주자 모니터링 시스템은 하나 이상의 로컬 거주자 시스템(100), 관리 서버(200), 광대역 통신망(300) 및 하나 이상의 보호 단말(400)을 포함한다.
거주자 모니터링 시스템은 관리 서버(200)를 통해 지정된 장소에 거주하는 거주자를 원격에서 모니터링하고 이상이 발생하거나 이상이 예측되는 경우에 그 이상을 보호 단말(400) 등에 알릴 수 있도록 구성되는 시스템이다.
도 1의 구성요소를 간단히 살펴보면, 로컬 거주자 시스템(100)은 아파트, 빌라, 단독 주택 등 거주자가 주거하거나 기거하는 특정 장소에 설치되어 거주지 내에서의 특정인(예를 들어, 독거노인)을 모니터링하도록 다수의 기기로 구성되는 시스템이다.
로컬 거주자 시스템(100)은 단독 가구 거주자, 특히 독거노인,의 상태를 다수의 기기를 이용하여 판단하거나 추측할 수 있도록 구성된다. 예를 들어, 로컬 거주자 시스템(100)은 카메라(110) 등을 이용하여 거주자의 움직임을 포착(센싱)할 수 있고 움직임에 따라 거주자의 상태를 결정할 수 있다. 또한(또는) 로컬 거주자 시스템(100)은 거주자로부터의 생체 데이터를 획득하고 획득된 생체 데이터에 기초하여 건강상태를 추측할 수 있다. 그 추측에 따라 각종 알람 신호를 거주자에게 출력하거나 다른 보호 단말(400)로 출력할 수 있다. 건강상태의 추측은 관리 서버(200)와 연동하여 이루어질 수 있다. 또한(또는) 로컬 거주자 시스템(100)은 거주자의 선곡에 따라 노래를 재생할 수 있고 노래로부터 추출되는 특징에 따라 다른 노래를 추천할 수 있다.
로컬 거주자 시스템(100)의 구체적인 설명은 도 2, 도 3, 도 5 및 도 6 등에서 상세히 살펴보도록 한다.
관리 서버(200)는 하나 이상의 로컬 거주자 시스템(100)에 광대역 통신망(300)을 통해 연결되어 로컬 거주자 시스템(100) 내의 거주자를 원격에서 모니터링할 수 있는 서버이다. 예를 들어, 관리 서버(200)는 임의의 로컬 거주자 시스템(100)의 거주자 모니터링 장치(160)로부터 생체 센싱 메시지를 광대역 통신망(300)을 통해 수신하고 수신된 생체 센싱 메시지(의 데이터)를 수신 시각과 함께 거주자에 매칭시켜 저장한다.
관리 서버(200)는 특정 거주자에 대응하여 저장되어 있는 일련의 생체 데이터를 이용하여 거주자의 건강상태를 추측(판단)한다. 예를 들어, 관리 서버(200)는 다수의 학습 생체 데이터로 미리 학습된 인공지능 알고리즘을 이용하여 특정 거주자의 건강상태를 예측하여 건강상태의 추이(호전, 악화), 특정 질환의 발생 등을 추측할 수 있다.
관리 서버(200)는 추측된 건강상태에 따라 거주자 상태 메시지를 생성하여 이를 광대역 통신망(300)을 통해 연결되는 보호 단말(400)로 전송할 수 있다. 거주자 상태 메시지는 예를 들어 "거동 미확인", "건강 악화중", "특정 질환 발생" 등과 같이 긴급 대응을 요구하는 메시지이거나 지속적인 건강관리를 요구하는 메시지일 수 있다.
보호 단말(400)은 거주자에 대한 직접적인 조치를 취할 수 있는 자가 휴대하거나 이용 가능한 단말이다. 보호 단말(400)은 예를 들어 휴대폰, 스마트폰, 태블릿 PC 등일 수 있다. 보호 단말(400)은 예를 들어 사회복지사, 소방관, 간호사 등이 휴대하는 스마트폰이나 태블릿 PC 등일 수 있다. 또는 보호 단말(400)은 특정 관공서(복지관, 소방서 등)나 병원 등에 고정 설치되는 컴퓨터 등일 수 있다.
보호 단말(400)은 관리 서버(200) 등으로부터 특정 거주자에 대한 관리를 요구하는 메시지를 수신하고 이를 출력하여 해당 거주자에 대한 보호자가 즉각적이거나 지속적인 관리를 수행할 수 있도록 한다.
광대역 통신망(300)은 거주자 모니터링 시스템 내의 장치(기가)간에 데이터를 송수신할 수 있는 통신망이다. 광대역 통신망(300)은 인터넷망, 이동통신망 또는 인터넷망과 이동통신망의 조합으로 구성될 수 있다.
광대역 통신망(300)을 통해 로컬 거주자 시스템(100), 관리 서버(200) 및/또는 보호 단말(400)은 각종 데이터를 송수신할 수 있고 이를 통해 거주자의 이상 여부를 모니터링할 수 있다.
도 2는 로컬 거주자 시스템(100)에 구성되는 장치간 연결 구성의 예를 도시한 도면이다.
도 2에 따르면, 로컬 거주자 시스템(100)은 카메라(110), 모션 감지기(120), 리모컨(130), 마이크(140), 태블릿 PC(150), 거주자 모니터링 장치(160), 근거리 개인 통신망(170), 액세스 포인트(180), 텔레비전(190) 등을 포함한다. 설계 예에 따라 로컬 거주자 시스템(100)은 도 2에 도시된 특정 기기가 생략되거나 도 2에 도시되지 않은 다른 기기가 로컬 거주자 시스템(100)에 더 포함될 수도 있다.
로컬 거주자 시스템(100)을 간단히 살펴보면, 카메라(110)는 거주지의 천장 등에 설치되어 렌즈에 노출된 이미지(영상)를 캡쳐링할 수 있는 기기이다. 바람직하게는 카메라(110)는 광시야각을 가지는 어안렌즈 카메라일 수 있다. 카메라(110)에서 캡쳐링된 이미지 데이터는 근거리 개인 통신망(170)이나 전용 라인을 통해 거주자 모니터링 장치(160)로 전송될 수 있다.
모션 감지기(120)는 특정 센서를 구비하여 거주자의 움직임을 인식할 수 있는 기기이다. 모션 감지기(120)는 거주지의 특정 위치(예를 들어 벽면 등)에 설치되어 구비된 적외선 센서나 열 센서 등을 통해 거주자의 움직임을 인식할 수 있다. 모션 감지기(120)는 센서로부터 센싱된 감지 데이터를 거주자 모니터링 장치(160)로 전송한다.
리모컨(130)은 거주자 모니터링 장치(160)를 무선(예를 들어 RFID나 블루투스 등)으로 제어하기 위한 기기이다. 리모컨(130)은 다수의 버튼을 구비하여 버튼 입력에 대응하는 입력 데이터를 구성하여 무선으로 거주자 모니터링 장치(160)로 전송한다.
또한, 본 발명에 따른 리모컨(130)은 거주자의 각종 상태의 파악에 이용 가능한 센서들을 포함(내장)한다. 예를 들어, 리모컨(130)은 자이로 센서와(나) 알코올 센서, 산소 포화도 측정 센서, 이산화탄소 측정 센서, 심전도 센서 등을 포함할 수 있다.
리모컨(130)은 거주자의 날숨을 받아들이기 위한 빨대를 바람직하게 포함하고 거주자가 날숨을 부는 빨대 반대편인 리모컨(130) 내부에 알코올 센서, 산소 포화도 측정 센서, 이산화탄소 측정 센서 등과 같은 생체신호 센서를 구비하여 날숨에서의 생체 신호를 센싱(측정)할 수 있다. 리모컨(130)은 센싱된 생체 신호에 대응하는 생체 데이터를 근거리 개인 통신망(170)을 통해 거주자 모니터링 장치(160)로 전송할 수 있다.
또한, 리모컨(130)은 심박이나 맥박 등을 측정할 수 있는 심전도 센서를 더 포함할 수 있다. 리모컨(130)은 거주자의 손으로부터 심전도에 관련된 생체 데이터를 센싱하고 이를 근거리 개인 통신망(170)을 통해 거주자 모니터링 장치(160)로 전송 가능하다.
리모컨(130)은 마이컴 등의 프로세서와 근거리 개인 통신망(170)에 연결되기 위한 통신 칩셋을 구비하여 거주자의 특정 버튼의 입력에 따라 생체 데이터를 센싱하여 센싱된 생체 데이터를 근거리 개인 통신망(170)을 통해 거주자 모니터링 장치(160)로 전송할 수 있다.
마이크(140)는 거주자의 소리 신호를 대응하는 전기 신호로 변환한다. 마이크(140)는 소리 신호에 대응하는 음성 데이터를 거주자 모니터링 장치(160)로 출력할 수 있다. 마이크(140)는 음성 데이터로의 변환에 필요한 센서 외에 거주자의 생체 데이터를 센싱할 수 있는 생체신호 센서와 거주자의 손의 압력 등을 인식할 수 있는 압력 센서 등을 더 포함할 수 있다.
생체신호 센서는 예를 들어, 알코올 센서, 산소 포화도 측정 센서, 이산화탄소 측정 센서 등일 수 있고 생체신호 센서는 거주자의 소리를 수용하는 마이크(140) 그릴내에 내장된다.
마이크(140)의 압력 센서는 손잡이 등에 설치되어 손잡이에 가해지는 거주자(손바닥 등)의 압력을 센싱할 수 있다.
마이크(140)는 마이컴 등의 프로세서와 근거리 개인 통신망(170)에 연결되기 위한 통신 칩셋을 구비하여 음성 데이터와 생체 데이터를 근거리 개인 통신망(170)을 통해 거주자 모니터링 장치(160)로 전송할 수 있다.
예를 들어, 마이크(140)는 사용자의 소리로부터 변환된 음성 데이터를 블루투스 통신을 통해 거주자 모니터링 장치(160)로 전송할 수 있다. 또한, 마이크(140)는 마이크 그릴 등에서의 측정된 생체 데이터를 블루투스 통신을 통해 거주자 모니터링 장치(160)로 전송할 수 있다.
마이크(140)는 생체 데이터(나아가 음성 데이터)를 지속적으로 거주자 모니터링 장치(160)로 전송하지 않을 수 있다. 예를 들어 마이크(140)는 압력 센서를 통해 센싱된 압력 신호(데이터)가 내부에 설정된 임계치(임계 데이터) 이상인 경우에 생체 데이터가 유효한 것으로 판단하여 센싱된 생체 데이터를 거주자 모니터링 장치(160)로 전송할 수 있다.
거주자 모니터링 장치(160)는 연결된 각종 기기를 이용하여 거주지 내의 거주자를 모니터링할 수 있는 기기이다. 거주자 모니터링 장치(160)는 근거리 개인 통신망(170)을 통해 연결된 각종 기기로부터 데이터를 수신하여 거주자의 움직임을 모니터링하거나 수신된 생체 데이터에 따라 건강상태를 관리 서버(200)와 연동하여 모니터링할 수 있다.
예를 들어, 거주자 모니터링 장치(160)는 블루투스 등과 같은 근거리 개인 통신망(170)을 통해 리모컨(130)이나(과) 마이크(140)로부터 센싱된 생체 데이터를 수신하고 센싱된 생체 데이터를 포함하는 생체 센싱 메시지를 구성하여 이를 광대역 통신망(300)을 통해 전송한다. 거주자 모니터링 장치(160)는 관리 서버(200)로부터 거주자의 현재 예측되는 상태 응답을 수신하고 이를 출력할 수 있다.
이와 같은 거주자 모니터링 장치(160)는 셋탑 박스이거나 거주자의 음성 입력에 반응하는 인공지능 스피커 등일 수 있다. 거주자 모니터링 장치(160)에 대해서는 도 3 이하에서 상세히 살펴보도록 한다.
태블릿 PC(150)는 거주자 모니터링 장치(160)에 연결되어 거주자 모니터링 장치(160)의 보조용으로 이용되는 기기이다. 태블릿 PC(150)는 디지털 액자 기능을 구비하여 거주자 모니터링 장치(160)의 사진 이미지나 태블릿 PC(150) 내의 사진 이미지를 지정된 디스플레이 포맷에 따라 출력 가능하다.
근거리 개인 통신망(170)은 로컬 거주자 시스템(100) 내의 기기들 간에 데이터를 송수신하는 통신망이다. 근거리 개인 통신망(170)은 하나 이상의 통신 기술에 따른 유선망이거나 무선망일 수 있다. 예를 들어, 근거리 개인 통신망(170)은 USB, 유선랜에 따른 통신망이거나 와이파이, 블루투스, 지그비 등에 따른 통신망일 수 있다. 근거리 개인 통신망(170)은 유선망과 무선망의 조합으로 구성될 수도 있다. 근거리 개인 통신망(170)은 바람직하게는 특정 통신 기술에 따른 통신망일 수 있고 예를 들어 블루투스 통신 기술에 따른 통신망일 수 있다.
거주자 모니터링 장치(160)는 특정 하나의 통신 기술을 통해 임의의 기기에 연결되어 각종 데이터를 송수신할 수 있다. 예를 들어, 리모컨(130), 마이크(140), 모션 감지기(120)(나아가 카메라(110)) 등은 블루투스 통신 기술을 통해 거주자 모니터링 장치(160)에 연결된다. 카메라(110)나 태블릿 PC(150) 등은 와이파이나 유선 랜 등을 통해 거주자 모니터링 장치(160)에 연결된다.
액세스 포인트(180)는 광대역 통신망(300)에 액세스 가능토록 하는 기기이다. 액세스 포인트(180)는 근거리 개인 통신망(170) 내의 통신 데이터를 광대역 통신망(300) 상의 통신 데이터로 변환하여 광대역 통신망(300)으로 출력하고 광대역 통신망(300)으로부터의 통신 데이터를 근거리 개인 통신망(170)에서 이용 가능한 통신 데이터로 변환하여 근거리 개인 통신망(170)으로 출력할 수 있다. 액세스 포인트(180)는 예를 들어 무선 공유기일 수 있다.
텔레비전(190)은 거주자 모니터링 장치(160)에 연결될 수 있는 출력 수단의 예로서 거주자 모니터링 장치(160)로부터의 음성과 영상을 출력할 수 있다.
도 3은 거주자 모니터링 장치(160)의 예시적인 블록도를 도시한 도면이다.
도 3에 따르면, 거주자 모니터링 장치(160)는 근거리 통신부(161), 저장부(162), 광대역 통신부(163), 신호 출력부(164), 주변 인터페이스부(165), 연결부(166) 및 제어부(167)를 포함한다. 설계예에 따라 거주자 모니터링 장치(160)는 도 3에 도시되지 않은 다른 블록을 더 포함하거나 도 3의 임의의 블록을 생략할 수도 있다.
도 3의 블록도는 바람직하게는 기능 블록도를 나타낸다. 설계 예에 따라 특정 기능 블록의 하드웨어 구성요소는 다른 기능 블록의 하드웨어 구성요소와 전체 또는 일부와 동일할 수도 있다.
도 3을 통해 거주자 모니터링 장치(160)를 살펴보면, 근거리 통신부(161)는 근거리 개인 통신망(170)에 연결되어 각종 기기로부터 데이터를 수신하고 송신할 수 있다. 근거리 통신부(161)는 와이파이, 블루투스 및/또는 지그비 등의 근거리의 무선통신 기술에 접속하기 위한 통신 칩셋과 안테나를 구비하여 근거리의 무선통신을 수행할 수 있다. 또는(또한) 근거리 통신부(161)는 USB나 유선랜에 액세스하기 위한 통신 칩셋을 구비하여 근거리의 유선통신을 수행할 수 있다.
예를 들어, 근거리 통신부(161)는 카메라(110)나 모션 감지기(120)로부터 데이터를 유선(유선랜 등)이나 무선(와이파이나 블루투스 등)으로 수신할 수 있다. 또는(또한) 근거리 통신부(161)는 무선(블루투스) 통신 기술을 통해 연결된 마이크(140)나 리모컨(130)으로부터 각 기기에서 센싱된 생체 데이터를 수신할 수 있다. 설계 예에 따라, 근거리 통신부(161)는 마이크(140)로부터 음성 데이터를 수신하고 리모컨(130)으로부터 리모컨 데이터를 수신할 수 있다.
저장부(162)는 휘발성 메모리, 비휘발성 메모리 및/또는 하드디스크 등과 같은 대용량 저장매체를 포함하여 각종 프로그램과 데이터를 저장한다. 예를 들어, 저장부(162)는 거주지내의 거주자를 모니터링하기 위해 설계된 제어 프로그램을 저장한다. 또한, 저장부(162)는 거주자를 통해 센싱된 생체 데이터, 카메라(110) 등으로부터 수신된 영상 데이터 등을 영구히 또는 임시로 저장한다. 그 외, 저장부(162)는 거주자에 대한 움직임 학습을 통해 습득되는 생활 패턴 정보를 더 저장할 수 있다.
저장부(162)는 노래방 기능을 제공하기 위해 필요한 노래방 DB를 더 포함할 수 있다. 노래방 DB는 곡번호, 곡번호에 대응하는 오디오 파일(예를 들어 미디 파일이나 압축 음디오 파일), 가사 파일 등을 노래 정보로서 각각 복수개 포함한다.
제어 프로그램은 인공 지능 프로그램을 포함하거나 인공 지능 프로그램으로 구성되고 제어부(167)에 로딩되어 거주자를 모니터링할 수 있다.
광대역 통신부(163)는 광대역 통신망(300)에 연결되어 각종 통신 데이터를 광대역 통신망(300)을 통해 송신하고 수신한다. 광대역 통신부(163)는 와이파이 칩셋과 안테나 등을 구비하여 액세스 포인트(180)를 통해 통신 데이터를 송수신하거나 유선랜 칩셋을 구비하여 액세스 포인트(180)를 통해 통신 데이터를 송수신할 수 있다. 설계 예에 따라, 광대역 통신부(163)의 하드웨어 구성은 근거리 통신부(161)의 하드웨어 구성과 전부 또는 일부가 동일할 수 있다.
신호 출력부(164)는 거주자가 인식 가능한 신호를 출력한다. 신호 출력부(164)는 오디오 덱(DAC)과 비디오 덱을 포함하여 음향 신호 및 영상 신호를 출력할 수 있다. 신호 출력부(164)는 스피커, 부저 등을 더 포함할 수도 있다. 신호 출력부(164)에서 출력되는 신호(오디오 덱과 비디오 덱의 음향 및 영상 신호)는 텔레비전(190) 등에 연결되어 텔레비전(190)을 통해 거주자가 확인할 수도 있다.
주변 인터페이스부(165)는 주변 기기를 연결하기 위한 인터페이스이다. 예를 들어, 주변 인터페이스부(165)는 리모컨 신호 수광 다이오드 등을 구비하여 RFID 등을 통한 리모컨 신호를 수신할 수 있다. 대안으로 리모컨 신호는 근거리 통신부(161)를 통해 블루투스 무선통신을 통해 수신될 수도 있다.
또는(또한) 주변 인터페이스부(165)는 USB 메모리 포트와 USB 통신 칩셋을 구비하여 USB 메모리에 액세스할 수 있다.
연결부(166)는 거주자 모니터링 장치(160) 내의 블록 간 데이터를 송수신한다. 연결부(166)는 병렬 버스, 시리얼 버스, GPIO 등을 하나 이상 이용하여 구성된다. 여기서, 제어부(167)와 특정 블럭간의 데이터 전송 구성과 제어부(167)와 다른 블록간의 데이터 전송 구성은 다를 수 있다.
제어부(167)는 하나 이상의 프로그램 명령어 실행 유닛(Execution Unit)을 구비하여 로딩된 프로그램에 따라 다른 블록들을 제어하여 거주자 모니터링 장치(160)를 제어한다. 제어부(167)는 마이컴, CPU, MPU, 중앙처리장치, 프로세서 등을 나타내거나 등으로 지칭될 수 있다.
제어부(167)는 전원이 공급되고 부팅됨에 따라 저장부(162)의 제어 프로그램을 로딩하고 제어 프로그램의 제어에 따라 거주자를 모니터링할 수 있도록 구성된다.
제어 프로그램에서 이루어지는 예시적인 제어를 살펴보면, 제어부(167)는 거주자의 움직임을 모니터링하고 움직임의 이상 유무에 따라 알람 신호를 출력하고 이를 관리 서버(200) 등으로 알릴 수 있다.
구체적으로, 제어부(167)는 카메라(110) 및/또는 모션 감지기(120)로부터 데이터를 근거리 통신부(161)를 통해 수신하고 수신된 데이터를 이용하여 거주자의 움직임을 지정된 시간동안(예를 들어 1분 등) 포착 시도한다. 지정된 시간 동안에 거주자의 움직임이 포착되지 않는 경우 거주자가 인지 가능한 알람 데이터를 구성하여 신호 출력부(164)를 통해 음향 및/또는 영상의 알람 신호를 출력한다.
거주자가 알람 신호를 인식한 경우에, 알람 신호에 대응한 반응으로 거주자의 움직임이 발생할 수 있다.
제어부(167)는 알람 신호의 출력 이후에 카메라(110) 및/또는 모션 감지기(120)로부터 데이터를 근거리 통신부(161)를 통해 수신하고 수신된 데이터를 이용하여 거주자의 움직임을 다시 지정된 시간동안(예를 들어 1분, 또는 2분 등, 여기서 본 지정시간은 이전의 지정시간과는 동일할 필요는 없음) 포착 시도한다. 지정된 시간 동안에 거주자의 움직임이 포착되지 않는 경우에 제어부(167)는 사용자의 움직임이 없음을 나타내는 알람 메시지를 생성하고 생성된 알람 메시지를 광대역 통신부(163)를 통해 원격의 관리 서버(200)로 전송한다.
또한, 제어부(167)는 거주자로부터 측정된 생체 데이터를 이용하여 거주자의 건강상태를 추정할 수 있다. 예를 들어, 제어부(167)는 근거리 통신부(161)를 통해 리모컨(130)으로부터 센싱된 생체 데이터를 수신하고 수신된 생체 데이터와 나아가 수신 시각을 포함하는 생체 센싱 메시지를 광대역 통신부(163)를 통해 관리 서버(200)로 전송한다. 전송된 생체 센싱 메시지는 관리 서버(200)로 하여금 적어도 거주자의 건강상태를 인공지능 알고리즘을 통해 추측 가능토록 한다.
또한, 제어부(167)는 노래방 기능을 거주자에게 제공할 수 있다. 제어부(167)는 리모컨(130)을 통해 노래 선곡 입력을 수신하고 선곡된 곡번호에 대응하는 노래 정보를 저장부(162)의 노래방 DB에서 검색하고 검색된 노래 정보의 오디오 파일과 가사 파일을 신호 출력부(164)를 통해 출력할 수 있다.
제어부(167)는 오디오 파일을 재생하여 음향(오디오) 신호를 신호 출력부(164)를 통해 출력하고 출력되고 있는 음향 신호에 대응하는 가사 이미지를 포함하는 영상 신호를 신호 출력부(164)를 통해 출력할 수 있다.
음향 신호와 영상 신호를 출력하는 한편, 제어부(167)는 근거리 통신부(161)를 통해 마이크(140)로부터 음성 데이터를 수신하여 이를 신호 출력부(164)를 통해 음향 신호로 출력할 수 있다. 음성 데이터와 오디오 파일의 재생중인 오디오 데이터는 합성되어 음향 신호로 신호 출력부(164)를 통해 출력된다.
제어부(167)는 음성 데이터와 함께 생체 데이터를 근거리 통신부(161)를 통해 더 수신할 수 있다. 생체 데이터는 바람직하게는 마이크(140)가 손잡이 등의 압력을 인식한 경우에 거주자 모니터링 장치(160)로 전송될 수 있다.
제어부(167)는 마이크(140)를 통해 수신된 생체 데이터를 생체 센싱 메시지로 구성하여 관리 서버(200)로 전송할 수 있다. 바람직하게는 제어부(167)는 수신된 모든 생체 데이터를 전송하지 않고 필터링 과정을 통해 생체 데이터를 필터링하고 필터링 후 존재하는 생체 데이터를 생체 센싱 메시지에 포함시켜 광대역 통신부(163)를 통해 관리 서버(200)로 전송한다.
예를 들어, 제어부(167)는 노래 정보의 오디오 데이터 및 가사 데이터를 지정된 노래 구간(예를 들어, 하나의 음표 구간이나 하나의 마디 구간 등)으로 구분하고 현재 재생중인 노래 구간의 음 높이(한 음표의 높이나 마디 구간 내의 모든 음표의 평균 음 높이)를 설정된(지정된) 음높이와 비교한다. 제어부(167)는 재생중인 노래 구간이 지정된 음높이보다 작은 경우 마이크(140)로부터 수신된 대응하는 생체 데이터를 필터링(제거)한다. 제어부(167)는 필터링 과정 후에 필터링되지 않은 생체 데이터와 대응하는 음높이 정보, 나아가 수신 시각을 더 포함하는 생체 센싱 메시지를 구성하여 광대역 통신부(163)를 통해 관리 서버(200)로 전송한다.
이와 같이, 제어부(167)는 생체 데이터를 리모컨(130)이나 마이크(140)로부터 수신하고 이를 관리 서버(200)로 전송할 수 있다.
그 외, 제어부(167)는 저장부(162)의 제어 프로그램을 로딩하여 거주자와 관련된 다양한 모니터링 제어를 수행할 수 있다. 제어부(167)(거주자 모니터링 장치(160))에서 수행되는 다양한 제어 흐름은 도 5 내지 도 6을 통해 좀 더 살펴보도록 한다.
한편, 거주자 모니터링 장치(160)는 배터리 등을 더 포함하여 단전 등의 상황이 발생한 경우에 구비된 배터리를 통해 정상적으로 기본 기능을 제공할 수 있다.
도 4는 관리 서버(200)의 예시적인 블록도를 도시한 도면이다.
도 4에 따르면, 관리 서버(200)는 통신 유닛(201), 저장 유닛(203), 연결 유닛(205) 및 제어 유닛(207)을 포함한다. 도 4는 바람직하게는 기능 블록도를 나타내며 대응하는 하드웨어 블록을 각 기능 블록들은 구비한다. 도 4의 관리 서버(200)는 다양한 하드웨어를 이용하여 구성될 수 있다. 예를 들어 관리 서버(200)는 하나 이상의 PC, 워크스테이션 및/또는 서버 프레임 등을 이용하여 구성될 수 있다. 도 4에 도시되지 않은 다른 블록들이 설계 변형에 따라 이 블록도에 더 포함될 수도 있다.
도 4를 통해 관리 서버(200)를 살펴보면, 통신 유닛(201)은 광대역 통신망(300)을 통해 각종 데이터를 송수신한다. 통신 유닛(201)은 구비된 유선랜 인터페이스 등을 통해서 광대역 통신망(300)에 연결되어 각종 데이터나 요청을 나타내는 통신 패킷을 수신하고 수신된 통신 패킷에 대응한 응답 패킷 등을 광대역 통신망(300)을 통해서 출력할 수 있다.
예를 들어, 통신 유닛(201)은 거주자 모니터링 장치(160)로부터 알람 메시지를 수신하고 알람 메시지에 대응한 응답이나 조치 메시지를 거주자 모니터링 장치(160) 및/또는 보호 단말(400) 등으로 출력한다. 또는(또한) 통신 유닛(201)은 거주자 모니터링 장치(160)로부터 생체 센싱 메시지를 수신한다.
저장 유닛(203)은 각종 데이터와 프로그램을 저장한다. 저장 유닛(203)은 하드 디스크 등과 같은 대용량 저장매체를 구비하여 각종 데이터와 프로그램을 저장한다. 저장 유닛(203)은 구비된 하나 이상의 하드 디스크를 활용하여 데이터베이스를 구성할 수 있다.
저장 유닛(203)에 저장되는 각종 데이터를 살펴보면, 저장 유닛(203)는 거주자 DB를 저장(포함)한다. 거주자 DB는 복수의 엔트리로 구성되고 각각의 엔트리는 관리 대상인 거주자를 특정하고 모니터링하기 위한 데이터를 저장한다. 각 거주자 엔트리는 모니터링 장치 식별정보, 거주자 식별정보, 거주자 상태 정보, 생체 데이터 리스트, 보호단말 정보 리스트를 포함하고 저장한다.
모니터링 장치 식별정보는 거주자 모니터링 장치(160)의 식별자로서 예를 들어 IP 주소, 맥(MAC) 주소, 시리얼 넘버 등을 하나 이상 포함한다. 모니터링 장치 식별정보로 관리 서버(200)는 특정 거주자 모니터링 장치(160)에 액세스 가능하고 인식할 수 있다.
거주자 식별정보는 거주자를 특정하기 위한 각종 정보를 포함한다. 거주자 식별정보는 거주자의 이름, 거주지 주소, 나이, 주민번호(의 일부), 성별, 병력정보, 현재의 질환 정보 등을 저장하거나 포함할 수 있다.
거주자 상태 정보는 저장 유닛(203) 등에 구비된 알고리즘을 통해 추정된 거주자의 현재 상태를 나타내는 데이터를 저장한다. 거주자 상태 정보는 거주자 모니터링 장치(160)로부터 수신된 생체 데이터로부터 추정되고 현재의 질환 정보를 더 이용하여 추정될 수 있다. 거주자 상태 정보는 특정 질환의 호전, 악화, 특정 질환의 발생 의심, 전반적인 건강상태 악화 등과 같이 거주자의 건강상태와 관련된 상태를 특정할 수 있다. 거주자 상태 정보는 바람직하게는 딥러닝 알고리즘을 이용하여 추정된다.
생체 데이터 리스트는 하나 이상의 생체 데이터 아이템을 저장(포함)하고 각각의 생체 데이터 아이템은 거주자 모니터링 장치(160)로부터 수신된 생체 데이터, 수신 시각과 함께 나아가 음높이 정보를 포함하거나 저장할 수 있다.
보호단말 정보 리스트는 거주자의 이상 상태의 발생시에 연결되어야 하는 보호 단말(400)의 식별자(예를 들어 휴대전화번호 등)를 포함한다. 보호 단말(400)의 식별자를 통해 거주자에 이상이 발생한 경우에 이를 등록된 보호 단말(400)에 알릴 수 있다.
그 외, 거주자 엔트리는 거주자의 생활 패턴 정보를 더 저장할 수 있다. 생활 패턴 정보는 해당 거주자의 수면 시간, 외출 시간 등을 저장하고 바람직하게는 요일별로 구별하여 저장한다.
거주자 엔트리는 거주자를 등록할 때 대부분 입력되고 생체 데이터 리스트와 거주자 상태 정보는 거주자의 상태에 따라 동적으로 갱신되고 변경된다.
저장 유닛(203)은 제어 유닛(207)에서 이용 가능한 프로그램을 하나 이상 포함한다. 저장 유닛(203)은 바람직하게는 거주자의 상태를 추측(추정, 판단)할 수 있는 인공지능 알고리즘을 프로그램으로 저장하고 이 인공지능 알고리즘은 딥러닝 알고리즘일 수 있다.
연결 유닛(205)은 관리 서버(200) 내의 블록 간 데이터를 송수신한다. 연결 유닛(205)은 근거리 네트워크, 병렬 버스, 시리얼 버스 등을 이용하여 구성된다.
제어 유닛(207)은 하나 이상의 실행 유닛을 구비하여 저장 유닛(203)에 저장되어 있는 프로그램을 로딩하고 실행 유닛을 통해서 프로그램의 명령어 코드를 실행하여 연계 서버를 제어한다.
제어 유닛(207)에서 수행되는 예시적인 제어를 살펴보면, 보호 단말(400) 등과 설정된 통신 채널에 따라 제어 유닛(207)은 거주자 DB에 거주자 엔트리를 생성하고 각종 정보나 데이터를 설정한다.
제어 유닛(207)은 거주자 모니터링 장치(160)와 광대역 통신망(300)을 통해 통신 채널을 설정하고 거주자 모니터링 장치(160)로부터 생체 센싱 메시지를 거주자 모니터링 장치(160)에서의 이벤트 발생에 따라 수신한다. 생체 센싱 메시지는 주기적으로 수신되거나 비주기적이나 거주자 모니터링 장치(160)에서의 생체 데이터를 센싱함에 따라 수신될 수 있다.
제어 유닛(207)은 거주자 DB에서 거주자 모니터링 장치(160)의 식별자에 대응하는 엔트리를 식별하고 생체 데이터 아이템을 생성하여 엔트리의 생체 데이터 리스트에 추가한다. 생체 데이터 아이템은 수신된 생체 데이터 및 수신 시각(년,월,일과 시각)을 포함하고 나아가 음높이 정보를 더 포함할 수 있다.
생체 데이터는 알코올 센서, 산소 포화도 측정 센서, 이산화탄소 측정 센서등과 같은 생체신호 센서로부터 센싱된 데이터이거나 심전도 센서 등을 통해 센싱된 데이터일 수 있다. 생체 데이터는 마이크(140)에서 센싱된 데이터일 수 있고 이 경우 음높이 정보를 생체 데이터 아이템이 더 포함할 수 있다. 또는, 제어 유닛(207)은 음높이 정보의 음높이에 따라 수신된 생체 데이터를 변경할 수 있다. 예를 들어 음높이의 크기에 따라 알코올 농도, 산소 포화도, 이산화탄소 데이터를 비율적으로 변경할 수 있다.
알코올 센서, 산소 포화도 측정 센서, 이산화탄소 측정 센서 등은 거주자가 날숨인 경우에 측정이 유리한 경우로서 높은 압력의 호흡(숨)의 배출이 있는 경우에 더 높게 수치로 측정되는 것이 일반적이다. 이런 비율을 고려하여 음높이에 따라 음높이에 따라 지정된 비율로 생체 데이터가 변경될 수 있다.
음높이 정보가 생체 데이터 아이템에 저장되어 있는 경우에, 제어 유닛(207)은 이 생체 데이터를 활용시에 살펴본 바와 같은 비율로 생체 데이터를 변경하고 이후 활용할 수 있다.
제어 유닛(207)은 각 거주자의 생체 데이터가 축적됨에 따라 각 거주자의 건강상태를 인고지능 알고리즘에 따라 추측할 수 있다. 즉, 제어 유닛(207)은 각 거주자에 대응하는 엔트리의 복수의 생체 데이터 아이템을 저장 유닛(203)의 딥러닝 알고리즘을 구현한 인공지능 프로그램에 입력 인자로 제공하고 인공지능 프로그램은 거주자의 건강상태를 추측하고 추측된 건강상태를 거주자의 엔트리의 거주자 상태 정보에 저장한다.
인공지능 프로그램은 일반인과 알려진 질환 환자로부터의 미리 제공된 생체 학습 데이터를 이용하여 미리 학습하여 거주자의 다수의 일련의 생체 데이터를 이용하여 거주자의 건강 상태를 추측할 수 있다.
제어 유닛(207)은 추측된 건강상태가 이상상태의 발생을 나타내는 경우(예를 들어, 질환의 악화, 발생, 건강상태의 악화 등)에, 거주자 엔트리의 보호단말 정보 리스트의 보호 단말(400)로 이를 나타내는 메시지를 통신 유닛(201)을 통해 전송한다.
또한, 제어 유닛(207)은 거주자 모니터링 장치(160)로부터 알람 메시지를 수신할 수 있다. 알람 메시지는 거주자의 움직임이 없는 경우에 수신될 수 있다. 알람 메시지를 전송한 거주자 모니터링 장치(160)의 식별자를 이용하여 거주자 DB에서 제어 유닛(207)은 거주자 엔트리를 검색하고 거주자 엔트리의 보호단말 정보 리스트의 보호 단말(400)로 알람 메시지를 통신 유닛(201)을 통해 전송한다. 전송되는 알람 메시지는 거주자의 움직임이 없음을 나타내는 메시지로서 비상상황의 발생을 나타낸다.
제어 유닛(207)은 거주자의 생활 패턴 정보를 설정할 수 있다. 생활 패턴 정보는 보호 단말(400)에 의해서 최초 설정될 수 있고 이후에 업데이트될 수 있다. 생활 패턴 정보는 해당 거주자의 수면 시간, 외출 시간 등을 저장한다. 생활 패턴 정보에 따라 제어 유닛(207)이나 거주자 모니터링 장치(160)는 특정 시각에서 거주자의 거주지에 존재 여부를 알 수 있다. 생활 패턴 정보는 거주자 모니터링 장치(160)로 전송될 수 있다.
생활 패턴 정보는 갱신될 수 있다. 예를 들어, 알람 메시지의 전송 후에 이 알람 메시지에 대한 피드백(이상 발생 확인 또는 오류 등)을 거주자 모니터링 장치(160)나 보호 단말(400)로부터 수신할 수 있고 이를 통해 생활 패턴 정보를 갱신할 수 있다.
여기서, 생활 패턴 정보는 미리 설정될 수도 있으나 인공지능을 통해 학습될 수도 있다.
도 5는 거주자 움직임 인식에 따라 알람 신호를 보호 단말(400)로 출력하는 예시적인 제어 흐름을 도시한 도면이다. 도 5는 생활 패턴의 학습에 따라 학습된 생활 패턴하에서의 움직임 인식과 알람 신호를 출력하는 예이다. 이미 도 1 내지 도 4를 통해 각 장치(서버)에 대해 상세히 살펴보았으므로 이하에서는 제어 흐름 선후관계 위주로 살펴보도록 한다.
먼저, 거주자 모니터링 장치(160)(의 제어부(167))는 관리 서버(200)와 광대역 통신망(300)을 통해 통신 채널을 설정하고 설정된 통신 채널을 통해 각종 통신 메시지와 그 응답을 송수신할 수 있다.
거주자 모니터링 장치(160)(의 제어부(167))는 거주자의 생활 패턴을 설정(S101)한다. 예를 들어, 거주자 모니터링 장치(160)(의 제어부(167))는 관리 서버(200)로부터 미리 설정된 생활 패턴 정보를 수신한다.
또는, 거주자 모니터링 장치(160)(의 제어부(167))는 미리 지정된 기간(예를 들어 1달 등) 동안 거주자에 대한 생활 패턴을 학습한다. 거주자 모니터링 장치(160)(의 제어부(167))는 카메라(110)나 모션 감지기(120)로부터 데이터를 수신하고 수신된 데이터에 대한 머신 러닝 지도학습(Supervised Learning) 알고리즘에 따라 일단위 또는 주단위의 생활 패턴을 학습한다. 학습된 생활 패턴은 예를 들어 각각의 시간과 해당 시간에서 인식된 움직임 여부(또는 정도) 정보가 매칭되어 저장될 수 있다. 움직임 여부(나 정도)는 카메라(110)로부터의 픽셀 데이터의 변화나 모션 감지기(120)로부터의 모션 데이터에서 인식가능하다.
거주자 모니터링 장치(160)(의 제어부(167))는 학습된 생활 패턴에 따라 현재 시각이 움직임 예측 시간 이내인지를 판단(S103)한다. 움직임 예측 시간은 거주자의 움직임의 발생이 예상되는 기간을 나타낸다. 본 단계는 설계 예에 따라 생략될 수 있다.
움직임 예측 시간 이내인 경우에, 거주자 모니터링 장치(160)(의 제어부(167))는 카메라(110) 및/또는 모션 감지기(120)로부터 데이터를 수신하고 수신된 데이터에 따라 지정시간 동안 거주자의 움직임을 포착 시도(S105)한다. 거주자 모니터링 장치(160)(의 제어부(167))는 카메라(110)로부터 이미지 데이터를 수신하고 이미지 데이터의 픽셀 값의 변화에 따라 움직임을 포착할 수 있고 모션 감지로부터 센싱된 감지 데이터로부터 거주자의 움직임을 포착할 수 있다. 지정시간은 설정 가능하고 예를 들어 10분 등의 기간일 수 있다.
지정시간 동안 거주자의 움직임이 포착(S107)되면 움직임 예측 시간 동안(S103 참조)의 다음의 순차적인 지정시간 동안 반복적으로 움직임을 포착 시도(S105 참조)한다.
지정시간 동안 움직임이 포착되지 않는 경우, 거주자 모니터링 장치(160)(의 제어부(167))는 거주자가 인지 가능한 알람 데이터를 구성하여 신호 출력부(164)를 통해 음향 및/또는 영상의 알람 신호를 출력(S109)한다. 이와 같이, 거주자 모니터링 장치(160)(의 제어부(167))는 생활 패턴에 따른 움직임 예측 시간 동안에 움직임이 포착되지 않는 경우에 알람 신호를 출력한다.
인식 능력을 갖추거나 거주지에 근접 위치한 거주자는 알람 신호를 인식할 수 있고, 거주자 모니터링 장치(160)(의 제어부(167))는 알람 신호의 출력에 후속하여 거주자의 움직임을 지정시간 동안에 다시 포착 시도(S111)한다. 거주자 모니터링 장치(160)(의 제어부(167))는 카메라(110) 및/또는 모션 감지기(120)로부터의 데이터를 이용하여 거주자의 움직임을 포착할 수 있다. 본 과정에서의 지정시간은 앞선 과정(S105)에서의 지정시간과 반드시 동일할 필요는 없다. 예를 들어 본 지정시간(예를 들어, 5분)이 앞선 과정의 지정시간보다 더 짧거나 길 수 있다.
거주자의 인식 등에 따라, 거주자는 거주지 내로 진입하거나 움직일 수 있고 거주자 모니터링 장치(160)(의 제어부(167))가 거주자의 움직임을 포착한 경우(S113) 거주자 모니터링 장치(160)(의 제어부(167))는 과정 S103으로 전이하여 움직임 예측 시간 중 다음의 지정시간동안에 움직임을 지속적으로 포착한다.
지정시간 동안 거주자의 움직임 포착되지 않는 경우, 거주자 모니터링 장치(160)(의 제어부(167))는 알람 메시지를 생성하고 광대역 통신망(300)을 통해 관리 서버(200)로 알람 메시지를 전송(S115)한다.
관리 서버(200)는 알람 메시지를 수신하고 알람 메시지를 전송한 거주자 모니터링 장치(160)의 식별자를 이용하여 거주자 DB에서 거주자 엔트리를 검색하고 거주자 엔트리의 보호단말 정보 리스트의 보호 단말(400)로 알람 메시지를 전송(S117)한다.
알람 메시지를 수신한 보호 단말(400)의 관리자 등은 거주지에 연락을 취하거나 방문 등을 통해 거주자에 대한 직접적인 조치를 취할 수 있다.
알람 메시지는 상황에 따라 오류 메시지로 판명될 수 있다. 예를 들어 거주자가 알려진 생활 패턴과는 다른 일정으로 출타한 경우에 잘못된 메시지가 발송될 수 있다.
보호 단말(400)이 관리 서버(200)를 통해 생활 패턴을 갱신할 수 있다. 또는 출타 등의 사유로 움직임 인식되지 않은 거주자는 리모컨(130)을 통해 생활 패턴 변경을 요청하는 입력을 거주자 모니터링 장치(160)(의 제어부(167))로 전송할 수 있다. 그에 따라, 거주자 모니터링 장치(160)(의 제어부(167))는 학습된 생활 패턴을 갱신(S119)할 수 있다.
또는, 거주자 모니터링 장치(160)(의 제어부(167))는 오류로 인식된 시점을 자동으로 학습하여 생활 패턴을 갱신할 수도 있다.
도 6은 리모컨(130)이나 마이크(140)를 활용하여 거주자의 건강을 관리하는 예시적인 제어 흐름을 도시한 도면이다. 도 6의 제어 흐름은 도 5의 제어 흐름과 다양한 선후관계를 가지고 수행될 수 있다. 예를 들어, 도 6의 제어 흐름은 도 5의 제어 흐름과 동시에 수행되거나 이전, 이후에 수행될 수 있다. 또는 도 6의 각 과정은 도 5의 임의의 과정이나 과정 사이에서 수행될 수 있다.
이미 도 1 내지 도 4를 통해 각 장치(서버)에 대해 상세히 살펴보았으므로 이하에서는 제어 흐름 선후관계 위주로 살펴보도록 한다.
먼저, 거주자 모니터링 장치(160)(의 제어부(167))는 생체 데이터 수신 이벤트가 발생할지를 결정(S201)한다. 예를 들어, 거주자 모니터링 장치(160)(의 제어부(167))는 저장부(162)에 설정되어 있는 생체 데이터 측정 이벤트 주기가 도래한 경우나, 리모컨(130)으로부터 생체 데이터 측정을 요구하는 입력을 근거리 개인 통신망(170)을 통해 수신한 경우나 리모컨(130) 등으로부터 근거리 개인 통신망(170)을 통해 노래 선곡 정보를 수신한 경우에 마이크(140)나 리모컨(130)으로부터 생체 데이터 수신 이벤트가 발생할 것으로 결정한다. 노래 선곡 정보는 예를 들어 선곡되는 노래 곡번호를 포함할 수 있다.
노래 선곡 정보에 따라 거주자 모니터링 장치(160)(의 제어부(167))는 저장부(162)의 저장되어 있는 노래방 DB에서 대응하는 노래 정보를 검색하고 검색된 노래 정보의 오디오 파일과 가사 파일을 이용하여 선곡된 노래를 재생할 수 있다. 거주자 모니터링 장치(160)(의 제어부(167))는 재생되는 노래의 가사 이미지를 포함하는 영상 신호를 신호 출력부(164)를 통해 출력하고 재생되는 노래의 음향 신호를 또한 신호 출력부(164)를 통해 출력한다.
이후, 근거리 개인 통신망(170)을 통해 거주자 모니터링 장치(160)에 연결된 리모컨(130) 또는 마이크(140)는 내장된 생체신호 센서 등을 통해 생체 데이터를 센싱(S203)한다.
예를 들어, 리모컨(130)은 거주자의 날숨을 통해 측정 가능한 내장된 알코올 센서, 산소 포화도 측정 센서 및/또는 이산화탄소 측정 센서를 통해 생체 데이터를 센싱할 수 있다. 리모컨(130)은 날숨을 주입할 수 있는 빨대 등을 구비하여 빨대를 통해 주입되는 날숨으로부터 각종 생체 데이터를 센싱할 수 있다. 그 외, 리모컨(130)은 심전도 센서 등의 생체신호 센서를 통해 심전도의 생체 데이터를 센싱할 수도 있다. 마이크(140)는 거주자가 입을 통해 소리 신호를 수집하는 마이크 그릴 내에 알코올 센서, 산소 포화도 측정 센서 및/또는 이산화탄소 측정 센서 등의 생체신호 센서를 내장하여 거주자의 생체 데이터를 센싱한다.
리모컨(130) 또는 마이크(140)는 센싱된 생체 데이터를 근거리 개인 통신망(170)을 통해 거주자 모니터링 장치(160)로 전송(S205)한다. 손잡이 등에 압력 센서를 구비한 마이크(140)는 압력 센서를 통해 센싱된 압력 신호(데이터)가 설정된 임계치 이상인 경우에만 생체신호 센서를 통해 센싱된 생체 데이터를 거주자 모니터링 장치(160)로 바람직하게 전송할 수 있다. 그 외의 경우에는 생체 데이터의 전송을 생략할 수 있다. 설정된 임계치는 적어도 거주자의 손(바닥)이 마이크(140)를 잡고 있는 것으로 인식될 수 있는 하한의 압력 신호(데이터) 값일 수 있다. 하한의 압력 신호 값은 미리 설정될 수 있다.
거주자 모니터링 장치(160)(의 제어부(167))는 근거리 개인 통신망(170)을 통해 센싱된 생체 데이터를 수신(S207)한다.
거주자 모니터링 장치(160)(의 제어부(167))는 수신된 생체 데이터가 마이크(140)로부터 수신된 것인지를 판단(S209)한다. 예를 들어, 거주자 모니터링 장치(160)(의 제어부(167))는 근거리 개인 통신망(170)의 통신 패킷의 식별자(송신자 ID나 통신 채널 번호 등)를 이용하여 리모컨(130)으로부터 수신된 것인지 또는 마이크(140)로부터 수신된 것인지를 판단할 수 있다.
마이크(140)로부터 수신된 경우에, 거주자 모니터링 장치(160)(의 제어부(167))는 선곡에 따라 검색되어 재생중인 노래 정보를 이용하여 마이크(140)로부터의 센싱된 생체 데이터를 필터링(S211)한다. 마이크(140)로부터 수신된 생체 데이터는 마이크 그릴 내에 내장된 생체신호 센서로부터 수신되고 이러한 생체신호 센서는 높은 날숨인 경우에 정확도를 높일 수 있다. 일반적으로 높은 음정인 경우에 거주자는 더 많은 날숨을 내뱉는다.
거주자 모니터링 장치(160)(의 제어부(167))는 현재 재생중인 노래의 노래 구간이 미리 지정된 음높이 이하인지를 결정하고 수신된 생체 데이터에 대응하는 노래 구간이 지정된 음높이 이하인 경우 해당 생체 데이터를 필터링(제거)한다. 예를 들어, 거주자 모니터링 장치(160)(의 제어부(167))는 검색된 노래 정보의 오디오 데이터 및 가사 데이터를 지정된 노래 구간(예를 들어, 하나의 음표 구간이나 하나의 마디 구간 등)으로 구분하고 현재 재생중인 노래 구간의 음 높이(한 음표의 높이나 마디 구간 내의 모든 음표의 평균 음 높이)를 설정된(지정된) 음높이와 비교한다. 거주자 모니터링 장치(160)(의 제어부(167))는 재생중인 노래 구간이 지정된 음높이 이하인 경우 마이크(140)로부터 수신된 대응하는 생체 데이터를 필터링(제거)한다.
이후, 거주자 모니터링 장치(160)(의 제어부(167))는 관리 서버(200)로 전송될 생체 센싱 메시지를 생성(S213)한다. 거주자 모니터링 장치(160)(의 제어부(167))는 리모컨(130)이나 마이크(140)로부터의 생체 데이터와 나아가 수신 시각을 포함하는 생체 센싱 메시지를 생성할 수 있다.
거주자 모니터링 장치(160)(의 제어부(167))는 마이크(140)로부터 수신된 생체 데이터 중 필터링 후 남은 생체 데이터와 대응하는 수신 시각을 포함하는 생체 센싱 메시지를 생성할 수 있다. 거주자 모니터링 장치(160)(의 제어부(167))는 남은 생체 데이터의 대응하는 노래 구간에서의 음높이 정보를 생체 센싱 메시지에 더 포함할 수 있다.
생체 센싱 메시지는 하나 이상의 생체 데이터와 수신 시각을 포함할 수 있다. 예를 들어, 생체 센싱 메시지는 저장부(162) 등에 설정된 메시지 전송 주기(예를 들어 10분, 30분, 1시간 등)에 따라 전송 주기 내에 센싱된 생체 데이터와 그 수신 시각을 하나 이상 포함할 수 있다. 거주자 모니터링 장치(160)(의 제어부(167))는 각각의 생체 데이터의 센싱 소스(마이크(140) 또는 리모컨(130)) 식별자를 생체 센싱 메시지에 더 포함할 수도 있다.
거주자 모니터링 장치(160)(의 제어부(167))는 설정된 주기에 따라 또는 생체 데이터의 수신에 따라 생체 데이터를 하나 이상 포함하는 생체 센싱 메시지를 광대역 통신망(300)을 통해 관리 서버(200)로 전송(S215)한다. 거주자 모니터링 장치(160)(의 제어부(167))는 마이크(140)를 통해 수신된 생체 데이터들 중 필터링 후의 생체 데이터를 포함하는 생체 센싱 메시지를 광대역 통신망(300)을 통해 관리 서버(200)로 전송할 수 있다.
관리 서버(200)는 거주자 모니터링 장치(160)로부터 생체 센싱 메시지를 수신한다. 과정 S201 내지 S215는 거주자의 건강상태 추측 전에 복수회 수행될 수 있다. 관리 서버(200)는 수신된 하나 이상의 생체 센싱 메시지를 이용하여 거주자의 건강상태를 인공지능 알고리즘 등을 이용하여 추측(S217)한다.
예를 들어, 관리 서버(200)는 수신된 생체 센싱 메시지에 대응하는 거주자 엔트리를 거주자 DB에서 검색하고 생체 센싱 메시지로부터 하나 이상의 생체 데이터 아이템을 생성하고 검색된 거주자 엔트리의 생체 데이터 리스트에 생성된 생체 데이터 아이템을 저장한다. 각각의 생체 데이터 아이템은 생체 데이터 및 수신 시각을 포함하고 나아가 음높이 정보나 센싱 소스 식별자를 더 포함할 수 있다.
관리 서버(200)는 생체 데이터 리스트를 입력 인자로 사용하여 거주자의 건강상태를 딥러닝 알고리즘 알고리즘을 통해 추측하고 추측된 건강상태를 거주자 상태 정보에 저장할 수 있다. 관리 서버(200)는 추측된 건강상태에 따라 거주자 상태 메시지를 생성하여 이를 광대역 통신망(300)을 통해 연결되는 보호 단말(400)로 전송할 수 있다.
생체 데이터 아이템이 음높이 정보를 포함하는 경우에, 관리 서버(200)는 대응하는 생체 데이터를 음높이 정보에 따라 변경하고 변경된 생체 데이터를 포함하여 거주자의 건강상태를 추측할 수 있다.
한편, 거주자 모니터링 장치(160)(의 제어부(167))는 리모컨(130)을 통한 선곡으로 복수의 선곡된 노래 정보를 재생할 수 있다. 거주자 모니터링 장치(160)(의 제어부(167))는 복수의 선곡된 노래 정보의 가사 아이템(가사 구절이나 가사 단어 등)의 반복 회수에 기초하여 추천 노래 유형을 결정할 수 있다. 예를 들어, 거주자 모니터링 장치(160)(의 제어부(167))는 심리적 상실감이나 우울증 등에 관련된 단어나 구절이 지정 회수 이상 선곡된 노래 정보들에서 검색된 경우에 팝, 디스코, 빠른 템포의 트로트 등의 노래 유형을 추천 노래 유형으로 결정하고 결정된 추천 노래 유형의 노래 정보를 검색하여 신호 출력부(164)를 통해 출력할 수 있다.
이에 따라, 거주자는 현재 심리 상태를 반전시킬 수 있는 추천 유형의 노래를 리모컨(130)과 마이크(140)를 이용하여 부를 수 있고 우울증 등의 심리적 문제를 치유하거나 개선할 수 있다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시 예 및 첨부된 도면에 의해 한정되는 것이 아니다.
100 : 로컬 거주자 시스템
110 : 카메라
120 : 모션 감지기
130 : 리모컨
140 : 마이크
150 : 태블릿 PC
160 : 거주자 모니터링 장치
161 : 근거리 통신부 162 : 저장부
163 : 광대역 통신부 164 : 신호 출력부
165 : 주변 인터페이스부 166 : 연결부
167 : 제어부
170 : 근거리 개인 통신망
180 : 액세스 포인트
190 : 텔레비전
200 : 관리 서버
201 : 통신 유닛 203 : 저장 유닛
205 : 연결 유닛 207 : 제어 유닛
300 : 광대역 통신망
400 : 보호 단말

Claims (11)

  1. 거주자 모니터링 장치가 카메라 또는 모션 감지기로부터 수신된 데이터를 이용하여 거주자의 움직임을 포착 시도하는 단계;
    지정시간 동안 움직임이 포착되지 않는 경우, 거주자 모니터링 장치가 알람 신호를 출력하는 단계;
    상기 알람 신호에 후속하여, 거주자 모니터링 장치가 거주자의 움직임을 포착 시도하는 단계;
    지정시간 이내에 움직임이 포착되지 않는 경우, 거주자 모니터링 장치가 광대역 통신망을 통해 관리 서버로 알람 메시지를 전송하는 단계;
    근거리 개인 통신망을 통해 상기 거주자 모니터링 장치에 연결된 마이크가 마이크 그릴 내에 내장된 생체신호 센서를 통해 생체 데이터를 센싱하는 단계;
    마이크가 센싱된 생체 데이터를 근거리 개인 통신망을 통해 거주자 모니터링 장치로 전송하는 단계;
    거주자 모니터링 장치가 재생중인 노래 정보를 이용하여 수신된 생체 데이터를 필터링하는 단계; 및
    거주자 모니터링 장치가 필터링 후의 생체 데이터를 포함하는 생체 센싱 메시지를 광대역 통신망을 통해 관리 서버로 전송하는 단계;를 포함하는,
    거주자 모니터링 방법.
  2. 제1항에 있어서,
    거주자 모니터링 장치가 근거리 개인 통신망을 통해 리모컨으로부터 센싱된 생체 데이터를 수신하는 단계;
    거주자 모니터링 장치가 상기 리모컨으로부터 수신된 생체 데이터를 포함하는 생체 센싱 메시지를 광대역 통신망을 통해 관리 서버로 전송하는 단계; 및
    관리 서버가 상기 거주자 모니터링 장치로부터 수신된 복수의 생체 센싱 메시지를 이용하여 거주자의 건강상태를 인공지능 알고리즘을 통해 추측하는 단계;를 더 포함하는,
    거주자 모니터링 방법.
  3. 삭제
  4. 제1항에 있어서,
    상기 마이크는 구비된 압력 센서를 통해 센싱된 압력 신호가 임계치 이상인 경우에 생체신호 센서를 통해 센싱된 생체 데이터를 거주자 모니터링 장치로 전송하는,
    거주자 모니터링 방법.
  5. 제1항에 있어서,
    상기 필터링 단계는 재생중인 노래의 노래 구간 중 지정된 음높이 이하의 노래 구간에서 센싱된 생체 데이터를 필터링하고,
    상기 생체 센싱 메시지는 필터링 후의 생체 데이터에 대응하는 노래 구간에서의 음높이 정보를 더 포함하는,
    거주자 모니터링 방법.
  6. 제1항에 있어서,
    거주자 모니터링 장치가 근거리 개인 통신망을 통해 리모컨으로부터 노래 선곡 정보를 수신하는 단계; 및
    거주자 모니터링 장치가 복수의 선곡된 노래 정보의 가사 아이템의 반복 회수에 기초하여 추천 노래 유형을 결정하고 추천 노래 유형의 노래 정보를 출력하는 단계;를 더 포함하는,
    거주자 모니터링 방법.
  7. 제1항에 있어서,
    상기 거주자 움직임의 포착 시도 단계 이전에, 거주자 모니터링 장치가 카메라 또는 모션 감지기로부터의 데이터에 대한 머신 러닝 지도학습 알고리즘에 따라 생활 패턴을 학습하는 단계;를 더 포함하고,
    상기 알람 신호 출력 단계는 거주자 모니터링 장치가 학습한 생활 패턴에 기초하여 움직임 예측 시간 동안에 움직임이 포착되지 않는 경우 알람 신호를 출력하며,
    상기 생활 패턴은 근거리 개인 통신망을 통해 연결된 리모컨으로부터의 사용자 입력에 따라 갱신되는,
    거주자 모니터링 방법.
  8. 거주자 모니터링 장치로서,
    카메라 또는 모션 감지기로부터 데이터를 수신하는 근거리 통신부;
    거주자 모니터링을 위한 제어 프로그램을 저장하는 저장부;
    거주자가 인식 가능한 신호를 출력하는 신호 출력부;
    광대역 통신망을 통해 통신 데이터를 송수신하는 광대역 통신부; 및
    상기 제어 프로그램을 로딩하여 상기 거주자 모니터링 장치를 제어하는 제어부로서, 근거리 통신부로부터의 데이터를 이용하여 지정시간 동안 거주자의 움직임을 포착 시도하고 지정시간 동안 움직임이 포착되지 않는 경우 상기 신호 출력부를 통해 알람 신호를 출력하며, 알람 신호의 출력에 후속하여 거주자의 움직임을 지정시간 동안 다시 포착 시도하고 지정시간 동안 움직임이 포착되지 않는 경우 상기 광대역 통신부를 통해 알람 메시지를 관리 서버로 전송하는, 제어부;를 포함하며,
    상기 근거리 통신부는 연결된 마이크로부터 센싱한 생체 데이터를 더 수신하고,
    상기 제어부는 재생중인 노래의 노래 구간 중 지정된 음높이 이하의 노래 구간에서 센싱된 생체 데이터를 필터링하고 필터링 후의 생체 데이터와 대응하는 노래 구간의 음높이 정보를 포함하는 생체 센싱 메시지를 광대역 통신부를 통해 관리 서버로 전송하는,
    거주자 모니터링 장치.
  9. 제8항에 있어서,
    상기 근거리 통신부는 연결된 리모컨으로부터 센싱된 생체 데이터를 더 수신하고,
    상기 제어부는 연결된 리모컨으로부터 센싱된 생체 데이터를 포함하는 생체 센싱 메시지를 구성하여 구성된 생체 센싱 메시지를 상기 광대역 통신부를 통해 관리 서버로 더 전송하고,
    상기 생체 센싱 메시지는 관리 서버로 하여금 거주자의 건강상태를 인공지능 알고리즘을 통해 추정 가능토록 하는,
    거주자 모니터링 장치.
  10. 삭제
  11. 제8항의 거주자 모니터링 장치; 및
    광대역 통신망을 통해 상기 거주자 모니터링 장치에 연결된 관리 서버;를 포함하고,
    상기 거주자 모니터링 장치는 근거리 개인 통신망을 통해 리모컨 또는 마이크로부터 센싱된 생체 데이터를 수신하고 센싱된 생체 데이터를 포함하는 생체 센싱 메시지를 상기 관리 서버로 광대역 통신망을 통해 전송하고,
    상기 관리 서버는 상기 거주자 모니터링 장치로부터 수신된 복수의 생체 센싱 메시지를 이용하여 거주자의 건강상태를 인공지능 알고리즘을 통해 추측하는,
    거주자 모니터링 시스템.
KR1020180071346A 2018-06-21 2018-06-21 거주자 모니터링 방법, 장치 및 시스템 KR101927373B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180071346A KR101927373B1 (ko) 2018-06-21 2018-06-21 거주자 모니터링 방법, 장치 및 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180071346A KR101927373B1 (ko) 2018-06-21 2018-06-21 거주자 모니터링 방법, 장치 및 시스템

Publications (1)

Publication Number Publication Date
KR101927373B1 true KR101927373B1 (ko) 2018-12-12

Family

ID=64669879

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180071346A KR101927373B1 (ko) 2018-06-21 2018-06-21 거주자 모니터링 방법, 장치 및 시스템

Country Status (1)

Country Link
KR (1) KR101927373B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102291482B1 (ko) * 2020-03-02 2021-08-19 김대현 독거노인 케어 시스템 및 이의 동작방법
WO2021256877A1 (ko) * 2020-06-18 2021-12-23 주식회사 레몬헬스케어 환자생성 생체바이오 데이터(pghd) 및 dna분석 데이터 기반의 원격진료시 다중 진료과 선정 및 사후 모니터링 방법 및 시스템
KR102379275B1 (ko) 2021-11-16 2022-03-29 퀀텀테크엔시큐 주식회사 영상기반 원격 홈 케어 시스템

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101782800B1 (ko) * 2015-08-05 2017-09-28 시원주식회사 독거 관리대상자의 관리와 방범기능이 가능한 듀얼 시스템
KR101863672B1 (ko) * 2016-12-15 2018-06-01 정우주 멀티미디어 컨텐츠 정보를 기반으로 사용자 맞춤형 멀티미디어 컨텐츠를 제공하는 방법 및 장치

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101782800B1 (ko) * 2015-08-05 2017-09-28 시원주식회사 독거 관리대상자의 관리와 방범기능이 가능한 듀얼 시스템
KR101863672B1 (ko) * 2016-12-15 2018-06-01 정우주 멀티미디어 컨텐츠 정보를 기반으로 사용자 맞춤형 멀티미디어 컨텐츠를 제공하는 방법 및 장치

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102291482B1 (ko) * 2020-03-02 2021-08-19 김대현 독거노인 케어 시스템 및 이의 동작방법
WO2021256877A1 (ko) * 2020-06-18 2021-12-23 주식회사 레몬헬스케어 환자생성 생체바이오 데이터(pghd) 및 dna분석 데이터 기반의 원격진료시 다중 진료과 선정 및 사후 모니터링 방법 및 시스템
KR20210156590A (ko) * 2020-06-18 2021-12-27 주식회사 레몬헬스케어 환자생성 생체바이오 데이터(pghd) 및 dna분석 데이터 기반의 원격진료시 다중 진료과 선정 및 사후 모니터링 방법 및 시스템
KR102409891B1 (ko) * 2020-06-18 2022-06-17 주식회사 레몬헬스케어 환자생성 생체바이오 데이터(pghd) 및 dna분석 데이터 기반의 원격진료시 다중 진료과 선정 및 사후 모니터링 방법 및 시스템
US20230197258A1 (en) * 2020-06-18 2023-06-22 Lemonhealthcare Ltd Method and system for multi-medical department selection and post-monitoring during telemedicine based on patientgenerated health data (pghd) and dna analysis data
US11749402B2 (en) 2020-06-18 2023-09-05 Lemonhealthcare Ltd Method and system for multi-medical department selection and post-monitoring during telemedicine based on patient generated health data (PGHD) and DNA analysis data
KR102379275B1 (ko) 2021-11-16 2022-03-29 퀀텀테크엔시큐 주식회사 영상기반 원격 홈 케어 시스템
WO2023090547A1 (ko) 2021-11-16 2023-05-25 퀀텀테크엔시큐 주식회사 영상기반 원격 홈 케어 시스템

Similar Documents

Publication Publication Date Title
JP6592440B2 (ja) 情報処理システム、情報処理装置、情報処理プログラム、および、情報処理方法
JP5005819B2 (ja) 環境に関連した呼吸器疾患の自己監視方法およびシステム
KR101927373B1 (ko) 거주자 모니터링 방법, 장치 및 시스템
WO2016108582A1 (ko) 스마트 침대 시스템 및 제어 방법
EP2246797A2 (en) Personalized article of domestic electronic equipment, and a method for implementing the same
CN102481121A (zh) 意识监测
EP3432772B1 (en) Using visual context to timely trigger measuring physiological parameters
JP6992749B2 (ja) 被監視者監視システムの中央処理装置、中央処理方法およびプログラムならびに被監視者監視システム
CN108986405B (zh) 一种基于Zigbee网关的多参数控制方法
CN106999108A (zh) 用于跌落检测的***和方法
JP7044060B2 (ja) 被監視者監視装置、該方法および該システム
KR20060084916A (ko) 위치 이동이 가능한 지능형 로봇을 이용한 원격건강관리시스템 및 서비스
CN110587621A (zh) 机器人、基于机器人的病人看护方法和可读存储介质
TWI772762B (zh) 照護系統與自動照護方法
JP6880811B2 (ja) 被監視者監視装置、該方法および該システム
KR20130107690A (ko) 일상 건강 정보 제공 시스템 및 일상 건강 정보 제공 방법
JP2018147452A (ja) ドアシステム、およびドアシステムを用いた監視方法
WO2020003715A1 (ja) レポート出力プログラム、レポート出力方法およびレポート出力装置
Selim et al. A multi-sensor surveillance system for elderly care
JP2005278790A (ja) 健康管理システム
TWM595870U (zh) 照護系統
JP2021174189A (ja) サービスのメニューの作成を支援する方法、サービスの利用者の評価を支援する方法、当該方法をコンピューターに実行させるプログラム、および、情報提供装置
JP2017151676A (ja) 被監視者監視装置、該方法および該システム
WO2020171109A1 (ja) 介護施設用の介護支援システム
US20210052838A1 (en) System and ventilator for noninvasive detection of infection during ventilation

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant