KR20180036068A - A system of controlling internet of things devices and a method for the same - Google Patents

A system of controlling internet of things devices and a method for the same Download PDF

Info

Publication number
KR20180036068A
KR20180036068A KR1020160126173A KR20160126173A KR20180036068A KR 20180036068 A KR20180036068 A KR 20180036068A KR 1020160126173 A KR1020160126173 A KR 1020160126173A KR 20160126173 A KR20160126173 A KR 20160126173A KR 20180036068 A KR20180036068 A KR 20180036068A
Authority
KR
South Korea
Prior art keywords
user
information
health information
control command
management server
Prior art date
Application number
KR1020160126173A
Other languages
Korean (ko)
Inventor
김기현
김현숙
박수호
Original Assignee
주식회사 케이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이티 filed Critical 주식회사 케이티
Priority to KR1020160126173A priority Critical patent/KR20180036068A/en
Publication of KR20180036068A publication Critical patent/KR20180036068A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/01—Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/021—Measuring pressure in heart or blood vessels
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/14532—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue for measuring glucose, e.g. by tissue impedance measurement
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • H04L67/16—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/51—Discovery or management thereof, e.g. service location protocol [SLP] or web services
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Pathology (AREA)
  • Cardiology (AREA)
  • Public Health (AREA)
  • Physiology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Vascular Medicine (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Computing Systems (AREA)
  • Emergency Medicine (AREA)
  • Optics & Photonics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

The present invention provides a system of controlling an internet of things (IoT) device. The system includes a cloud management server for collecting user health information and generating a control command for controlling an IoT device based on the collected user health information; a central controller for collecting user voice information, obtaining the user health information from a cloud management server based on the collected user voice information and providing it to the user, or generating a control command for controlling the IoT device; and a device controller for controlling the operation of the IoT device based on at least one of the control command generated by the cloud management server and the control command generated by the central controller. It is possible to control the IoT device using the user health information or user voice information.

Description

사물 인터넷 기기의 제어 시스템 및 이의 제어 방법{A SYSTEM OF CONTROLLING INTERNET OF THINGS DEVICES AND A METHOD FOR THE SAME}TECHNICAL FIELD [0001] The present invention relates to a control system for an Internet appliance,

본 발명은 사용자 건강정보 또는 사용자 음성정보를 활용한 사물 인터넷 기기의 제어 시스템 및 제어방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a control system and a control method of an object Internet appliance using user health information or user voice information.

최근, 스마트 워치 또는 헬스 밴드 등 사용자가 착용할 수 있는 웨어러블 기기를 이용하여 사용자 정보를 수집하는 기술이 상용화되고 있다. 이로 인하여, 사용자는 웨어러블 기기와 연결된 장치를 이용하여 수집된 심박수, 체온, 운동량 및 감정 상태 등을 확인할 수 있게 되었다. 하지만, 아직까지는 수집된 사용자 정보(예; 심박수, 체온, 운동량 등)를 사용자가 확인하는 정도에 머무르고 있을 뿐, 수집된 사용자 정보를 활용하고는 있지 않은 실정이다. 2. Description of the Related Art In recent years, technologies for collecting user information using a wearable device such as a smart watch or a health band have been commercialized. Accordingly, the user can check the collected heart rate, body temperature, exercise amount, and emotion state using the device connected to the wearable device. However, until now, only the user confirms the collected user information (for example, heart rate, body temperature, exercise amount, etc.), but does not utilize the collected user information.

따라서, 수집된 사용자 정보를 이용한 다양한 서비스 방안 및 서비스 제공 기술 개발의 필요성이 요구되고 있다.Therefore, it is required to develop various service plans and service providing technologies using the collected user information.

본 발명에서는 사물 인터넷 기기의 제어 시스템 및 제어 방법, 구체적으로는 사용자 건강정보 또는 사용자 음성정보를 활용한 사물 인터넷 기기의 제어 시스템 및 제어방법을 제공하고자 한다.The present invention provides a control system and a control method of a stuff Internet device, specifically, a control system and a control method of a stuff internet device using user health information or user voice information.

본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.It is to be understood that both the foregoing general description and the following detailed description are exemplary and explanatory and are not restrictive of the invention, unless further departing from the spirit and scope of the invention as defined by the appended claims. It will be possible.

상술한 바와 같은 과제를 해결하기 위하여 본 발명은 사용자 건강 정보를 수집하고, 수집된 사용자 건강 정보를 기초로 사물 인터넷 기기를 제어하는 제어명령을 생성하는 클라우드 관리 서버, 사용자 음성 정보를 수집하고, 수집된 사용자 음성 정보에 기초하여, 클라우드 관리 서버로부터 사용자 건강 정보를 획득하여 사용자에게 제공하거나 사물 인터넷 기기를 제어하는 제어명령을 생성하는 중앙 제어기 및 클라우드 관리 서버에 의해 생성된 제어명령 및 중앙 제어기에 의해 생성된 제어명령 중 적어도 하나에 기초하여, 사물 인터넷 기기의 동작을 제어하는 기기 제어기를 포함하는 사물 인터넷 기기의 제어 시스템을 제공한다.According to an aspect of the present invention, there is provided a system for collecting user health information, the system comprising: a cloud management server for collecting user health information and generating a control command for controlling the object internet appliance based on the collected user health information; A central controller for obtaining user health information from the cloud management server and providing the user health information to the user or generating a control command for controlling the object Internet appliance based on the user voice information and the control command generated by the cloud management server and the central controller And a device controller for controlling the operation of the object internet appliance based on at least one of the generated control commands.

또한, 사용자 음성 정보를 인식하여 중앙 제어기로 전달하고, 중앙 제어기로부터 수신한 사용자 건강 정보를 사용자에게 음성 정보로 제공하는 음향기기를 더 포함하는 사물 인터넷 기기의 제어 시스템을 제공한다.Further, the present invention provides a control system for a stuff Internet apparatus, further comprising a sound device for recognizing user voice information and delivering the user health information to the central controller and the user health information received from the central controller to the user as voice information.

또한, 클라우드 관리 서버는 수집된 사용자 건강 정보를 맵리듀스를 통해 분산 후 병렬 처리하는 적어도 하나의 가상머신을 포함하는 사물 인터넷 기기의 제어 시스템을 제공한다.Also, the cloud management server provides at least one virtual machine for distributing collected health health information through a map deuce and then parallel processing the object health appliance.

또한, 사용자 건강 정보는 웨어러블 기기로부터 수신된 심박수, 체온, 걸음 수, 혈당 및 혈압 중 적어도 하나를 포함하는 사물 인터넷 기기의 제어 시스템을 제공한다. Also, the user health information provides at least one of the heart rate, body temperature, the number of steps, blood glucose and blood pressure received from the wearable device.

한편, 상술한 바와 같은 과제를 해결하기 위한 본 발명의 다른 일 측면에서는 클라우드 관리 서버에 의해, 사용자 건강 정보를 수집하고, 수집된 사용자 건강 정보를 기초로 사물 인터넷 기기를 제어하는 제어명령을 생성하는 단계, 중앙 제어기에 의해, 사용자 음성 정보를 수집하고, 수집된 사용자 음성 정보에 기초하여, 클라우드 관리 서버로부터 사용자 건강 정보를 획득하여 사용자에게 제공하거나 사물 인터넷 기기를 제어하는 제어명령을 생성하는 단계 및 기기 제어기에 의해, 클라우드 관리 서버에서 생성된 제어명령 및 중앙 제어기에서 생성된 제어명령 중 적어도 하나에 기초하여, 사물 인터넷 기기의 동작을 제어하는 사물 인터넷 기기의 제어 방법을 제공한다.According to another aspect of the present invention, a cloud management server collects user health information and generates a control command for controlling the object Internet appliance based on the collected user health information A step of collecting user voice information by the central controller, acquiring user health information from the cloud management server based on the collected user voice information and providing it to the user or generating a control command for controlling the object Internet appliance, and And controlling the operation of the object Internet appliance based on at least one of a control command generated by the cloud management server and a control command generated by the central controller by the device controller.

본 발명의 실시 예에 따른 사물 인터넷 기기의 제어 시스템 및 제어 방법에 의하면, 수집된 사용자 정보, 구체적으로는 사용자 건강 정보 또는 사용자 음성 정보를 통하여, 사용자의 건강 상태 또는 음성에 기반하여 사용자 주변에 위치하는 사물 인터넷 기기를 제어함으로써 사용자의 편의를 증대시킬 수 있다.According to the control system and control method of the Internet appliance for objects according to the embodiment of the present invention, it is possible to determine whether or not the user is present in the vicinity of the user based on the health state or voice of the user through the collected user information, It is possible to increase the convenience of the user by controlling the Internet device.

본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The effects obtained by the present invention are not limited to the above-mentioned effects, and other effects not mentioned can be clearly understood by those skilled in the art from the following description will be.

도 1은 본 발명의 일 실시 예에 따른 사물 인터넷 기기의 제어 시스템 구성을 도시한 것이다.
도 2는 본 발명의 일 실시 예에 따른 사물 인터넷 기기의 제어 시스템의 제어 절차를 도시한 것이다.1 is a block diagram illustrating a configuration of a control system for an Internet appliance according to an embodiment of the present invention.
FIG. 2 is a flowchart illustrating a control procedure of a control system of the Internet appliance according to an embodiment of the present invention. Referring to FIG.

이하, 본 발명에 따른 바람직한 실시 형태를 첨부된 도면을 참조하여 상세하게 설명한다. 첨부된 도면과 함께 이하에 개시될 상세한 설명은 본 발명의 예시적인 실시형태를 설명하고자 하는 것이며, 본 발명이 실시될 수 있는 유일한 실시형태를 나타내고자 하는 것이 아니다. 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략할 수 있고, 명세서 전체를 통하여 동일 또는 유사한 구성 요소에 대해서는 동일한 참조 부호를 사용할 수 있다.Hereinafter, preferred embodiments according to the present invention will be described in detail with reference to the accompanying drawings. DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS The following detailed description, together with the accompanying drawings, is intended to illustrate exemplary embodiments of the invention and is not intended to represent the only embodiments in which the invention may be practiced. In order to clearly illustrate the present invention in the drawings, parts not related to the description may be omitted, and the same reference numerals may be used for the same or similar components throughout the specification.

본 발명의 일 실시 예에서, “또는”, “적어도 하나” 등의 표현은 함께 나열된 단어들 중 하나를 나타내거나, 또는 둘 이상의 조합을 나타낼 수 있다. 예를 들어, “A 또는 B”, “A 및 B 중 적어도 하나”는 A 또는 B 중 하나만을 포함할 수 있고, A와 B를 모두 포함할 수도 있다.In one embodiment of the present invention, the expressions " or ", " at least one ", etc. may denote one of the words listed together or may represent a combination of two or more. For example, " A or B ", " at least one of A and B " may include only one of A or B, and may include both A and B.

도 1은 본 발명의 일 실시 예에 따른 사물 인터넷 기기의 제어 시스템(200) 구성을 도시한 것이다.1 is a block diagram illustrating a configuration of a control system 200 for an Internet appliance according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 사물 인터넷 기기의 제어 시스템(200)은 웨어러블 기기(10), 정보 수집 에이전트(20), 클라우드 관리 서버(30), 기기 제어기(40), 사물 인터넷 기기 허브(50), 음향 기기(60), 중앙 제어기(70), 대화 서버(80), STT 서버(90) 및 TTS 서버(100)를 포함할 수 있다.1, a control system 200 of an Internet appliance according to the present invention includes a wearable device 10, an information collection agent 20, a cloud management server 30, a device controller 40, 50, a sound device 60, a central controller 70, a conversation server 80, an STT server 90, and a TTS server 100.

웨어러블 기기(10)는 사용자에 착용되어 사용자 건강 정보를 수집한다. 사용자 건강 정보는 심박수, 체온, 걸음 수, 혈당, 혈압, 심전도, 근전도 및 산소포화도 등을 포함할 수 있다.The wearable device 10 is worn by a user to collect user health information. The user health information may include heart rate, body temperature, number of steps, blood sugar, blood pressure, electrocardiogram, EMG, and oxygen saturation.

웨어러블 기기(10)는 수집된 사용자 건강 정보를 정보 수집 에이전트(20)로 전달할 수 있다.The wearable device 10 may transmit the collected user health information to the information collection agent 20.

정보 수집 에이전트(20)는 스마트폰, 공유기 및 라우터 등의, 네트워크에 연결 가능한 기기에 해당한다. 정보 수집 에이전트(20)는 웨어러블 기기(10)와 유선 또는 무선으로 연결되어 사용자 건강 정보를 전달받을 수 있다. 정보 수집 에이전트(20)는 웨어러블 기기(10)로부터 사용자 건강 정보를 수신하는 리스너(미도시)와 사용자가 직접 사용자 정보를 입력하거나 웨어러블 기기(10)에 의해 측정되는 사용자 건강 정보의 조건을 제어할 수 있는 사용자 정보 입력부(미도시)를 포함할 수 있다. 사용자 건강 정보는 주기적으로 측정되는 정보와 일정 조건하에서 측정되는 정보로 구분될 수 있다. 예를 들어, 주기적으로 측정되는 정보는 수면 시작 시간, 수면 종료 시간 및 총 수면 시간 등이 이에 해당할 수 있으며, 일정 조건하에서 측정되는 정보는 심박수, 총 걸음 수, 총 운동거리, 총 운동 칼로리, 분당 평균 속도, 운동시간 및 고도 등이 이에 해당할 수 있다. 사용자는 사용자 정보 입력부를 이용하여, 일정 조건을 입력할 수 있다. 예를 들어 특정 구간 및 특정 시간에 심박수, 걸음수 등을 측정하도록 제어할 수 있다.The information collection agent 20 corresponds to a device connectable to a network, such as a smart phone, a router, and a router. The information collecting agent 20 may be connected to the wearable device 10 by wire or wirelessly to receive user health information. The information collecting agent 20 controls the listener (not shown) that receives the user health information from the wearable device 10 and the condition of the user health information measured by the wearable device 10 And a user information input unit (not shown). User health information can be divided into periodically measured information and information measured under certain conditions. For example, information that is periodically measured may include sleep start time, sleep end time, and total sleep time, and information measured under certain conditions may include heart rate, total steps, total exercise distance, total exercise calorie, This may be the average speed per minute, exercise time and altitude. The user can input a certain condition by using the user information input unit. For example, it is possible to control the heart rate, the number of steps, and the like to be measured at specific intervals and at specific times.

한편, 웨어러블 기기(10) 내에 정보 수집 에이전트(20)의 기능이 포함될 수도 있다. 이 경우, 웨어러블 기기(10)는 수집한 사용자 건강 정보를 직접 클라우드 관리 서버(30)로 전송할 수 있다.On the other hand, the function of the information collection agent 20 may be included in the wearable device 10. In this case, the wearable device 10 can directly transmit the collected user health information to the cloud management server 30.

클라우드 관리 서버(30)는 웨어러블 기기(10) 또는 정보 수집 에이전트(20)로부터 수집한 사용자 건강 정보를 저장하고 관리한다.The cloud management server 30 stores and manages user health information collected from the wearable device 10 or the information collection agent 20. [

또한, 수집한 사용자 건강 정보에 기초하여, 사물 인터넷 기기의 제어명령을 생성할 수 있다. 사물 인터넷 기기는 스마트 TV, 월 패드, 미디어 박스, 스마트 패드, 스마트 냉장고, 스마트 세탁기, 스마트 전자레인지, 스마트 청소기, 스마트 에어컨, 스마트 보일러, 스마트 전기밥솥 및 조명 등과 같이 다양하며, 네트워크 접속 기능을 구비하여 기능 또는 구동 등이 네트워크를 통하여 제어될 수 있는 기기를 통칭한다.Further, based on the collected user health information, a control command of the object Internet appliance can be generated. There are various internet devices such as smart TV, wall pad, media box, smart pad, smart refrigerator, smart washing machine, smart microwave, smart vacuum cleaner, smart air conditioner, smart boiler, smart electric cooker and lighting. And refers to a device in which a function, a drive, or the like can be controlled through a network.

예를 들어, 수집된 사용자 건강 정보 내에 포함된 심박수, 체온, 걸음수 등이 일정 범위를 초과하면, 클라우드 관리 서버(30)는 스마트 선풍기 또는 스마트 에어컨을 구동시키기 위한 제어명령을 생성할 수 있다. For example, when the heart rate, the body temperature, the number of steps, and the like included in the collected user health information exceed a certain range, the cloud management server 30 may generate a control command for driving the smart fan or smart air conditioner.

또한, 클라우드 관리 서버(30)는 수면이나 운동 중 심박수 또는 체온 등에 급격한 변동이 발생하면, 주변의 스피커를 포함하는 사물 인터넷 기기를 구동시키는 제어명령을 통하여, 이를 사용자에게 인지시킬 수 있다. In addition, the cloud management server 30 can recognize the user through a control command for driving the object Internet appliance including the surrounding speaker when the water level or the body temperature suddenly changes during the water surface or during the exercise.

사용자가 수면 또는 운동 중에 있음은 사용자가 직접 웨어러블 기기(10) 또는 정보 수집 에이전트(20)의 사용자 정보 입력부(미도시)를 통하여 입력할 수 있다. 또한, 사용자 건강 정보가 일정 조건을 만족하는 경우를 수면 또는 운동 중에 있음으로 판단하도록 지정할 수 있다.The user can be entered through the user information input unit (not shown) of the wearable device 10 or the information collection agent 20 directly. Further, it is possible to designate that the user health information satisfies a certain condition as a state of being in the sleep or in the exercise.

한편, 클라우드 관리 서버(30)는 적어도 하나의 웨어러블 기기(10)에서 측정되는 다수의 사용자 건강 정보를 저장하고 관리하는 관계로 수집된 사용자 건강 정보를 효율적으로 처리할 필요성이 있다. 이 때문에, 클라우드 관리 서버(30)는 장기간의 대규모 사용자 건강 정보를 관리하기 위하여 클라우드 가상 자원을 기반으로 하는 분산병렬 처리 구조를 가진다.Meanwhile, the cloud management server 30 needs to efficiently process collected user health information in relation to storing and managing a plurality of user health information measured by at least one wearable device 10. For this reason, the cloud management server 30 has a distributed parallel processing structure based on cloud virtual resources in order to manage long-term large-scale user health information.

클라우드 가상 자원은 클라우드 서비스(IaaS; Infrastructure as a service)에서 제공하는 가상 머신을 의미하며, 본 실시예에서는 오픈스텍을 사용하나 이에 제한되는 것은 아니다. The cloud virtual resource means a virtual machine provided by an infrastructure as a service (IaaS), and in this embodiment, the open stack is used, but the present invention is not limited thereto.

가상 머신에서 분산병렬 처리를 위하여 맵리듀스(MapReduce) 프레임워크를 위한 하둡(Hadoop) 및 기계학습 라이브러리인 마하웃을 활용한다. 마하웃의 기계학습 라이브러리를 이용하여 대규모 데이터를 재가공할 수 있고, 부가 서비스를 창출할 수 있다. 예를 들면, 데이터 군집화가 필요한 경우 마하웃에서 필요한 알고리즘을 제공하여 데이터 분석에 필요한 응용 개발의 편의성을 제공하며, 생활 패턴이 좋은 사용자 정보를 다른 사용자에게 추천해줄 수 있는 추천 서비스를 제공할 수 있다. It utilizes Hadoop for MapReduce framework and Mahout, a machine learning library, for distributed parallel processing in virtual machines. The machine learning library of Mahau can be used to reprocess large-scale data and create additional services. For example, when data clustering is required, it is possible to provide a recommended service that provides the necessary algorithms to provide the application development necessary for data analysis, and recommends user information with good life pattern to other users by providing necessary algorithms .

가상 머신은 맵리듀스를 통하여 저장된 사용자 건강 정보를 분산 후 병렬 처리할 수 있다. 특히, 하둡은 분산처리 플랫폼을 제공하는 아파치 오픈소스 프로젝트로, 신뢰성과 확장성을 보장하는 환경을 제공한다. 이러한, 하둡을 구성하는 중요한 요소 중 하나인 맵리듀스는 분산환경에서 대용량 데이터를 처리하는데 있어서, 간단하고 직관적인 인터페이스를 제공한다. The virtual machine can distribute stored user health information through MapReduce and then parallelize it. In particular, Hadoop is an Apache open source project that provides a distributed processing platform, providing a reliable and scalable environment. One of the key components of Hadoop, MapReduce provides a simple and intuitive interface for handling large amounts of data in a distributed environment.

예를 들어, 수집되는 사용자 건강 정보 중 혈압, 혈당 및 심박수 등에 이상이 발생하는 횟수를 누적하여 저장 및 관리할 수 있다. 이때, 누적 횟수를 관리함에 있어서 일 단위 또는 월 단위로 주기를 달리 정하게 되는 경우나, 다수의 사용자 건강 정보를 수신하게 되는 경우 등에 있어서는 정보 처리의 양이 급증하게 된다. 이때, 클라우드 관리 서버(30)가 맵리듀스를 기반으로 누적 횟수에 관한 정보를 처리함으로써 부하 문제를 해결할 수 있다. 또한, 다수의 만성질환자의 생활 패턴을 분석하고 건강 개선 여부를 확인할 수 있으며, 대규모 임상 실험 대상자로부터 발생하는 데이터를 맵리듀스 기반으로 분석할 수 있다. 또한, 보험사는 보험 가입자를 대상으로 가입자들의 건강 관리 여부를 분석하여 보험료를 증가시키거나 감소시킬 수 있다.For example, the number of times the abnormality such as blood pressure, blood sugar and heart rate among collected user health information can be accumulated and managed. In this case, in managing the cumulative number of times, the amount of information processing increases rapidly when the period is set differently on a daily basis or on a monthly basis, or when a large number of user health information is received. At this time, the cloud management server 30 can solve the load problem by processing the information on the cumulative number based on the MapReduce. In addition, it is possible to analyze the life pattern of many chronic disease patients, to check whether the health improvement is possible, and to analyze the data generated from the large-scale clinical trial subjects based on the MapReduce basis. In addition, the insurer can increase or decrease the insurance premium by analyzing the health management of the insured for the insured.

구체적으로, [심박수 80], [체온 36], [심박수 70], [심박수 75]와 같이 실시간으로 누적되어 저장된 사용자 건강 정보를 맵리듀스를 이용하여 분류할 수 있다. 맵리듀스는 키와 값의 쌍으로 구성되는데, 여기서 키는 심박수와 체온 등과 같은 측정 항목에 해당하며, 값은 측정 수치로 지정할 수 있다. 맵 작업을 수행하면서 [심박수 80, 70, 75][체온 36]와 같이, 같은 키를 가지는 값들이 분류되며, 리듀스 작업을 통하여 사용자별로 사용자 건강 정보가 통합될 수 있다. Specifically, the user health information accumulated in real time such as [heart rate 80], [body temperature 36], [heart rate 70], and [heart rate 75] can be classified using the map deuce. The MapReduce consists of a pair of keys and values, where the key corresponds to a measurement such as heart rate and body temperature, and the value can be specified by a measurement value. While performing the map operation, values having the same key are classified as [heart rate 80, 70, 75] [body temperature 36], and user health information can be integrated for each user through the redox operation.

기기 제어기(40)는 다수의 사물 인터넷 기기에 유선 또는 무선으로 연결되어, 직접적인 기기 제어를 담당한다. 즉, 클라우드 관리 서버(30)에서 생성된 제어 명령을 수신하여, 수신된 제어 명령에 따라 사물 인터넷 기기의 동작을 조절한다.The device controller 40 is connected to a plurality of object Internet devices by wire or wireless, and directly controls the device. That is, the control command generated by the cloud management server 30 is received, and the operation of the object Internet device is controlled according to the received control command.

기기 제어기(40)는 각 사물 인터넷 기기들을 개별적으로 관리하거나 사물 인터넷 기기 허브(50)를 통하여 단위 별로 통합하여 관리할 수도 있다.The device controller 40 may manage each of the object internet devices individually or may integrate and manage the units through the object internet device hub 50. [

한편, 기기 제어기(40) 또는 사물 인터넷 기기 허브(50)는 정보 수집 에이전트(20)를 구비하여, 웨어러블 기기(10)로부터 직접 사용자 건강 정보를 수신하고, 특정 조건에 따라 클라우드 관리 서버(30)의 제어 명령이 없이도, 사물 인터넷 기기를 제어할 수 있도록 구현될 수 있다.On the other hand, the device controller 40 or the object Internet appliance hub 50 includes the information collection agent 20 to receive the user health information directly from the wearable device 10 and to transmit the user health information to the cloud management server 30, So that the object Internet apparatus can be controlled without any control command.

음향 기기(60)는 마이크와 스피커를 포함하여, 사용자로부터 음성 정보를 인식하거나 사용자에게 음성 정보를 제공할 수 있다. 음향 기기(60)는 웨어러블 기기(10)로부터 사용자 건강 정보를 직접 수신할 수 있도록 정보 수집 에이전트(20)를 포함할 수 있다.The audio device 60 may include a microphone and a speaker to recognize voice information from the user or to provide voice information to the user. The audio equipment 60 may include an information collection agent 20 to receive user health information directly from the wearable device 10. [

중앙 제어기(70)는 음향 기기(60)에서 인식된 사용자 음성 정보에 기초하여, 사물 인터넷 기기를 제어하는 제어 명령을 생성하여 기기 제어기(40)로 전송하거나, 클라우드 관리 서버(30)에 저장된 사용자 건강 정보를 획득하여 사용자에게 제공할 수 있다.The central controller 70 generates a control command for controlling the object Internet appliance and transmits the control command to the appliance controller 40 based on the user's voice information recognized by the audio appliance 60, Health information can be obtained and provided to the user.

사용자가 음향 기기(60)로 “조금 추운데, 지금 내 체온이 얼마야”의 사용자 음성 정보를 제공하면, 중앙 제어기(70)는 클라우드 관리 서버(30)에 저장된 사용자의 체온 정보를 수집하고, 이를 음향 기기(60)를 통하여 음성으로 “체온은 36도 입니다.” 등의 사용자 건강 정보를 제공할 수 있다. 또한, 중앙 제어기(70)는 주변의 선풍기 또는 에어컨 등의 동작을 정지시키는 제어명령을 생성하여 기기 제어기(40)로 전송할 수 있으며, 주변의 보일러의 설정 온도를 일정 범위 내에서 상승시키는 제어명령을 생성하여 기기 제어기(40)로 전송할 수 있다.When the user provides the user's voice information of " a little cold, but his body temperature is now " to the audio equipment 60, the central controller 70 collects body temperature information of the user stored in the cloud management server 30, The user can provide user health information such as " the body temperature is 36 degrees " through the sound device 60. Also, the central controller 70 can generate a control command for stopping the operation of the surrounding fan or the air conditioner, and transmit the control command to the device controller 40. The control command for increasing the set temperature of the surrounding boiler And transmit it to the device controller 40.

구체적으로는 음향 기기(60)에서 사용자 음성 정보가 인식되면, STT 서버(90)에서 사용자 음성 정보를 사용자 텍스트 정보로 변환한다. 변환된 사용자 텍스트 정보는 중앙 제어기(70)로 전달되며, 중앙 제어기(70)는 사용자 텍스트 정보를 대화 서버(80)로 전송한다.Specifically, when the user audio information is recognized by the audio device 60, the STT server 90 converts the user audio information into user text information. The converted user text information is transmitted to the central controller 70 and the central controller 70 transmits the user text information to the conversation server 80. [

대화 서버(80)는 사용자 텍스트 정보 내 대응되는 사용자 텍스트 회신 정보를 추출한다. 구체적으로는 사용자 텍스트에 적합한 응답 텍스트를 탐색하여 제공한다. 예를 들어, “지금 내 체온이 얼마야”의 사용자 텍스트 정보가 수신되면, 대화 서버(80)는 서버 내 저장된 정보 중 “지금 내 체온이 얼마야”에 대응되는 텍스트 정보인 “체온은 XX도 입니다”를 추출하고 이를 사용자 텍스트 회신정보로서 중앙 제어기(70)에 전달한다. 중앙 제어기(70)는 클라우드 관리 서버(30)에서 수신한 사용자의 체온 정보인 “36”과 대화 서버(80)에서 수신한 사용자 텍스트 회신정보를 결합하여 “체온은 36도 입니다”를 완성하고, 이를 TTS 서버(100)에서 사용자 텍스트 회신정보를 사용자 음성 회신정보로 변환하여 음향 기기(60)을 통하여 사용자에게 음성으로 “체온은 36도 입니다”를 알려줄 수 있다.The conversation server 80 extracts corresponding user text reply information in the user text information. Specifically, a response text suitable for the user text is searched for and provided. For example, when the user text information of " What is my body temperature is now " is received, the conversation server 80 reads text information corresponding to " And transfers it to the central controller 70 as user text reply information. The central controller 70 completes the "body temperature is 36 degrees" by combining the user's body temperature information "36" received from the cloud management server 30 and the user text reply information received from the conversation server 80, The TTS server 100 converts the user text reply information into user voice reply information and informs the user through the sound device 60 that the body temperature is 36 degrees.

도 2는 본 발명의 일 실시 예에 따른 사물 인터넷 기기의 제어 시스템(200)의 제어 절차를 도시한 것이다.FIG. 2 illustrates a control procedure of the control system 200 of the Internet appliance according to an embodiment of the present invention.

도 2를 참조하면, 웨어러블 기기(10)는 정보 수집 에이전트(20)와 무선(예: WiFi, zigbee, Bluetooth) 또는 유선으로 연결한다(S100). 웨어러블 기기(10)와 정보 수집 에이전트(20)가 통합된 경우에는 이를 생략할 수 있다.Referring to FIG. 2, the wearable device 10 connects wirelessly (e.g., WiFi, zigbee, Bluetooth) or wired to the information collecting agent 20 (S100). When the wearable device 10 and the information collection agent 20 are integrated, this can be omitted.

웨어러블 기기(10)로부터 수집한 사용자 건강 정보는 실시간으로 정보 수집 에이전트(20)을 경유하여 실시간으로 클라우드 관리 서버(30)로 전송된다(S110).The user health information collected from the wearable device 10 is transmitted to the cloud management server 30 in real time via the information collection agent 20 in real time (S110).

사용자는 음성으로 건강 상태를 문의하면, 음향 기기(60)는 사용자 음성 정보를 인식한다(S120). 인식된 사용자 음성 정보는 STT 서버(90)를 경유하여 사용자 텍스트 정보로 변환되고(S130), 변환된 사용자 텍스트 정보는 중앙 제어기(70)에 의해 대화 서버(80)로 전송되며, 대화 서버(80)는 사용자 텍스트 정보에 대응되는 사용자 텍스트 회신 정보를 검색하여 추출하고, 추출된 사용자 텍스트 회신 정보를 중앙 제어기(70)로 전송한다(S140). When the user inquires about the health state by voice, the sound device 60 recognizes the user voice information (S120). The recognized user voice information is converted into user text information via the STT server 90 in step S130 and the converted user text information is transmitted to the conversation server 80 by the central controller 70. The conversation server 80 Retrieves and extracts the user text reply information corresponding to the user text information, and transmits the extracted user text reply information to the central controller 70 (S140).

중앙 제어기(70)는 변환된 사용자 텍스트 정보에서 요청한 사용자 건강 정보를 클라우드 관리 서버(30)로부터 수신할 수 있다(S150). 또한, 중앙 제어기(70)는 사용자 텍스트 정보에 따라 사물 인터넷 기기를 제어하는 제어명령을 생성하여 이를 기기 제어기(40)로 전송할 수 있다(S160).The central controller 70 may receive the user health information requested from the converted user text information from the cloud management server 30 (S150). In addition, the central controller 70 may generate a control command to control the object Internet device according to the user text information and transmit the control command to the device controller 40 (S160).

기기 제어기(40)는 중앙 제어기(70)에 의해 수신된 제어 명령에 따라 사물 인터넷 기기를 직접 제어하거나 사물 인터넷 기기 허브(50)를 통하여 사물 인터넷 기기를 제어할 수 있다(S170).The device controller 40 may directly control the object Internet appliance according to the control command received by the central controller 70 or may control the object internet appliance through the Internet appliance hub 50 in operation S170.

중앙 제어기(70)는 대화 서버(80)로부터 수신한 사용자 텍스트 회신 정보와 클라우드 관리 서버로부터 수신한 사용자 건강 정보를 결합하고(S180), 이를 TTS 서버(100)로 전달하여, 사용자 음성 회신 정보로 변환하며(S190), 변환된 사용자 음성 회신 정보는 음향 기기(60)를 통하여 사용자에게 음성으로 제공될 수 있다.The central controller 70 combines the user text reply information received from the conversation server 80 with the user health information received from the cloud management server in step S180 and transmits the user text reply information to the TTS server 100, (S190), and the converted user voice reply information can be provided to the user through the audio device 60 as a voice.

본 명세서와 도면에 개시된 본 발명의 실시 예들은 본 발명의 기술 내용을 쉽게 설명하고 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 범위는 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.The embodiments of the present invention disclosed in the present specification and drawings are merely illustrative examples of the present invention and are not intended to limit the scope of the present invention in order to facilitate understanding of the present invention. Accordingly, the scope of the present invention should be construed as being included in the scope of the present invention, all changes or modifications derived from the technical idea of the present invention.

10: 웨어러블 기기 20: 정보 수집 에이전트
30: 클라우드 관리 서버 40: 기기 제어기
50: 사물 인터넷 기기 허브 60: 음향 기기
70: 중앙 제어기 80: 대화 서버
90: STT 서버 100: TTS 서버
200: 사물 인터넷 기기의 제어 시스템10: wearable device 20: information collecting agent
30: cloud management server 40: device controller
50: Things Internet Device Hub 60: Sound Device
70: central controller 80: conversation server
90: STT server 100: TTS server
200: Control system of Internet devices

Claims (5)

사용자 건강 정보를 수집하고, 상기 수집된 사용자 건강 정보를 기초로 사물 인터넷 기기를 제어하는 제어명령을 생성하는 클라우드 관리 서버;
사용자 음성 정보를 수집하고, 상기 수집된 사용자 음성 정보에 기초하여, 상기 클라우드 관리 서버로부터 사용자 건강 정보를 획득하여 사용자에게 제공하거나 상기 사물 인터넷 기기를 제어하는 제어명령을 생성하는 중앙 제어기; 및
상기 클라우드 관리 서버에 의해 생성된 제어명령 및 상기 중앙 제어기에 의해 생성된 제어명령 중 적어도 하나에 기초하여, 상기 사물 인터넷 기기의 동작을 제어하는 기기 제어기를 포함하는 사물 인터넷 기기의 제어 시스템.A cloud management server for collecting user health information and generating a control command for controlling the object Internet appliance based on the collected user health information;
A central controller for collecting user voice information, acquiring user health information from the cloud management server based on the collected user voice information and providing the user health information to the user or generating a control command for controlling the destination Internet appliance; And
And a device controller for controlling the operation of the destination Internet device based on at least one of a control command generated by the cloud management server and a control command generated by the central controller. 제 1항에 있어서,
상기 사용자 음성 정보를 인식하여 상기 중앙 제어기로 전달하고, 상기 중앙 제어기로부터 수신한 사용자 건강 정보를 상기 사용자에게 음성 정보로 제공하는 음향기기를 더 포함하는 사물 인터넷 기기의 제어 시스템.The method according to claim 1,
Further comprising a sound device for recognizing the user voice information and transmitting the user health information to the central controller, and for providing the user health information received from the central controller to the user as voice information. 제 1항에 있어서,
상기 클라우드 관리 서버는 상기 수집된 사용자 건강 정보를 맵리듀스를 통해 분산 후 병렬 처리하는 적어도 하나의 가상머신을 포함하는 사물 인터넷 기기의 제어 시스템.The method according to claim 1,
Wherein the cloud management server includes at least one virtual machine for distributing and collectively processing the collected user health information through MapReduce. 제 1항에 있어서,
상기 사용자 건강 정보는 웨어러블 기기로부터 수신된 심박수, 체온, 걸음수, 혈당 및 혈압 중 적어도 하나를 포함하는 사물 인터넷 기기의 제어 시스템.The method according to claim 1,
Wherein the user health information includes at least one of heart rate, body temperature, number of steps, blood glucose and blood pressure received from the wearable device. 클라우드 관리 서버에 의해, 사용자 건강 정보를 수집하고, 상기 수집된 사용자 건강 정보를 기초로 사물 인터넷 기기를 제어하는 제어명령을 생성하는 단계;
중앙 제어기에 의해, 사용자 음성 정보를 수집하고, 상기 수집된 사용자 음성 정보에 기초하여, 상기 클라우드 관리 서버로부터 사용자 건강 정보를 획득하여 사용자에게 제공하거나 상기 사물 인터넷 기기를 제어하는 제어명령을 생성하는 단계; 및
기기 제어기에 의해, 상기 클라우드 관리 서버에서 생성된 제어명령 및 상기 중앙 제어기에서 생성된 제어명령 중 적어도 하나에 기초하여, 상기 사물 인터넷 기기의 동작을 제어하는 사물 인터넷 기기 제어 시스템의 제어 방법.Collecting user health information by the cloud management server and generating a control command for controlling the object Internet appliance based on the collected user health information;
Collecting user voice information by a central controller, acquiring user health information from the cloud management server based on the collected user voice information and providing the user health information to the user or generating a control command for controlling the destination Internet appliance ; And
And controlling, by the device controller, the operation of the object Internet appliance based on at least one of a control command generated in the cloud management server and a control command generated in the central controller.
KR1020160126173A 2016-09-30 2016-09-30 A system of controlling internet of things devices and a method for the same KR20180036068A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160126173A KR20180036068A (en) 2016-09-30 2016-09-30 A system of controlling internet of things devices and a method for the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160126173A KR20180036068A (en) 2016-09-30 2016-09-30 A system of controlling internet of things devices and a method for the same

Publications (1)

Publication Number Publication Date
KR20180036068A true KR20180036068A (en) 2018-04-09

Family

ID=61977756

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160126173A KR20180036068A (en) 2016-09-30 2016-09-30 A system of controlling internet of things devices and a method for the same

Country Status (1)

Country Link
KR (1) KR20180036068A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102025552B1 (en) * 2018-05-09 2019-09-26 경북대학교 산학협력단 Location based internet of things service relay device and method of operating the relay device using wearable device
KR20200129426A (en) * 2019-05-08 2020-11-18 주식회사 엔플러그 Sleep monitoring system and method using lighting device based on IoT
KR20200129434A (en) * 2019-05-08 2020-11-18 주식회사 엔플러그 Control system and method of IoT lighting device for lactation
WO2023149201A1 (en) * 2022-02-03 2023-08-10 シチズン時計株式会社 Information collection device, information collection method, and program

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102025552B1 (en) * 2018-05-09 2019-09-26 경북대학교 산학협력단 Location based internet of things service relay device and method of operating the relay device using wearable device
KR20200129426A (en) * 2019-05-08 2020-11-18 주식회사 엔플러그 Sleep monitoring system and method using lighting device based on IoT
KR20200129434A (en) * 2019-05-08 2020-11-18 주식회사 엔플러그 Control system and method of IoT lighting device for lactation
WO2023149201A1 (en) * 2022-02-03 2023-08-10 シチズン時計株式会社 Information collection device, information collection method, and program

Similar Documents

Publication Publication Date Title
US11363953B2 (en) Methods and systems for managing medical anomalies
KR20180036068A (en) A system of controlling internet of things devices and a method for the same
EP3203712B1 (en) Thermal control device and method
CN105808946B (en) Mobile telemedicine system based on cloud computing
CN202351878U (en) Auxiliary modularized cardio-pulmonary function monitoring system applying cloud computing technology
CN109595764B (en) Air conditioner, control method of air conditioner, and computer-readable storage medium
CN103139104A (en) Network transmission service class adjustment method, data terminal and network server
CN109600699A (en) The system with calculation procedure and server for hearing devices service request
KR20150014411A (en) Realtime ECG monitoring system and method for Personal Health Records
Kadarla et al. A simulation study of response times in cloud environment for IoT-based healthcare workloads
US10154506B2 (en) MBAN channel management scheme using patient acuity information
CN103927452B (en) A kind of remote health monitoring system, method and apparatus
Li et al. An e-healthcare sensor network load-balancing scheme using SDN-SFC
CN108269612A (en) Commending system is experienced by the medical institutions that big data excavation is carried out using cloud platform
EP3553788A2 (en) Vitals monitoring system
TWI823055B (en) Electronic resource pushing method and system
ŚWiątek et al. Application of wearable smart system to support physical activity
Khovrichev et al. Intelligent approach for heterogeneous data integration: Information processes analysis engine in clinical remote monitoring systems
US10983808B2 (en) Method and apparatus for providing emotion-adaptive user interface
Brzostowski et al. System analysis techniques in ehealth systems: A case study
KR101836103B1 (en) mobile health care system and mobile health application providing system based on components using the same
KR102551006B1 (en) Management Server Used for User Health Management Method Using Massage Chair
US11816608B2 (en) Systems and methods for service allocation based on real-time service provider and requestor attributes
Nair et al. Evaluation of an IoT framework for a workplace wellbeing application
CN104699787B (en) A kind of update method and device of User Activity state recording