KR20230018297A - 세대단말기를 포함하는 시스템 및 이를 이용한 방법 - Google Patents

세대단말기를 포함하는 시스템 및 이를 이용한 방법 Download PDF

Info

Publication number
KR20230018297A
KR20230018297A KR1020220001144A KR20220001144A KR20230018297A KR 20230018297 A KR20230018297 A KR 20230018297A KR 1020220001144 A KR1020220001144 A KR 1020220001144A KR 20220001144 A KR20220001144 A KR 20220001144A KR 20230018297 A KR20230018297 A KR 20230018297A
Authority
KR
South Korea
Prior art keywords
household
information
cloud platform
control
individual
Prior art date
Application number
KR1020220001144A
Other languages
English (en)
Inventor
최광석
강성권
Original Assignee
주식회사 대림
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 대림 filed Critical 주식회사 대림
Publication of KR20230018297A publication Critical patent/KR20230018297A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/283Processing of data at an internetworking point of a home automation network
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2823Reporting information sensed by appliance or service execution status of appliance services in a home automation network

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Computing Systems (AREA)
  • Computational Linguistics (AREA)
  • Selective Calling Equipment (AREA)

Abstract

본 개시의 일 실시예에 의하면, 집합건물의 각 세대에 구축되는 시스템으로서, 세대의 내부에 구비되며, 사용자에 의해 입력되는 음성정보를 인식하는 음성인식부(141); 및 사용자에 의해 입력되는 동작정보를 인식하는 동작인식부(142)를 포함하는 세대통합 감지제어모듈(140); 상기 음성정보 및 상기 동작정보를 수신하고, 수신한 상기 음성정보 및 동작정보를 제어명령으로 변환하도록 구성된 연산모듈(156)을 포함하는 세대단말기(150); 및 상기 세대단말기(150)로부터 제어명령을 수신하고, 수신한 상기 제어명령에 상응해 구동된 기록을 포함하는 개별세대 제어데이터를 생성하는 개별 세대장치(300); 복수의 개별세대 제어데이터를 이용하여 세대별 빅데이터를 생성하는 내부 클라우드 플랫폼(120)을 포함하는, 시스템을 제공한다.

Description

세대단말기를 포함하는 시스템 및 이를 이용한 방법{System Including Home Terminals and Using Method Thereof}
본 개시는 건축 및 IT 기술분야에 관한 것으로서, 구체적으로 월패드와 같은 세대단말기를 포함함으로써, 사용자의 음성인식이 가능한 시스템 및 이를 이용한 방법에 관한 것이다.
이 부분에 기술된 내용은 단순히 본 개시에 대한 배경정보를 제공할 뿐 종래기술을 구성하는 것은 아니다.
세계적으로 가전 제품을 포함한 다양한 가정용 장치들이 네트워크 기능을 통해 서로 연결되는 스마트홈 기술(Smart Home Technology)이 확대되고 있는 추세이다.
세계적으로 가전 제품을 포함한 다양한 가정용 장치들이 네트워크 기능을 통해 서로 연결되는 스마트홈 기술(Smart Home Technology)이 확대되고 있는 추세이다. 통신사업자, 가전제품 제조사, 인터넷포털 공급사들은 이렇게 연결된 장치들 사이에 응용프로그램 연동, 컨텐츠 연동 등 연계된 서비스를 제공하여 고객을 확보하고 수익을 확대하려고 노력하고 있다.
초창기에는 인터넷 공유기능을 제공하는 수준에서 출발하였으나, 점차 미디어서비스와 홈오토메이션 기능 등을 직접 제공하거나 이들 서비스를 원활히 제공될 수 있도록 하는 기능이 점진적으로 추가되는 중이다.
한편, 스마트홈 기술을 위한 많은 상업적인 솔루션이 있으며, 상당수가 클라우드 컴퓨팅의 잠재력을 이용하고 있다. 하지만, 현재까지 구현된 스마트홈은 클라우드 컴퓨팅을 이용할 때, 폐쇄형 클라우드(Private Cloud)를 주로 이용하고 있는 바, 폐쇄형 클라우드에 속하지 않은 모바일 기기 또는 외부의 디바이스는 스마트홈을 구성하기 어려운 문제가 있다.
가전제품 제조사는 스마트 기기와 관련된 기술들을 경쟁적으로 개발하고 있으며, 출시하고 있는 상태이다. 스마트폰을 필두로 스마트 TV, 스마트 냉장고, 스마트 에어컨 등 다양한 스마트 기기들이 속속 등장하고 있다.
그러나, 현재 대다수의 세대는 아직 스마트홈에 적용 가능한 가전기기를 모두 사용하고 있지는 않는 바, 스마트홈 기술이 각 세대에서 다소 제한적으로 적용되는 상태이며, 스마트 기기를 사용하고 있다고 하더라도, 스마트 기기들을 동작시키기 위해서 여전히 종래의 리모컨 방식이 가장 많이 사용되고 있는 실정이다.
다시 말해, 현재 많은 세대들은 가전기기를 스마트 가전으로 탈바꿈하고 있는 상태긴 하나, 아직까지는 스마트 가전의 비율이 그리 크지 않는 바, 이러한 일반가전에도 적용될 수 있는 스마트홈 기술이 절실한 상태이다.
(특허문헌 1) KR 10-2014-0050836A
(특허문헌 2) KR 10-2008-0096239A
(특허문헌 3) KR 10-1995873B
이에, 본 개시는 다양한 스마트 기기들의 제어가 용이하면서, 개별세대에서 기존에 사용하던 스마트 기기가 아닌 일반기기들에 대해서도 스마트홈 시스템을 이용하여 쉽고 간편하게 음성 또는 동작으로 제어할 수 있는 기술을 제공하는 데 목적이 있다.
또한, 본 개시는 사용자마다 다양한 클라우드 플랫폼을 사용하는 현실에서, 이들과 호환되고 일원화된 전용 클라우드 플랫폼을 제공함으로써, 개별 세대장치를 용이하게 제어함과 동시에, 집합건물에서 개별 세대장치들의 제어와 관련된 정보를 빅데이터로 저장할 수 있는 기술을 제공하는 데 목적이 있다.
또한, 음성명령의 문제점인 정확도 및 처리속도를 개선하고자 AI 연산 방식을 적용하지 않고, 패턴화된 음성명령어를 인식하는 구성을 유기적으로 결합시킴으로써, 개별 세대장치 제어의 정확도 및 처리속도가 개선된 기술을 제공하는 데 목적이 있다.
본 발명이 해결하고자 하는 과제들은 이상에서 언급한 과제들로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
상기와 같은 과제를 해결하기 위한 본 발명의 일 실시예는, 집합건물의 각 세대에 구축되는 시스템으로서, 세대의 내부에 구비되며, 사용자에 의해 입력되는 음성정보를 인식하는 음성인식부(141); 및 사용자에 의해 입력되는 동작정보를 인식하는 동작인식부(142)를 포함하는 세대통합 감지제어모듈(140); 상기 음성정보 및 상기 동작정보를 수신하고, 수신한 상기 음성정보 및 동작정보를 제어명령으로 변환하도록 구성된 연산모듈(156)을 포함하는 세대단말기(150); 및 상기 세대단말기(150)로부터 제어명령을 수신하고, 수신한 상기 제어명령에 상응해 구동된 기록을 포함하는 개별세대 제어데이터를 생성하는 개별 세대장치(300); 복수의 개별세대 제어데이터를 이용하여 세대별 빅데이터를 생성하는 내부 클라우드 플랫폼(120)을 포함하는, 시스템을 제공한다.
또한, 바람직하게는 본 개시는 사용자에 의해 음성정보가 입력되는 스마트 스피커(201); 및 상기 스마트 스피커(201)로부터 상기 음성정보를 수신하고, 이를 제어명령으로 변환하는 외부 클라우드 플랫폼(220)을 더 포함하고, 상기 내부 클라우드 플랫폼(120)은, 상기 외부 클라우드 플랫폼(220)으로부터 상기 제어명령을 수신하여, 이를 공동주택 단지서버(130)에 전달하고, 상기 세대단말기(150)는, 상기 공동주택 단지서버(130)로부터 상기 제어명령을 수신한다.
또한, 바람직하게는 본 개시의 상기 세대별 빅데이터는, 상기 개별세대 제어데이터, 및 실내환경 정보, 실외환경 정보와 단지정보를 포함하는 환경정보를 포함하고, 상기 내부 클라우드 플랫폼(120)은, 상기 환경정보를 입력자료로, 상기 개별세대 제어데이터를 출력자료로하여 인공지능 모델을 학습하고, 상기 내부 클라우드 플랫폼(120)은 상기 인공지능 모델을 이용하여 환경정보가 입력되면 개별세대 제어데이터를 출력하고, 출력된 개별세대 제어데이터를 기반으로 개별 세대장치(300)를 제어하는 명령인 학습기반 제어명령을 생성한다.
또한, 바람직하게는 본 개시의 상기 개별 세대장치(300)는, 조명기기(310), 냉난방기기(330), 스마트장치(340), 가전기기(350) 및 도어락모듈(360)을 포함하고, 상기 음성정보가, 사용자의 외출정보를 포함하는 경우, 상기 조명기기(310), 상기 냉난방기기(330)에 인가되는 전원이 차단되고, 상기 스마트장치(340)에 포함되는 가스밸브가 폐쇄되고, 상기 가전기기(350)의 적어도 일부에 인가되는 전원이 차단되며, 상기 가전기기(350)의 다른 적어도 일부에 인가되는 전원은 유지되고, 상기 도어락모듈(360)은 방범모드로 전환한다.
또한, 바람직하게는 본 개시의 상기 세대통합 감지제어모듈(140)에 포함되는 창호개폐 감지부(145)에 의해 창호의 개폐가 감지되고, 상기 창호가 개방되어 있는 것으로 판단되면, 상기 가전기기(350)에 포함되는 창호 액추에이터에 상기 내부 클라우드 플랫폼(120)은, 상기 창호를 폐쇄하기 위한 제어명령을 생성한다.
또한, 본 개시의 일 실시예에 의한 세대 내에 구비되는 세대단말기(150)와 개별 세대장치(300), 및 집합건물에 구비되는 내부 클라우드 플랫폼(120)을 포함하는 시스템을 이용한 방법에 있어서, (a) 사용자에 의해 음성인식부(141)에 음성정보가 입력되는 단계; (b) 입력된 상기 음성정보가 상기 세대단말기(150)에 전달되는 단계; (c) 상기 세대단말기(150)의 연산모듈(156)이, 전달된 상기 음성정보를 제어명령으로 변환하는 단계; (d) 상기 제어명령이 상기 개별 세대장치(300)에 전달되는 단계; (e) 상기 개별 세대장치(300)가, 수신한 상기 제어명령에 상응해 구동된 기록을 포함하는 개별세대 제어데이터를 생성하는 단계; (f) 생성된 상기 개별세대 제어데이터가 상기 내부 클라우드 플랫폼(120)에 전달되는 단계; (g) 상기 내부 클라우드 플랫폼(120)이 상기 개별세대 제어데이터를 이용하여 세대별 빅데이터를 생성하는 단계; (h1) 상기 내부 클라우드 플랫폼(120)이 상기 세대별 빅데이터를 이용하여 학습하고, 학습된 내용을 바탕으로 개별 세대장치(300)를 제어하기 위한 학습기반 제어명령을 생성하는 단계; 및 (h2) 상기 세대단말기(150)가 상기 학습기반 제어명령을 수신하여, 이를 개별 세대장치(300)에 전달하는 단계를 포함하는, 방법을 제공한다.
또한, 본 개시의 일 실시예에 의한 세대 내에 구비되는 세대단말기(150), 개별 세대장치(300)와 스마트 스피커(201), 및 집합건물에 구비되는 내부 클라우드 플랫폼(120), 외부 클라우드 플랫폼(220)과 공동주택 단지서버(130)를 포함하는 시스템을 이용한 방법에 있어서, (i) 사용자에 의해 상기 스마트 스피커(201)에 음성정보가 입력되는 단계; (j) 입력된 상기 음성정보가 상기 외부 클라우드 플랫폼(220)에 전달되는 단계; (k) 전달된 상기 음성정보가 상기 외부 클라우드 플랫폼에서 제어명령으로 변환되는 단계; (l) 변환된 상기 제어명령이 상기 내부 클라우드 플랫폼(120), 상기 공동주택 단지서버(130) 및 상기 세대단말기(150)를 통과해 상기 개별 세대장치에 전달되는 단계; (m) 상기 개별 세대장치(300)가, 수신한 상기 제어명령에 상응해 구동된 기록을 포함하는 개별세대 제어데이터를 생성하는 단계; (n) 생성된 상기 개별세대 제어데이터가 상기 내부 클라우드 플랫폼(120)에 전달되는 단계; (o) 상기 내부 클라우드 플랫폼(120)이 상기 개별세대 제어데이터를 이용하여 세대별 빅데이터를 생성하는 단계; (p1) 상기 내부 클라우드 플랫폼(120)이 상기 세대별 빅데이터를 이용하여 학습하고, 학습된 내용을 바탕으로 개별 세대장치(300)를 제어하기 위한 학습기반 제어명령을 생성하는 단계; (p2) 상기 세대단말기(150)가 상기 학습기반 제어명령을 수신하여, 이를 개별 세대장치(300)에 전달하는 단계를 포함하는, 방법을 제공한다.
또한, 바람직하게는 본 개시의 상기 세대별 빅데이터는, 실내환경 정보, 실외환경 정보 및 단지정보를 포함하는 환경정보; 및 조명 사용정보, 가스 사용정보, 난방 사용정보 및 공조 사용정보를 포함하는 설비제어 정보를 포함하고, 상기 내부 클라우드 플랫폼(120)은, 상기 환경정보를 입력자료로, 상기 설비제어 정보를 출력자료로하여 인공지능 모델을 학습하고, 상기 내부 클라우드 플랫폼(120)은 상기 인공지능 모델을 이용하여 환경정보가 입력되면 설비제어 정보를 출력하고, 출력된 설비제어 정보를 기반으로 개별 세대장치(300)를 제어하는 명령인 학습기반 제어명령을 생성한다.
이상에서 설명한 바와 같이 본 실시예에 의하면, 본 개시의 일 실시예에 의하면, 다양한 스마트 기기들의 제어가 용이하면서, 개별세대에서 기존에 사용하던 스마트 기기가 아닌 일반기기들에 대해서도 스마트홈 시스템을 이용하여 쉽고 간편하게 음성 또는 동작으로 제어할 수 있다.
또한, 사용자마다 다양한 클라우드 플랫폼을 사용하는 현실에서, 이들과 호환되고 일원화된 전용 클라우드 플랫폼을 제공함으로써, 개별 세대장치를 용이하게 제어함과 동시에, 집합건물에서 개별 세대장치들의 제어와 관련된 정보를 빅데이터로 저장함으로써, AI 제어의 정확도를 향상시킬 수 있다.
AI 음성명령의 문제점인 정확도 및 처리속도를 개선하고자 AI 연산 방식을 적용하지 않고, 패턴화된 음성명령어를 인식하는 구성을 유기적으로 결합시킴으로써, 개별 세대장치 제어의 정확도 및 처리속도를 개선시킬 수 있다.
도 1은 본 개시의 일 실시예에 따른 시스템의 개념도이다.
도 2 및 도 3은 본 개시의 일 실시예에 따른 시스템의 내부에 구비된 클라우드 플랫폼을 이용하여 음성정보를 인식하는 방법에 관한 순서도이다.
도 4 및 도 5는 본 개시의 일 실시예에 따른 시스템의 외부에 구비된 클라우드 플랫폼을 이용하여 음성정보를 인식하는 방법에 관한 순서도이다.
이하, 본 개시의 일부 실시예들을 예시적인 도면을 통해 상세하게 설명한다. 각 도면의 구성 요소들에 참조 부호를 부가함에 있어서, 동일한 구성 요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 개시를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 개시의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
본 개시에 따른 실시예의 구성요소를 설명하는 데 있어서, 제1, 제2, i), ii), a), b) 등의 부호를 사용할 수 있다. 이러한 부호는 그 구성요소를 다 른 구성 요소와 구별하기 위한 것일 뿐, 그 부호에 의해 해당 구성요소의 본질 또는 차례나 순서 등이 한정되지 않는다. 명세서에서 어떤 부분이 어떤 구성요소를 '포함' 또는 '구비'한다고 할 때, 이는 명시적으로 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
본 개시에서 "세대"는 생활을 같이하는 1인 또는 다수의 사람이 공통 거주하는 공간을 의미한다. 주거, 상업 등을 모두 포함하는 개념으로 이해되어야 한다. 아파트와 같은 주거용 건물에 거주하는 다수의 세대 각각을 지칭할 수도 있으며, 또는 상업 시설에서 개별적으로 입주한 사무실 단위를 지칭할 수도 있다.
또한, 본 개시에서 "사용자"는 시스템을 이용하는 사람을 의미하는 것으로, 예를 들어 각 세대 거주자일 수 있으나, 이에 제한되지 않는다.
또한, 본 개시에서 "단말기"는 정보 처리가 가능한 모든 기기를 의미한다. "세대단말기"는 각 세대 내에 설치되는 것으로, 예를 들어 월패드(wall pad)일 수 있다. 이와 구분하기 위해, 사용자가 구비하여 사용하는 휴대용 단말기는 "사용자 단말기"라고 지칭하며, 이는 스마트폰, 태블릿, 노트북 등 다양한 기기일 수 있다.
시스템의 구성
도 1은 본 개시의 일 실시예에 따른 시스템의 개념도이다.
도 1을 참조하여, 본 개시의 일 실시예에 따른 스마트홈 시스템의 전반적인 구성을 설명한다. 본 개시에 의한 스마트홈 시스템은, 내부 클라우드 플랫폼(120), 공동주택 단지서버(130), 세대통합 감지제어모듈(140), 세대단말기(150), 공동시설 제어모듈(154), 스마트 스피커(201), 사용자 단말기(202), 외부 클라우드 플랫폼(220) 및 개별 세대장치(300)의 전부 또는 일부를 포함한다.
우선, 개별세대의 내부에 구비되는 구성을 먼저 설명한다.
개별세대에는 세대통합 감지제어모듈(140), 세대단말기(150) 및 개별 세대장치(300)가 구비될 수 있다.
세대통합 감지제어모듈(140)은 개별세대 내에 구비되는 모듈로서, 사용자의 편의를 위해 개별세대의 각 실마다 구비될 수 있다. 세대통합 감지제어모듈(140)은 음성인식부(141), 동작인식부(142), 조도 및 온도 센서부(143), 실내환경 감지부(144), 창호개폐 감지부(145), 실외환경 감지부(146), 층간소음 감지부(147) 및 IR 제어부(148)의 전부 또는 일부를 포함한다.
음성인식부(141)는 사용자의 음성을 인식하도록 구성된다. 이를 위해, 음성인식부(141)는 바람직하게는 마이크, 증폭기 및 노이즈 제거부를 포함할 수 있다. 사용자의 음성은 음성인식부(141)를 통해 세대단말기(150)에게 전달된다. 세대단말기(150)는 전달된 음성을 이용하여 사용자의 의도를 인식하며 제어명령을 생성하도록 구성된다.
동작인식부(142)는 사용자의 동작을 인식하도록 구성된다. 이를 위해, 동작인식부(142)는 바람직하게는 이미지센서 및 이미지 처리부를 포함할 수 있다. 이때, 이미지센서는 카메라, 도플러 센서(doppler sensor), PIR 센서(passive infrared sensor), 라이다센서(LiDAR sensor), 센서(RADAR sensor), 열화상센서, 초음파센서, UWB 센서(ultra-wide band sensor) 중 어느 것이든 무방하다.
또한, 동작인식부(142)에 의해 사용자가 소정의 공간에 머무는지 여부 및 사용자의 활동상태가 파악될 수 있다. 동작인식부(142)는 세대 내부의 어느 곳이든 배치될 수 있다. 예컨대, 동작인식부(142)는 각 실에 하나씩 배치될 수도 있고, 각 실에 복수개가 배치될 수 있다.
동작인식부(142)에 의해 센싱된 동작명령, 사용자의 재실여부 및 사용자의 활동상태는 세대단말기(150)에게 전달된다. 이때, 세대단말기(150)는 전달된 동작을 이용하여 사용자의 의도를 인식하며 제어명령을 생성하도록 구성된다.
조도 및 온도 센서부(143)는 각 실에 배치되며, 해당 실의 조도 및 온도를 센싱하도록 구성된다. 조도 및 온도 센서부(143)에 의해 센싱된 정보는 세대단말기(150) 및 조명제어부(미도시)에게 전달된다. 한편, 조도 및 온도 센서부(143)는, 바람직하게는 각 실에 배치되는 조명제어부(미도시)에 내장될 수 있다. 여기서, 조명제어부란 각 실의 벽면에 구비되며, 전면이 LCD로 구성됨으로써, 각 실의 디밍 제어(dimming control)를 하도록 구성된 제어장치를 의미한다.
실내환경 감지부(144)는 세대 내부의 공기질 정보를 센싱하도록 구성된다. 여기서, 세대 내부의 공기질 정보는, 예컨대, 이산화탕소 농도, 미세먼지 농도일 수 있다. 실내환경 감지부(144)에 의해 센싱된 실내환경 정보는 세대단말기(150)에게 전달된다.
창호개폐 감지부(145)는 창호의 개폐여부를 감지하도록 구성된다. 이때, 창호개폐 감지부(145)는 단일창호 또는 이중창호의 창호의 개폐를 감지하도록 구성된다. 이를 위해, 창호개폐 감지부(145)는, 외측창호 자석, 내측창호 자석 및 외측창호 자석 및 내측창호 자석의 사이에 배치되는 자기장 감지장치를 포함할 수 있다. 자기장 감지장치는, 자석들로부터 생성되는 자기장의 자속이 변화하는 경우, 이를 감지함으로써 창호의 개폐 여부를 결정할 수 있다. 창호개폐 감지부(145)에 의해 센싱된 정보는 세대단말기(150)에게 전달될 수 있다.
실외환경 감지부(146)는 세대 외부의 환경 정보를 센싱하도록 구성되며 외측 창호에 부착되는 것이 바람직하다. 세대 외부의 환경 정보는, 예컨대, 온도, 습도, 미세먼지 농도 및 강우정보를 포함할 수 있다. 실외환경 감지부(146)에 의해 센싱된 정보는, 세대단말기(150)에게 전달될 수 있다.
층간소음 감지부(147)는 세대 내부에서 발생되는 소리 및 진동을 센싱하도록 구성되며, 바닥재 하부, 벽체 내부 및 천장의 상부에 배치될 수 있다. 층간소음 감지부(147)에 의해 센싱된 정보는 세대단말기(150)에게 전달될 수 있다.
IR 제어부(148)는 세대단말기(150)에 의해 생성된 제어명령 또는 세대단말기(150)를 통해 전달되는 제어명령을 개별 세대장치(300)에게 전달하도록 구성된다. 일반 가전 및 스마트가전은 IR모듈이 내장되어 있다. 이로 인해, 세대단말기(150) 및 개별 세대장치(300)는 무선으로 통신이 가능하다.
세대단말기(150)는 홈 네트워크 월패드(home network wall pad) 또는 간략하게 월패드(wall pad)라고 호칭된다. 세대단말기(150)는 세대 내부의 어디에든 배치되어도 무관하나, 바람직하게는 거실에 배치된다고 볼 것이다.
세대단말기(150)의 외관은 한정되지 아니하나, 전면에 형성된 LCD(liquid crystal display, 미도시) 및 조그다이얼(jog dial, 미도시)을 포함한다. 이때, LCD는 5 인치 내지 15 인치로 형성되되, 1920 x 720 px의 해상도를 갖는 것이 바람직하나, 본 개시에 의한 세대단말기(150)가 반드시 이에 한정될 것은 아니다.
조그다이얼(미도시)이 회전함에 따라 LCD에 출력되는 UI 선택이 제어될 수 있다. 또한, 조그다이얼이 회전함에 따라 거실 조명의 밝기 및 색온도가 제어될 수 있다. 즉, 세대단말기(150)는 거실 스위치와 일체형으로 형성되는바, 세대 내부의 인테리어를 훼손하지 않고 외관상 우수해질 수 있는 효과가 있다.
세대단말기(150)는 인증모듈(152), 제어모듈(154), 연산모듈(156) 및 거리감지모듈(158)의 전부 또는 일부를 포함한다.
인증모듈(152)은 외부 클라우드 플랫폼(220), 사용자 단말기(202) 및 도어락모듈(360)과 연결되어, 인증요청과 보안키를 송수신하도록 구성된다.
제어모듈(154)은 세대통합 감지제어모듈(140)로부터 수신한 음성명령 또는 동작명령을 제어명령으로 연산하도록 구성된다. 음성명령은 음성인식부(141)로부터 인식된 정보이고, 동작명령은 동작인식부(142)로부터 인식된 정보에 해당한다
음성명령의 경우, 제어모듈(154)에 의해 자연어 처리를 통해 제어명령으로 전환될 수 있다. 그러나, 본 개시에 의한 스마트홈 시스템의 음성인식 방법은 반드시 이에 한정되지 아니하고, 외부 클라우드 플랫폼(220)을 사용하여 제어명령으로 전환하는 연산을 수행할 수 있다.
예컨대, 사용자는 스마트 스피커(201)를 통해 제어명령을 입력할 수 있다. 스마트 스피커(201)는 외부 클라우드 플랫폼(220)과 연결되는바, 제어명령은 일단 외부 클라우드 플랫폼(220)으로 전송된다. 그 다음, 제어명령은 외부 클라우드 플랫폼(220)으로부터 내부 클라우드 플랫폼(120)으로 전송되어 저장된 후, 다시 공동주택 단지서버(130)를 거쳐 세대단말기(150)에게 전송된다.
제어모듈(154)은, 음성인식부(141)를 통해 인식된 음성명령 또는 개별 스마트 스피커(201)를 통해 입력된 제어명령 중 어느 하나 이상을 이용하여 개별 세대장치(300)를 제어할 수 있다.
연산모듈(156)은 조도 및 온도 센서부(143), 실내환경 감지부(144) 및 창호개폐 감지부(145)로부터 취득한 정보를 이용하여 일반가전(352)에게 송신할 제어명령을 생성하도록 구성된다. 여기서, 일반가전(352)은, 전동커튼 및 창호 액추에이터(window actuator)를 포함한다. 즉, 연산모듈(156)은, 조도 및 온도 센서부(143), 실내환경 감지부(144) 및 창호개폐 감지부(145)로부터 수신한 센싱정보를 이용하여 창호의 개폐여부를 결정하고, 이에 상응하도록 전동커튼 및 창호 액추에이터를 제어한다.
거리감지모듈(158)은 세대단말기(150)의 내부에 구비되며, 객체와의 거리를 센싱하도록 구성된다. 이를 위해, 거리감지모듈(158)은 바람직하게는 ToF 센서(time of flight)을 포함할 수 있다. 거리감지모듈(158)은 적외선 신호를 송신하여, 반사되어 수신되는 신호를 계산함으로써, 객체와의 거리를 측정할 수 있다. 이로 인해, 빛이 거의 없는 환경, 예컨대, 사용자가 커튼을 내리고 조명을 끈 상태 등에서도 거리감지모듈(158)은 사용자와의 거리를 측정할 수 있다.
개별 세대장치(300)는 조명기기(310), 환기기기(320), 냉난방기기(330), 스마트장치(340), 가전기기(350) 및 도어락모듈(360)의 전부 또는 일부를 포함한다.
조명기기(310)는 개별세대 내의 각 구역에 위치되며, 세대단말기(150)와 유선 또는 무선으로 연결되고, 각각에는 별도의 스위치가 구비되는 것이 바람직하다. 세대단말기(150)를 통해 조명기기(310)의 온오프(on/off) 및 디밍(dimming)이 제어될 수 있다. 이 외에도, 각 실에 마련된 조명제어부(미도시)를 통해서도 각 조명기기(310)의 온오프 및 디밍이 제어될 수 있다.
환기기기(320)는 개별세대에 기본적으로 구비되는 공기청정기 및 세대환풍기를 의미하고, 사용자가 별도로 구비하는 장치들을 의미하는 것은 아니다. 또한, 환기기기(320)는 전열교환기가 결합된 구성으로 형성될 수 있다.
냉난방기기(330)는 냉방장치, 예컨대, 에어컨 및 난방 온도조절기를 포함하는 개념이다. 이들은 IR 방식으로 제어될 수도 있으며, 세대단말기(150)와 연결되어 세대단말기(150)를 통해 유선 또는 무선으로 제어될 수 있다.
스마트장치(340)는 개별세대에 구비되는 전기 및 열과 관련된 장치를 포함하는 개념이다. 대표적으로 가스밸브, 스마트 전기 콘센트, 인덕션을 그 예로 들 수 있다. 또한, 스마트장치(340)는 스마트 체중계를 더 포함할 수 있다. 스마트 체중계로부터 수집된 사용자의 체중정보, 체지방률정보, 근골격량과 관련된 정보들은 세대단말기(150)에게 전달될 수 있다.
가전기기(350)는 일반가전(352) 및 스마트가전(354)을 포함한다.
일반가전(352)은, IR모듈이 내장되어 IR 제어부(148)로부터 IR 제어 가능하도록 구성된다. 또한, 스마트가전(354)은, 세대단말기(150)와 유선 또는 무선으로 연결 가능하도록 구성된 통신모듈이 내장된다.
한편, 스마트가전(354) 역시 IR모듈이 내장되어 IR 제어가 가능하도록 구성될 수 있는 바, 세대단말기(150)와 유무선 연결이 가능한지 여부에 따라 일반가전(352) 및 스마트가전(354)으로 구분하며, 스마트가전(354)의 IR 제어 가능을 배제하는 것은 아니다. 스마트가전(354)은, 스마트 스피커(201), 사용자 단말기(202)에 설치된 전용 모바일 어플리케이션 및 세대단말기(150)에 의해 모두 제어 가능하도록 구성된다.
도어락모듈(360)은 세대의 출입문에 구비되며, 스마트 도어락 및 도어폰을 포함한다. 스마트 도어락은 사용자의 PIN 입력, NFC 태그 또는 사용자 단말기(202)를 통한 제어로 개폐될 수 있다. 이와 관련하여, 도 6에서 상세히 설명하도록 한다.
도어폰은, 세대에 근방의 공용공간을 촬영하고, 택배 인식 또는 방문자 인식을 하도록 구성된다. 도어폰에 의해 센싱된 정보는, 세대단말기(150)에게 전달되고, 이는 사용자 단말기(202)에게도 알림형식으로 전달될 수 있다.
이하에서, 공동주택단지에 구비되는 구성을 설명한다.
공동주택단지에는 공동주택 단지서버(130), 내부 클라우드 플랫폼(120) 및 공동시설 제어모듈(154)이 구비될 수 있다.
공동주택 단지서버(130)는 공동주택단지의 로컬 서버를 의미하고, 이를 이용하여 단지 내의 로컬네트워크를 구성한다. 공동주택 단지서버(130)는 세대단말기(150)로부터 제어명령에 대한 정보를 주고 받도록 구성되며, 방화벽 기능을 수행한다. 한편, 공동주택 단지서버(130)는 내부 클라우드 플랫폼(120)과의 연결을 위해, 클라우드 미들웨어 프레임워크(Cloud Middleware Framework, CMF)가 사용될 수 있다. 여기서 클라우드 미들웨어 프레임워크는 이들을 연결하는 중간 시스템으로 사용된다. 공동주택 단지서버(130)는 공동시설 제어모듈(160)이 연결되어 공동주택단지 내의 공동시설을 제어하도록 구성된다.
내부 클라우드 플랫폼(120)은 공동주택단지 전용의 클라우드 플랫폼을 의미하며, 후술하는 외부 클라우드 플랫폼(220)과의 관계에서 창구 역할을 수행한다. 내부 클라우드 플랫폼(120)은 공동주택 단지서버(130)와 연결되어 제어명령에 대한 정보를 주고 받도록 구성된다. 이 때, 공동주택 단지서버(130)와 주고 받는 제어명령에 대한 정보는 내부 클라우드 플랫폼(120)에 빅데이터로 저장되도록 구성된다. 누적된 빅데이터는 AI 제어를 위한 데이터로 활용될 수 있다.
한편, 누적된 빅데이터를 이용하여 AI 제어를 하는 과정에 관해서는 도 2 내지 도 5에서 상세히 설명하도록 한다.
공동시설 제어모듈(154)은 공동주택단지 내의 공동시설을 제어하는 기능을 수행한다. 공동시설 제어모듈(154)은, 웨더 스테이션(weather station)으로부터 기상정보를 수신하도록 구성된다. 웨더 스테이션은, 공동주택단지 내부에 구비된 기상정보 수집장치일 수 있으며, 기상청일 수 있다.
또한, 공동시설 제어모듈(154)은, 안내서비스 로봇을 제어하도록 구성된다. 안내서비스 로봇은, 공동주택단지 내부를 돌아다니며, 공동주택단지의 거주자 및 방문자에게 길안내를 할 수 있다.
또한, 공동시설 제어모듈(154)은 영상보안모듈, AI 주차관제모듈 및 공동현관 제어모듈 등을 포함한다.
공동시설 제어모듈(154)은 영상보안모듈을 이용하여, 입차 및 출차차량의 정보 확인, 비상상황 감지, 사용자 안면인식의 기능을 수행할 수 있다.
AI 주차관제모듈은 영상보안모듈로부터 인식된 차량의 정보를 이용하여, 사용자에게 적절한 주차공간을 제공하도록 구성된다. 이와 관련하여, 도 4에서 상세히 기술하도록 한다.
공동시설 제어모듈(154)은 영상보안모듈로부터 인식된 사용자 정보를 이용하여, 엘리베이터를 제어할 수 있다. 예컨대, 공동현관에 2104호 거주자가 들어오는 경우, 공동시설 제어모듈(154)은 사용자가 엘리베이터 앞에 당도하기 전에 엘리베이터를 호출하고, 미리 21층 버튼을 선택할 수 있다.
이때, 공동시설 제어모듈(154)은 사용자를 인식함에 있어, 반드시 영상보안모듈을 이용할 필요는 없다. 예컨대, 사용자의 출입카드를 공동현관 제어모듈에 태그하면, 공동시설 제어모듈(154)은 사용자의 정보를 인식하여 적절하게 엘리베이터를 제어할 수 있다.
이하에서는, 스마트 스피커(201) 및 외부클라우드 플랫폼(220)에 대해 설명한다. 스마트 스피커(201)는 외부클라우드 플랫폼(220) 전용의 장치이거나 또는 외부클라우드 플랫폼(220)과 연결 가능하도록 구성된 장치를 의미한다. 일 예로, 스마트 스피커를 들 수 있다. 이미 상용화된 스마트 스피커인 구글홈(Google Home), 네이버 클로버(Naver Clover), 카카오미니(Kakao mini)가 있으며, 이들은 사용자의 음성명령을 인식하여 이들과 연결된 IoT 기기에 제어명령을 하도록 구성된다.
외부클라우드 플랫폼(220) 역시 구글 클라우드 플랫폼, 네이버 클라우드 플랫폼, 카카오 클라우드 플랫폼 등을 예로 들 수 있다. 이들을 '협력 클라우드'라 지칭한다. 사용자마다 선호하거나 실제 사용중인 클라우드 플랫폼이 모두 상이한 바, 이들을 일원화시키기 어려운 문제가 있었다. 본 발명은 내부 클라우드 플랫폼(120)을 이용하여 상이한 클라우드 플랫폼을 일원화시킬 수 있는 효과를 갖는다.
즉, 사용자가 어떠한 종류의 외부 클라우드 플랫폼(220)을 사용하더라도 내부 클라우드 플랫폼(120)과 인증되어 연결될 경우, 외부 클라우드 플랫폼(220)의 종류와는 무관하게 개별 세대장치(300)를 모두 제어할 수 있다는 효과가 있다. 한편, 내부 클라우드 플랫폼(120) 및 외부 클라우드 플랫폼(220)은 API(application programming interface) 방식으로 연결될 수 있다.
시스템을 이용한 방법
도 2 및 도 3은 본 개시의 일 실시예에 따른 시스템의 내부에 구비된 클라우드 플랫폼을 이용하여 음성정보를 인식하는 방법에 관한 순서도이다.
도 2를 참조하면, 음성인식부(141)에 사용자에 의한 음성정보가 입력되고, 동작인식부(142)에 사용제의 의한 동작정보가 입력된다. 입력된 음성정보 및 동작정보는 세대단말기(150)에 전달된다.
한편, 음성정보가 세대단말기(150)에 전달되면, 세대단말기(150)는, 환경정보를 생성하여 내부 클라우드 플랫폼(120)에 전달한다.
이때, 환경정보는 실내환경 정보, 실외환경 정보 및 단지정보를 포함할 수 있다. 구체적으로, 실내환경 정보는, 실내환경 감지부(144)에 의해 측정된 실내기온, 습도, 미세먼지 농도 등을 포함한다. 실외환경 정보는, 실외환경 감지부(146)에 의해 측정된 실외기온, 습도, 미세먼지 농도 등을 포함한다. 단지정보는, 세대의 위치, 지역적 특성, 향, 층수 등을 포함한다.
본 개시에서, 환경정보가 세대단말기(150)로부터 내부 클라우드 플랫폼(120)으로 직접적으로 전달되는 것으로 도시되었으나, 이는 설명의 편의를 위함이며, 공동주택 단지서버(130)를 통해 내부 클라우드 플랫폼(120)으로 전달된다고 이해하여야 할 것이다.
전달된 음성정보 및 동작정보는 세대단말기(150)의 연산모듈(156)에서 제어명령으로 변환된다.
변환된 제어명령은 제어모듈(154)에 전달되며, 제어모듈(154)은, IR 제어부(148)를 통해 개별 세대장치(300)에 제어명령을 전달하거나, 직접 개별 세대장치(300)로 제어명령을 전달할 수 있다. 예컨대, 제어모듈(154)이 일반가전(352)을 제어하기 위해서, IR 제어부(148)에 제어명령을 전달할 수 있다. 또한, 제어모듈(154)이 스마트가전(354)을 제어하기 위해서 직접 개별 세대장치(300)에 제어명령을 전달할 수 있다.
개별 세대장치(300)는, 개별세대 제어데이터 생성하여, 내부 클라우드 플랫폼(120)에 전달한다. 개별 세대장치(300)는 세대단말기(150)로부터 수신한 제어명령에 상응해 구동된다. 개별 세대장치(300)는 구동된 기록을 개별세대 제어데이터로 전환하여 저장한다.
이때, 개별세대 제어데이터는, 예컨대, 조명 사용정보, 가스 사용정보, 냉난방 사용정보, 공조 사용정보 등을 포함한다.
한편, 본 개시에서, 개별세대 제어데이터가 개별 세대장치(300)로부터 내부 클라우드 플랫폼(120)으로 직접적으로 전달되는 것으로 도시되었으나, 이는 설명의 편의를 위함이며, 세대단말기(150) 및 공동주택 단지서버(130)를 통해 내부 클라우드 플랫폼(120)으로 전달된다고 이해하여야 할 것이다.
내부 클라우드 플랫폼(120)은, 수신한 환경정보 및 수신한 개별세대 제어데이터를 이용하여, 빅데이터를 생성한다.
또한, 내부 클라우드 플랫폼(120)은, 환경정보를 입력자료로, 개별세대 제어데이터를 출력자료로 하여 인공지능 모델을 학습한다. 이후에, 새로운 환경정보가 입력되면, 내부 클라우드 플랫폼(120)은 학습된 인공지능 모델을 이용하여 개별세대 제어데이터를 출력한다. 내부 클라우드 플랫폼(120)은 출력된 개별세대 제어데이터를 기반으로 개별 세대장치(300)를 제어하기 위한 명령인 학습기반 제어명령을 생성한다.
생성된 학습기반 제어명령은, 공동주택 단지서버(130), 세대단말기(150)를 통해 개별 세대장치(300)에 전달된다.
이하에서는, 개별 세대장치(300)의 종류 별 제어명령이 생성되기 위한 음성정보의 예시를 설명한다.
조명기기(310)를 제어하기 위한 음성정보는, 예컨대, "길동아, 조명 켜줘", "길동아, 조명 꺼줘", "길동아, 눈부셔", "길동아, 조명 어둡게 해줘" 등이 있다.
환기기기(320)를 제어하기 위한 음성정보는, 예컨대, "길동아, 환풍기 켜줘", "길동아, 공기청정기 켜줘" 등이 있다.
냉난방기기(330)를 제어하기 위한 음성정보는, 예컨대, "길동아, 에어컨 온도 25도로", "길동아, 난방 온도 26도로" 등이 있다.
스마트장치(340)를 제어하기 위한 음성정보는, 예컨대, "길동아, 콘센트 차단해줘", "길동아, 안방 콘센트 켜줘", "길동아, 인덕션 차단해줘" 등이 있다.
가전기기(350)를 제어하기 위한 음성정보는, 예컨대, "길동아, 전동커튼 열어줘", "길동아, TV 꺼줘", "길동아, 채널 11번으로" 등이 있다.
도어락모듈(360)을 제어하기 위한 음성정보는, 예컨대, "길동아, 세대현관문 열어줘", "길동아, 밖에 택배 왔는지 봐줘" 등이 있다.
한편, 전술한 사항은 음성정보의 예시에 불과할 뿐, 이에 제한되지 않음을 미리 명시하는 바이다.
도 3을 참조하여, 사용자에 의해 입력된 음성정보가 내부 클라우드 플랫폼(120)에 의해 학습되어, 개별 세대장치(300)에 대한 지능형 제어를 수행하는 방법에 관하여 구체적으로 설명한다.
우선, 사용자에 의해 음성인식부(141)에 음성정보가 입력된다(S300). 한편 본 개시에서, 음성 정보는 예컨대, 사용자의 실내환경 제어에 관한 정보일 수 있다. 구체적으로, 사용자가 "길동아, 난방온도 25도로" 라는 자연어 등을 입력하는 경우를 상정하여 설명하도록 한다. 음성정보가 입력됨과 동시에, 세대단말기(150)에 의해 환경정보가 생성된다.
입력된 음성인식 정보 및 생성된 환경정보는, 세대단말기(150)에 전달된다(S310).
세대단말기(150)의 연산모듈(156)이 전달된 음성정보를 이용하여 제어명령을 생성할 수 있다. 즉, 세대단말기(150)는 음성정보를 제어명령으로 변환한다(S320). 여기서, 제어명령은 전기적 신호를 의미하는 것이며, 유선통신 또는 무선통신에 의해 송수신된다.
변환된 제어명령은, 세대단말기(150)의 제어모듈(154)에 의해 개별 세대장치(300)에 전달된다(S330). 이때, 제어모듈(154)은 직접 개별 세대장치(300)로 제어명령을 전달할 수 있고, 또는, IR 제어부(148)를 통해 간접적으로 개별 세대장치(300)로 제어명령을 전달할 수 있다(도 2 참조).
개별 세대장치(300)는, 제어명령 및 설비제어 정보를 포함하는 개별세대 제어데이터를 생성한다(S340).
생성된 개별세대 제어데이터는 내부 클라우드 플랫폼(120)에 전달된다(S350).
내부 클라우드 플랫폼(120)은, 전달된 개별세대 제어데이터 및 환경정보를 이용하여 개별 세대의 빅데이터를 생성한다(S360).
내부 클라우드 플랫폼(120)은 환경정보를 입력자료로, 개별세대 제어데이터를 출력자료로 하여 인공지능 모델을 학습한다. 이후에, 새로운 환경정보가 입력되면, 내부 클라우드 플랫폼(120)은 학습된 인공지능 모델을 이용하여 개별세대 제어데이터를 출력한다. 내부 클라우드 플랫폼(120)은 출력된 개별세대 제어데이터를 기반으로 개별 세대장치(300)를 제어하기 위한 명령인 학습기반 제어명령을 생성한다(S370).
한편, 본 개시에서, 개별세대 제어데이터는 사용자의 외출정보에 관한 음성정보를 더 포함할 수 있다. 예컨대, "길동아, 나 나갔다 올게" 또는 "길동아, 나 외출한다"라는 음성정보에 의해 생성된 제어명령이 개별 세대장치(300)에 전달된다.
"길동아, 나 나갔다 올게"라는 음성정보에 의해 생성된 제어명령이 개별 세대장치(300)에 전달되면 조명기기(310)가 소등되고, 창호 액추에이터에 의해 창호가 폐쇄되고, 냉난방기기(330)의 전원이 차단될 수 있다. 또한, 가스밸브가 폐쇄되고, 냉장고의 전원은 유지될 수 있다.
한편, 내부 클라우드 플랫폼(120)을 이용하여 음성정보를 인식하고, 이를 처리하는 과정은 초기인식어를 필요로 하며, 단순 패턴화된 음성명령어로서, AI와는 달리, 음성명령어를 분석하는 과정을 거치지는 않기에, AI에 비해 더 정확하게 연산속도가 빠르다는 장점이 있다.
도 4 및 도 5는 본 개시의 일 실시예에 따른 시스템의 외부에 구비된 클라우드 플랫폼을 이용하여 음성정보를 인식하는 방법에 관한 순서도이다.
도 4를 참조하면, 스마트 스피커(201)에 사용자에 의한 음성정보가 입력된다. 입력된 음성정보는 외부 클라우드 플랫폼(220)에 전달된다.
외부 클라우드 플랫폼(220)은, 전달된 음성정보를 제어명령으로 변환한다.
변환된 제어명령은, 내부 클라우드 플랫폼(120) 및 공동주택 단지서버(130)를 거쳐 세대단말기(150)에 전달된다. 제어명령이 전달되면, 세대단말기(150)는 환경정보를 생성하여 내부 클라우드 플랫폼에 전달한다. 한편, 도 4에 따른 환경정보의 생성 및 전달 과정은, 도 2에서의 과정과 동일한바, 이에 관한 설명은 도 2에 관한 설명으로 갈음하도록 한다.
세대단말기(150)의 제어모듈(154)은, 개별 세대장치(300)에 제어명령을 직접 전달할 수 있다. 또는, 세대단말기(150)의 제어모듈(154)은, 세대통합 감지제어모듈(140)의 IR 제어부(148)를 통해 개별 세대장치(300)에 제어명령을 전달할 수 있다.
개별 세대장치(300)는, 개별세대 제어데이터를 생성하여 내부 클라우드 플랫폼(120)에 전달한다. 한편, 도 4에 따른 개별세대 제어데이터의 생성 및 전달 과정은, 도 2에서의 과정과 동일한바, 이에 관한 설명은 도 2에 관한 설명으로 갈음하도록 한다.
도 3을 참조하여, 사용자에 의해 입력된 음성정보가 내부 클라우드 플랫폼(120)에 의해 학습되어, 개별 세대장치(300)에 대한 지능형 제어를 수행하는 방법에 관하여 구체적으로 설명한다.
우선, 사용자에 의해 스마트 스피커(201)에 음성정보가 입력된다(S500).
입력된 음성정보는, 외부 클라우드 플랫폼(220)에 전달된다(S510)
외부 클라우드 플랫폼(220)이 전달된 음성정보를 이용하여 제어명령을 생성할 수 있다. 즉, 외부 클라우드 플랫폼(220)은 음성정보를 제어명령으로 변환한다(S520). 여기서, 제어명령은 전기적 신호를 의미하는 것이며, 유선통신 또는 무선통신에 의해 송수신된다.
변환된 제어명령은, 내부 클라우드 플랫폼(120), 공동주택 단지서버(130) 및 세대단말기(150)를 통해 개별 세대장치(300)에 전달된다(S530). 이때, 제어모듈(154)은 직접 개별 세대장치(300)로 제어명령을 전달할 수 있고, 또는, IR 제어부(148)를 통해 간접적으로 개별 세대장치(300)로 제어명령을 전달할 수 있다(도 4 참조).
S540 내지 S570의 단계는, 도 3의 S340 내지 S370 단계와 동일한바, 이에 관한 설명은 도 3의 설명으로 갈음하도록 한다.
이상의 설명은 본 실시예의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 실시예의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 실시예들은 본 실시예의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 실시예의 기술 사상의 범위가 한정되는 것은 아니다. 본 실시예의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 실시예의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
120: 내부 클라우드 플랫폼
130; 공동주택 단지서버
140: 세대통합 감지제어모듈
150: 세대단말기
160: 공동시설 제어모듈
201: 스마트 스피커
202: 사용자 단말기
220: 외부 클라우드 플랫폼
300: 개별 세대장치

Claims (8)

  1. 집합건물의 각 세대에 구축되는 시스템으로서,
    세대의 내부에 구비되며,
    사용자에 의해 입력되는 음성정보를 인식하는 음성인식부(141); 및
    사용자에 의해 입력되는 동작정보를 인식하는 동작인식부(142)를 포함하는 세대통합 감지제어모듈(140);
    상기 음성정보 및 상기 동작정보를 수신하고, 수신한 상기 음성정보 및 동작정보를 제어명령으로 변환하도록 구성된 연산모듈(156)을 포함하는 세대단말기(150); 및
    상기 세대단말기(150)로부터 제어명령을 수신하고, 수신한 상기 제어명령에 상응해 구동된 기록을 포함하는 개별세대 제어데이터를 생성하는 개별 세대장치(300);
    복수의 개별세대 제어데이터를 이용하여 세대별 빅데이터를 생성하는 내부 클라우드 플랫폼(120)을 포함하는,
    시스템.
  2. 제1항에 있어서,
    사용자에 의해 음성정보가 입력되는 스마트 스피커(201); 및
    상기 스마트 스피커(201)로부터 상기 음성정보를 수신하고, 이를 제어명령으로 변환하는 외부 클라우드 플랫폼(220)을 더 포함하고,
    상기 내부 클라우드 플랫폼(120)은, 상기 외부 클라우드 플랫폼(220)으로부터 상기 제어명령을 수신하여, 이를 공동주택 단지서버(130)에 전달하고,
    상기 세대단말기(150)는, 상기 공동주택 단지서버(130)로부터 상기 제어명령을 수신하는,
    시스템.
  3. 제1항 또는 제2항에 있어서,
    상기 세대별 빅데이터는,
    상기 개별세대 제어데이터, 및 실내환경 정보, 실외환경 정보와 단지정보를 포함하는 환경정보를 포함하고,
    상기 내부 클라우드 플랫폼(120)은, 상기 환경정보를 입력자료로, 상기 개별세대 제어데이터를 출력자료로하여 인공지능 모델을 학습하고,
    상기 내부 클라우드 플랫폼(120)은 상기 인공지능 모델을 이용하여 환경정보가 입력되면 개별세대 제어데이터를 출력하고, 출력된 개별세대 제어데이터를 기반으로 개별 세대장치(300)를 제어하는 명령인 학습기반 제어명령을 생성하는,
    시스템.
  4. 제1항에 있어서,
    상기 개별 세대장치(300)는, 조명기기(310), 냉난방기기(330), 스마트장치(340), 가전기기(350) 및 도어락모듈(360)을 포함하고,
    상기 음성정보가, 사용자의 외출정보를 포함하는 경우,
    상기 조명기기(310), 상기 냉난방기기(330)에 인가되는 전원이 차단되고,
    상기 스마트장치(340)에 포함되는 가스밸브가 폐쇄되고,
    상기 가전기기(350)의 적어도 일부에 인가되는 전원이 차단되며, 상기 가전기기(350)의 다른 적어도 일부에 인가되는 전원은 유지되고,
    상기 도어락모듈(360)은 방범모드로 전환되는,
    시스템.
  5. 제4항에 있어서,
    상기 세대통합 감지제어모듈(140)에 포함되는 창호개폐 감지부(145)에 의해 창호의 개폐가 감지되고,
    상기 창호가 개방되어 있는 것으로 판단되면, 상기 가전기기(350)에 포함되는 창호 액추에이터에 상기 내부 클라우드 플랫폼(120)은, 상기 창호를 폐쇄하기 위한 제어명령을 생성하는,
    시스템.
  6. 세대 내에 구비되는 세대단말기(150)와 개별 세대장치(300), 및 집합건물에 구비되는 내부 클라우드 플랫폼(120)을 포함하는 시스템을 이용한 방법에 있어서,
    (a) 사용자에 의해 음성인식부(141)에 음성정보가 입력되는 단계;
    (b) 입력된 상기 음성정보가 상기 세대단말기(150)에 전달되는 단계;
    (c) 상기 세대단말기(150)의 연산모듈(156)이, 전달된 상기 음성정보를 제어명령으로 변환하는 단계;
    (d) 상기 제어명령이 상기 개별 세대장치(300)에 전달되는 단계;
    (e) 상기 개별 세대장치(300)가, 수신한 상기 제어명령에 상응해 구동된 기록을 포함하는 개별세대 제어데이터를 생성하는 단계;
    (f) 생성된 상기 개별세대 제어데이터가 상기 내부 클라우드 플랫폼(120)에 전달되는 단계;
    (g) 상기 내부 클라우드 플랫폼(120)이 상기 개별세대 제어데이터를 이용하여 세대별 빅데이터를 생성하는 단계;
    (h1) 상기 내부 클라우드 플랫폼(120)이 상기 세대별 빅데이터를 이용하여 학습하고, 학습된 내용을 바탕으로 개별 세대장치(300)를 제어하기 위한 학습기반 제어명령을 생성하는 단계; 및
    (h2) 상기 세대단말기(150)가 상기 학습기반 제어명령을 수신하여, 이를 개별 세대장치(300)에 전달하는 단계를 포함하는,
    방법.
  7. 세대 내에 구비되는 세대단말기(150), 개별 세대장치(300)와 스마트 스피커(201), 및 집합건물에 구비되는 내부 클라우드 플랫폼(120), 외부 클라우드 플랫폼(220)과 공동주택 단지서버(130)를 포함하는 시스템을 이용한 방법에 있어서,
    (i) 사용자에 의해 상기 스마트 스피커(201)에 음성정보가 입력되는 단계;
    (j) 입력된 상기 음성정보가 상기 외부 클라우드 플랫폼(220)에 전달되는 단계;
    (k) 전달된 상기 음성정보가 상기 외부 클라우드 플랫폼에서 제어명령으로 변환되는 단계;
    (l) 변환된 상기 제어명령이 상기 내부 클라우드 플랫폼(120), 상기 공동주택 단지서버(130) 및 상기 세대단말기(150)를 통과해 상기 개별 세대장치에 전달되는 단계;
    (m) 상기 개별 세대장치(300)가, 수신한 상기 제어명령에 상응해 구동된 기록을 포함하는 개별세대 제어데이터를 생성하는 단계;
    (n) 생성된 상기 개별세대 제어데이터가 상기 내부 클라우드 플랫폼(120)에 전달되는 단계;
    (o) 상기 내부 클라우드 플랫폼(120)이 상기 개별세대 제어데이터를 이용하여 세대별 빅데이터를 생성하는 단계;
    (p1) 상기 내부 클라우드 플랫폼(120)이 상기 세대별 빅데이터를 이용하여 학습하고, 학습된 내용을 바탕으로 개별 세대장치(300)를 제어하기 위한 학습기반 제어명령을 생성하는 단계;
    (p2) 상기 세대단말기(150)가 상기 학습기반 제어명령을 수신하여, 이를 개별 세대장치(300)에 전달하는 단계를 포함하는,
    방법.
  8. 제6항 또는 제7항에 있어서,
    상기 세대별 빅데이터는,
    실내환경 정보, 실외환경 정보 및 단지정보를 포함하는 환경정보; 및
    조명 사용정보, 가스 사용정보, 난방 사용정보 및 공조 사용정보를 포함하는 설비제어 정보를 포함하고,
    상기 내부 클라우드 플랫폼(120)은, 상기 환경정보를 입력자료로, 상기 설비제어 정보를 출력자료로하여 인공지능 모델을 학습하고,
    상기 내부 클라우드 플랫폼(120)은 상기 인공지능 모델을 이용하여 환경정보가 입력되면 설비제어 정보를 출력하고, 출력된 설비제어 정보를 기반으로 개별 세대장치(300)를 제어하는 명령인 학습기반 제어명령을 생성하는,
    방법.
KR1020220001144A 2021-07-29 2022-01-04 세대단말기를 포함하는 시스템 및 이를 이용한 방법 KR20230018297A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020210099954 2021-07-29
KR20210099954 2021-07-29

Publications (1)

Publication Number Publication Date
KR20230018297A true KR20230018297A (ko) 2023-02-07

Family

ID=85253152

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220001144A KR20230018297A (ko) 2021-07-29 2022-01-04 세대단말기를 포함하는 시스템 및 이를 이용한 방법

Country Status (1)

Country Link
KR (1) KR20230018297A (ko)

Similar Documents

Publication Publication Date Title
US10869006B2 (en) Doorbell camera with battery at chime
US11967222B2 (en) Configuring a smart home controller
US10985936B2 (en) Customized interface based on vocal input
US11929844B2 (en) Customized interface based on vocal input
US11637716B1 (en) Connected automation controls using robotic devices
CN111937051A (zh) 使用增强现实可视化的智能家居设备放置和安装
US10508822B1 (en) Home automation system providing remote room temperature control
JP2018063537A (ja) ホームネットワーク、電子機器、処理装置および表示方法
US10621838B2 (en) External video clip distribution with metadata from a smart-home environment
US11483451B2 (en) Methods and systems for colorizing infrared images
KR101772221B1 (ko) 개인을 위한 아이오티 홈 스마트 시스템
CN108895621A (zh) 空调控制方法、装置、服务器和存储介质
KR20230018295A (ko) 세대단말기를 이용한 스마트홈 시스템
US11115615B1 (en) Augmented reality display of local information
KR20230018297A (ko) 세대단말기를 포함하는 시스템 및 이를 이용한 방법
Mahmud et al. Energy conservation for existing cooling and lighting loads
KR102510499B1 (ko) 클라우드 플랫폼 기반의 공동주택의 스마트홈 시스템
KR20230018287A (ko) 세대단말기를 이용한 동선감지 시스템 및 이를 이용한 방법
KR20160036728A (ko) 주변환경 연계형 홈네트워크 시스템 및 그 제어방법
Alina-Daniela et al. SMART HOME, USING FIBARO SYSTEMS.
JP2024086889A (ja) ゲートウェイ及び情報処理システム
WO2019198187A1 (ja) ホームネットワーク、電子機器、処理装置および表示方法
Emmanuel UNIVERSITY OF KIGALI SCHOOL OF POST-GRADUATE MASTERS IN INFORMATION TECHNOLOGY
JP2022158169A (ja) ゲートウェイ
WO2023048720A1 (en) Hierarchical mobile application launch

Legal Events

Date Code Title Description
E902 Notification of reason for refusal