KR101974870B1 - 인공지능 로봇 청소기 및 이를 구비하는 로봇 청소 시스템 - Google Patents

인공지능 로봇 청소기 및 이를 구비하는 로봇 청소 시스템 Download PDF

Info

Publication number
KR101974870B1
KR101974870B1 KR1020170071670A KR20170071670A KR101974870B1 KR 101974870 B1 KR101974870 B1 KR 101974870B1 KR 1020170071670 A KR1020170071670 A KR 1020170071670A KR 20170071670 A KR20170071670 A KR 20170071670A KR 101974870 B1 KR101974870 B1 KR 101974870B1
Authority
KR
South Korea
Prior art keywords
cleaner
dangerous situation
server
main body
information related
Prior art date
Application number
KR1020170071670A
Other languages
English (en)
Other versions
KR20180134155A (ko
Inventor
김정환
조일수
이주현
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020170071670A priority Critical patent/KR101974870B1/ko
Publication of KR20180134155A publication Critical patent/KR20180134155A/ko
Application granted granted Critical
Publication of KR101974870B1 publication Critical patent/KR101974870B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0276Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle
    • G05D1/028Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle using a RF signal
    • G05D1/0282Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle using a RF signal generated in a local control room
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L9/00Details or accessories of suction cleaners, e.g. mechanical means for controlling the suction or for effecting pulsating action; Storing devices specially adapted to suction cleaners or parts thereof; Carrying-vehicles specially adapted for suction cleaners
    • A47L9/28Installation of the electric equipment, e.g. adaptation or attachment to the suction cleaner; Controlling suction cleaners by electric means
    • A47L9/2836Installation of the electric equipment, e.g. adaptation or attachment to the suction cleaner; Controlling suction cleaners by electric means characterised by the parts which are controlled
    • A47L9/2852Elements for displacement of the vacuum cleaner or the accessories therefor, e.g. wheels, casters or nozzles
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L11/00Machines for cleaning floors, carpets, furniture, walls, or wall coverings
    • A47L11/40Parts or details of machines not provided for in groups A47L11/02 - A47L11/38, or not restricted to one of these groups, e.g. handles, arrangements of switches, skirts, buffers, levers
    • A47L11/4061Steering means; Means for avoiding obstacles; Details related to the place where the driver is accommodated
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • B25J11/008Manipulators for service tasks
    • B25J11/0085Cleaning
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/02Sensing devices
    • B25J19/021Optical sensing devices
    • B25J19/023Optical sensing devices including video camera means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1656Programme controls characterised by programming, planning systems for manipulators
    • B25J9/1664Programme controls characterised by programming, planning systems for manipulators characterised by motion, path, trajectory planning
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L2201/00Robotic cleaning machines, i.e. with automatic control of the travelling movement or the cleaning operation
    • A47L2201/04Automatic control of the travelling movement; Automatic obstacle detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Robotics (AREA)
  • Multimedia (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Electric Vacuum Cleaner (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)

Abstract

본 발명의 해결 과제를 달성하기 위하여, 본 발명의 일 실시 예에 따르는 자율주행을 수행하는 인공지능 로봇 청소기는 본체, 본체를 이동시키는 구동부, 상기 본체가 위치하는 환경과 관련된 정보를 감지하는 센서, 이동 단말기 및 서버 중 적어도 하나와 정보를 수신하거나 송신하는 통신부, 상기 센서에서 감지된 정보의 분석을 위한 트레이닝 데이터를 저장하는 메모리 및 상기 센서에서 감지된 정보에 근거하여, 상기 본체가 위험상황에 진입했는지 여부를 판단하고, 상기 본체가 위험상황에 진입한 것으로 판단되면, 상기 메모리에 저장된 트레이닝 데이터와 분석 알고리즘을 이용하여 위험상황과 관련된 정보를 분석하며, 분석결과에 근거하여 상기 위험상황에 대응되는 운전모드를 설정하는 제어부를 포함하는 것을 특징으로 한다.

Description

인공지능 로봇 청소기 및 이를 구비하는 로봇 청소 시스템{ARTIFICIAL INTELLIGENCE ROBOT CLEANER AND ROBOT CLEANING SYSTEM}
본 발명은 청소기 및 그 제어 방법에 관한 것으로서, 보다 상세하게는 장애물을 인식할 수 있고, 자율 주행을 수행하는 청소기 및 이와 같은 청소기를 구비하는 로봇 청소 시스템에 관한 것이다.
일반적으로 로봇은 산업용으로 개발되어 공장 자동화의 일 부분을 담당하여 왔다. 최근에는 로봇을 응용한 분야가 더욱 확대되어, 의료용 로봇, 우주 항공 로봇 등이 개발되고, 일반 가정에서 사용할 수 있는 가정용 로봇도 만들어지고 있다.
상기 가정용 로봇의 대표적인 예는 로봇 청소기로서, 일정 영역을 스스로 주행하면서 주변의 먼지 또는 이물질을 흡입하여 청소하는 가전기기의 일종이다. 이러한 로봇 청소기는 일반적으로 충전 가능한 배터리를 구비하고, 주행 중 장애물을 피할 수 있는 장애물 센서를 구비하여 스스로 주행하며 청소할 수 있다.
최근에는, 로봇 청소기가 청소 영역을 단순히 자율적으로 주행하여 청소를 수행하는 것에서 벗어나 로봇 청소기를 헬스 케어, 스마트홈, 원격제어 등 다양한 분야에 활용하기 위한 연구가 활발하게 이루어지고 있다.
또한, 위와 같은 로봇 청소기는 다양한 정보를 수집할 수 있으며, 외부 네트워크 또는 이동 단말기와 통신을 수행함으로써, 수집한 정보를 다양한 방식으로 처리할 수 있다.
예를 들어, 로봇 청소기의 카메라는 로봇 청소기의 본체 주변을 촬영하고, 로봇 청소기의 제어부는 촬영된 영상에 존재하는 장애물과 관련된 정보를 검출할 수 있다.
이와 관련하여, 한국공개특허 10-2013-0027355호(공개일자 2013년 03월 15일)에서는 단말 장치와 로봇 청소기를 네트워크를 통해 연결함으로써, 로봇 청소기를 다양하게 제어할 수 있는 로봇 청소기의 원격 제어 시스템을 개시하고 있다.
그러나, 상기 한국공개특허 10-2013-0027355호에 따른 로봇 청소기 시스템에서는, 로봇 청소기가 주변의 장애물을 검출함에 있어서, 머신 러닝(Machine Learning) 기법을 활용하지 않기 때문에, 장애물을 정확히 검출하기 어려운 문제점이 있다.
즉, 일반적인 로봇 청소 시스템에 포함된 로봇 청소기는 사용자 또는 설계자에 의해 미리 로봇 청소기의 메모리에 저장해둔 알고리즘 또는 비교군 데이터에만 근거하여, 로봇 주변의 장애물과 관련된 정보를 검출하므로, 새로운 유형의 장애물이 출현하는 경우에는 장애물 정보를 정확히 검출할 수 없다.
또한, 로봇 청소기가 장애물 정보를 정확히 검출할 수 없다면, 장애물 회피 운전을 원활하게 수행할 수 없고, 이에 따라 정해진 청소 영역에 대해 효율적으로 청소 운전을 수행할 수 없는 문제점도 도출된다.
본 발명이 해결하고자 하는 기술적 과제는, 설계자 또는 사용자에 의해 설계된 로봇 청소기의 최초 성능에 제한되지 않고, 로봇 청소기가 본체 주변에 장애물의 존재 여부에 대해 정확하게 인식할 수 있도록 머신 러닝 기능을 탑재한 로봇 청소기 및 이를 구비하는 로봇 청소 시스템을 제공하는 것이다.
또한, 본 발명의 기술적 과제는 로봇 청소기의 사용 사례와 관련된 데이터를 공유함으로써, 상기 사용 사례가 축적됨에 따라 로봇 청소기의 장애물 인식 성능을 향상시킬 수 있도록 머신 러닝 기능을 탑재한 로봇 청소기 및 이를 구비하는 로봇 청소 시스템을 제공하는 것이다.
또한, 본 발명의 기술적 과제는 머신 러닝을 수행하는 로봇 청소 시스템의 서버에 의해 로봇 청소기에, 상기 로봇 청소기의 주변에서 발생하는 위험상황과 관련된 분석결과를 제공함으로써, 로봇 청소기에 포함된 제어부가 성능의 개선 없이도, 많은 양의 데이터 처리를 요구하는 장애물 인식을 수행할 수 있도록 머신 러닝 기능을 탑재한 로봇 청소기 및 이를 구비하는 로봇 청소 시스템을 제공하는 것이다.
또한, 본 발명의 기술적 과제는 로봇 청소기가 이동 단말기로 모니터링 결과를 전송하는 중에, 사용자 의도를 반영하여 로봇 청소기의 주변 영역 중 일부분에 존재하는 물체를 인식할 수 있도록 머신 러닝 기능을 탑재한 로봇 청소기 및 이를 구비하는 로봇 청소 시스템을 제공하는 것이다.
위와 같은 본 발명의 기술적 과제를 해결하기 위하여, 본 발명에 따른 자율주행을 수행하는 청소기는 본체, 본체를 이동시키는 구동부, 상기 본체가 위치하는 환경과 관련된 정보를 감지하는 센서, 이동 단말기 및 서버 중 적어도 하나와 정보를 수신하거나 송신하는 통신부, 상기 센서에서 감지된 정보의 분석을 위한 트레이닝 데이터를 저장하는 메모리 및 상기 센서에서 감지된 정보에 근거하여, 상기 본체가 위험상황에 진입했는지 여부를 판단하고, 상기 본체가 위험상황에 진입한 것으로 판단되면, 상기 메모리에 저장된 트레이닝 데이터와 분석 알고리즘을 이용하여 위험상황과 관련된 정보를 분석하며, 분석결과에 근거하여 상기 위험상황에 대응되는 운전모드를 설정하는 제어부를 포함하는 것을 특징으로 한다.
일 실시예에서, 상기 제어부는 상기 본체가 위험상황에 진입한 것으로 판단되면, 상기 트레이닝 데이터를 업데이트하기 위해, 트레이닝 데이터 업데이트 요청을 상기 서버로 전송하도록 통신부를 제어하는 것을 특징으로 한다.
일 실시예에서, 상기 제어부는 상기 트레이닝 데이터 업데이트 요청에 대응하여, 상기 서버로부터 수신된 트레이닝 데이터 업데이트 정보를 이용하여, 상기 트레이닝 데이터를 업데이트하는 것을 특징으로 한다.
일 실시예에서, 상기 제어부는 업데이트된 트레이닝 데이터를 이용하여, 위험상황과 관련된 정보를 분석하는 것을 것을 특징으로 한다.
일 실시예에서, 상기 제어부는 업데이트된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 촬영된 영상의 피사체와 관련된 정보를 식별하는 것을 특징으로 한다.
일 실시예에서, 상기 제어부는 업데이트된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 검출된 장애물의 종류와 관련된 정보를 식별하는 것을 특징으로 한다.
일 실시예에서, 상기 제어부는 위험상황과 관련된 정보에 대한 분석결과에 근거하여, 상기 위험상황에 대응되는 운전모드를 설정하는 것을 특징으로 한다.
일 실시예에서, 상기 제어부는 상기 분석결과에 근거하여, 상기 청소기의 주행경로 상에 장애물이 존재하는 것으로 판단되면, 상기 장애물을 회피하기 위한 제1 운전모드를 설정하는 것을 특징으로 한다.
일 실시예에서, 상기 제어부는 상기 분석결과에 근거하여, 상기 청소기의 청소영역에 상기 청소기의 구동을 방해하는 물체 또는 생명체가 존재하는 것으로 판단되면, 상기 청소기의 동작을 정지시키기 위한 제2 운전모드를 설정하는 것을 특징으로 한다.
일 실시예에서, 상기 제어부는 상기 분석결과에 근거하여, 상기 청소기의 청소영역에 상기 청소영역의 보안을 위험하는 물체 또는 생명체가 존재하는 것으로 판단되면, 상기 청소기의 사용자에게 상기 청소영역에 대한 모니터링 정보를 제공하기 위한 제3 운전모드를 설정하는 것을 특징으로 한다.
일 실시예에서, 상기 센서는 상기 구동부의 작동과 관련된 정보를 감지하는 엔코더를 포함하고, 상기 제어부는 상기 엔코더의 감지결과에 근거하여, 상기 청소기에 위험상황이 발생한 것으로 판단하는 것을 특징으로 한다.
일 실시예에서, 상기 제어부는 상기 엔코더의 감지결과에 근거하여, 상기 본체가 주행경로를 이탈한 것으로 판단되면, 상기 청소기에 위험상황이 발생한 것으로 판단하는 것을 특징으로 한다.
일 실시예에서, 상기 제어부는 상기 엔코더의 감지결과에 근거하여, 상기 구동부의 바퀴가 구속되거나, 공회전하는 경우, 상기 청소기에 위험상황이 발생한 것으로 판단하는 것을 특징으로 한다.
일 실시예에서, 상기 센서는 상기 본체 주변과 관련된 영상을 촬영하는 카메라를 포함하고, 상기 제어부는 상기 카메라에 의해 촬영된 영상에 근거하여, 상기 청소기에 위험상황이 발생한 것으로 판단하는 것을 특징으로 한다.
일 실시예에서, 상기 제어부는 상기 본체가 정지된 상태에서 상기 카메라에 의해 소정의 시간 간격으로 촬영되는 복수의 영상 사이에 차이가 검출되는 경우, 상기 청소기에 위험상황이 발생한 것으로 판단하는 것을 특징으로 한다.
일 실시예에서, 상기 제어부는 상기 본체가 위험상황에 진입한 것으로 판단되면, 상기 분석 알고리즘을 업데이트하기 위해, 분석 알고리즘 업데이트 요청을 상기 서버로 전송하도록 통신부를 제어하는 것을 특징으로 한다.
일 실시예에서, 상기 제어부는 상기 분석 알고리즘 업데이트 요청에 대응하여, 상기 서버로부터 수신된 분석 알고리즘 업데이트 정보를 이용하여, 상기 분석 알고리즘을 업데이트하는 것을 특징으로 한다.
또한, 본 발명에 따른 로봇 청소기 시스템은, 자율 주행을 수행하는 청소기와 상기 청소기와 통신을 수행하는 서버를 포함할 수 있다.
일 실시예에서, 상기 청소기는 본체, 상기 본체를 이동시키는 구동부, 상기 본체가 위치하는 환경과 관련된 정보를 감지하는 센서, 상기 서버와 통신을 수행하는 통신부 및 상기 센서에서 감지된 정보에 근거하여, 상기 본체가 위험상황에 진입했는지 여부를 판단하고, 상기 본체가 위험상황에 진입한 것으로 판단되면, 상기 위험상황과 관련된 정보를 상기 서버로 전송하도록 상기 통신부를 제어하는 제어부를 포함하고, 상기 서버는 상기 서버에 저장된 트레이닝 데이터를 이용하여 상기 청소기로부터 전송받은 위험상황과 관련된 정보를 분석하고, 분석결과를 상기 청소기로 전송하며, 상기 청소기로부터 전송받은 위험상황과 관련된 정보를 이용하여, 상기 트레이닝 데이터를 업데이트하고, 상기 청소기의 제어부는 상기 서버로부터 전송받은 분석결과에 근거하여 상기 위험상황에 대응되는 운전모드를 설정하는 제어부를 포함하는 것을 특징으로 한다.
일 실시예에서, 상기 청소기의 제어부는 상기 설정된 운전모드의 실행이 완료된 후 상기 센서에 의해 획득된 상기 본체 주변에 존재하는 물체와 관련된 정보가 상기 서버로 전송되도록 상기 통신부를 제어하고, 상기 서버는 상기 설정된 운전모드의 실행이 완료된 후 청소기로부터 수신된 상기 본체 주변에 존재하는 물체와 관련된 정보를 이용하여, 상기 분석결과의 정확도를 판단하는 것을 특징으로 한다.
일 실시예에서, 상기 청소기 및 상기 서버와 통신을 수행하는 이동 단말기를 더 포함하고, 상기 이동 단말기는 상기 청소기로부터 수신된 모니터링 정보를 출력하고, 상기 모니터링 정보가 출력된 상태에서, 위험상황과 관련된 사용자 입력을 수신하며, 상기 사용자 입력에 근거하여, 상기 위험상황과 관련된 정보를 서버로 전송하는 것을 특징으로 한다.
본 발명에 따르면, 로봇 청소기가 제작 또는 설계 시의 성능에 제한되지 않고, 본체 주변에 존재하는 장애물을 인식할 수 있는 효과가 도출된다.
또한, 본 발명에 따르면, 로봇 청소기가 머신 러닝을 이용하여 본체 주변에서 발생되는 위험상황에 대해 적절한 대응 운전을 수행할 수 있으므로, 로봇 청소기의 운전 성능이 향상된다.
또한, 본 발명에 따르면, 로봇 청소기의 제어부가 머신 러닝을 수행하기에 충분하지 않은 성능을 보유한 경우에도, 로봇 청소기와 통신을 수행하는 서버에 의해, 머신 러닝을 이용한 장애물 인식 결과를 획득할 수 있다. 즉, 로봇 청소기의 제작 비용을 증가시키지 않으면서, 로봇 청소기의 장애물 인식 성능을 향상시킬 수 있다.
또한, 본 발명에 따르면, 로봇 청소기의 사용 사례와 관련된 데이터가 축적됨에 따라, 로봇 청소기가 본체 주변에서 발생되는 위험상황의 실체를 정확하게 판단할 수 있는 효과가 도출된다. 즉, 본 발명에 따르면 로봇 청소기의 장애물 인식 성능을 향상시킬 수 있다.
또한, 본 발명에 따르면, 로봇 청소기의 사용자가 이동 단말기를 통해, 로봇 청소기가 존재하는 장소에 대한 원격 모니터링을 수행하는 중에, 상기 장소에 위험 요소가 존재하는지 여부를 사용자에게 전달할 수 있으므로, 사용자 편의성이 향상될 수 있다.
도 1은 본 발명에 따른 자율 주행을 수행하는 청소기의 일 예를 보인 사시도이다.
도 2는 도 1에 도시된 자율 주행을 수행하는 청소기의 평면도이다.
도 3은 도 1에 도시된 자율 주행을 수행하는 청소기의 측면도이다.
도 4는 본 발명의 일 실시예에 따른 자율 주행을 수행하는 청소기의 구성요소를 나타내는 블록도이다.
도 5는 본 발명의 일 실시예에 따른 자율 주행을 수행하는 청소기의 시스템을 나타내는 개념도이다.
도 6은 본 발명의 일 실이예 따른 자율 주행을 수행하는 청소기의 시스템의 제어 방법을 나타내는 흐름도이다.
도 7은 본 발명의 일 실이예 따른 자율 주행을 수행하는 청소기의 시스템의 제어 방법을 나타내는 흐름도이다.
도 8은 본 발명의 일 실이예 따른 자율 주행을 수행하는 청소기의 시스템의 제어 방법을 나타내는 흐름도이다.
도 9는 본 발명의 일 실이예 따른 자율 주행을 수행하는 청소기의 시스템의 제어 방법을 나타내는 흐름도이다.
도 10은 본 발명의 일 실이예 따른 자율 주행을 수행하는 청소기의 시스템의 제어 방법을 나타내는 흐름도이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 본 명세서에서 사용되는 기술적 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 명세서에 개시된 기술의 사상을 한정하려는 의도가 아님을 유의해야 한다.
도 1은 본 발명에 따른 로봇 청소기(100)의 일 예를 보인 사시도이고, 도 2는 도 1에 도시된 로봇 청소기(100)의 평면도이며, 도 3은 도 1에 도시된 로봇 청소기(100)의 측면도이다.
참고로, 본 명세서에서는 이동 로봇, 로봇 청소기 및 자율 주행을 수행하는 청소기가 동일한 의미로 사용될 수 있다.
도 1 내지 도 3을 참조하면, 로봇 청소기(100)는 일정 영역을 스스로 주행하면서 바닥을 청소하는 기능을 수행한다. 여기서 말하는 바닥의 청소에는, 바닥의 먼지(이물질을 포함한다)를 흡입하거나 바닥을 걸레질하는 것이 포함된다.
로봇 청소기(100)는 청소기 본체(110), 흡입 유닛(120), 센싱 유닛(130) 및 먼지통(140)을 포함한다.
청소기 본체(110)에는 로봇 청소기(100)의 제어를 위한 제어부(미도시) 및 로봇 청소기(100)의 주행을 위한 휠 유닛(111)이 구비된다. 휠 유닛(111)에 의해 로봇 청소기(100)는 전후좌우로 이동되거나 회전될 수 있다.
휠 유닛(111)은 메인 휠(111a) 및 서브 휠(111b)을 포함한다.
메인 휠(111a)은 청소기 본체(110)의 양측에 각각 구비되어, 제어부의 제어 신호에 따라 일 방향 또는 타 방향으로 회전 가능하게 구성된다. 각각의 메인 휠(111a)은 서로 독립적으로 구동 가능하게 구성될 수 있다. 예를 들어, 각각의 메인 휠(111a)은 서로 다른 모터에 의해서 구동될 수 있다.
서브 휠(111b)은 메인 휠(111a)과 함께 청소기 본체(110)를 지지하며, 메인 휠(111a)에 의한 로봇 청소기(100)의 주행을 보조하도록 이루어진다. 이러한 서브 휠(111b)은 후술하는 흡입 유닛(120)에도 구비될 수 있다.
살펴본 바와 같이, 제어부가 휠 유닛(111)의 구동을 제어함으로써, 로봇 청소기(100)는 바닥을 자율 주행하도록 이루어진다.
한편, 청소기 본체(110)에는 로봇 청소기(100)에 전원을 공급하는 배터리(미도시)가 장착된다. 배터리는 충전 가능하게 구성되며, 청소기 본체(110)의 저면부에 착탈 가능하게 구성될 수 있다.
흡입 유닛(120)은 청소기 본체(110)의 일측으로부터 돌출된 형태로 배치되어, 먼지가 포함된 공기를 흡입하도록 이루어진다. 상기 일측은 상기 청소기 본체(110)가 정방향(F)으로 주행하는 측, 즉 청소기 본체(110)의 앞쪽이 될 수 있다.
본 도면에서는, 흡입 유닛(120)이 청소기 본체(110)의 일측에서 전방 및 좌우 양측방으로 모두 돌출된 형태를 가지는 것을 보이고 있다. 구체적으로, 흡입 유닛(120)의 전단부는 청소기 본체(110)의 일측으로부터 전방으로 이격된 위치에 배치되고, 흡입 유닛(120)의 좌우 양단부는 청소기 본체(110)의 일측으로부터 좌우 양측으로 각각 이격된 위치에 배치된다.
청소기 본체(110)가 원형으로 형성되고, 흡입 유닛(120)의 후단부 양측이 청소기 본체(110)로부터 좌우 양측으로 각각 돌출 형성됨에 따라, 청소기 본체(110)와 흡입 유닛(120) 사이에는 빈 공간, 즉 틈이 형성될 수 있다. 상기 빈 공간은 청소기 본체(110)의 좌우 양단부와 흡입 유닛(120)의 좌우 양단부 사이의 공간으로서, 로봇 청소기(100)의 내측으로 리세스된 형태를 가진다.
상기 빈 공간에 장애물이 끼이는 경우, 로봇 청소기(100)가 장애물에 걸려 움직이지 못하는 문제가 초래될 수 있다. 이를 방지하기 위하여, 커버부재(129)가 상기 빈 공간의 적어도 일부를 덮도록 배치될 수 있다. 커버부재(129)는 청소기 본체(110) 또는 흡입 유닛(120)에 구비될 수 있다. 본 실시예에서는, 흡입 유닛(120)의 후단부 양측에 각각 커버부재(129)가 돌출 형성되어, 청소기 본체(110)의 외주면을 덮도록 배치된 것을 보이고 있다.
커버부재(129)는 상기 빈 공간, 즉 청소기 본체(110)와 흡입 유닛(120) 간의 빈 공간의 적어도 일부를 메우도록 배치된다. 따라서, 상기 빈 공간에 장애물이 끼이는 것이 방지되거나, 상기 빈 공간에 장애물이 끼이더라도 장애물로부터 용이하게 이탈 가능한 구조가 구현될 수 있다.
흡입 유닛(120)에서 돌출 형성된 커버부재(129)는 청소기 본체(110)의 외주면에 지지될 수 있다. 만일, 커버부재(129)가 청소기 본체(110)에서 돌출 형성되는 경우라면, 커버부재(129)는 흡입 유닛(120)의 후면부에 지지될 수 있다. 상기 구조에 따르면, 흡입 유닛(120)이 장애물과 부딪혀 충격을 받았을 때, 그 충격의 일부가 청소기 본체(110)로 전달되어 충격이 분산될 수 있다.
흡입 유닛(120)은 청소기 본체(110)에 착탈 가능하게 결합될 수 있다. 흡입 유닛(120)이 청소기 본체(110)로 분리되면, 분리된 흡입 유닛(120)을 대체하여 걸레 모듈(미도시)이 청소기 본체(110)에 착탈 가능하게 결합될 수 있다. 따라서, 사용자는 바닥의 먼지를 제거하고자 하는 경우에는 청소기 본체(110)에 흡입 유닛(120)을 장착하고, 바닥을 닦고자 하는 경우에는 청소기 본체(110)에 걸레 모듈을 장착할 수 있다.
흡입 유닛(120)이 청소기 본체(110)에 장착시, 상술한 커버부재(129)에 의해 상기 장착이 가이드될 수 있다. 즉, 커버부재(129)가 청소기 본체(110)의 외주면을 덮도록 배치됨으로써, 청소기 본체(110)에 대한 흡입 유닛(120)의 상대적 위치가 결정될 수 있다.
청소기 본체(110)에는 센싱 유닛(130)이 배치된다. 도시된 바와 같이, 센싱 유닛(130)은 흡입 유닛(120)이 위치하는 청소기 본체(110)의 일측, 즉 청소기 본체(110)의 앞쪽에 배치될 수 있다.
센싱 유닛(130)은 청소기 본체(110)의 상하 방향으로 흡입 유닛(120)과 오버랩되도록 배치될 수 있다. 센싱 유닛(130)은 흡입 유닛(120)의 상부에 배치되어, 로봇 청소기(100)의 가장 앞쪽에 위치하는 흡입 유닛(120)이 장애물과 부딪히지 않도록 전방의 장애물이나 지형지물 등을 감지하도록 이루어진다.
센싱 유닛(130)은 이러한 감지 기능 외의 다른 센싱 기능을 추가로 수행하도록 구성된다. 이에 대하여는 뒤에서 자세히 설명하기로 한다.
청소기 본체(110)에는 먼지통 수용부(113)가 구비되며, 먼지통 수용부(113)에는 흡입된 공기 중의 먼지를 분리하여 집진하는 먼지통(140)이 착탈 가능하게 결합된다. 도시된 바와 같이, 먼지통 수용부(113)는 청소기 본체(110)의 타측, 즉 청소기 본체(110)의 뒤쪽에 형성될 수 있다.
먼지통(140)의 일부는 먼지통 수용부(113)에 수용되되, 먼지통(140)의 다른 일부는 청소기 본체(110)의 후방[즉, 정방향(F)에 반대되는 역방향(R)]을 향하여 돌출되게 형성될 수 있다.
먼지통(140)에는 먼지가 포함된 공기가 유입되는 입구(140a)와 먼지가 분리된 공기가 배출되는 출구(140b)가 형성되며, 먼지통 수용부(113)에 먼지통(140)이 장착시 입구(140a)와 출구(140b)는 먼지통 수용부(113)의 내측벽에 형성된 제1개구(110a) 및 제2개구(110b)와 각각 연통되도록 구성된다.
청소기 본체(110) 내부의 흡기유로는 연통부(120b")와 연통되는 유입구(미도시)부터 제1개구(110a)까지의 유로에 해당하며, 배기유로는 제2개구(110b)부터 배기구(112)까지의 유로에 해당한다.
이러한 연결관계에 따라, 흡입 유닛(120)을 통하여 유입된 먼지가 포함된 공기는 청소기 본체(110) 내부의 흡기유로를 거쳐, 먼지통(140)으로 유입되고, 먼지통(140)의 필터 내지는 사이클론을 거치면서 공기와 먼지가 상호 분리된다. 먼지는 먼지통(140)에 집진되며, 공기는 먼지통(140)에서 배출된 후 청소기 본체(110) 내부의 배기유로를 거쳐 최종적으로 배기구(112)를 통하여 외부로 배출된다.
이하의 도 4에서는 로봇 청소기(100)의 구성요소와 관련된 일 실시예가 설명된다.
본 발명의 일 실시 예에 따른 로봇 청소기(100) 또는 이동 로봇은, 통신부(1100), 입력부(1200), 구동부(1300), 센서(1400), 출력부(1500), 전원부(1600), 메모리(1700) 및 제어부(1800) 중 적어도 하나 또는 이들의 조합을 포함할 수 있다.
이때, 도 4에 도시한 구성요소들이 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 로봇 청소기가 구현될 수 있음은 물론이다. 이하, 각 구성요소들에 대해 살펴보기로 한다.
우선, 전원부(1600)는 외부 상용 전원에 의해 충전 가능한 배터리를 구비하여 이동 로봇 내로 전원을 공급한다. 전원부(1600)는 이동 로봇에 포함된 각 구성들에 구동 전원을 공급하여, 이동 로봇이 주행하거나 특정 기능을 수행하는데 요구되는 동작 전원을 공급할 수 있다.
이때, 제어부(1800)는 배터리의 전원 잔량을 감지하고, 전원 잔량이 부족하면 외부 상용 전원과 연결된 충전대로 이동하도록 제어하여, 충전대로부터 충전 전류를 공급받아 배터리를 충전할 수 있다. 배터리는 배터리 감지부와 연결되어 배터리 잔량 및 충전 상태가 제어부(1800)에 전달될 수 있다. 출력부(1500)은 제어부에 의해 상기 배터리 잔량을 화면에 표시할 수 있다.
배터리는 로봇 청소기 중앙의 하부에 위치할 수도 있고, 좌, 우측 중 어느 한쪽에 위치할 수도 있다. 후자의 경우, 이동 로봇은 배터리의 무게 편중을 해소하기 위해 균형추를 더 구비할 수 있다.
한편, 구동부(1300)는 모터를 구비하여, 상기 모터를 구동함으로써, 좌, 우측 주바퀴를 양 방향으로 회전시켜 본체를 회전 또는 이동시킬 수 있다. 구동부(1300)는 이동 로봇의 본체를 전후좌우로 진행시키거나, 곡선주행시키거나, 제자리 회전시킬 수 있다.
한편, 입력부(1200)는 사용자로부터 로봇 청소기에 대한 각종 제어 명령을 입력받는다. 입력부(1200)는 하나 이상의 버튼을 포함할 수 있고, 예를 들어, 입력부(1200)는 확인버튼, 설정버튼 등을 포함할 수 있다. 확인버튼은 감지 정보, 장애물 정보, 위치 정보, 맵 정보를 확인하는 명령을 사용자로부터 입력받기 위한 버튼이고, 설정버튼은 상기 정보들을 설정하는 명령을 사용자로부터 입력받기 위한 버튼이다.
또한, 입력부(1200)는 이전 사용자 입력을 취소하고 다시 사용자 입력을 받기 위한 입력재설정버튼, 기 설정된 사용자 입력을 삭제하기 위한 삭제버튼, 작동 모드를 설정하거나 변경하는 버튼, 충전대로 복귀하도록 하는 명령을 입력받는 버튼 등을 포함할 수 있다.
또한, 입력부(1200)는 하드 키나 소프트 키, 터치패드 등으로 이동 로봇의 상부에 설치될 수 있다. 또, 입력부(1200)는 출력부(1500)와 함께 터치 스크린의 형태를 가질 수 있다.
한편, 출력부(1500)는, 이동 로봇의 상부에 설치될 수 있다. 물론 설치 위치나 설치 형태는 달라질 수 있다. 예를 들어, 출력부(1500)는 배터리 상태 또는 주행 방식 등을 화면에 표시할 수 있다.
또한, 출력부(1500)는, 센서(1400)가 검출한 이동 로봇 내부의 상태 정보, 예를 들어 이동 로봇에 포함된 각 구성들의 현재 상태를 출력할 수 있다. 또, 출력부(1500)는 센서(1400)가 검출한 외부의 상태 정보, 장애물 정보, 위치 정보, 지도 정보 등을 화면에 디스플레이할 수 있다. 출력부(1500)는 발광 다이오드(Light Emitting Diode; LED), 액정 표시 장치(Liquid Crystal Display; LCD), 플라즈마 표시 패널(Plasma Display Panel), 유기 발광 다이오드(Organic Light Emitting Diode; OLED) 중 어느 하나의 소자로 형성될 수 있다.
출력부(1500)는, 제어부(1800)에 의해 수행되는 이동 로봇의 동작 과정 또는 동작 결과를 청각적으로 출력하는 음향 출력 수단을 더 포함할 수 있다. 예를 들어, 출력부(1500)는 제어부(1800)에 의해 생성된 경고 신호에 따라 외부에 경고음을 출력할 수 있다.
이때, 음향 출력 수단은 비퍼(beeper), 스피커 등의 음향을 출력하는 수단일 수 있고, 출력부(1500)는 메모리(1700)에 저장된 소정의 패턴을 가진 오디오 데이터 또는 메시지 데이터 등을 이용하여 음향 출력 수단을 통해 외부로 출력할 수 있다.
따라서, 본 발명의 일 실시예에 따른 이동 로봇은, 출력부(1500)를 통해 주행 영역에 대한 환경 정보를 화면에 출력하거나 음향으로 출력할 수 있다. 또 다른 실시예에 따라, 이동 로봇은 출력부(1500)를 통해 출력할 화면이나 음향을 단말 장치가 출력하도록, 지도 정보 또는 환경 정보를 통신부(1100)를 통해 단말 장치에 전송할 수 있다.
한편, 통신부(1100)는 단말 장치 및/또는 특정 영역 내 위치한 타 기기(본 명세서에서는 "가전 기기"라는 용어와 혼용하기로 한다)와 유선, 무선, 위성 통신 방식들 중 하나의 통신 방식으로 연결되어 신호와 데이터를 송수신한다.
통신부(1100)는 특정 영역 내에 위치한 타 기기와 데이터를 송수신할 수 있다. 이때, 타 기기는 네트워크에 연결하여 데이터를 송수신할 수 있는 장치이면 어느 것이어도 무방하며, 일 예로, 공기 조화 장치, 난방 장치, 공기 정화 장치, 전등, TV, 자동차 등과 같은 장치일 수 있다. 또한, 상기 타 기기는, 문, 창문, 수도 밸브, 가스 밸브 등을 제어하는 장치 등일 수 있다. 또한, 상기 타 기기는, 온도, 습도, 기압, 가스 등을 감지하는 센서 등일 수 있다.
한편, 메모리(1700)는 로봇 청소기를 제어 또는 구동하는 제어 프로그램 및 그에 따른 데이터를 저장한다. 메모리(1700)는 오디오 정보, 영상 정보, 장애물 정보, 위치 정보, 지도 정보 등을 저장할 수 있다. 또, 메모리(1700)는 주행 패턴과 관련된 정보를 저장할 수 있다.
상기 메모리(1700)는 비휘발성 메모리를 주로 사용한다. 여기서, 상기 비휘발성 메모리(Non-Volatile Memory, NVM, NVRAM)는 전원이 공급되지 않아도 저장된 정보를 계속 유지할 수 있는 저장 장치로서, 일 예로, 롬(ROM), 플래시 메모리(Flash Memory), 마그네틱 컴퓨터 기억 장치(예를 들어, 하드 디스크, 디스켓 드라이브, 마그네틱 테이프), 광디스크 드라이브, 마그네틱 RAM, PRAM 등일 수 있다.
한편, 센서(1400)는, 외부 신호 감지 센서, 전방 감지 센서, 낭떠러지 감지 센서, 하부 카메라 센서, 상부 카메라 센서, 3차원 카메라 센서, 엔코더 및 마이크 중 적어도 하나를 포함할 수 있다.
외부 신호 감지 센서는 이동 로봇의 외부 신호를 감지할 수 있다. 외부 신호 감지 센서는, 일 예로, 적외선 센서(Infrared Ray Sensor), 초음파 센서(Ultra Sonic Sensor), RF 센서(Radio Frequency Sensor) 등일 수 있다.
이동 로봇은 외부 신호 감지 센서를 이용하여 충전대가 발생하는 안내 신호를 수신하여 충전대의 위치 및 방향을 확인할 수 있다. 이때, 충전대는 이동 로봇이 복귀 가능하도록 방향 및 거리를 지시하는 안내 신호를 발신할 수 있다. 즉, 이동 로봇은 충전대로부터 발신되는 신호를 수신하여 현재의 위치를 판단하고 이동 방향을 설정하여 충전대로 복귀할 수 있다.
한편, 전방 감지 센서는, 이동 로봇의 전방, 구체적으로 이동 로봇의 측면 외주면을 따라 일정 간격으로 설치될 수 있다. 전방 감지 센서는 이동 로봇의 적어도 일 측면에 위치하여, 전방의 장애물을 감지하기 위한 것으로서, 전방 감지 센서는 이동 로봇의 이동 방향에 존재하는 물체, 특히 장애물을 감지하여 검출 정보를 제어부(1800)에 전달할 수 있다. 즉, 전방 감지 센서는, 이동 로봇의 이동 경로 상에 존재하는 돌출물, 집안의 집기, 가구, 벽면, 벽 모서리 등을 감지하여 그 정보를 제어부(1800)에 전달할 수 있다.
전방 감지 센서는, 일 예로, 적외선 센서, 초음파 센서, RF 센서, 지자기 센서 등일 수 있고, 이동 로봇은 전방 감지 센서로 한 가지 종류의 센서를 사용하거나 필요에 따라 두 가지 종류 이상의 센서를 함께 사용할 수 있다.
일 예로, 초음파 센서는 일반적으로 원거리의 장애물을 감지하는 데에 주로 사용될 수 있다. 초음파 센서는 발신부와 수신부를 구비하여, 제어부(1800)는 발신부를 통해 방사된 초음파가 장애물 등에 의해 반사되어 수신부에 수신되는 지의 여부로 장애물의 존부를 판단하고, 초음파 방사 시간과 초음파 수신 시간을 이용하여 장애물과의 거리를 산출할 수 있다.
또한, 제어부(1800)는 발신부에서 방사된 초음파와, 수신부에 수신되는 초음파를 비교하여, 장애물의 크기와 관련된 정보를 검출할 수 있다. 예를 들어, 제어부(1800)는 수신부에 더 많은 초음파가 수신될수록, 장애물의 크기가 큰 것으로 판단할 수 있다.
일 실시 예에서, 복수(일 예로, 5개)의 초음파 센서가 이동 로봇의 전방 측면에 외주면을 따라 설치될 수 있다. 이때, 바람직하게 초음파 센서는 발신부와 수신부가 교대로 이동 로봇의 전면에 설치될 수 있다.
즉, 발신부는 본체의 전면 중앙으로부터 좌, 우측에 이격되도록 배치될 수 있고, 수신부의 사이에 하나 또는 둘 이상의 발신부가 배치되어 장애물 등으로부터 반사된 초음파 신호의 수신 영역을 형성할 수 있다. 이와 같은 배치로 센서의 수를 줄이면서 수신 영역을 확장할 수 있다. 초음파의 발신 각도는 크로스토크(crosstalk) 현상을 방지하도록 서로 다른 신호에 영향을 미치지 아니하는 범위의 각을 유지할 수 있다. 또한, 수신부들의 수신 감도는 서로 다르게 설정될 수 있다.
또한, 초음파 센서에서 발신되는 초음파가 상향으로 출력되도록 초음파 센서는 일정 각도만큼 상향으로 설치될 수 있고, 이때, 초음파가 하향으로 방사되는 것을 방지하기 위해 소정의 차단 부재를 더 포함할 수 있다.
한편, 전방 감지 센서는, 전술한 바와 같이, 두 가지 종류 이상의 센서를 함께 사용할 수 있고, 이에 따라, 전방 감지 센서는 적외선 센서, 초음파 센서, RF 센서 등 중 어느 한 가지 종류의 센서를 사용할 수 있다.
일 예로, 전방 감지 센서는 초음파 센서 이외에 다른 종류의 센서로 적외선 센서를 포함할 수 있다.
적외선 센서는 초음파 센서와 함께 이동 로봇의 외주면에 설치될 수 있다. 적외선 센서 역시, 전방이나 측면에 존재하는 장애물을 감지하여 장애물 정보를 제어부(1800)에 전달할 수 있다. 즉, 적외선 센서는, 이동 로봇의 이동 경로 상에 존재하는 돌출물, 집안의 집기, 가구, 벽면, 벽 모서리 등을 감지하여 그 정보를 제어부(1800)에 전달한다. 따라서, 이동 로봇은 본체가 장애물과의 충돌없이 특정 영역 내에서 이동할 수 있다.
한편, 낭떠러지 감지 센서(또는 클리프 센서(Cliff Sensor))는, 다양한 형태의 광 센서를 주로 이용하여, 이동 로봇의 본체를 지지하는 바닥의 장애물을 감지할 수 있다.
즉, 낭떠러지 감지 센서는, 바닥의 이동 로봇의 배면에 설치되되, 이동 로봇의 종류에 따라 다른 위치에 설치될 수 있음은 물론이다. 낭떠러지 감지 센서는 이동 로봇의 배면에 위치하여, 바닥의 장애물을 감지하기 위한 것으로서, 낭떠러지 감지 센서는 상기 장애물 감지 센서와 같이 발광부와 수광부를 구비한 적외선 센서, 초음파 센서, RF 센서, PSD(Position Sensitive Detector) 센서 등일 수 있다.
일 예로, 낭떠러지 감지 센서 중 어느 하나는 이동 로봇의 전방에 설치되고, 다른 두 개의 낭떠러지 감지 센서는 상대적으로 뒤쪽에 설치될 수 있다.
예를 들어, 낭떠러지 감지 센서는 PSD 센서일 수 있으나, 복수의 서로 다른 종류의 센서로 구성될 수도 있다.
PSD 센서는 반도체 표면저항을 이용해서 1개의 p-n접합으로 입사광의 단장거리 위치를 검출한다. PSD 센서에는 일축 방향만의 광을 검출하는 1차원 PSD 센서와, 평면상의 광위치를 검출할 수 있는 2차원 PSD 센서가 있으며, 모두 pin 포토 다이오드 구조를 가질 수 있다. PSD 센서는 적외선 센서의 일종으로서, 적외선을 이용하여, 적외선을 송신한 후 장애물에서 반사되어 돌아오는 적외선의 각도를 측정하여 거리를 측정한다. 즉, PSD 센서는 삼각측량방식을 이용하여, 장애물과의 거리를 산출한다.
PSD 센서는 장애물에 적외선을 발광하는 발광부와, 장애물로부터 반사되어 돌아오는 적외선을 수광하는 수광부를 구비하되, 일반적으로 모듈 형태로 구성된다. PSD 센서를 이용하여, 장애물을 감지하는 경우, 장애물의 반사율, 색의 차이에 상관없이 안정적인 측정값을 얻을 수 있다.
제어부(1800)는 낭떠러지 감지 센서가 지면을 향해 발광한 적외선의 발광신호와 장애물에 의해 반사되어 수신되는 반사신호 간의 적외선 각도를 측정하여, 낭떠러지를 감지하고 그 깊이를 분석할 수 있다.
한편, 제어부(1800)는 낭떠러지 감지 센서를 이용하여 감지한 낭떠러지의 지면 상태에 따라 통과 여부를 판단할 수 있고, 판단 결과에 따라 낭떠러지의 통과 여부를 결정할 수 있다. 예를 들어, 제어부(1800)은 낭떠러지 감지 센서를 통해 낭떠러지의 존재 여부 및 낭떠러지 깊이를 판단한 다음, 낭떠러지 감지 센서를 통해 반사 신호를 감지한 경우에만 낭떠러지를 통과하도록 한다.
다른 예로, 제어부(1800)은 낭떠러지 감지 센서를 이용하여 이동 로봇의 들림 현상을 판단할 수도 있다.
한편, 하부 카메라 센서는, 이동 로봇의 배면에 구비되어, 이동 중 하방, 즉, 바닥면(또는 피청소면)에 대한 이미지 정보를 획득한다. 하부 카메라 센서는, 다른 말로 옵티컬 플로우 센서(Optical Flow Sensor)라 칭하기도 한다. 하부 카메라 센서는, 센서 내에 구비된 이미지 센서로부터 입력되는 하방 영상을 변환하여 소정 형식의 영상 데이터를 생성한다. 생성된 영상 데이터는 메모리(1700)에 저장될 수 있다.
또한, 하나 이상의 광원이 이미지 센서에 인접하여 설치될 수 있다. 하나 이상의 광원은, 이미지 센서에 의해 촬영되는 바닥면의 소정 영역에 빛을 조사한다. 즉, 이동 로봇이 바닥면을 따라 특정 영역을 이동하는 경우에, 바닥면이 평탄하면 이미지 센서와 바닥면 사이에는 일정한 거리가 유지된다. 반면, 이동 로봇이 불균일한 표면의 바닥면을 이동하는 경우에는 바닥면의 요철 및 장애물에 의해 일정 거리 이상 멀어지게 된다. 이때 하나 이상의 광원은 조사되는 빛의 양을 조절하도록 제어부(1800)에 의해 제어될 수 있다. 상기 광원은 광량 조절이 가능한 발광 소자, 예를 들어 LED(Light Emitting Diode) 등일 수 있다.
하부 카메라 센서를 이용하여, 제어부(1800)는 이동 로봇의 미끄러짐과 무관하게 이동 로봇의 위치를 검출할 수 있다. 제어부(1800)은 하부 카메라 센서에 의해 촬영된 영상 데이터를 시간에 따라 비교 분석하여 이동 거리 및 이동 방향을 산출하고, 이를 근거로 이동 로봇의 위치를 산출할 수 있다. 하부 카메라 센서를 이용하여 이동 로봇의 하방에 대한 이미지 정보를 이용함으로써, 제어부(1800)는 다른 수단에 의해 산출한 이동 로봇의 위치에 대하여 미끄러짐에 강인한 보정을 할 수 있다.
한편, 상부 카메라 센서는 이동 로봇의 상방이나 전방을 향하도록 설치되어 이동 로봇 주변을 촬영할 수 있다. 이동 로봇이 복수의 상부 카메라 센서들을 구비하는 경우, 카메라 센서들은 일정 거리 또는 일정 각도로 이동 로봇의 상부나 옆면에 형성될 수 있다.
3차원 카메라 센서는 이동 로봇의 본체 일면 또는 일부분에 부착되어, 상기 본체의 주위와 관련된 3차원 좌표 정보를 생성할 수 있다.
즉, 3차원 카메라 센서는 이동 로봇과 피촬영 대상체의 원근거리를 산출하는 3차원 뎁스 카메라(3D Depth Camera)일 수 있다.
구체적으로, 3차원 카메라 센서는 본체의 주위와 관련된 2차원 영상을 촬영할 수 있으며, 촬영된 2차원 영상에 대응되는 복수의 3차원 좌표 정보를 생성할 수 있다.
일 실시예에서 3차원 카메라 센서는 기존의 2차원 영상을 획득하는 카메라를 2개 이상 구비하여, 상기 2개 이상의 카메라에서 획득되는 2개 이상의 영상을 조합하여, 3차원 좌표 정보를 생성하는 스테레오 비전 방식으로 형성될 수 있다.
구체적으로, 상기 실시예에 따른 3차원 카메라 센서는 본체의 전방을 향해 하측으로 제1 패턴의 광을 조사하는 제1 패턴 조사부와, 상기 본체의 전방을 향해 상측으로 제2 패턴의 광을 조사하는 제2 패턴 조사부 및 본체의 전방의 영상을 획득하는 영상 획득부를 포함할 수 있다. 이로써, 상기 영상 획득부는 상기 제1 패턴의 광과 상기 제2 패턴의 광이 입사된 영역의 영상을 획득할 수 있다.
또 다른 실시예에서 3차원 카메라 센서는 단일 카메라와 함께 적외선 패턴을 조사하는 적외선 패턴 방출부를 구비하고, 적외선 패턴 방출부에서 조사된 적외선 패턴이 피촬영 대상체에 투영된 모양을 캡쳐함으로써, 3차원 카메라 센서와 피촬영 대상체 사이의 거리를 측정할 수 있다. 이러한 3차원 카메라 센서는 IR(Infra Red) 방식의 3차원 카메라 센서일 수 있다.
또 다른 실시예에서 3차원 카메라 센서는 단일 카메라와 함께 빛을 방출하는 발광부를 구비하고, 발광부에서 방출되는 레이저 중 피촬영 대상체로부터 반사되는 일부를 수신하며, 수신된 레이저를 분석함으로써, 3차원 카메라 센서와 피촬영 대상체 사이의 거리를 측정할 수 있다. 이러한 3차원 카메라 센서는 TOF(Time of Flight) 방식의 3차원 카메라 센서일 수 있다.
구체적으로, 위와 같은 3차원 카메라 센서의 레이저는 적어도 일방향으로 연장된 형태의 레이저를 조사하도록 구성된다. 일 예에서, 상기 3차원 카메라 센서는 제1 및 제2 레이저를 구비할 수 있으며, 상기 제1 레이저는 서로 교차하는 직선 형태의 레이저를 조사하고, 제2 레이저는 단일의 직선 형태의 레이저를 조사할 수 있다. 이에 따르면, 최하단 레이저는 바닥 부분의 장애물을 감지하는 데에 이용되고, 최상단 레이저는 상부의 장애물을 감지하는 데에 이용되며, 최하단 레이저와 최상단 레이저 사이의 중간 레이저는 중간 부분의 장애물을 감지하는 데에 이용된다.
엔코더는 구동부(1300)의 바퀴를 동작시키는 모터의 동작과 관련된 정보를 감지할 수 있다.
이하의 도 5에서는 본 발명의 일 실시예에 따른 자율 주행을 수행하는 청소기를 포함하는 시스템이 설명된다.
도 5를 참조하면, 본 발명의 일 실시예에 따른 로봇 청소 시스템(50)은, 자율 주행을 수행하는 청소기(100), AP 장치(400), 서버(500), 네트워크(550), 이동 단말기들(200a, 200b)을 포함할 수 있다.
이 중 청소기(100), AP 장치(400), 이동 단말기들(600a) 등은 집과 같은 건물(10) 내에 배치될 수 있다.
청소기(100)는, 자동으로 청소가 이루어지는 청소기로서, 자동 주행 및 자동 청소를 수행할 수 있다. 한편, 청소기(100)는, 주행 기능 및 청소 기능 외에, 내부에 통신부(1100)를 구비하고, 내부 네트워크(10) 내의 전자기기들 또는 외부 네트워크(550)를 통해 접속 가능한 전자기기들과 데이터를 교환할 수 있다. 이를 위해, 통신부(1100)는, AP 장치(400)와 유, 무선으로 데이터 교환을 수행할 수 있다.
액세스 포인트(access point; AP) 장치(400)는, 인접한 전자 기기(electric device)에 내부 네트워크(10)를 제공할 수 있다. 특히, 무선 네트워크를 제공할 수 있다.
한편, AP 장치(400)는, 내부 네트워크(10) 내의 전자 기기들에, 소정 통신 방식에 의한 무선 채널을 할당하고, 해당 채널을 통해, 무선 데이터 통신을 수행할 수 있다. 여기서, 소정 통신 방식은, WiFi 통신 방식일 수 있다.
이때, 내부 네트워크(10) 내에 위치하는 이동 단말기(600b)는, AP 장치(400)를 통해, 청소기(100)에 접속함으로써, 청소기(100)에 대한 모니터링, 원격제어 등을 수행할 수 있게 된다.
한편, AP 장치(400)는, 내부 네트워크(10) 외에, 외부 네트워크(550)를 통해, 외부 전자기기와 데이터 통신을 수행할 수 있다.
예를 들어, AP 장치(400)는, 외부 네트워크(550)를 통해, 외부에 위치하는 이동 단말기(200a)와 무선 데이터 통신을 수행할 수 있다.
이때, 외부 네트워크(550)에 위치하는 이동 단말기(200a)는, 외부 네트워크(550), 및 AP 장치(400)를 통해, 청소기(100)에 접속함으로써, 청소기(100)에 대한 모니터링, 원격제어 등을 수행할 수 있게 된다.
다른 예로, AP 장치(400)는, 외부 네트워크(550)를 통해, 외부에 위치하는 서버(500)와 무선 데이터 통신을 수행할 수 있다.
서버(500)는, 음성 인식 알고리즘을 구비할 수 있다. 그리고, 음성 데이터 수신시, 수신되는 음성 데이터를, 텍스트 형식의 데이터로 변환하여, 출력할 수 있다.
한편, 서버(500)는, 청소기(100)에 대한 펌웨어 정보, 운전 정보(코스 정보 등)를 저장하고, 청소기(100)에 대한 제품 정보를 등록할 수 있다. 예를 들어, 서버(500)는, 청소기(100) 제조자가 운영하는 서버일 수 있다. 다른 예로, 서버(500)는, 공개된 애플리케이션 스토어 운영자가 운영하는 서버일 수도 있다.
한편, 도면과 달리, 서버(500)는 댁 내에 구비되며, 댁 내 가전 기기들에 대한 상태 정보를 저장하거나, 댁 내 가전 기기에서 공유되는 컨텐츠를 저장하는 홈 서버일 수도 있다. 서버(500)가 홈 서버인 경우, 이물질과 관련된 정보, 예를 들어, 이물질 이미지 등을 저장할 수 있다.
한편, 본 발명의 일 실시예에 따른, 청소기(100)는, 내부에 구비되는 카메라를 통해, 이물질을 포함하는 이미지를 캡쳐하고, 이물질을 포함하는 이미지와, 이미지 관련 정보를, 이동 단말기(200) 또는 서버(500)로 전송하며, 이동 단말기(200) 또는 서버(500)로부터의, 이물질에 대한 청소 실행 정보에 기초하여, 이물질 주변을 청소하거나, 이물질에 대한 청소 회피 정보에 기초하여, 이물질 주변을 청소하지 않을 수 있다. 이에 따라, 이물질에 대해 선택적으로 청소를 수행할 수 있게 된다.
한편, 본 발명의 다른 실시예에 따르면, 청소기(100)는, 내부에 구비되는 스테레오 카메라를 통해, 이물질을 포함하는 이미지를 캡쳐하고, 스테레오 카메라로부터 획득된 이물질을 포함하는 이미지에 대한 신호 처리를 수행하여, 이미지 내의 이물질과 관련된 오브젝트를 확인하고, 확인된 이물질과 관련된 오브젝트에 기초하여, 이물질에 대한 청소 실행 정보 또는 청소 회피 정보를 생성하고, 청소 실행 정보에 기초하여, 이물질 주변을 청소하거나, 청소 회피 정보에 기초하여, 이물질 주변을 청소하지 않을 수 있다. 이에 따라, 이물질에 대해 선택적으로 청소를 수행할 수 있게 된다.
이하의 도 6에서는 본 발명에 따른 로봇 청소 시스템(50)의 제어 방법이 설명된다.
도 6을 참조하면, 본 발명에 따른 로봇 청소 시스템(50)은 청소기(100)와 서버(500)를 포함할 수 있다.
아울러, 도 6에 도시된 실시예는 청소기(100)의 제어부(1800)가 위험상황과 관련된 정보를 분석할 수 있으며, 서버(500)로부터 상기 위험상황과 관련된 정보를 분석하는데 이용되는 트레이닝 데이터를 업데이트하기 위해, 트레이닝 데이터 업데이트 정보를 전송받을 수 있다.
참고로, 상기 트레이닝 데이터는 제어부(1800)가 위험상황을 분석하기 위한 학습엔진을 구동시킬 때, 상기 제어부(1800)에 의해 이용되는 데이터로 정의될 수 있다.
즉, 트레이닝 데이터는 과거 복수의 다른 청소기에서 위험상황이 발생되었을 때, 청소기(100)에 의해 수집된 데이터를 포함할 수 있다. 구체적으로 트레이닝 데이터는 청소영역에 대한 좌표정보, 장애물과 관련된 센싱 값, 본체 주변을 촬영한 영상을 포함할 수 있다.
즉, 도 6에 도시된 실시예는 청소기(100)가 위험상황을 분석하기 위한 학습엔진을 자체적으로 탑재할 수 있다.
구체적으로, 도 6을 참조하면, 청소기(100)의 제어부(1800)는 위험상황을 감지할 수 있다(S601).
구체적으로, 청소기(100)가 위험상황을 감지하는 다양한 실시예는 다음과 같이 설명된다.
일 실시예에서, 제어부(1800)는 센서(1400)의 감지결과에 근거하여, 청소기(100)의 주행 경로 상에 장애물이 존재하는 것으로 판단되면, 청소기(100)에 위험상황이 발생한 것으로 판단할 수 있다.
또 다른 실시예에서, 제어부(1800)는 센서(1400)의 감지결과에 근거하여, 구동부(1300)의 바퀴가 구속된 것으로 판단되면, 청소기(100)에 위험상황이 발생한 것으로 판단할 수 있다.
또 다른 실시예에서, 제어부(1800)는 센서(1400)의 감지결과에 근거하여, 구동부(1300)의 바퀴가 공회전하는 것으로 판단되면, 청소기(100)에 위험상황이 발생한 것으로 판단할 수 있다.
또 다른 실시예에서, 제어부(1800)는 센서(1400)의 감지결과에 근거하여, 청소기(100)의 본체의 일 지점이 청소영역의 바닥으로부터 소정의 거리 이상 이격된 것으로 판단되면, 청소기(100)에 위험상황이 발생한 것으로 판단할 수 있다.
또 다른 실시예에서, 제어부(1800)는 센서(1400)의 감지결과에 근거하여, 본체가 주행 경로를 이탈한 것으로 판단되면, 청소기(100)에 위험상황이 발생한 것으로 판단할 수 있다.
또 다른 실시예에서, 제어부(1800)는 센서(1400)의 감지결과에 근거하여, 본체가 소정의 시간 간격 이상, 특정 영역으로부터 탈출하지 못하는 것으로 판단되면, 청소기(100)에 위험상황이 발생한 것으로 판단할 수 있다. 즉, 제어부(1800)는 청소기(100)가 침대 밑이나 좁은 영역에 갖힌 것으로 판단되면, 청소기(100)에 위험상황이 발생한 것으로 판단할 수 있다.
또 다른 실시예에서, 제어부(1800)는, 본체가 움직이지 않는 상태에서 소정의 시간 간격으로 촬영되는 복수의 영상 사이에 유의미한 차이가 검출되는 경우, 청소기(100)에 위험상황이 발생한 것으로 판단할 수 있다. 여기에서, 제어부(1800)는 복수의 영상 중 제1 영상 및 제2 영상에 각각 포함되는 픽셀 값을 비교함으로써, 상기 복수의 영상 사이에 유의미한 차이가 존재하는지 여부를 판단할 수 있다.
또 다른 실시예에서, 제어부(1800)는 센서(1400)의 감지결과에 근거하여, 본체 주변에서 이상 음원이 발생하는 경우, 청소기(100)에 위험상황이 발생한 것으로 판단할 수 있다.
여기에서, 청소기(100)의 메모리(1700)는 이상 음원 및 비이상 음원을 포함하는 음원 데이터베이스를 저장할 수 있다.
예를 들어, 각종 물체들이 떨어지거나 부러지는 소리, 유리 따위 등이 깨지는 소리, 드릴 회전 소리, 개가 짖는 소리, 각종 센서를 가진 경보 장치 따위에 의해 발생하는 경보음 등과 같이 외부로부터의 침입자가 있는 상황임을 판단한 수 있는 각종 소음을 이상 음원으로 저장할 수 있고, 반대로 로봇 청소기(100) 내부에서 발생하는 소음, 냉장고, 세탁기, 정수기 등의 가전 제품에서 발생하는 소음 등과 같이 외부 침입 여부와 무관하게 발생할 수 있는 각종 소음을 비(非)이상 음원으로 저장할 수 있다.
이 경우, 제어부(1800)는 센서(1400)에 포함된 음향 획득 수단을 통해 획득된 음원이 음원 데이터베이스에 저장된 음원 중 적어도 하나와 유사한지 여부를 판단함으로써, 상기 획득된 음원이 이상 음원인지 또는 비이상 음원인지 여부를 판단할 수 있다. 즉, 제어부(1800)는 음향 획득 수단을 통해 획득한 음원과 음원 데이터베이스에 저장된 음원 간에 유사도 산출을 통해 양 음원의 일치 여부 및/또는 유사 정도를 판단할 수 있다.
제어부(1800)는 위와 같이 설명된 위험상황과 관련된 정보가 주기적으로 수집될 수 있도록, 센서(1400)를 제어할 수 있다.
도 6을 참조하면, 서버(500)는 트레이닝 데이터를 수집할 수 있다(S602).
구체적으로, 서버(500)는 복수의 다른 청소기로부터 청소기의 위험상황과 관련된 정보를 수집할 수 있으며, 수집된 정보를 트레이닝 데이터로 변환시킬 수 있다.
또한, 서버(500)는 서버 관리자에 의해 입력된 트레이닝 데이터를 이용하여, 기존에 서버(500)에 저장되어 있던 트레이닝 데이터를 업데이트시킬 수 있다.
도 6을 참조하면, 청소기(100) 주변에서 위험상황이 감지되면, 제어부(1800)는 메모리(1700)에 미리 저장된 트레이닝 데이터를 업데이트하기 위해, 트레이닝 데이터 업데이트 요청을 서버(500)로 전송하도록 통신부(1100)를 제어할 수 있다(S603).
일 실시예에서, 제어부(1800)는 위험상황이 감지될 때마다 트레이닝 데이터 업데이트 요청을 서버(500)로 전송시킬 수 있다.
또 다른 실시예에서, 제어부(1800)는 위험상황이 감지되면 위험상황과 관련된 정보를 분석하고, 분석결과에 근거하여, 트레이닝 데이터 업데이트 요청을 서버(500)로 전송시킬 수 있다.
보다 상세하게, 제어부(1800)는 카메라에 의해 촬영된 영상에 대응되는 피사체를 검출하기 어려운 경우, 트레이닝 데이터 업데이트 요청을 서버(500)로 전송시킬 수 있다.
마찬가지로, 제어부(1800)는 메모리(1700)에 미리 저장된 트레이닝 데이터에 포함된 음성 데이터 중 마이크에 의해 입력된 음성에 대응되는 음성 데이터를 검출하기 어려운 경우, 트레이닝 데이터 업데이트 요청을 서버(500)로 전송시킬 수 있다.
또한, 제어부(1800)는 위험상황과 관련된 정보를 분석한 결과, 트레이닝 데이터 업데이트 요청이 필요한 것으로 판단되면, 트레이닝 데이터 업데이트 요청에 위험상황과 관련된 정보의 종류를 나타내는 식별정보를 포함시킬 수 있다.
예를 들어, 제어부(1800)는 분석의 대상이 영상인 경우, 영상과 관련된 트레이닝 데이터 업데이트 요청을 서버(500)로 전송하도록 통신부(1100)를 제어할 수 있다.
이와 같이, 제어부(1800)는 위험상황과 관련된 정보의 종류를 검출하고, 검출된 종류와 관련된 트레이닝 데이터 업데이트 요청을 서버(500)로 전송시킴으로써, 서버(500)로부터 수신하는 트레이닝 데이터 업데이트 정보의 양을 최소화시킬 수 있다.
또 다른 실시예에서, 제어부(1800)는 트레이닝 데이터가 소정의 주기로 업데이트 되도록, 트레이닝 데이터 업데이트 요청을 서버(500)로 전송시킬 수 있다.
구체적으로, 제어부(1800)는 트레이닝 데이터의 최근 업데이트 시점으로부터 소정의 시간 간격이 경과하면, 트레이닝 데이터 업데이트 요청을 서버(500)로 전송하도록 통신부(1100)를 제어할 수 있다. 제어부(1800)는 위험상황이 감지되면 트레이닝 데이터의 최근 업데이트 시점을 확인할 수도 있고, 위험상황과 관계 없이 주기적으로 트레이닝 데이터의 최근 업데이트 시점을 확인할 수도 있다.
한편, 트레이닝 데이터 업데이트 요청은, 청소기(100)의 식별정보, 청소기(100)의 메모리(1700)에 저장된 트레이닝 데이터의 버전과 관련된 정보, 청소기(100)에 탑재된 학습엔진의 버전과 관련된 정보, 위험상황과 관련된 정보, 상기 위험상황과 관련된 정보의 종류를 나타내는 식별정보 및 상기 청소기(100)가 배치된 청소영역과 관련된 정보 중 적어도 하나를 포함할 수 있다.
도 6을 참조하면, 제어부(1800)는 서버(500)로부터 트레이닝 데이터 업데이트 정보를 전송받을 수 있다(S604).
아울러, 제어부(1800)는 서버(500)로부터 전송받은 트레이닝 데이터 업데이트 정보를 이용하여, 메모리(1700)에 미리 저장된 트레이닝 데이터를 업데이트시킬 수 있다(S605).
또한, 제어부(1800)는 업데이트된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 획득된 위험상황과 관련된 정보를 분석할 수 있다(S606).
일 실시예에서, 제어부(1800)는 업데이트된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 촬영된 영상의 피사체와 관련된 정보를 식별할 수 있다.
또 다른 실시예에서, 제어부(1800)는 업데이트된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 검출된 장애물의 종류와 관련된 정보를 식별할 수 있다.
또 다른 실시예에서, 제어부(1800)는 업데이트된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 촬영된 복수의 영상 사이에 발생된 차이 부분과 관련된 정보를 식별할 수 있다.
또 다른 실시예에서, 제어부(1800)는 업데이트된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 발생된 음원과 관련된 정보를 식별할 수 있다.
도 6을 참조하면, 제어부(1800)는 위험상황과 관련된 정보에 대한 분석결과에 근거하여, 상기 위험상황에 대응되는 운전모드를 설정할 수 있다(S607).
아울러, 제어부(1800)는 설정된 운전모드에 따라 구동부(1300)를 제어할 수 있다(S608).
일 실시예에서, 제어부(1800)는 분석결과에 근거하여, 청소기의 주행경로 상에 장애물이 존재하는 것으로 판단되면, 장애물을 회피하기 위한 제1 운전모드를 설정할 수 있다.
즉, 제어부(1800)는 위험상황이 감지된 때 검출된 장애물을 회피하기 위한 제1 운전모드를 설정할 수 있다. 제어부(1800)는 설정된 제1 운전모드에 따라, 검출된 장애물을 회피하도록 구동부(1300)를 제어할 수 있다.
또 다른 실시예에서, 제어부(1800)는 분석결과에 근거하여, 청소기(100)의 청소영역에, 상기 청소기의 구동을 방해하는 물체 또는 생명체가 존재하는 것으로 판단되면, 청소기(100)의 동작을 정지시키기 위한 제2 운전모드를 설정할 수 있다.
즉, 제어부(1800)는 위험상황이 감지된 때 촬영된 영상의 피사체와 관련된 정보에 근거하여, 청소기(100)의 동작을 일시적으로 정지시키기 위한 제2 운전모드를 설정할 수 있다.
구체적으로, 제어부(1800)는 메모리(1700)에 저장된 트레이닝 데이터에 근거하여, 상기 촬영된 영상의 피사체가 청소기(100)의 구동을 방해하는 것으로 판단되면, 상기 제2 운전모드를 설정할 수 있다.
제어부(1800)는 설정된 제2 운전모드에 따라, 청소 또는 주행을 일시적으로 중지시키도록 구동부(1300)를 제어할 수 있다. 또한, 제어부(1800)는 제2 운전모드 실행 중인 경우, 청소기(100)가 존재하는 청소영역을 촬영한 영상을 상기 청소기(100)에 미리 등록된 이동 단말기로 전송할 수 있다.
또 다른 실시예에서, 제어부(1800)는 위험상황이 감지된 때 촬영된 복수의 영상 사이에 발생된 차이 부분과 관련된 정보에 근거하여, 청소기(100)의 사용자에게 청소기(100)가 존재하는 청소영역에 대한 모니터링 정보를 제공하기 위한 제3 운전모드를 설정할 수 있다.
즉, 제어부(1800)는 트레이닝 데이터에 근거하여, 상기 복수의 영상 사이에 발생된 차이 부분에 대응되는 물체 또는 생명체가 상기 청소영역의 보안을 위협하는 존재로 판단되면, 상기 제3 운전모드를 설정할 수 있다.
제어부(1800)는 설정된 제3 운전모드에 따라, 청소 또는 주행을 일시적으로 중지시키도록 구동부(1300)를 제어할 수 있다. 또한, 제어부(1800)는 제3 운전모드 실행 중인 경우, 청소기(100)가 존재하는 청소영역을 촬영한 영상을 상기 청소기(100)에 미리 등록된 이동 단말기로 전송할 수 있다.
또 다른 실시예에서, 제어부(1800)는 위험상황이 감지된 때 발생된 음원과 관련된 정보에 근거하여, 상기 제3 운전모드를 설정할 수 있다.
즉, 제어부(1800)는 트레이닝 데이터에 근거하여, 상기 음원이 청소기(100)가 존재하는 청소영역의 보안을 위협하는 존재로 판단되면, 상기 제3 운전모드를 설정할 수 있다.
이하의 도 7에서는 본 발명에 따른 로봇 청소 시스템(50)의 제어 방법이 설명된다.
도 7을 참조하면, 본 발명에 따른 로봇 청소 시스템(50)은 청소기(100)와 서버(500)를 포함할 수 있다.
아울러, 도 7에 도시된 실시예는 서버(500)의 제어모듈(미도시)이 청소기(100)가 서버(500)로 전송한 위험상황과 관련된 정보를 분석할 수 있으며, 서버(500)의 통신모듈(미도시)은 분석결과를 청소기(100)로 전송할 수 있다.
즉, 도 7에 도시된 실시예는 청소기(100)가 직접 위험상황을 분석하지 않고, 서버(500)로부터 위험상황과 관련된 분석결과를 전송받을 수 있다. 이때, 서버(500)는 위험상황을 분석하기 위한 학습엔진을 탑재할 수 있고, 네트워크를 통해 연결된 복수의 청소기들로부터 다양한 위험상황과 관련된 정보를 수집함으로써, 상기 학습엔진을 계속적으로 업데이트할 수 있다.
구체적으로, 도 7을 참조하면, 청소기(100)의 제어부(1800)는 위험상황을 감지할 수 있다(S701). 위험상황은 도 6에서 정의된 바와 같다.
청소기(100)의 제어부(1800)는 위험상황이 감지되면, 위험상황과 관련된 정보를 서버(500)로 전송할 수 있다(S702).
여기에서, 위험상황과 관련된 정보는 제어부(1800)가 위험상황을 감지하는 때 센서(1400)에 의해 획득된 정보를 포함할 수 있다. 즉, 위험상황과 관련된 정보는 제어부(1800)가 위험상황을 감지하도록 유발하는, 센서(1400)에 의해 수집된 정보를 포함할 수 있다.
다음으로, 서버(500)의 제어모듈은 청소기(100)로부터 수신된 위험상황과 관련된 정보를 이용하여, 서버(500)의 메모리(미도시)에 미리 저장된 트레이닝 데이터를 업데이트 시킬 수 있다(S703).
아울러, 서버(500)의 제어모듈은 업데이트된 트레이닝 데이터를 이용하여, 수신된 위험상황과 관련된 정보를 분석할 수 있다(S704).
일 실시예에서, 위험상황과 관련된 정보는 청소기(100)의 카메라에 의해 촬영된 영상을 포함할 수 있다. 이때, 서버(500)의 제어모듈은 업데이트된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 청소기(100)에 의해 촬영된 영상의 피사체와 관련된 정보를 식별할 수 있다.
또 다른 실시예에서, 위험상황과 관련된 정보는 청소기(100) 주변에 존재하는 장애물과 관련된 정보를 포함할 수 있다. 이때, 서버(500)의 제어모듈은 업데이트된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 검출된 장애물의 종류와 관련된 정보를 식별할 수 있다.
또 다른 실시예에서, 위험상황과 관련된 정보는 위험상황이 감지된 때, 청소기(100)의 카메라에 의해 촬영된 복수의 영상을 포함할 수 있다. 이때, 서버(500)의 제어모듈은 업데이트된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 촬영된 복수의 영상 사이에 발생된 차이 부분과 관련된 정보를 식별할 수 있다.
또 다른 실시예에서, 위험상황과 관련된 정보는 청소기(100)의 마이크에 의해 획득된 음원을 포함할 수 있다. 이때, 서버(500)의 제어모듈은 업데이트된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 발생된 음원과 관련된 정보를 식별할 수 있다.
서버(500)의 통신모듈은 상기 제어모듈에 의해 수행된 분석결과를 청소기(100)로 전송할 수 있다(S705).
청소기(100)의 제어부(1800)는 수신된 분석결과에 근거하여, 감지된 위험상황에 대응되는 운전모드를 설정할 수 있다(S706).
아울러, 제어부(1800)는 설정된 운전모드에 근거하여, 구동부(1300)를 제어할 수 있다(S707).
일 실시예에서, 제어부(1800)는 위험상황이 감지된 때 검출된 장애물을 회피하기 위한 제1 운전모드를 설정할 수 있다. 제어부(1800)는 설정된 제1 운전모드에 따라, 검출된 장애물을 회피하도록 구동부(1300)를 제어할 수 있다.
또 다른 실시예에서, 제어부(1800)는 위험상황이 감지된 때 촬영된 영상의 피사체와 관련된 정보에 근거하여, 청소기(100)의 동작을 일시적으로 정지시키기 위한 제2 운전모드를 설정할 수 있다.
즉, 제어부(1800)는 서버(500)로부터 제공된 분석결과를 이용하여, 분석된 영상에 대응되는 피사체가 청소기(100)의 구동을 방해하는 것으로 판단되면, 상기 제2 운전모드를 설정할 수 있다.
제어부(1800)는 설정된 제2 운전모드에 따라, 청소 또는 주행을 일시적으로 중지시키도록 구동부(1300)를 제어할 수 있다. 또한, 제어부(1800)는 제2 운전모드 실행 중인 경우, 청소기(100)가 존재하는 청소영역을 촬영한 영상을 상기 청소기(100)에 미리 등록된 이동 단말기로 전송할 수 있다.
또 다른 실시예에서, 제어부(1800)는 위험상황이 감지된 때 촬영된 복수의 영상 사이에 발생된 차이 부분과 관련된 정보에 근거하여, 청소기(100)의 사용자에게 청소기(100)가 존재하는 청소영역에 대한 모니터링 정보를 제공하기 위한 제3 운전모드를 설정할 수 있다.
즉, 제어부(1800)는 서버(500)로부터 제공된 분석결과를 이용하여, 상기 차이 부분에 대응되는 물체 또는 생명체가 상기 청소영역의 보안을 위협하는 존재로 판단되면, 상기 제3 운전모드를 설정할 수 있다.
제어부(1800)는 설정된 제3 운전모드에 따라, 청소 또는 주행을 일시적으로 중지시키도록 구동부(1300)를 제어할 수 있다. 또한, 제어부(1800)는 제3 운전모드 실행 중인 경우, 청소기(100)가 존재하는 청소영역을 촬영한 영상을 상기 청소기(100)에 미리 등록된 이동 단말기로 전송할 수 있다.
또 다른 실시예에서, 제어부(1800)는 위험상황이 감지된 때 발생된 음원과 관련된 정보에 근거하여, 상기 제3 운전모드를 설정할 수 있다.
즉, 제어부(1800)는 서버(500)로부터 제공된 분석결과를 이용하여, 상기 음원이 청소기(100)가 존재하는 청소영역의 보안을 위협하는 존재로 판단되면, 상기 제3 운전모드를 설정할 수 있다.
한편, 제어부(1800)는 위와 같이 설정된 운전모드의 실행이 완료되면, 청소기(100)의 본체 주변에 존재하는 물체와 관련된 정보를 획득하도록 센서(1400)를 제어할 수 있다(S708).
구체적으로, 제어부(1800)는 제1 내지 제3 운전모드의 실행이 완료되면, 청소기(100)의 본체로부터 소정의 거리 내에 존재하는 물체와 관련된 정보를 획득하도록 센서(1400)를 제어할 수 있다.
예를 들어, 상기 본체로부터 소정의 거리 내에 존재하는 물체와 관련된 정보는, 청소기(100)의 카메라, 적외선 센서, 초음파 센서, 마이크 및 RF 센서 중 적어도 하나에 의해 획득될 수 있다.
즉, 상기 본체로부터 소정의 거리 내에 존재하는 물체와 관련된 정보는, 카메라에 의해 촬영된 영상 정보, 마이크에 의해 획득된 음성 정보 및 청소기(100)의 초음파 센서에 의해 획득된 초음파 정보 중 적어도 하나를 포함할 수 있다.
또한, 제어부(1800)는 설정된 운전모드의 실행이 완료된 후 획득된 본체 주변에 존재하는 물체와 관련된 정보를 서버(500)로 전송할 수 있다(S709).
서버(500)의 제어모듈은 분석결과 전송 단계(S706) 수행 후, 청소기(100)로부터 수신된 본체 주변에 존재하는 물체와 관련된 정보를 이용하여, 상기 분석결과의 정확도를 판단할 수 있다(S710).
구체적으로, 서버(500)의 제어모듈은, 청소기(100)가 위험상황을 감지한 후 전송한 위험상황과 관련된 정보와, 청소기(100)가 설정된 운전모드의 실행이 완료된 후 청소기(100)의 본체 주변에 존재하는 물체와 관련된 정보를 비교하여, 상기 위험상황의 해소 여부를 판단할 수 있다.
서버(500)의 제어모듈은 위험상황의 해소 여부에 대해 판단한 결과에 근거하여, 분석결과의 정확도를 판단할 수 있다.
일 예에서, 제어모듈은 정확도가 기 설정된 수준 이하로 판단되는 경우, 서버(500)의 트레이닝 데이터 중 상기 업데이트 단계(S703)에서 업데이트된 일부를 삭제할 수 있다.
또 다른 예에서, 제어모듈은 판단된 정확도를 이용하여, 트레이닝 데이터의 우선 순위를 설정할 수 있다.
이하 도 8에서는 본 발명에 따른 로봇 청소 시스템(50)의 제어 방법이 설명된다.
도 8을 참조하면, 본 발명에 따른 로봇 청소 시스템(50)은 청소기(100)와 서버(500)를 포함할 수 있다.
아울러, 도 8에 도시된 실시예는 도 7에 도시된 실시예와 같이, 서버(500)의 제어모듈이 청소기(100)가 서버(500)로 전송한 위험상황과 관련된 정보를 분석할 수 있으며, 서버(500)의 통신모듈은 분석결과를 청소기(100)로 전송할 수 있다.
구체적으로, 도 8을 참조하면, 청소기(100)의 제어부(1800)는 위험상황을 감지할 수 있다(S801). 위험상황은 도 6에서 정의된 바와 같다.
청소기(100)의 제어부(1800)는 위험상황이 감지되면, 위험상황과 관련된 정보를 서버(500)로 전송할 수 있다(S802).
참고로, 상기 위험상황과 관련된 정보를 서버(500)로 전송하는 단계(S802)는, 도 7에 도시된 위험상황과 관련된 정보를 서버(500)로 전송하는 단계(S702)와 대응된다.
다음으로, 서버(500)의 제어모듈은 서버(500)의 메모리에 미리 저장된 트레이닝 데이터를 이용하여, 청소기(100)로부터 수신된 위험상황과 관련된 정보를 분석할 수 있다(S803).
일 실시예에서, 위험상황과 관련된 정보는 청소기(100)의 카메라에 의해 촬영된 영상을 포함할 수 있다. 이때, 서버(500)의 제어모듈은 서버(500)에 미리 저장된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 청소기(100)에 의해 촬영된 영상의 피사체와 관련된 정보를 식별할 수 있다.
또 다른 실시예에서, 위험상황과 관련된 정보는 청소기(100) 주변에 존재하는 장애물과 관련된 정보를 포함할 수 있다. 이때, 서버(500)의 제어모듈은 미리 저장된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 검출된 장애물의 종류와 관련된 정보를 식별할 수 있다.
또 다른 실시예에서, 위험상황과 관련된 정보는 위험상황이 감지된 때, 청소기(100)의 카메라에 의해 촬영된 복수의 영상을 포함할 수 있다. 이때, 서버(500)의 제어모듈은 미리 저장된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 촬영된 복수의 영상 사이에 발생된 차이 부분과 관련된 정보를 식별할 수 있다.
또 다른 실시예에서, 위험상황과 관련된 정보는 청소기(100)의 마이크에 의해 획득된 음원을 포함할 수 있다. 이때, 서버(500)의 제어모듈은 미리 저장된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 발생된 음원과 관련된 정보를 식별할 수 있다.
서버(500)의 통신모듈은 상기 제어모듈에 의해 수행된 분석결과를 청소기(100)로 전송할 수 있다(S804).
청소기(100)의 제어부(1800)는 수신된 분석결과에 근거하여, 감지된 위험상황에 대응되는 운전모드를 설정할 수 있다(S805).
아울러, 제어부(1800)는 설정된 운전모드에 근거하여, 구동부(1300)를 제어할 수 있다(S806).
청소기(100)에 의해 수행되는 상기 S805 및 S806 단계는 각각 도 7에 도시된 S706 및 S707 단계와 대응된다.
제어부(1800)는 위와 같이 설정된 운전모드의 실행이 완료되면, 청소기(100)의 본체 주변에 존재하는 물체와 관련된 정보를 획득하도록 센서(1400)를 제어할 수 있다(S807).
구체적으로, 제어부(1800)는 제1 내지 제3 운전모드의 실행이 완료되면, 청소기(100)의 본체로부터 소정의 거리 내에 존재하는 물체와 관련된 정보를 획득하도록 센서(1400)를 제어할 수 있다.
예를 들어, 상기 본체로부터 소정의 거리 내에 존재하는 물체와 관련된 정보는, 청소기(100)의 카메라, 적외선 센서, 초음파 센서, 마이크 및 RF 센서 중 적어도 하나에 의해 획득될 수 있다.
즉, 상기 본체로부터 소정의 거리 내에 존재하는 물체와 관련된 정보는, 카메라에 의해 촬영된 영상 정보, 마이크에 의해 획득된 음성 정보 및 청소기(100)의 초음파 센서에 의해 획득된 초음파 정보 중 적어도 하나를 포함할 수 있다.
한편, 서버(500)의 제어모듈은 분석결과를 전송하는 단계(S804)를 수행한 후, 분석결과에 근거하여, 청소기(100)로부터 수신된 위험상황과 관련된 정보를 분류할 수 있다(S808).
구체적으로, 서버(500)의 제어모듈은 청소기(100)로부터 수신된 위험상황과 관련된 정보의 라벨(Label) 정보를 설정할 수 있다.
또한, 서버(500)의 제어모듈은 분류결과에 근거하여, 미리 저장된 트레이닝 데이터를 업데이트할 수 있다(S809).
구체적으로, 서버(500의 제어모듈은 설정된 라벨이 미리 저장된 트레이닝 데이터에 이미 존재하면, 해당 라벨의 데이터 그룹에 청소기(100)로부터 수신된 위험상황과 관련된 정보를 추가할 수 있다. 또한, 제어모듈은 위와 같이 설정된 라벨이 미리 저장된 트레이닝 데이터에 존재하지 않으면, 트레이닝 데이터 내에서 설정된 라벨에 대응되는 데이터 그룹을 새로이 생성할 수 있다.
도 8을 참조하면, 제어부(1800)는 설정된 운전모드의 실행이 완료된 후 획득된 본체 주변에 존재하는 물체와 관련된 정보를 서버(500)로 전송할 수 있다(S810).
서버(500)의 제어모듈은 분석결과 전송 단계(S810) 수행 후, 청소기(100)로부터 수신된 본체 주변에 존재하는 물체와 관련된 정보를 이용하여, 상기 분석결과의 정확도를 판단할 수 있다(S811).
도 8의 상기 정확도를 판단하는 단계(S811)는, 도 7에 도시된 정확도를 판단하는 단계(S710)와 대응된다.
이하의 도 9에서는 본 발명에 따른 로봇 청소 시스템(50)의 제어 방법이 설명된다.
도 9를 참조하면, 본 발명에 따른 로봇 청소 시스템(50)은 청소기(100)와 서버(500)를 포함할 수 있다.
아울러, 도 9에 도시된 실시예는 청소기(100)의 제어부(1800)가 위험상황과 관련된 정보를 분석할 수 있으며, 서버(500)로부터 상기 위험상황과 관련된 정보를 분석하는데 이용되는 트레이닝 데이터를 업데이트하기 위해, 트레이닝 데이터 업데이트 정보를 전송받을 수 있다.
즉, 도 9에 도시된 실시예는 도 6에 도시된 실시예와 같이, 청소기(100)가 위험상황을 분석하기 위한 학습엔진을 자체적으로 탑재할 수 있다.
구체적으로, 도 9를 참조하면, 청소기(100)의 제어부(1800)는 위험상황을 감지할 수 있다(S901). 여기에서 위험상황은 도 6에서 정의된 바와 같다.
도 9를 참조하면, 청소기(100) 주변에서 위험상황이 감지되면, 제어부(1800)는 위험상황을 분석하기 위해 청소기(100)에 미리 탑재된 분석 알고리즘을 업데이트하기 위해, 분석 알고리즘 업데이트 요청을 서버(500)로 전송하도록 통신부(1100)를 제어할 수 있다(S902).
일 실시예에서, 제어부(1800)는 위험상황이 감지될 때마다 분석 알고리즘 업데이트 요청을 서버(500)로 전송시킬 수 있다.
또 다른 실시예에서, 제어부(1800)는 위험상황이 감지되면 위험상황과 관련된 정보를 분석하고, 분석결과에 근거하여, 분석 알고리즘 업데이트 요청을 서버(500)로 전송시킬 수 있다.
보다 상세하게, 제어부(1800)는 카메라에 의해 촬영된 영상에 대응되는 피사체를 검출하기 어려운 경우, 분석 알고리즘 업데이트 요청을 서버(500)로 전송시킬 수 있다.
마찬가지로, 제어부(1800)는 메모리(1700)에 미리 저장된 트레이닝 데이터에 포함된 음성 데이터 중 마이크에 의해 입력된 음성에 대응되는 음성 데이터를 검출하기 어려운 경우, 분석 알고리즘 업데이트 요청을 서버(500)로 전송시킬 수 있다.
또한, 제어부(1800)는 위험상황과 관련된 정보를 분석한 결과, 분석 알고리즘 업데이트 요청이 필요한 것으로 판단되면, 분석 알고리즘 업데이트 요청에 위험상황과 관련된 정보의 종류를 나타내는 식별정보를 포함시킬 수 있다.
예를 들어, 제어부(1800)는 분석의 대상이 영상인 경우, 영상과 관련된 분석 알고리즘 업데이트 요청을 서버(500)로 전송하도록 통신부(1100)를 제어할 수 있다.
이와 같이, 제어부(1800)는 위험상황과 관련된 정보의 종류를 검출하고, 검출된 종류와 관련된 분석 알고리즘 업데이트 요청을 서버(500)로 전송시킴으로써, 서버(500)로부터 수신하는 분석 알고리즘 업데이트 정보의 양을 최소화시킬 수 있다.
또 다른 실시예에서, 제어부(1800)는 분석 알고리즘이 소정의 주기로 업데이트 되도록, 분석 알고리즘 업데이트 요청을 서버(500)로 전송시킬 수 있다.
구체적으로, 제어부(1800)는 분석 알고리즘의 최근 업데이트 시점으로부터 소정의 시간 간격이 경과하면, 분석 알고리즘 업데이트 요청을 서버(500)로 전송하도록 통신부(1100)를 제어할 수 있다. 제어부(1800)는 위험상황이 감지되면 분석 알고리즘의 최근 업데이트 시점을 확인할 수도 있고, 위험상황과 관계 없이 주기적으로 분석 알고리즘의 최근 업데이트 시점을 확인할 수도 있다.
한편, 분석 알고리즘 업데이트 요청은, 청소기(100)의 식별정보, 청소기(100)의 메모리(1700)에 저장된 분석 알고리즘의 버전과 관련된 정보, 위험상황과 관련된 정보, 상기 위험상황과 관련된 정보의 종류를 나타내는 식별정보 및 상기 청소기(100)가 배치된 청소영역과 관련된 정보 중 적어도 하나를 포함할 수 있다.
도 9를 참조하면, 서버(500)의 제어모듈은 청소기(100)로부터 수신된 분석 알고리즘 업데이트 요청에 근거하여, 청소기(100)에 탑재된 분석 알고리즘의 버전을 확인할 수 있다(S903).
서버(500)는 확인된 버전에 근거하여, 청소기(100)로 분석 알고리즘 업데이트 정보를 전송할 수 있다(S904).
아울러, 제어부(1800)는 서버(500)로부터 전송받은 분석 알고리즘 업데이트 정보를 이용하여, 메모리(1700)에 미리 저장된 분석 알고리즘을 업데이트시킬 수 있다(S905).
또한, 제어부(1800)는 업데이트된 분석 알고리즘을 이용하여, 위험상황이 감지된 때 획득된 위험상황과 관련된 정보를 분석할 수 있다(S906).
일 실시예에서, 제어부(1800)는 업데이트된 분석 알고리즘을 이용하여, 위험상황이 감지된 때 촬영된 영상의 피사체와 관련된 정보를 식별할 수 있다.
또 다른 실시예에서, 제어부(1800)는 업데이트된 분석 알고리즘을 이용하여, 위험상황이 감지된 때 검출된 장애물의 종류와 관련된 정보를 식별할 수 있다.
또 다른 실시예에서, 제어부(1800)는 업데이트된 분석 알고리즘을 이용하여, 위험상황이 감지된 때 촬영된 복수의 영상 사이에 발생된 차이 부분과 관련된 정보를 식별할 수 있다.
또 다른 실시예에서, 제어부(1800)는 업데이트된 분석 알고리즘을 이용하여, 위험상황이 감지된 때 발생된 음원과 관련된 정보를 식별할 수 있다.
도 9를 참조하면, 제어부(1800)는 위험상황과 관련된 정보에 대한 분석결과에 근거하여, 상기 위험상황에 대응되는 운전모드를 설정할 수 있다(S907).
아울러, 제어부(1800)는 설정된 운전모드에 따라 구동부(1300)를 제어할 수 있다(S908).
이하의 도 10에서는 본 발명에 따른 로봇 청소 시스템(50)의 제어 방법이 설명된다.
도 10을 참조하면, 본 발명에 따른 로봇 청소 시스템(50)은 청소기(100)와 이동 단말기(200) 및 서버(500)를 포함할 수 있다.
아울러, 도 10에 도시된 실시예는 도 7에 도시된 실시예와 같이, 서버(500)의 제어모듈이 청소기(100)가 서버(500)로 전송한 위험상황과 관련된 정보를 분석할 수 있으며, 서버(500)의 통신모듈은 분석결과를 청소기(100)로 전송할 수 있다.
이동 단말기(200)는 무선 통신부, 입력부, 센서, 터치 스크린을 구비한 디스플레이, 메모리, 인터페이스부, 제어부 및 전원 공급부를 포함할 수 있다.
이동 단말기(200)의 구성요소는 공지된 기술이므로, 이에 대한 상세한 설명은 생략하도록 한다.
구체적으로, 도 10을 참조하면, 이동 단말기(200)는 청소기(100)로 모니터링 요청을 전송할 수 있다(S1001).
또한, 청소기(100)의 제어부(1800)는 모니터링 요청에 대응하여, 이동 단말기(200)로 모니터링 정보를 전송하도록 통신부(1100)를 제어할 수 있다(S1002).
예를 들어, 모니터링 정보는 청소기(100)의 카메라에 의해 촬영된 영상이나, 청소기(100)의 마이크에 의해 획득된 음성을 포함할 수 있다.
이동 단말기(200)의 디스플레이(미도시)는 청소기(100)로부터 수신된 모니터링 정보를 출력할 수 있다(S1003).
이동 단말기(200)의 입력부(미도시)는 디스플레이에 모니터링 정보가 출력된 상태에서, 위험상황과 관련된 사용자 입력을 수신할 수 있다(S1004).
구체적으로, 이동 단말기(200)의 디스플레이는 모니터링 정보와 함께, 위험상황과 관련된 사용자 입력을 수신하도록 소정의 아이콘을 출력할 수 있다.
또한, 이동 단말기(200)의 제어부는 디스플레이에 인가되는 사용자 입력에 근거하여, 모니터링 정보 중 일부를 위험상황과 관련된 정보로 결정할 수 있다.
즉, 이동 단말기(200)의 사용자는 디스플레이에 모니터링 정보가 출력된 상태에서, 청소기(100) 주변에서 위험상황이 발생한 것으로 판단되면, 상기 소정의 아이콘에 터치 입력을 인가하거나, 모니터링 정보 중 일부를 선택함으로써, 청소기(100)가 위험상황에 대처하도록 서버(500)에 요청할 수 있다.
도 10을 참조하면, 이동 단말기(200)에 위험상황과 관련된 사용자 입력이 인가되면, 이동 단말기(200)의 제어부는 상기 사용자 입력에 근거하여, 위험상황과 관련된 정보를 서버(500)로 전송할 수 있다(S1005).
다음으로, 서버(500)의 제어모듈은 이동 단말기(200)로부터 수신된 위험상황과 관련된 정보를 이용하여, 서버(500)의 메모리에 미리 저장된 트레이닝 데이터를 업데이트 시킬 수 있다(S1006).
아울러, 서버(500)의 제어모듈은 업데이트된 트레이닝 데이터를 이용하여, 수신된 위험상황과 관련된 정보를 분석할 수 있다(S1007).
일 실시예에서, 위험상황과 관련된 정보는 사용자 입력이 인가된 시점에 이동 단말기(200)의 디스플레이에 출력되는 모니터링 정보를 포함할 수 있다. 즉, 이동 단말기(200)의 디스플레이가 실시간으로 모니터링 정보를 출력하는 경우, 위험상황과 관련된 정보는 사용자 입력이 인가된 시점에 디스플레이의 화면을 캡쳐한 영상을 포함할 수 있다.
또 다른 실시예에서, 위험상황과 관련된 정보는 모니터링 정보 중 사용자 입력에 근거하여 선택된 일부분을 포함할 수도 있다. 즉, 사용자는 이동 단말기(200)에 사용자 입력을 인가함으로써, 모니터링 정보 중 위험상황이라고 인식되는 부분을 위험상황과 관련된 정보로 특정할 수 있다.
서버(500)의 통신모듈은 상기 제어모듈에 의해 수행된 분석결과를 청소기(100)로 전송할 수 있다(S1008).
청소기(100)의 제어부(1800)는 수신된 분석결과에 근거하여, 감지된 위험상황에 대응되는 운전모드를 설정할 수 있다(S1009).
아울러, 제어부(1800)는 설정된 운전모드에 근거하여, 구동부(1300)를 제어할 수 있다(S1010).
일 실시예에서, 제어부(1800)는 수신된 분석결과에 근거하여, 청소기(100)의 주행 경로 상에 장애물이 존재하는 것으로 판단되면, 장애물을 회피하기 위한 제1 운전모드를 설정할 수 있다. 제어부(1800)는 설정된 제1 운전모드에 따라, 검출된 장애물을 회피하도록 구동부(1300)를 제어할 수 있다.
또 다른 실시예에서, 제어부(1800)는 서버(500)로부터 제공된 분석결과를 이용하여, 사용자에 의해 위험상황과 관련된 정보로 특정된 모니터링 정보에 대응되는 피사체가 청소기(100)의 구동을 방해하는 것으로 판단되면, 상기 제2 운전모드를 설정할 수 있다.
제어부(1800)는 설정된 제2 운전모드에 따라, 청소 또는 주행을 일시적으로 중지시키도록 구동부(1300)를 제어할 수 있다.
또 다른 실시예에서, 제어부(1800)는 서버(500)로부터 제공된 분석결과를 이용하여, 청소기(100)가 존재하는 청소영역에 상기 청소영역의 보안을 위협하는 물체 또는 생명체가 존재하는 것으로 판단되면, 이동 단말기(200)에 제공하는 모니터링 정보의 양을 증가시킬 수 있다.
구체적으로, 제어부(1800)는 이동 단말기(200)에 전송하는 주기를 감소시키거나, 카메라의 촬영주기를 감소시키거나, 카메라의 촬영각을 증가시킬 수 있다.
도 10을 참조하면, 제어부(1800)는 설정된 운전모드의 실행이 완료되면, 청소기(100)의 본체 주변에 존재하는 물체와 관련된 정보를 획득하도록 센서(1400)를 제어할 수 있다(S1011).
구체적으로, 제어부(1800)는 제1 내지 제3 운전모드의 실행이 완료되면, 청소기(100)의 본체로부터 소정의 거리 내에 존재하는 물체와 관련된 정보를 획득하도록 센서(1400)를 제어할 수 있다.
예를 들어, 상기 본체로부터 소정의 거리 내에 존재하는 물체와 관련된 정보는, 청소기(100)의 카메라, 적외선 센서, 초음파 센서, 마이크 및 RF 센서 중 적어도 하나에 의해 획득될 수 있다.
즉, 상기 본체로부터 소정의 거리 내에 존재하는 물체와 관련된 정보는, 카메라에 의해 촬영된 영상 정보, 마이크에 의해 획득된 음성 정보 및 청소기(100)의 초음파 센서에 의해 획득된 초음파 정보 중 적어도 하나를 포함할 수 있다.
또한, 제어부(1800)는 설정된 운전모드의 실행이 완료된 후 모니터링 정보를 재전송 할 수 있다(S1012).
이때, 재전송되는 모니터링 정보는 설정된 운전모드의 실행이 완료된 후에 획득된 본체 주변에 존재하는 물체와 관련된 정보를 포함할 수 있다.
아울러, 이동 단말기(200)의 입력부는 위험상황 해소 여부와 관련된 사용자 입력을 수신할 수 있다(S1013).
구체적으로, 이동 단말기(200)의 디스플레이는 청소기(100)로부터 재전송된 모니터링 정보와 함께, 위험상황 해소 여부를 확인하기 위한 버튼을 출력할 수 있다. 예를 들어, 상기 위험상황 해소 여부를 확인하기 위한 버튼은 위험상황이 해소되었음을 나타내는 제1 아이콘과, 위험상황이 해소되지 않았음을 나타내는 제2 아이콘을 포함할 수 있다.
이동 단말기(200)의 제어부는 상기 위험상황 해소 여부를 확인하기 위한 버튼에 사용자 입력이 수신되면, 수신된 사용자 입력과 관련된 정보를 서버(500)로 전송하도록 이동 단말기(200)의 통신부를 제어할 수 있다.
아울러, 서버(500)의 제어모듈은 수신된 사용자 입력에 근거하여, 분석결과의 정확도를 판단할 수 있다(S1015).
본 발명에 따르면, 로봇 청소기가 제작 또는 설계 시의 성능에 제한되지 않고, 본체 주변에 존재하는 장애물을 인식할 수 있는 효과가 도출된다.
또한, 본 발명에 따르면, 로봇 청소기가 머신 러닝을 이용하여 본체 주변에서 발생되는 위험상황에 대해 적절한 대응 운전을 수행할 수 있으므로, 로봇 청소기의 운전 성능이 향상된다.
또한, 본 발명에 따르면, 로봇 청소기의 제어부가 머신 러닝을 수행하기에 충분하지 않은 성능을 보유한 경우에도, 로봇 청소기와 통신을 수행하는 서버에 의해, 머신 러닝을 이용한 장애물 인식 결과를 획득할 수 있다. 즉, 로봇 청소기의 제작 비용을 증가시키지 않으면서, 로봇 청소기의 장애물 인식 성능을 향상시킬 수 있다.
또한, 본 발명에 따르면, 로봇 청소기의 사용 사례와 관련된 데이터가 축적됨에 따라, 로봇 청소기가 본체 주변에서 발생되는 위험상황의 실체를 정확하게 판단할 수 있는 효과가 도출된다. 즉, 본 발명에 따르면 로봇 청소기의 장애물 인식 성능을 향상시킬 수 있다.

Claims (20)

  1. 본체;
    상기 본체를 이동시키는 구동부;
    상기 본체가 위치하는 환경과 관련된 정보를 감지하는 센서;
    이동 단말기 및 서버 중 적어도 하나와 정보를 수신하거나 송신하는 통신부;
    상기 센서에서 감지된 정보의 분석을 위한 트레이닝 데이터를 저장하는 메모리; 및
    상기 센서에서 감지된 정보에 근거하여, 상기 본체가 위험상황에 진입했는지 여부를 판단하고,
    상기 본체가 위험상황에 진입한 것으로 판단되면, 상기 메모리에 저장된 트레이닝 데이터와 분석 알고리즘을 이용하여 위험상황과 관련된 정보를 분석하며,
    분석결과에 근거하여 상기 위험상황에 대응되는 운전모드를 설정하는 제어부를 포함하고,
    상기 제어부는,
    상기 본체가 위험상황에 진입한 것으로 판단되면, 상기 트레이닝 데이터를 업데이트하기 위해, 트레이닝 데이터 업데이트 요청을 상기 서버로 전송하도록 통신부를 제어하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  2. 삭제
  3. 제1항에 있어서,
    상기 제어부는,
    상기 트레이닝 데이터 업데이트 요청에 대응하여, 상기 서버로부터 수신된 트레이닝 데이터 업데이트 정보를 이용하여, 상기 트레이닝 데이터를 업데이트하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  4. 제3항에 있어서,
    상기 제어부는,
    업데이트된 트레이닝 데이터를 이용하여, 위험상황과 관련된 정보를 분석하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  5. 제4항에 있어서,
    상기 제어부는,
    업데이트된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 촬영된 영상의 피사체와 관련된 정보를 식별하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  6. 제4항에 있어서,
    상기 제어부는,
    업데이트된 트레이닝 데이터를 이용하여, 위험상황이 감지된 때 검출된 장애물의 종류와 관련된 정보를 식별하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  7. 제4항에 있어서,
    상기 제어부는,
    위험상황과 관련된 정보에 대한 분석결과에 근거하여, 상기 위험상황에 대응되는 운전모드를 설정하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  8. 제7항에 있어서,
    상기 제어부는,
    상기 분석결과에 근거하여, 상기 청소기의 주행경로 상에 장애물이 존재하는 것으로 판단되면, 상기 장애물을 회피하기 위한 제1 운전모드를 설정하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  9. 제7항에 있어서,
    상기 제어부는,
    상기 분석결과에 근거하여, 상기 청소기의 청소영역에 상기 청소기의 구동을 방해하는 물체 또는 생명체가 존재하는 것으로 판단되면, 상기 청소기의 동작을 정지시키기 위한 제2 운전모드를 설정하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  10. 제7항에 있어서,
    상기 제어부는,
    상기 분석결과에 근거하여, 상기 청소기의 청소영역에 상기 청소영역의 보안을 위험하는 물체 또는 생명체가 존재하는 것으로 판단되면, 상기 청소기의 사용자에게 상기 청소영역에 대한 모니터링 정보를 제공하기 위한 제3 운전모드를 설정하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  11. 제1항에 있어서,
    상기 센서는 상기 구동부의 작동과 관련된 정보를 감지하는 엔코더를 포함하고,
    상기 제어부는,
    상기 엔코더의 감지결과에 근거하여, 상기 청소기에 위험상황이 발생한 것으로 판단하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  12. 제11항에 있어서,
    상기 제어부는,
    상기 엔코더의 감지결과에 근거하여, 상기 본체가 주행경로를 이탈한 것으로 판단되면, 상기 청소기에 위험상황이 발생한 것으로 판단하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  13. 제11항에 있어서,
    상기 제어부는,
    상기 엔코더의 감지결과에 근거하여, 상기 구동부의 바퀴가 구속되거나, 공회전하는 경우, 상기 청소기에 위험상황이 발생한 것으로 판단하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  14. 제1항에 있어서,
    상기 센서는 상기 본체 주변과 관련된 영상을 촬영하는 카메라를 포함하고,
    상기 제어부는,
    상기 카메라에 의해 촬영된 영상에 근거하여, 상기 청소기에 위험상황이 발생한 것으로 판단하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  15. 제14항에 있어서,
    상기 제어부는,
    상기 본체가 정지된 상태에서 상기 카메라에 의해 소정의 시간 간격으로 촬영되는 복수의 영상 사이에 차이가 검출되는 경우, 상기 청소기에 위험상황이 발생한 것으로 판단하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  16. 제1항에 있어서,
    상기 제어부는,
    상기 본체가 위험상황에 진입한 것으로 판단되면, 상기 분석 알고리즘을 업데이트하기 위해, 분석 알고리즘 업데이트 요청을 상기 서버로 전송하도록 통신부를 제어하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  17. 제16항에 있어서,
    상기 제어부는,
    상기 분석 알고리즘 업데이트 요청에 대응하여, 상기 서버로부터 수신된 분석 알고리즘 업데이트 정보를 이용하여, 상기 분석 알고리즘을 업데이트하는 것을 특징으로 하는 자율 주행을 수행하는 청소기.
  18. 자율 주행을 수행하는 청소기와 상기 청소기와 통신을 수행하는 서버를 포함하는 로봇 청소기 시스템에 있어서,
    상기 청소기는,
    본체;
    상기 본체를 이동시키는 구동부;
    상기 본체가 위치하는 환경과 관련된 정보를 감지하는 센서;
    상기 서버와 통신을 수행하는 통신부; 및
    상기 센서에서 감지된 정보에 근거하여, 상기 본체가 위험상황에 진입했는지 여부를 판단하고, 상기 본체가 위험상황에 진입한 것으로 판단되면, 상기 위험상황과 관련된 정보를 상기 서버로 전송하도록 상기 통신부를 제어하는 제어부를 포함하고,
    상기 서버는,
    상기 서버에 저장된 트레이닝 데이터를 이용하여 상기 청소기로부터 전송받은 위험상황과 관련된 정보를 분석하고, 분석결과를 상기 청소기로 전송하며,
    상기 청소기로부터 전송받은 위험상황과 관련된 정보를 이용하여, 상기 트레이닝 데이터를 업데이트하고,
    상기 청소기의 제어부는,
    상기 서버로부터 전송받은 분석결과에 근거하여 상기 위험상황에 대응되는 운전모드를 설정하는 제어부를 포함하는 것을 특징으로 하는 로봇 청소기 시스템.
  19. 제18항에 있어서,
    상기 청소기의 제어부는,
    상기 설정된 운전모드의 실행이 완료된 후 상기 센서에 의해 획득된 상기 본체 주변에 존재하는 물체와 관련된 정보가 상기 서버로 전송되도록 상기 통신부를 제어하고,
    상기 서버는,
    상기 설정된 운전모드의 실행이 완료된 후 청소기로부터 수신된 상기 본체 주변에 존재하는 물체와 관련된 정보를 이용하여, 상기 분석결과의 정확도를 판단하는 것을 특징으로 하는 로봇 청소기 시스템.
  20. 제18항에 있어서,
    상기 청소기 및 상기 서버와 통신을 수행하는 이동 단말기를 더 포함하고,
    상기 이동 단말기는,
    상기 청소기로부터 수신된 모니터링 정보를 출력하고,
    상기 모니터링 정보가 출력된 상태에서, 위험상황과 관련된 사용자 입력을 수신하며,
    상기 사용자 입력에 근거하여, 상기 위험상황과 관련된 정보를 서버로 전송하는 것을 특징으로 하는 로봇 청소기 시스템.
KR1020170071670A 2017-06-08 2017-06-08 인공지능 로봇 청소기 및 이를 구비하는 로봇 청소 시스템 KR101974870B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170071670A KR101974870B1 (ko) 2017-06-08 2017-06-08 인공지능 로봇 청소기 및 이를 구비하는 로봇 청소 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170071670A KR101974870B1 (ko) 2017-06-08 2017-06-08 인공지능 로봇 청소기 및 이를 구비하는 로봇 청소 시스템

Publications (2)

Publication Number Publication Date
KR20180134155A KR20180134155A (ko) 2018-12-18
KR101974870B1 true KR101974870B1 (ko) 2019-05-03

Family

ID=64952249

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170071670A KR101974870B1 (ko) 2017-06-08 2017-06-08 인공지능 로봇 청소기 및 이를 구비하는 로봇 청소 시스템

Country Status (1)

Country Link
KR (1) KR101974870B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102043143B1 (ko) 2019-05-20 2019-11-11 호서대학교 산학협력단 인공신경망을 이용한 agv 주행제어 방법 및 장치
KR102043142B1 (ko) 2018-12-31 2019-11-12 호서대학교 산학협력단 Agv 주행제어를 위한 인공신경망 학습 방법 및 장치
WO2021020917A1 (ko) * 2019-07-31 2021-02-04 엘지전자 주식회사 인공지능 로봇청소기 및 그를 포함하는 로봇 시스템

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102138006B1 (ko) * 2018-11-06 2020-07-28 주식회사 도구공간 보안 로봇 제어 방법 및 그 방법을 지원하는 장치
KR20200084449A (ko) 2018-12-26 2020-07-13 삼성전자주식회사 청소 로봇 및 그의 태스크 수행 방법
KR102224157B1 (ko) * 2019-02-20 2021-03-08 엘지전자 주식회사 이동 로봇 및 충전 스테이션을 포함하는 이동 로봇 시스템
KR20200115696A (ko) * 2019-03-07 2020-10-08 삼성전자주식회사 전자 장치 및 그 제어 방법
KR102527972B1 (ko) 2020-12-29 2023-04-28 서울대학교산학협력단 주행 제어 방법 및 장치
CN114794953A (zh) * 2022-04-19 2022-07-29 净豹智能机器人(台州)有限公司 基于深度学习的智能清洁机器人贴边清洁***及方法
CN116252316A (zh) * 2023-03-17 2023-06-13 廊坊思拓新能源科技有限公司 用于清扫光伏板的机器人自主通信采集***及方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101131644B1 (ko) * 2009-08-17 2012-04-12 고려대학교 산학협력단 청소 로봇 장치 및 이의 제어 방법
KR101179592B1 (ko) 2012-02-10 2012-09-07 한현민 검침 데이터 중계 로봇 청소기, 검침 데이터 중계 방법 및 중계 시스템
KR101287474B1 (ko) 2011-09-07 2013-07-18 엘지전자 주식회사 이동 로봇, 및 이동 로봇의 원격 제어 시스템 및 방법
KR101741583B1 (ko) * 2009-11-16 2017-05-30 엘지전자 주식회사 로봇 청소기 및 그의 제어 방법

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101356165B1 (ko) * 2012-03-09 2014-01-24 엘지전자 주식회사 로봇 청소기 및 이의 제어 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101131644B1 (ko) * 2009-08-17 2012-04-12 고려대학교 산학협력단 청소 로봇 장치 및 이의 제어 방법
KR101741583B1 (ko) * 2009-11-16 2017-05-30 엘지전자 주식회사 로봇 청소기 및 그의 제어 방법
KR101287474B1 (ko) 2011-09-07 2013-07-18 엘지전자 주식회사 이동 로봇, 및 이동 로봇의 원격 제어 시스템 및 방법
KR101179592B1 (ko) 2012-02-10 2012-09-07 한현민 검침 데이터 중계 로봇 청소기, 검침 데이터 중계 방법 및 중계 시스템

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102043142B1 (ko) 2018-12-31 2019-11-12 호서대학교 산학협력단 Agv 주행제어를 위한 인공신경망 학습 방법 및 장치
KR102043143B1 (ko) 2019-05-20 2019-11-11 호서대학교 산학협력단 인공신경망을 이용한 agv 주행제어 방법 및 장치
WO2021020917A1 (ko) * 2019-07-31 2021-02-04 엘지전자 주식회사 인공지능 로봇청소기 및 그를 포함하는 로봇 시스템
EP4005454A4 (en) * 2019-07-31 2023-08-23 LG Electronics Inc. CLEANING ROBOT WITH ARTIFICIAL INTELLIGENCE AND ROBOT SYSTEM THAT INCLUDES THIS
US11786098B2 (en) 2019-07-31 2023-10-17 Lg Electronics Inc. AI robot cleaner and robot system having the same

Also Published As

Publication number Publication date
KR20180134155A (ko) 2018-12-18

Similar Documents

Publication Publication Date Title
KR101974870B1 (ko) 인공지능 로봇 청소기 및 이를 구비하는 로봇 청소 시스템
EP3432107B1 (en) Cleaning robot and controlling method thereof
KR101984101B1 (ko) 청소기 및 그 제어방법
CN112654472B (zh) 多个自主移动机器人及其控制方法
KR101772084B1 (ko) 이동 로봇 및 그 제어방법
KR101952414B1 (ko) 청소기 및 그 제어방법
CN113453851B (zh) 多个自主移动机器人及其控制方法
EP3911480B1 (en) Mobile robot and method of controlling plurality of mobile robots
KR101917701B1 (ko) 청소기 및 그 제어방법
CN112384119B (zh) 多个自主移动机器人及其控制方法
KR102070282B1 (ko) 청소기 및 그 제어방법
KR101938668B1 (ko) 청소기 및 그 제어방법
KR20180131909A (ko) 이동 로봇 및 그 제어방법
KR102432198B1 (ko) 초음파 센서 및 그를 구비하는 로봇 청소기
KR102309303B1 (ko) 로봇 청소기 및 그 제어 방법
KR20190134872A (ko) 인공지능 청소기 및 그 제어방법
KR20190134871A (ko) 청소기 및 그 제어방법
KR102328595B1 (ko) 이동 로봇 및 이동 로봇의 제어방법
KR20190020006A (ko) 청소기 및 그 제어방법
KR101897733B1 (ko) 청소기 및 그 제어방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right