KR101197517B1 - Automatic elevator control system and method using voice and face recognition - Google Patents
Automatic elevator control system and method using voice and face recognition Download PDFInfo
- Publication number
- KR101197517B1 KR101197517B1 KR1020100092027A KR20100092027A KR101197517B1 KR 101197517 B1 KR101197517 B1 KR 101197517B1 KR 1020100092027 A KR1020100092027 A KR 1020100092027A KR 20100092027 A KR20100092027 A KR 20100092027A KR 101197517 B1 KR101197517 B1 KR 101197517B1
- Authority
- KR
- South Korea
- Prior art keywords
- user
- floor
- voice
- elevator
- identity
- Prior art date
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B1/00—Control systems of elevators in general
- B66B1/34—Details, e.g. call counting devices, data transmission from car to control system, devices giving information to the control system
- B66B1/46—Adaptations of switches or switchgear
- B66B1/468—Call registering systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B2201/00—Aspects of control systems of elevators
- B66B2201/40—Details of the change of control mode
- B66B2201/46—Switches or switchgear
- B66B2201/4607—Call registering systems
- B66B2201/4638—Wherein the call is registered without making physical contact with the elevator system
- B66B2201/4646—Wherein the call is registered without making physical contact with the elevator system using voice recognition
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B2201/00—Aspects of control systems of elevators
- B66B2201/40—Details of the change of control mode
- B66B2201/46—Switches or switchgear
- B66B2201/4607—Call registering systems
- B66B2201/4676—Call registering systems for checking authorization of the passengers
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Computer Networks & Wireless Communication (AREA)
- Elevator Control (AREA)
- Indicating And Signalling Devices For Elevators (AREA)
Abstract
본 발명은 음성 및 얼굴 인식을 이용한 엘리베이터 시스템 및 그 방법에 관한 것이다. 좀 더 구체적으로, 본 발명은 사용자별 얼굴인식 데이터 및 이동 층 데이터가 저장되는 신원정보 데이터베이스, 엘리베이터 내 기 설정된 구역에 설치되어, 사용자가 탑승하면 촬영하는 카메라, 상기 카메라가 촬영한 촬영 영상을 가져와서 사용자의 얼굴 부분을 추출하고 그 추출된 얼굴인식 데이터와 상기 신원정보 데이터베이스에 저장된 얼굴인식 데이터를 비교하여 사용자의 신원을 판단하는 신원 판단부 및 상기 신원 판단부가 사용자의 신원을 판단하면, 사용자가 이동하고자 하는 이동 층을 자동 결정하여 엘리베이터의 운행을 제어하는 중앙제어부를 포함한다. 상술한 바와 같은 본 발명에 따르면, 본 발명은 엘리베이터 사용자가 일일이 층 버튼을 입력하지 않아도 엘리베이터가 자동 운행되기 때문에 사용자의 편의를 도모할 수 있는 장점이 있다.The present invention relates to an elevator system and method using voice and face recognition. More specifically, the present invention has an identity database that stores face recognition data and moving floor data for each user, is installed in a predetermined area within an elevator, and has a camera photographed when the user boards, and a photographed image taken by the camera. When the user's face is extracted and the face recognition data is compared with the extracted face recognition data and the face recognition data stored in the identity information database, the identity determination unit and the identity determination unit judging the identity of the user, the user It includes a central control unit for automatically determining the moving floor to move to control the operation of the elevator. According to the present invention as described above, the present invention has an advantage that the elevator can be automatically operated even if the elevator user does not input the floor button one by one.
Description
본 발명은 음성 및 얼굴 인식을 이용한 엘리베이터 시스템에 관한 것으로, 더욱 자세하게는 사용자가 엘리베이터에 탑승하면 카메라로 사용자를 촬영하고 그 촬영 영상을 분석하여 사용자의 신원을 파악하며 사용자의 신원이 파악되면 이동 층 입력 없이도 사용자가 원하는 층을 자동으로 결정하여 엘리베이터가 운행되도록 처리함으로써 엘리베이터에 탑승한 사용자가 일일이 층 버튼을 입력하지 않아도 되므로 사용자의 편의를 도모할 수 있는 음성 및 얼굴 인식을 이용한 엘리베이터 시스템 및 그 방법에 관한 것이다.
The present invention relates to an elevator system using voice and face recognition. More specifically, when a user boards an elevator, the user photographs the user with a camera and analyzes the photographed image to identify the user's identity, and when the user's identity is determined, a moving floor. The elevator system using the voice and face recognition that can facilitate the user's convenience, because the user automatically determines the desired floor without input and processes the elevator to operate so that the user who boards the elevator does not have to enter the floor button. It is about.
본 발명은 음성 및 얼굴 인식을 이용한 엘리베이터 시스템 및 그 방법에 관한 것이다.The present invention relates to an elevator system and method using voice and face recognition.
일반적으로 엘리베이터는 종적 교통 운반 수단으로서 소규모 빌딩에서부터 수 십 층의 초고층 빌딩에 이르기까지 건물의 용도에 따라 기능별로 설계 운행된다. In general, elevators are longitudinal transport vehicles designed and operated by function depending on the purpose of the building, from small buildings to skyscrapers of tens of floors.
엘리베이터를 이용하는 사용자는 엘리베이터를 타기 전 또는 탄 후에 자신이 이동하고자 하는 층 버튼을 선택함으로써 원하는 층으로 이동할 수 있다.A user using an elevator can move to a desired floor by selecting a floor button he or she wants to move before or after riding the elevator.
그러나, 상기한 바와 같이 원하는 층 버튼을 눌러야만 이동하는 엘리베이터는 사용자가 원하는 층 버튼을 누르는 것이 곤란한 경우, 예를 들어 양손에 물건을 들어 손을 제대로 사용할 수 없거나 서로 다른 층으로 이동하고자 하는 사용자들이 한꺼번에 탑승한 경우에는 층 버튼의 선택이 용이하지 않게 되는 문제점이 있다.However, as described above, an elevator moving only by pressing a desired floor button is difficult for a user to press a desired floor button, for example, a user who wants to move to a different floor by holding an object in both hands or using a hand. When boarding all at once, there is a problem that the selection of the floor button is not easy.
또한, 상기한 바와 같이 원하는 층 버튼을 눌러야만 이동하는 엘리베이터는 사용자가 시각장애가 있거나, 층 버튼을 누를 수 없는 몸의 장애가 있는 경우 층 버튼의 선택이 용이하지 않게 되어 자신이 원하는 층을 가게 되는 문제점이 있다.In addition, as described above, the elevator to be moved only by pressing the desired floor button, if the user has a visual impairment, or if there is a handicap of the body can not press the floor button is not easy to select the floor button to go to the desired floor There is this.
특정 건물 내에 있는 엘리베이터를 자주 이용하는 사람들은 대부분 그 건물의 특정 층에 주거지나 직장 등을 가지고 있는 경우가 많다. 예를 들어, 아파트의 엘리베이터를 이용하는 사람들은 방문객을 제외하고는 대부분 그 아파트에 거주하는 사람들로서 주로 자신의 집이 위치한 층을 선택하며, 한 빌딩 내에 층 별로 회사나 부서 등이 위치하고 있는 경우 상기 빌딩의 엘리베이터를 이용하는 사람들도 대부분 매번 이동하는 층이 비슷하다.Most people who use elevators in a particular building often have a place of residence or a job on a particular floor of the building. For example, most people who use the elevators of apartments are people who live in the apartments except visitors, and usually select the floor where their home is located. Most of the people who use the elevator are similar on each floor.
따라서, 미리 엘리베이터 사용자의 얼굴을 분석한 정보를 저장한 후 상기 사용자가 엘리베이터를 이용할 때 상기 사용자의 얼굴을 확인하여 사용자 신원을 파악하고, 그 사용자가 가고자 하는 층을 미리 예측하여, 층 버튼 입력 없이도 사용자가 가고자 하는 층이 자동으로 선택되어 엘리베이터 사용자의 편리성을 도모할 수 있는 새로운 엘리베이터 및 방법이 요구된다.
Therefore, after analyzing the information of the elevator user's face in advance, when the user uses the elevator, the user's face is identified to identify the user's identity, and the user's floor is predicted in advance, even without a floor button input. There is a need for a new elevator and method by which the floor the user wants to go is automatically selected to facilitate the convenience of the elevator user.
본 발명은 상기 문제점을 해결하기 위하여 발명된 것으로, 본 발명은 사용자가 엘리베이터에 탑승하면 카메라로 사용자를 촬영하고 그 촬영 영상을 분석하여 사용자의 신원을 파악하며 사용자의 신원이 파악되면 이동 층 입력 없이도 사용자가 원하는 층을 자동으로 결정하여 엘리베이터가 운행되도록 처리함으로써 엘리베이터에 탑승한 사용자가 일일이 층 버튼을 입력하지 않아도 되므로 사용자의 편의를 도모할 수 있는 음성 및 얼굴 인식을 이용한 엘리베이터 시스템 및 그 방법을 제공하는 것을 목적으로 한다. The present invention has been invented to solve the above problems, the present invention is to capture the user with a camera when the user boards the elevator and analyze the captured image to identify the user's identity, if the user's identity is identified without moving floor input Provides elevator system and method using voice and face recognition for user convenience, because the user automatically decides the desired floor and processes the elevator to operate so that users who board the elevator do not need to enter floor buttons. It aims to do it.
또한, 본 발명은 사용자가 엘리베이터에 탑승하면 사용자의 신원을 파악하여 사용자가 원하는 층을 판단한 뒤 그 판단결과를 음성안내 하며, 그 음성안내를 들은 사용자가 그 음성안내를 수긍하면 엘리베이터가 그 층으로 운행되도록 처리하고, 그 음성안내를 들은 사용자가 그 음성안내를 부정하면 그 사용자가 층 입력부를 통해 자신이 원하는 층을 입력하거나, 음성인식을 통하여 층을 말하도록 유도함으로써 보다 정확하고 원활한 서비스를 제공할 수 있는 음성 및 얼굴 인식을 이용한 엘리베이터 시스템 및 그 방법을 제공하는 것을 목적으로 한다.
In addition, the present invention is to determine the user's identity when the user boards the elevator to determine the user's desired floor and voice guidance of the determination result, if the user who listened to the voice guidance, the elevator to the floor If the user who listens to the voice guidance deny the voice guidance, the user inputs the desired floor through the floor input unit or induces the user to speak the floor through voice recognition to provide a more accurate and smooth service. An object of the present invention is to provide an elevator system using a voice and face recognition and a method thereof.
상기의 목적을 달성하기 위하여 본 발명에 의한 음성 및 얼굴 인식을 이용한 엘리베이터 시스템은, 사용자별 얼굴인식 데이터 및 이동 층 데이터가 저장되는 신원정보 데이터베이스; 엘리베이터 내 기 설정된 구역에 설치되어, 사용자가 탑승하면 촬영하는 카메라; 상기 카메라가 촬영한 촬영 영상을 가져와서 사용자의 얼굴 부분을 추출하고 그 추출된 얼굴인식 데이터와 상기 신원정보 데이터베이스에 저장된 얼굴인식 데이터를 비교하여 사용자의 신원을 판단하는 신원 판단부; 상기 신원 판단부가 사용자의 신원을 판단하면, 사용자가 이동하고자 하는 이동 층을 자동 결정하여 엘리베이터의 운행을 제어하는 중앙제어부;를 포함한다.In order to achieve the above object, an elevator system using voice and face recognition according to the present invention comprises: an identity information database storing face recognition data and moving floor data for each user; A camera installed in a predetermined area within the elevator and photographed when the user boards; An identity determination unit which takes a photographed image captured by the camera, extracts a face part of the user, and compares the extracted face recognition data with face recognition data stored in the identity information database to determine a user's identity; And a central controller configured to control the operation of the elevator by automatically determining a moving floor to which the user wants to move when the identity determining unit determines the identity of the user.
이때, 음성 및 얼굴 인식을 이용한 엘리베이터 시스템은, 사용자의 신원이 판단되어 이동 층이 자동 결정되면, 그 이동 층 정보가 스피커를 통해 출력되도록 처리하는 음성 안내부;를 더 포함하는 것이 바람직하다.At this time, the elevator system using voice and face recognition, if the user's identity is determined and the moving floor is automatically determined, the voice guide unit for processing to output the moving floor information through the speaker; preferably further includes.
그리고 음성 및 얼굴 인식을 이용한 엘리베이터 시스템은, 상기 음성 안내부에 의해 이동 층 정보가 스피커를 통해 출력되면, 마이크를 통해 사용자로부터 그에 대한 응답을 입력받아 분석하는 음성 인식부;를 더 포함한다.The elevator system using voice and face recognition further includes a voice recognition unit for receiving and analyzing a response from the user through a microphone when the moving floor information is output through the speaker by the voice guide unit.
한편, 상기 음성 인식부가 사용자가 상기 음성 안내부를 통해 안내된 그 이동 층으로 이동하는 것에 대해 긍정적인 응답을 했다고 판단한 경우, 상기 중앙제어부는, 중앙제어부에 의해 자동 결정된 이동 층으로 엘리베이터가 운행되도록 처리한다.On the other hand, when the voice recognition unit determines that the user has made a positive response to the movement of the mobile floor guided by the voice guide unit, the central controller processes the elevator to move to the mobile floor automatically determined by the central controller. do.
또한, 상기 음성 인식부가 사용자가 상기 음성 안내부를 통해 안내된 그 이동 층으로 이동하는 것에 대해 부정적인 응답을 했다고 판단한 경우, 상기 중앙제어부는, 사용자가 층 입력부를 통해 자신이 가고자 하는 층을 입력하거나 층을 말하도록 스피커를 통해 음성 안내를 하고, 층 입력부를 통해 이동 층 데이터를 입력받거나 음성인식을 통해 인식된 그 이동 층으로 엘리베이터가 운행되도록 처리하는 것이 바람직하다.In addition, when the voice recognition unit determines that the user has negatively responded to the movement of the mobile floor guided by the voice guide unit, the central control unit inputs a floor or a floor that the user wants to go through the floor input unit. It is preferable that the voice guidance is performed through the speaker so as to say, and that the elevator is driven to the moving floor that receives the moving floor data through the floor input unit or is recognized through voice recognition.
그리고 상기 신원정보 데이터베이스에 저장된 사용자의 얼굴인식 데이터 및 이동 층 데이터가 변경 또는 갱신되는 경우, 상기 신원정보 데이터베이스가 원격 업데이트 되도록 제어하는 원격 제어부;를 더 포함하는 것이 바람직하다.And when the face recognition data and the moving floor data of the user stored in the identity information database are changed or updated, a remote controller for controlling the identity information database to be remotely updated.
상기의 목적을 달성하기 위하여 본 발명에 의한 음성 및 얼굴 인식을 이용한 엘리베이터 시스템의 동작방법은, 엘리베이터 내 기 설정된 구역에 설치된 카메라가 사용자가 탑승하면 촬영하는 (A)단계; 신원 판단부가 상기 (A)단계에 의해 생성된 촬영 영상을 가져와서 사용자의 얼굴 부분을 추출하고 그 추출된 얼굴인식 데이터와 신원정보 데이터베이스에 미리 저장된 얼굴인식 데이터를 비교하여 사용자의 신원을 판단하는 (B)단계; 상기 (B)단계에 의해 사용자의 신원을 판단되면, 중앙 제어부가 사용자가 이동하고자 하는 이동 층을 자동 결정하는 (C)단계; 상기 (C)단계에 의해 이동 층이 자동 결정되면, 음성 안내부가 그 이동 층 정보가 스피커를 통해 출력되도록 처리하는 (D)단계; 및 상기 (D)단계에 의해 이동 층 정보가 스피커를 통해 출력되면, 음성 인식부가 사용자로부터 마이크를 통해 그에 대한 응답을 입력받아 분석하고, 중앙제어부가 그 응답에 따라 엘리베이터의 동작을 제어하는 (E)단계;를 포함한다.In order to achieve the above object, an operation method of an elevator system using voice and face recognition according to the present invention includes: photographing when a user boards a camera installed in a predetermined area within an elevator; The identity determination unit extracts the face part of the user by taking the photographed image generated by step (A), and compares the extracted face recognition data with face recognition data stored in the identity information database to determine the user's identity ( B) step; (C) automatically determining, by the central controller, a moving floor to which the user wants to move if the user's identity is determined by the step (B); If the moving floor is automatically determined by the step (C), the voice guide unit processing the moving floor information to be output through the speaker; And when the moving floor information is output through the speaker in step (D), the voice recognition unit receives a response from the user through a microphone and analyzes the response, and the central controller controls the operation of the elevator according to the response (E). Step).
이때, 상기 (E)단계는, 상기 음성 인식부가 사용자가 상기 (D)단계에 의해 안내된 그 이동 층으로 이동하는 것에 대해 긍정적인 응답을 했다고 판단한 경우, 중앙 제어부가 상기 (C)단계에 의해 자동 결정된 이동 층으로 엘리베이터가 운행되도록 처리한다.In this case, in the step (E), when the voice recognition unit has determined that the user has a positive response to the movement to the mobile floor guided by the step (D), the central control unit in step (C) Process the elevator to run on the automatically determined moving floor.
한편, 상기 음성 인식부가 사용자가 상기 (D)단계에 의해 안내된 그 이동 층으로 이동하는 것에 대해 부정적인 응답을 했다고 판단한 경우, 중앙 제어부가 사용자가 층 입력부를 통해 자신이 가고자 하는 층을 입력하거나 음성인식을 통해 가고자 하는 층을 말하도록 스피커를 통해 음성 안내를 하고, 층 입력부를 통해 이동 층 데이터를 입력받거나 음성인식을 통해 층 입력을 받으면 그 이동 층으로 엘리베이터가 운행되도록 처리하는 것이 바람직하다.
On the other hand, when the voice recognition unit judges that the user has made a negative response to the movement to the mobile floor guided by the step (D), the central control unit inputs the voice that the user wants to go through the floor input unit or voice It is preferable to process voice guidance through a speaker so as to speak the floor to go through the recognition, and to operate the elevator to the moving floor when receiving the moving floor data through the floor input unit or receiving the floor input through the voice recognition.
본 발명에 따르면, 본 발명은 사용자가 엘리베이터에 탑승하면 카메라로 사용자를 촬영하고 그 촬영 영상을 분석하여 사용자의 신원을 파악하며 사용자의 신원이 파악되면 이동 층 입력 없이도 사용자가 원하는 층을 자동으로 결정하여 엘리베이터가 운행되도록 처리함으로써 엘리베이터 사용자가 일일이 층 버튼을 입력하지 않아도 되므로 사용자의 편의를 도모할 수 있는 장점이 있다.According to the present invention, when the user boards an elevator, the present invention captures the user with a camera and analyzes the captured image to determine the user's identity, and when the user's identity is determined, the user automatically determines the desired floor without inputting a moving floor. By processing the elevator to operate so that the elevator user does not have to enter the floor button, there is an advantage to facilitate the user.
또한, 본 발명은 시각 장애인이나 신체에 장애가 있어 층 버튼을 누르지 못하는 장애인의 편의를 도모할 수 있는 장점이 있다.In addition, the present invention has the advantage that can be convenient for the visually impaired or disabled people who can not press the floor button because the body has a disability.
또한, 본 발명은 사용자가 엘리베이터에 탑승하면 사용자의 신원을 파악하여 사용자가 원하는 층을 판단한 뒤 그 판단결과를 음성안내 하며, 그 음성안내를 들은 사용자가 그 음성안내를 수긍하면 엘리베이터가 그 층으로 운행되도록 처리하고, 그 음성안내를 들은 사용자가 그 음성안내를 부정하면 그 사용자가 층 입력부를 통해 자신이 원하는 층을 입력하거나 음성으로 말하도록 유도함으로써 보다 정확하고 원활한 서비스를 제공할 수 있는 장점이 있다.
In addition, the present invention is to determine the user's identity when the user boards the elevator to determine the user's desired floor and voice guidance of the determination result, if the user who listened to the voice guidance, the elevator to the floor If the user who listens to the voice guidance deny the voice guidance, the user can enter the desired floor or speak the desired voice through the floor input unit to provide a more accurate and smooth service. have.
도 1은 본 발명의 바람직한 실시예에 의한 음성 및 얼굴 인식을 이용한 엘리베이터 시스템의 내부구성을 도시한 블럭도.
도 2는 본 발명의 바람직한 실시예에 의한 음성 및 얼굴 인식을 이용한 엘리베이터 시스템이 설치된 모습을 설명하는 설명도.
도 3은 본 발명의 바람직한 실시예에 의한 음성 및 얼굴 인식을 이용한 엘리베이터 시스템이 동작하는 모습을 도시한 순서도.1 is a block diagram showing the internal configuration of an elevator system using voice and face recognition according to a preferred embodiment of the present invention.
2 is an explanatory diagram illustrating a state in which an elevator system using voice and face recognition according to a preferred embodiment of the present invention is installed.
3 is a flow chart showing the operation of the elevator system using the voice and face recognition according to a preferred embodiment of the present invention.
이하에서는 상기한 바와 같은 본 발명에 의한 음성 및 얼굴 인식을 이용한 엘리베이터 시스템의 바람직한 실시예를 첨부된 도면을 참고로 하여 상세하게 설명한다.
Hereinafter, a preferred embodiment of an elevator system using voice and face recognition according to the present invention as described above will be described in detail with reference to the accompanying drawings.
도 1에는 본 발명의 바람직한 실시예에 의한 음성 및 얼굴 인식을 이용한 엘리베이터 시스템의 내부구성을 도시한 블럭도가 도시되어 있고, 도 2에는 본 발명의 바람직한 실시예에 의한 음성 및 얼굴 인식을 이용한 엘리베이터 시스템이 설치된 모습을 설명하는 설명도가 도시되어 있다.1 is a block diagram showing an internal configuration of an elevator system using voice and face recognition according to a preferred embodiment of the present invention, Figure 2 is an elevator using voice and face recognition according to a preferred embodiment of the present invention An explanatory diagram is shown illustrating how the system is installed.
이들 도면에 도시된 바와 같이, 본 발명의 음성 및 얼굴 인식을 이용한 엘리베이터 시스템(100)은 카메라(110), 신원 판단부(120), 신원정보 데이터베이스(130), 중앙 제어부(140), 음성 안내부(150), 음성 인식부(160), 층 입력부(170), 원격 제어부(180)를 포함한다.As shown in these figures, the
신원정보 데이터베이스(130)에는 사용자별 고유식별번호, 이름, 주소, 휴대전화 번호, 얼굴인식 데이터 및 이동 층 데이터 등이 저장된다. 상기 신원정보 데이터베이스(130)에는 저장되는 데이터의 용량에 따라, 이이피롬(EPROM), 플래쉬메모리, 외장형메모리와 같은 다양한 저장매체가 제공될 수 있다. The
카메라(110)는 엘리베이터 내 기 설정된 구역에 설치되어, 사용자가 탑승하면 그 기 설정된 구역을 다채널로 촬영한다. 이때, 카메라(110)는 하나 이상 설치될 수 있고, 엘리베이터의 전 구역을 촬영할 수 있도록 배치되는 것이 바람직하다.The
신원 판단부(120)는 카메라(110)가 촬영한 촬영 영상을 가져와서 사용자의 얼굴 부분을 추출하고 그 추출된 얼굴인식 데이터와 상기 신원정보 데이터베이스(130)에 저장된 얼굴인식 데이터를 비교하여 사용자의 신원을 판단한다. 만약, 카메라(110)가 촬영한 촬영 영상에 여러 명의 사람이 있는 경우, 멀티 포커스(Multi- Focus)로 동시에 다수의 얼굴인식 데이터를 획득할 수 있다.The identity determiner 120 extracts a face part of the user by taking a photographed image captured by the
그리고 음성 안내부(150)는 사용자의 신원이 판단되어 중앙 제어부(140)에 의해 이동 층이 자동 결정되면, 그 이동 층 정보가 스피커를 통해 출력되도록 처리한다. 예컨대, 사용자가 홍길동이고, 홍길동의 주 이동 층 정보가 5층인 사람이라고 신원이 판단되면, 음성 안내부(150)는 "5층으로 이동합니다."와 같은 음성안내를 하는 것이다.When the user's identity is determined and the moving floor is automatically determined by the
음성 인식부(160)는 음성 안내부(150)에 의해 이동 층 정보가 스피커를 통해 출력되면, 마이크를 통해 사용자로부터 그에 대한 응답을 입력받아 분석한다. When the mobile floor information is output through the speaker by the
예를 들어, "5층으로 이동합니다."라는 음성안내를 들은 사용자가 그에 대한 응답을 하면, 이를 마이크로부터 입력받아 분석하는 것이다. 즉, 사용자가 "예"라고 대답하면 긍정적인 응답을 했다고 분석하는 것이고, "아니오"라고 대답하면 부정적인 응답을 했다고 분석하는 것이다. For example, when a user hears a voice prompt, "Go to the 5th floor," the user responds to it and receives it from the microphone and analyzes it. In other words, if the user answered "Yes", the analysis is affirmative. If the answer is "No", the analysis is negative.
한편, 마이크는 층 입력부(170)의 부분과 엘리베이터의 천장 부분에 설치되는 것이 바람직하다.On the other hand, the microphone is preferably installed in the portion of the
그리고 중앙 제어부(140)는 신원 판단부(120)가 사용자의 신원을 판단하여 사용자가 이동하고자 하는 이동 층을 자동 결정한 뒤, 음성안내를 하고 그 음성안내에 대한 사용자의 응답에 따라 엘리베이터의 운행을 제어한다.The
좀 더 구체적으로, 음성 인식부(160)가 사용자가 상기 음성 안내부(150)를 통해 안내된 그 이동 층으로 이동하는 것에 대해 긍정적인 응답을 했다고 판단한 경우, 중앙 제어부(140)는, 중앙 제어부(140)에 의해 자동 결정된 이동 층으로 엘리베이터가 운행되도록 처리한다.More specifically, when the
한편, 음성 인식부(160)가 사용자가 상기 음성 안내부(150)를 통해 안내된 그 이동 층으로 이동하는 것에 대해 부정적인 응답을 했다고 판단한 경우, 상기 중앙 제어부(140)는, 사용자가 층 입력부(170)를 통해 자신이 가고자 하는 층을 입력하도록 스피커를 통해 음성 안내를 하고, 층 입력부(170)를 통해 이동 층 데이터를 입력받으면 그 이동 층으로 엘리베이터가 운행되도록 처리한다.On the other hand, when the
상술한 바와 같은 본 발명은 음성인식과 얼굴인식을 이용하여 물리적인 제어 없이 편리한 엘리베이터의 사용을 도모할 수 있는 장점이 있다.The present invention as described above has the advantage that it is possible to use a convenient elevator without physical control by using voice recognition and face recognition.
층 입력부(170)는 사용자가 이동하고자 하는 층을 입력받는다. 이때, 층 입력부(170)는 상기 기능들을 수행하기 위한 각종 동작 및 메뉴 설정을 입력받을 수 있는 버튼이 구비된다. The
원격 제어부(180)는 신원정보 데이터베이스(130)에 저장된 사용자의 얼굴인식 데이터 및 이동 층 데이터가 변경 또는 갱신되는 경우, 상기 신원정보 데이터베이스(130)가 원격 업데이트 되도록 제어한다.
The
이하에서는 음성 및 얼굴 인식을 이용한 엘리베이터 시스템의 동작과정을 첨부된 도면을 참조하여 상세하게 설명하기로 한다.Hereinafter, an operation process of an elevator system using voice and face recognition will be described in detail with reference to the accompanying drawings.
도 3에는 본 발명의 바람직한 실시예에 의한 음성 및 얼굴 인식을 이용한 엘리베이터 시스템이 동작하는 모습을 도시한 순서도가 도시되어 있다.3 is a flow chart showing the operation of the elevator system using the voice and face recognition according to a preferred embodiment of the present invention.
도 3을 참조하면, 엘리베이터 내 기 설정된 구역에 설치된 카메라(110)가 사용자가 탑승하면 그 기설정된 구역을 촬영하여 촬영 영상을 생성한다(단계 S100).Referring to FIG. 3, when a user boards a
신원 판단부(120)가 단계 S100에 의해 생성된 촬영 영상을 가져와서 사용자의 얼굴 부분을 추출하고(단계 S110), 그 추출된 얼굴인식 데이터와 신원정보 데이터베이스(130)에 미리 저장된 얼굴인식 데이터를 비교하여 사용자의 신원을 판단한다(단계 S120).The
상기 단계 S120에 의해 사용자의 신원을 판단되면, 중앙 제어부(140)가 사용자가 이동하고자 하는 이동 층을 자동 결정한다(단계 S140). When the user's identity is determined by the step S120, the
상기 단계 S140에 의해 이동 층이 자동 결정되면, 음성 안내부(150)가 그 이동 층 정보가 스피커를 통해 출력되도록 처리한다(단계 S150). When the moving floor is automatically determined by the step S140, the
그리고 상기 단계 S150에 의해 이동 층 정보가 스피커를 통해 출력되면, 음성 인식부(160)가 사용자로부터 마이크를 통해 그에 대한 응답을 입력받아 분석하고, 중앙 제어부(140)가 그 응답에 따라 엘리베이터의 동작을 제어한다.When the moving floor information is output through the speaker by the step S150, the
좀 더 구체적으로, 음성 인식부(160)가 사용자가 단계 S150에 의해 안내된 그 이동 층으로 이동하는 것에 대해 긍정적인 응답을 했다고 판단한 경우, 중앙 제어부(140)가 단계 S140에 의해 자동 결정된 이동 층으로 엘리베이터가 운행되도록 처리한다(단계 S170).More specifically, when the
한편, 상기 음성 인식부(160)가 사용자가 S150에 의해 안내된 그 이동 층으로 이동하는 것에 대해 부정적인 응답을 했다고 판단한 경우, 중앙 제어부(140)가 사용자가 층 입력부(170)를 통해 자신이 가고자 하는 층을 입력하도록 스피커를 통해 음성 안내를 하고(단계 S180), 층 입력부(170)를 통해 이동 층 데이터를 입력받거나, 음성인식부(160)을 통해 이동층 음성 데이터를 인식하여, 그 이동 층으로 엘리베이터가 운행되도록 처리한다(단계 S190).On the other hand, when the
상술한 바와 같은 본 발명에 따르면, 보다 정확하고 원활한 자동 층 이동 서비스를 제공할 수 있는 장점이 있다.
According to the present invention as described above, there is an advantage that can provide a more accurate and smooth automatic floor moving service.
이상에서는 본 발명을 특정의 바람직한 실시예에 대해서 도시하고 설명하였다. 그러나 본 발명은 상술한 실시예에만 국한되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 본 발명의 기술적 사상을 벗어남이 없이 얼마든지 다양하게 변경 실시할 수 있을 것이다. 따라서 본 발명의 권리범위는 특정 실시예에 한정되는 것이 아니라, 첨부된 특허청구범위에 의해 정해지는 것으로 해석되어야 할 것이다.
The present invention has been shown and described with respect to specific preferred embodiments thereof. However, the present invention is not limited to the above-described embodiments, and various changes and modifications may be made without departing from the technical spirit of the present invention by those skilled in the art. Accordingly, the scope of the present invention should be construed as being determined not by the specific embodiments but by the appended claims.
110 : 카메라 120 : 신원 판단부
130 : 신원정보 데이터베이스 140 : 중앙 제어부
150 : 음성 안내부 160 : 음성 인식부
170 : 층 입력부 180 : 원격 제어부110: camera 120: identity determination unit
130: identity information database 140: central control unit
150: voice guide unit 160: voice recognition unit
170: floor input unit 180: remote control unit
Claims (9)
엘리베이터 내 기 설정된 구역에 설치되어, 사용자가 탑승하면 촬영하는 카메라;
상기 카메라가 촬영한 촬영 영상을 가져와서 사용자의 얼굴 부분을 추출하고 그 추출된 얼굴인식 데이터와 상기 신원정보 데이터베이스에 저장된 얼굴인식 데이터를 비교하여 사용자의 신원을 판단하는 신원 판단부;
상기 신원 판단부가 사용자의 신원을 판단하면, 사용자가 이동하고자 하는 이동 층을 자동 결정하여 엘리베이터의 운행을 제어하는 중앙제어부를 포함하고,
사용자의 신원이 판단되어 이동 층이 자동 결정되면, 그 이동 층 정보가 스피커를 통해 출력되도록 처리하는 음성 안내부 및 상기 음성 안내부에 의해 이동 층 정보가 스피커를 통해 출력되면, 마이크를 통해 사용자로부터 그에 대한 응답을 입력받아 분석하는 음성 인식부를 더 포함하는 것을 특징으로 하는 음성 및 얼굴 인식을 이용한 엘리베이터 시스템.
An identity information database storing face recognition data and moving floor data for each user;
A camera installed in a predetermined area within the elevator and photographed when the user boards;
An identity determination unit which takes a photographed image captured by the camera, extracts a face part of the user, and compares the extracted face recognition data with face recognition data stored in the identity information database to determine a user's identity;
When the identity determination unit determines the identity of the user, and includes a central control unit for controlling the operation of the elevator by automatically determining the moving floor to be moved by the user,
When the user's identity is determined and the mobile floor is automatically determined, the voice guide unit processes the mobile floor information to be output through the speaker and the mobile floor information is output through the speaker by the voice guide unit. Elevator system using voice and face recognition, characterized in that it further comprises a voice recognition unit for receiving and analyzing the response.
상기 음성 인식부가 사용자가 상기 음성 안내부를 통해 안내된 그 이동 층으로 이동하는 것에 대해 긍정적인 응답을 했다고 판단한 경우,
상기 중앙제어부는, 중앙제어부에 의해 자동 결정된 이동 층으로 엘리베이터가 운행되도록 처리하는 것을 특징으로 하는 음성 및 얼굴 인식을 이용한 엘리베이터 시스템.
The method of claim 1,
If the speech recognition unit determines that the user has made a positive response to the movement to the mobile floor guided through the speech guidance unit,
The central control unit, the elevator system using the voice and face recognition, characterized in that for processing to operate the elevator to the moving floor automatically determined by the central control unit.
상기 음성 인식부가 사용자가 상기 음성 안내부를 통해 안내된 그 이동 층으로 이동하는 것에 대해 부정적인 응답을 했다고 판단한 경우,
상기 중앙제어부는, 사용자가 층 입력부를 통해 자신이 가고자 하는 층을 입력하도록 스피커를 통해 음성 안내를 하고, 층 입력부를 통해 이동 층 데이터를 입력받거나 음성인식을 통해 인식된 그 이동 층으로 엘리베이터가 운행되도록 처리하는 것을 특징으로 하는 음성 및 얼굴 인식을 이용한 엘리베이터 시스템.
5. The method of claim 4,
If the speech recognition unit judges that the user has a negative response to the movement to the mobile floor guided through the voice guide,
The central control unit provides voice guidance through a speaker so that a user inputs a floor to which he / she wants to go through the floor input unit, and the elevator operates to the mobile floor that receives the moving floor data through the floor input unit or is recognized through voice recognition. Elevator system using voice and face recognition, characterized in that processing as possible.
상기 신원정보 데이터베이스에 저장된 사용자의 얼굴인식 데이터 및 이동 층 데이터가 변경 또는 갱신되는 경우,
상기 신원정보 데이터베이스가 원격 업데이트 되도록 제어하는 원격 제어부;를 더 포함하는 것을 특징으로 하는 음성 및 얼굴 인식을 이용한 엘리베이터 시스템.
The method of claim 1,
When face recognition data and moving floor data of the user stored in the identity information database are changed or updated,
And a remote controller for controlling the identity database to be remotely updated.
신원 판단부가 상기 (A)단계에 의해 생성된 촬영 영상을 가져와서 사용자의 얼굴 부분을 추출하고 그 추출된 얼굴인식 데이터와 신원정보 데이터베이스에 미리 저장된 얼굴인식 데이터를 비교하여 사용자의 신원을 판단하는 (B)단계;
상기 (B)단계에 의해 사용자의 신원을 판단되면, 중앙 제어부가 사용자가 이동하고자 하는 이동 층을 자동 결정하는 (C)단계;
상기 (C)단계에 의해 이동 층이 자동 결정되면, 음성 안내부가 그 이동 층 정보가 스피커를 통해 출력되도록 처리하는 (D)단계; 및
상기 (D)단계에 의해 이동 층 정보가 스피커를 통해 출력되면, 음성 인식부가 사용자로부터 마이크를 통해 그에 대한 응답을 입력받아 분석하고, 중앙제어부가 그 응답에 따라 엘리베이터의 동작을 제어하는 (E)단계;를 포함하는 것을 특징으로 하는 음성 및 얼굴 인식을 이용한 엘리베이터 시스템의 동작방법.
(A) photographing when a user boards a camera installed in a predetermined area within an elevator;
The identity determination unit extracts the face part of the user by taking the photographed image generated by step (A), and compares the extracted face recognition data with face recognition data stored in the identity information database to determine the user's identity ( B) step;
(C) automatically determining, by the central controller, a moving floor to which the user wants to move if the user's identity is determined by the step (B);
If the moving floor is automatically determined by the step (C), the voice guide unit processing the moving floor information to be output through the speaker; And
When the moving floor information is output through the speaker by the step (D), the voice recognition unit receives and analyzes the response from the user through the microphone, and the central control unit controls the operation of the elevator according to the response. Operation method of the elevator system using the voice and face recognition, characterized in that it comprises a.
상기 음성 인식부가 사용자가 상기 (D)단계에 의해 안내된 그 이동 층으로 이동하는 것에 대해 긍정적인 응답을 했다고 판단한 경우,
중앙 제어부가 상기 (C)단계에 의해 자동 결정된 이동 층으로 엘리베이터가 운행되도록 처리하는 것을 특징으로 하는 음성 및 얼굴 인식을 이용한 엘리베이터 시스템의 동작방법.
The method of claim 7, wherein the step (E),
If the speech recognition unit determines that the user has made a positive response to the movement to the mobile floor guided by step (D),
Method of operation of the elevator system using the voice and facial recognition, characterized in that the central control unit processes the elevator to move to the moving floor automatically determined by the step (C).
상기 음성 인식부가 사용자가 상기 (D)단계에 의해 안내된 그 이동 층으로 이동하는 것에 대해 부정적인 응답을 했다고 판단한 경우,
중앙 제어부가 사용자가 층 입력부를 통해 자신이 가고자 하는 층을 입력하거나 음성인식을 통해 가고자 하는 층을 말하도록 스피커를 통해 음성 안내를 하고, 층 입력부를 통해 이동 층 데이터를 입력받거나 음성인식을 통해 층 입력을 받으면 그 이동 층으로 엘리베이터가 운행되도록 처리하는 것을 특징으로 하는 음성 및 얼굴 인식을 이용한 엘리베이터 시스템의 동작방법.The method of claim 7, wherein the step (E),
If the speech recognition unit determines that the user has a negative response to the movement to the mobile floor guided by step (D),
The central control unit provides voice guidance through a speaker so that a user inputs a floor to go through the floor input unit or speaks a floor through voice recognition, receives mobile floor data through the floor input unit, or receives a floor through voice recognition. Operating method of the elevator system using the voice and face recognition, characterized in that the process is processed so that the elevator is driven to the moving floor upon receiving the input.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020100092027A KR101197517B1 (en) | 2010-09-17 | 2010-09-17 | Automatic elevator control system and method using voice and face recognition |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020100092027A KR101197517B1 (en) | 2010-09-17 | 2010-09-17 | Automatic elevator control system and method using voice and face recognition |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20120029903A KR20120029903A (en) | 2012-03-27 |
KR101197517B1 true KR101197517B1 (en) | 2012-11-09 |
Family
ID=46134206
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020100092027A KR101197517B1 (en) | 2010-09-17 | 2010-09-17 | Automatic elevator control system and method using voice and face recognition |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101197517B1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106586731A (en) * | 2016-12-30 | 2017-04-26 | 移康智能科技(上海)股份有限公司 | Visitor identifying system and method and cat eye |
KR102210010B1 (en) * | 2020-09-25 | 2021-02-01 | (주)킴스프로젝트 | Non-contact elevator system using voice recognition and method for operating thereof |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105947818A (en) * | 2016-05-03 | 2016-09-21 | 东南和创(厦门)电梯安全科技有限公司 | Elevator stop floor control method based on face recognition |
KR102021394B1 (en) * | 2017-06-29 | 2019-09-20 | 황성수 | Method of user-based elevator apparatus with artificial intelligence type |
JP6976211B2 (en) * | 2018-03-30 | 2021-12-08 | フジテック株式会社 | Elevator controller |
CN111573445A (en) * | 2020-05-09 | 2020-08-25 | 森赫电梯股份有限公司 | Non-contact man-machine interaction system for elevator |
KR102446670B1 (en) * | 2020-07-27 | 2022-09-27 | 주식회사 피앤씨솔루션 | Ai based non-contact elevator control system |
CN112299164B (en) * | 2020-10-22 | 2022-11-29 | 广州广日电梯工业有限公司 | Building elevator access management control system and control method thereof |
KR102559907B1 (en) * | 2021-04-14 | 2023-07-26 | 엔앰엠 주식회사 | (Non-contact elevator system |
CN114291698A (en) * | 2021-12-29 | 2022-04-08 | 广东华凯电梯有限公司 | Digital elevator connected with intelligent security monitoring system |
CN114194967A (en) * | 2021-12-31 | 2022-03-18 | 河北三川科技有限公司 | Automatic elevator system based on face recognition and operation method |
CN114715740A (en) * | 2022-03-01 | 2022-07-08 | 浙江威特电梯有限公司 | Passenger elevator with voice automatic calling elevator |
CN114920096A (en) * | 2022-05-14 | 2022-08-19 | 云知声智能科技股份有限公司 | Elevator control method and device based on intelligent large screen, electronic equipment and storage medium |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005272100A (en) * | 2004-03-25 | 2005-10-06 | Hitachi Building Systems Co Ltd | Call registration device for elevator |
JP2008120549A (en) | 2006-11-14 | 2008-05-29 | Mitsubishi Electric Corp | Elevator call registration device |
-
2010
- 2010-09-17 KR KR1020100092027A patent/KR101197517B1/en not_active IP Right Cessation
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005272100A (en) * | 2004-03-25 | 2005-10-06 | Hitachi Building Systems Co Ltd | Call registration device for elevator |
JP2008120549A (en) | 2006-11-14 | 2008-05-29 | Mitsubishi Electric Corp | Elevator call registration device |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106586731A (en) * | 2016-12-30 | 2017-04-26 | 移康智能科技(上海)股份有限公司 | Visitor identifying system and method and cat eye |
CN106586731B (en) * | 2016-12-30 | 2019-09-20 | 移康智能科技(上海)股份有限公司 | A kind of visitor's identifying system, method and a kind of opal |
KR102210010B1 (en) * | 2020-09-25 | 2021-02-01 | (주)킴스프로젝트 | Non-contact elevator system using voice recognition and method for operating thereof |
Also Published As
Publication number | Publication date |
---|---|
KR20120029903A (en) | 2012-03-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101197517B1 (en) | Automatic elevator control system and method using voice and face recognition | |
US10189677B2 (en) | Elevator control system with facial recognition and authorized floor destination verification | |
KR101045842B1 (en) | Apparatus for recogniging voice of elevator and method for controling the same | |
CN102992122A (en) | Elevator operation control method,elevator operation control device using the method, and elevator operation control system | |
JPWO2011007428A1 (en) | Elevator system | |
CN110386515B (en) | Method for controlling elevator stop floor based on artificial intelligence and related equipment | |
JP6230472B2 (en) | Group management elevator equipment | |
JP6607334B1 (en) | Elevator landing guidance device | |
JPH10114472A (en) | Controller for elevator | |
CN111627443B (en) | Elevator recommendation method, device, equipment and medium | |
CN110121474A (en) | Elevator call input apparatus | |
JP2015224133A (en) | Elevator system | |
JP6251638B2 (en) | Elevator system | |
KR101026730B1 (en) | Apparatus of operating elevator for the blind | |
KR100554918B1 (en) | calling and reservstion apparatus for elevator and method thereof | |
JP2008044711A (en) | Elevator system and its operating method | |
CN111792466A (en) | Control method and system for taking public elevator without contact | |
KR20190002131A (en) | User-based elevator apparatus with artificial intelligence type, and method thereof | |
WO2019106756A1 (en) | Device for sensing user of elevator | |
JP6648728B2 (en) | Elevator security driving system | |
JP4968663B2 (en) | Intercom system | |
JP6422365B2 (en) | Elevator voice call registration device and elevator voice call registration method | |
JP2005212923A (en) | Control system of elevator | |
JP6901992B2 (en) | Guidance robot system and language selection method | |
JP6586617B2 (en) | Speech recognition apparatus, method, and computer program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20151007 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20161010 Year of fee payment: 5 |
|
LAPS | Lapse due to unpaid annual fee |