KR102412643B1 - 개인 맞춤형 인공지능 키오스크 장치 및 이를 이용한 서비스 방법 - Google Patents
개인 맞춤형 인공지능 키오스크 장치 및 이를 이용한 서비스 방법 Download PDFInfo
- Publication number
- KR102412643B1 KR102412643B1 KR1020200121422A KR20200121422A KR102412643B1 KR 102412643 B1 KR102412643 B1 KR 102412643B1 KR 1020200121422 A KR1020200121422 A KR 1020200121422A KR 20200121422 A KR20200121422 A KR 20200121422A KR 102412643 B1 KR102412643 B1 KR 102412643B1
- Authority
- KR
- South Korea
- Prior art keywords
- user
- kiosk
- artificial intelligence
- unit
- customized
- Prior art date
Links
- 238000013473 artificial intelligence Methods 0.000 title claims abstract description 94
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000008569 process Effects 0.000 claims abstract description 30
- 238000013459 approach Methods 0.000 claims abstract description 13
- 238000012545 processing Methods 0.000 claims abstract description 12
- 230000006870 function Effects 0.000 claims description 26
- 230000014509 gene expression Effects 0.000 claims description 6
- 238000012549 training Methods 0.000 claims description 4
- 238000006243 chemical reaction Methods 0.000 claims description 3
- 238000007781 pre-processing Methods 0.000 claims description 3
- 238000005516 engineering process Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 5
- 230000003993 interaction Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000004913 activation Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 235000014510 cooky Nutrition 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 239000013598 vector Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F17/00—Coin-freed apparatus for hiring articles; Coin-freed facilities or services
- G07F17/40—Coin-freed apparatus for hiring articles; Coin-freed facilities or services for devices for accepting orders, advertisements, or the like
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/06—Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
- G10L15/063—Training
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Acoustics & Sound (AREA)
- General Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Artificial Intelligence (AREA)
- Oral & Maxillofacial Surgery (AREA)
- User Interface Of Digital Computer (AREA)
- Information Transfer Between Computers (AREA)
Abstract
본 발명은 개인 맞춤형 인공지능 키오스크 장치 및 이를 이용한 서비스 방법에 관한 것으로, 상기 장치는 키오스크 단말을 통해 일반 컨텐츠를 제공하는 과정에서 상기 키오스크 단말의 인근에서 사용자의 접근이 검출되면 해당 사용자를 식별하는 사용자 식별부; 상기 키오스크 단말을 통해 상기 사용자의 요청을 처리하는 사용자 맞춤형 캐릭터를 제공하는 맞춤형 캐릭터 제공부; 상기 요청을 처리하는 과정에서 상기 사용자 맞춤형 캐릭터와 상기 사용자 간의 토크 내용을 수집하여 저장하는 토크 수집부; 및 상기 토크 내용을 사용자 단위로 학습하여 생성된 적어도 하나의 인공지능을 이용하여 사용자 맞춤형 컨텐츠를 제공하는 프로모션 제공부를 포함한다.
Description
본 발명은 개인 맞춤형 인공지능 키오스크 기술에 관한 것으로, 보다 상세하게는 키오스크에 인공지능 기술을 접목하여 음성인식 기능 및 개인화된 맞춤형 캐릭터와 컨텐츠를 제공하는 사용자 중심의 개인 맞춤형 인공지능 키오스크 장치 및 이를 이용한 서비스 방법에 관한 것이다.
키오스크(KIOSK)는 정부기관이나 지방자치단체, 금융기관, 백화점, 전시장 등의 장소에 설치된 무인 정보단말기에 해당할 수 있다. 키오스크는 동적 교통정보 및 대중교통정보, 경로 안내, 예약 업무, 각종 전화번호 및 주소 안내 정보제공, 행정절차나 상품정보, 시설물의 이용방법 등과 같이 사용자의 편의를 위한 다양한 정보를 제공할 수 있다.
현재까지의 키오스크는 사용자 입장에서 정보를 제공하고 있지 않아 사용자가 원하는 정보를 찾기 위해 상당한 노력을 들여야 하는 문제가 존재한다. 심지어, 기기 사용에 익숙하지 않은 경우 자신이 원하는 서비스를 이용하지 못하는 상황도 종종 발생하고 있는 실정이다.
즉, 키오스크는 사람을 대신하여 관련 동작을 수행할 수 있다는 이점에도 불구하고 사람과 사람 사이에 형성되는 감정까지 그대로 전달하기 힘들다는 점에서 키오스크를 이용하는 사용자 입장을 배려할 수 있는 기술의 필요성이 점차적으로 증가하고 있다.
본 발명의 일 실시예는 키오스크에 인공지능 기술을 접목하여 음성인식 기능 및 개인화된 맞춤형 캐릭터와 컨텐츠를 제공하는 사용자 중심의 개인 맞춤형 인공지능 키오스크 장치 및 이를 이용한 서비스 방법을 제공하고자 한다.
본 발명의 일 실시예는 키오스크에 인공지능 기술을 접목하여 보다 편리하게 개인에게 필요한 맞춤형 정보를 전달 가능하고 마케팅 관점에서 다양한 활용이 가능한 개인 맞춤형 인공지능 키오스크 장치 및 이를 이용한 서비스 방법을 제공하고자 한다.
실시예들 중에서, 개인 맞춤형 인공지능 키오스크 장치는 키오스크 단말을 통해 일반 컨텐츠를 제공하는 과정에서 상기 키오스크 단말의 인근에서 사용자의 접근이 검출되면 해당 사용자를 식별하는 사용자 식별부; 상기 키오스크 단말을 통해 상기 사용자의 요청을 처리하는 사용자 맞춤형 캐릭터를 제공하는 맞춤형 캐릭터 제공부; 상기 요청을 처리하는 과정에서 상기 사용자 맞춤형 캐릭터와 상기 사용자 간의 토크 내용을 수집하여 저장하는 토크 수집부; 및 상기 토크 내용을 사용자 단위로 학습하여 생성된 적어도 하나의 인공지능을 이용하여 사용자 맞춤형 컨텐츠를 제공하는 프로모션 제공부를 포함한다.
상기 사용자의 요청은 상기 키오스크 단말에 의해 제공되는 음성인식 기능을 이용한 음성 명령, 텍스트인식 기능을 이용한 텍스트 명령 및 메뉴기능을 이용한 터치 명령을 포함할 수 있다.
상기 사용자 식별부는 상기 인근의 영상을 획득하는 영상 모듈을 포함하고, 상기 영상 모듈에 의해 수집된 영상에서 사용자 얼굴이 검출된 경우 해당 사용자 얼굴이 등록된 사용자에 해당하는지 여부를 결정하며, 사용자 등록이 필요한 경우 사용자의 선택 입력을 수신하여 사용자 등록 모드로의 전환을 수행할 수 있다.
상기 맞춤형 캐릭터 제공부는 사용자 식별정보를 기초로 기 정의된 복수의 디지털 캐릭터들 중 어느 하나를 선택하거나 또는 해당 사용자 영상을 기초로 디지털 캐릭터화 하여 상기 사용자 맞춤형 캐릭터로서 제공하면서 상황 컨텍스트에 따라 해당 디지털 캐릭터의 최초 표정을 동적으로 갱신할 수 있다.
상기 토크 수집부는 상기 토크 내용을 전처리하여 학습 데이터 집합을 생성하고, 상기 학습 데이터 집합은 제1 대화와 이에 응답하는 제2 대화로 그룹화된 단위 대화들로 구성되며, 상기 단위 대화들은 상기 사용자와의 연관성을 기준으로 선별될 수 있다.
상기 프로모션 제공부는 상기 학습 데이터 집합에서 상기 사용자에게 제공되는 서비스 유형 별로 기 설정된 유효 기간 내의 단위 대화들 만을 추출하여 상기 학습을 수행할 수 있다.
상기 프로모션 제공부는 상기 사용자 맞춤형 컨텐츠의 제공 과정에서 상기 영상 모듈을 통해 상기 사용자의 제스처를 검출하고, 상기 제스처가 사용자 단말에 관한 동작에 해당하면서 상기 인근으로부터 상기 사용자의 이탈과 함께 검출된 경우 상기 사용자 맞춤형 컨텐츠의 제공을 상기 사용자 단말로 자동 전환할 수 있다.
실시예들 중에서, 개인 맞춤형 인공지능 키오스크 장치를 이용한 서비스 방법은 키오스크 단말의 인근에서 사용자의 접근이 검출되면 해당 사용자를 식별하는 단계; 상기 키오스크 단말을 통해 상기 사용자의 요청을 처리하는 사용자 맞춤형 캐릭터를 제공하는 단계; 상기 요청을 처리하는 과정에서 상기 맞춤형 캐릭터와 상기 사용자 간의 토크 내용을 수집하여 저장하는 단계; 및 상기 토크 내용을 사용자 단위로 학습하여 생성된 적어도 하나의 인공지능을 이용하여 사용자 맞춤형 컨텐츠를 제공하는 단계를 포함한다.
개시된 기술은 다음의 효과를 가질 수 있다. 다만, 특정 실시예가 다음의 효과를 전부 포함하여야 한다거나 다음의 효과만을 포함하여야 한다는 의미는 아니므로, 개시된 기술의 권리범위는 이에 의하여 제한되는 것으로 이해되어서는 아니 될 것이다.
본 발명의 일 실시예에 따른 개인 맞춤형 인공지능 키오스크 장치 및 이를 이용한 서비스 방법은 키오스크에 인공지능 기술을 접목하여 음성인식 기능 및 개인화된 맞춤형 캐릭터와 컨텐츠를 제공할 수 있다.
본 발명의 일 실시예에 따른 개인 맞춤형 인공지능 키오스크 장치 및 이를 이용한 서비스 방법은 키오스크에 인공지능 기술을 접목하여 보다 편리하게 개인에게 필요한 맞춤형 정보를 전달 가능하고 마케팅 관점에서 다양한 활용이 가능할 수 있다.
도 1은 본 발명에 따른 개인 맞춤형 인공지능 키오스크 시스템을 설명하는 도면이다.
도 2는 도 1의 인공지능 키오스크 장치의 시스템 구성을 설명하는 도면이다.
도 3은 도 1의 인공지능 키오스크 장치의 기능적 구성을 설명하는 도면이다.
도 4는 본 발명의 일 실시예에 따른 개인 맞춤형 인공지능 키오스크 장치를 이용한 서비스 과정을 설명하는 순서도이다.
도 5는 본 발명의 일 실시예에 따른 개인 맞춤형 인공지능 키오스크 장치의 화면 구성을 설명하는 예시도이다.
도 2는 도 1의 인공지능 키오스크 장치의 시스템 구성을 설명하는 도면이다.
도 3은 도 1의 인공지능 키오스크 장치의 기능적 구성을 설명하는 도면이다.
도 4는 본 발명의 일 실시예에 따른 개인 맞춤형 인공지능 키오스크 장치를 이용한 서비스 과정을 설명하는 순서도이다.
도 5는 본 발명의 일 실시예에 따른 개인 맞춤형 인공지능 키오스크 장치의 화면 구성을 설명하는 예시도이다.
본 발명에 관한 설명은 구조적 내지 기능적 설명을 위한 실시예에 불과하므로, 본 발명의 권리범위는 본문에 설명된 실시예에 의하여 제한되는 것으로 해석되어서는 아니 된다. 즉, 실시예는 다양한 변경이 가능하고 여러 가지 형태를 가질 수 있으므로 본 발명의 권리범위는 기술적 사상을 실현할 수 있는 균등물들을 포함하는 것으로 이해되어야 한다. 또한, 본 발명에서 제시된 목적 또는 효과는 특정 실시예가 이를 전부 포함하여야 한다거나 그러한 효과만을 포함하여야 한다는 의미는 아니므로, 본 발명의 권리범위는 이에 의하여 제한되는 것으로 이해되어서는 아니 될 것이다.
한편, 본 출원에서 서술되는 용어의 의미는 다음과 같이 이해되어야 할 것이다.
"제1", "제2" 등의 용어는 하나의 구성요소를 다른 구성요소로부터 구별하기 위한 것으로, 이들 용어들에 의해 권리범위가 한정되어서는 아니 된다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어"있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결될 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어"있다고 언급된 때에는 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 한편, 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함하는 것으로 이해되어야 하고, "포함하다"또는 "가지다" 등의 용어는 실시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
각 단계들에 있어 식별부호(예를 들어, a, b, c 등)는 설명의 편의를 위하여 사용되는 것으로 식별부호는 각 단계들의 순서를 설명하는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 일어날 수 있다. 즉, 각 단계들은 명기된 순서와 동일하게 일어날 수도 있고 실질적으로 동시에 수행될 수도 있으며 반대의 순서대로 수행될 수도 있다.
본 발명은 컴퓨터가 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현될 수 있고, 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
여기서 사용되는 모든 용어들은 다르게 정의되지 않는 한, 본 발명이 속하는 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한 이상적이거나 과도하게 형식적인 의미를 지니는 것으로 해석될 수 없다.
도 1은 본 발명에 따른 개인 맞춤형 인공지능 키오스크 시스템을 설명하는 도면이다.
도 1을 참조하면, 개인 맞춤형 인공지능 키오스크 시스템(100)은 사용자 단말(110), 키오스크 단말(120), 인공지능 키오스크 장치(130) 및 데이터베이스(140)를 포함할 수 있다.
사용자 단말(110)은 다양한 컨텐츠를 확인하고 이용할 수 있는 컴퓨팅 장치에 해당할 수 있고, 스마트폰, 노트북 또는 컴퓨터로 구현될 수 있으며, 반드시 이에 한정되지 않고, 태블릿 PC 등 다양한 디바이스로도 구현될 수 있다. 사용자 단말(110)은 통신 기능을 포함하여 구현될 수 있으며 이를 통해 외부 시스템이나 인터넷 등 네트워크를 이용한 데이터 통신을 수행할 수 있다.
또한, 사용자 단말(110)은 키오스크 단말(120) 및 인공지능 키오스크 장치(130)와 네트워크를 통해 연결될 수 있고, 복수의 사용자 단말(110)들은 인공지능 키오스크 장치(130)와 동시에 연결될 수 있다. 사용자 단말(110)은 키오스크 단말(120) 및 인공지능 키오스크 장치(130)와의 연동을 위한 전용 프로그램 또는 애플리케이션을 설치하여 실행할 수 있다.
키오스크 단말(120)은 정보 제공 또는 사용자와의 인터랙션을 제공하는 키오스크에 해당할 수 있다. 키오스크 단말(120)은 정보 제공을 위한 디스플레이 화면을 포함하여 구현될 수 있고, 사용자와의 다양한 상호작용을 위하여 입력, 출력 및 통신 모듈을 포함하여 구현될 수 있다. 키오스크 단말(120)은 사용자 단말(110) 및 인공지능 키오스크 장치(130)와 네트워크를 통해 연결될 수 있고, 복수의 키오스크 단말(120)들은 인공지능 키오스크 장치(130) 동시에 연결될 수 있다.
또한, 키오스크 단말(120)은 사용자의 음성을 인식할 수 있는 음성인식 기능, 텍스트를 사람의 음성으로 출력할 수 있는 음성합성 기능, 사용자의 접근이나 이탈을 감지하는 동작감지 기능 및 사용자를 식별하는 얼굴인식 기능 등을 포함하여 구현될 수 있다. 한편, 키오스크 단말(120)은 인공지능 키오스크 장치(130)와 연동하여 동작함으로써 상기의 다양한 기능들을 구현할 수도 있다.
인공지능 키오스크 장치(130)는 인공지능 기술을 적용하여 사용자와의 상호작용을 수행하고 사용자 맞춤형 컨텐츠를 제공할 수 있는 컴퓨팅 장치에 해당할 수 있다. 인공지능 키오스크 장치(130)는 키오스크 단말(120)의 내부에 포함되어 구현될 수 있고, 키오스크 단말(120)과 분리되어 독립적인 장치로서 구현될 수도 있다. 만약 키오스크 단말(120)과 분리되어 구현된 경우 인공지능 키오스크 장치(130)는 키오스크 단말(120)과 독립적으로 동작하는 컴퓨터 또는 프로그램에 해당하는 서버로 구현될 수 있다. 이 경우, 인공지능 키오스크 장치(130)는 적어도 하나의 키오스크 단말(120)과 네트워크를 통해 연결될 수 있고, 제어 명령을 전달함으로써 각 키오스크 단말(120)의 동작을 제어할 수 있다. 또한, 인공지능 키오스크 장치(130)는 사용자 단말(110)과 네트워크를 통해 직접 연결될 수 있고 정보를 주고받을 수 있다.
일 실시예에서, 인공지능 키오스크 장치(130)는 데이터베이스(140)와 연동하여 인공지능 기반의 맞춤형 키오스크 서비스를 제공하기 위하여 필요한 데이터를 저장할 수 있다. 또한, 인공지능 키오스크 장치(130)는 프로세서, 메모리, 사용자 입출력부 및 네트워크 입출력부를 포함하여 구현될 수 있으며, 이에 대해서는 도 2에서 보다 자세히 설명한다.
또한, 인공지능 키오스크 장치(130)는 적어도 하나의 외부 시스템과 연동하여 동작할 수 있다. 예를 들어, 외부 시스템은 인공지능 학습을 수행하는 전용 서버에 해당하는 인공지능 서버, 서비스 결제를 위한 결제 서버, 영수증 발행을 위한 영수증 서버 등을 포함할 수 있다.
데이터베이스(140)는 인공지능 키오스크 장치(130)의 동작 과정에서 필요한 다양한 정보들을 저장하는 저장장치에 해당할 수 있다. 데이터베이스(140)는 사용자와의 인터랙션 과정에서 수집된 사용자 식별정보를 저장할 수 있고, 사용자와 주고받은 대화 내용을 저장할 수 있으며, 반드시 이에 한정되지 않고, 인공지능 기반의 키오스크 서비스 제공 과정에서 다양한 형태로 수집 또는 가공된 정보들을 저장할 수 있다.
도 2는 도 1의 인공지능 키오스크 장치의 시스템 구성을 설명하는 도면이다.
도 2를 참조하면, 인공지능 키오스크 장치(130)는 프로세서(210), 메모리(220), 사용자 입출력부(230) 및 네트워크 입출력부(240)를 포함하여 구현될 수 있다.
프로세서(210)는 인공지능 키오스크 장치(130)의 각 동작을 처리하는 프로시저를 실행할 수 있고, 그 과정 전반에서 읽혀지거나 작성되는 메모리(220)를 관리할 수 있으며, 메모리(220)에 있는 휘발성 메모리와 비휘발성 메모리 간의 동기화 시간을 스케줄할 수 있다. 프로세서(210)는 인공지능 키오스크 장치(130)의 동작 전반을 제어할 수 있고, 메모리(220), 사용자 입출력부(230) 및 네트워크 입출력부(240)와 전기적으로 연결되어 이들 간의 데이터 흐름을 제어할 수 있다. 프로세서(210)는 인공지능 키오스크 장치(130)의 CPU(Central Processing Unit)로 구현될 수 있다.
메모리(220)는 SSD(Solid State Drive) 또는 HDD(Hard Disk Drive)와 같은 비휘발성 메모리로 구현되어 인공지능 키오스크 장치(130)에 필요한 데이터 전반을 저장하는데 사용되는 보조기억장치를 포함할 수 있고, RAM(Random Access Memory)과 같은 휘발성 메모리로 구현된 주기억장치를 포함할 수 있다.
사용자 입출력부(230)는 사용자 입력을 수신하기 위한 환경 및 사용자에게 특정 정보를 출력하기 위한 환경을 포함할 수 있다. 예를 들어, 사용자 입출력부(230)는 터치 패드, 터치 스크린, 화상 키보드 또는 포인팅 장치와 같은 어댑터를 포함하는 입력장치 및 모니터 또는 터치스크린과 같은 어댑터를 포함하는 출력장치를 포함할 수 있다. 일 실시예에서, 사용자 입출력부(230)는 원격 접속을 통해 접속되는 컴퓨팅 장치에 해당할 수 있고, 그러한 경우, 인공지능 키오스크 장치(130)는 서버로서 수행될 수 있다.
네트워크 입출력부(240)은 네트워크를 통해 외부 장치 또는 시스템과 연결하기 위한 환경을 포함하고, 예를 들어, LAN(Local Area Network), MAN(Metropolitan Area Network), WAN(Wide Area Network) 및 VAN(Value Added Network) 등의 통신을 위한 어댑터를 포함할 수 있다.
도 3은 도 1의 인공지능 키오스크 장치의 기능적 구성을 설명하는 도면이다.
도 3을 참조하면, 인공지능 키오스크 장치(130)는 사용자 식별부(310), 맞춤형 캐릭터 제공부(320), 토크 수집부(330), 프로모션 제공부(340) 및 제어부(350)를 포함할 수 있다.
사용자 식별부(310)는 키오스크 단말(120)을 통해 일반 컨텐츠를 제공하는 과정에서 키오스크 단말(120)의 인근에서 사용자의 접근이 검출되면 해당 사용자를 식별할 수 있다. 키오스크 단말(120)이 사용자의 접근을 자체적으로 검출할 수 있는 경우, 사용자 식별부(310)는 키오스크 단말(120)로부터 사용자의 접근에 관한 검출 결과만을 수신할 수 있고, 이에 따른 사용자 식별 동작을 개시할 수도 있다. 사용자 검출 방법은 센서를 이용한 방법, 이미지 또는 영상 분석을 이용한 방법 등을 포함할 수 있다.
한편, 사용자 식별부(310)는 키오스크 단말(120)에 접근하는 사용자는 단순 검출하는데 그치지 않고, 사용자 등록을 통해 등록된 사용자를 식별할 수도 있다. 사용자 식별을 위해서는 사용자 정보를 사전에 저장하기 위한 사용자 등록 과정이 필수적을 요구될 수 있다.
일 실시예에서, 사용자 식별부(310)는 인근의 영상을 획득하는 영상 모듈을 포함하고, 영상 모듈에 의해 수집된 영상에서 사용자 얼굴이 검출된 경우 해당 사용자 얼굴이 등록된 사용자에 해당하는지 여부를 결정할 수 있으며, 사용자 등록이 필요한 경우 사용자의 선택 입력을 수신하여 사용자 등록 모드로의 전환을 수행할 수 있다. 이 때, 영상 모듈은 키오스크 단말(120)의 내부에 포함되어 구현될 수 있고, 영상 모듈에 의해 수집된 영상은 키오스크 단말(120)을 통해 사용자 식별부(310)로 전달될 수 있다. 사용자 식별부(310)는 영상 모듈에 의해 수집된 영상을 분석하여 사용자 얼굴을 검출할 수 있다.
이를 위해 사용자 식별부(310)는 얼굴인식 기술을 포함하여 구현될 수 있다. 얼굴인식 기술은 이미지 또는 영상을 분석하여 해당 이미지 또는 영상 내의 객체를 검출하고, 검출된 객체가 사람인지를 결정하는 동작을 구현한 것으로 사용자 식별부(310)는 얼굴인식 기술을 활용하여 이미지 또는 영상에 포함된 사용자를 검출할 수 있다. 또한, 사용자 식별부(310)는 시계열 순서에 따라 연속하여 획득된 영상으로부터 사용자의 접근이나 이탈 여부도 검출할 수도 있다. 예를 들어, 연속하여 획득된 영상들에서 검출된 객체의 크기가 증가하는 경우 해당 객체의 접근이 발생한 것으로 결정되고, 검출된 객체의 크기가 감소하는 경우 해당 객체의 이탈이 발생한 것으로 결정될 수 있다.
한편, 사용자 식별부(310)는 식별된 사용자가 등록되지 않은 사용자인 경우 사용자 등록에 관한 선택을 요청할 수 있고, 사용자의 선택에 따라 사용자 등록 과정이 순차적으로 진행되는 등록 모드로의 전환을 수행할 수 있다
맞춤형 캐릭터 제공부(320)는 키오스크 단말(120)을 통해 사용자의 요청을 처리하는 사용자 맞춤형 캐릭터를 제공할 수 있다. 맞춤형 캐릭터 제공부(320)는 키오스크 단말(120)로의 사용자 접근에 따라 사용자와 상호작용할 수 있는 디지털 캐릭터를 사용자 맞춤형 캐릭터로서 제공할 수 있다. 즉, 사용자 맞춤형 캐릭터는 키오스크 단말(120)을 이용하는 사용자의 행동에 반응하도록 구현되어 사용자의 흥미를 유발하면서 사용자가 보다 자연스럽게 키오스크 단말(120)을 이용할 수 있도록 할 수 있다.
또한, 사용자 맞춤형 캐릭터는 사용자의 흥미를 유발하고 사용자에게 친근감을 제공하기 위하여 사용자 별로 최적화된 캐릭터 특성을 포함할 수 있다. 즉, 사용자 맞춤형 캐릭터는 가상의 객체임에도 불구하고 사용자의 대화에 자연스럽게 반응하도록 구현되어 사용자가 느낄 수 있는 키오스크 단말(120)에 대한 거부감을 자연스럽게 해소시킬 수 있다.
일 실시예에서, 사용자의 요청은 키오스크 단말(120)에 의해 제공되는 음성인식 기능을 이용한 음성 명령, 텍스트인식 기능을 이용한 텍스트 명령 및 메뉴기능을 이용한 터치 명령을 포함할 수 있다. 즉, 인공지능 키오스크 장치(130)는 다양한 인터페이스 방식을 제공하여 사용자가 보다 편리하게 키오스크 단말(120)을 이용하도록 지원할 수 있다. 예를 들어, 키오스크 단말(120)은 음성인식 기능을 제공하여 사용자는 자신의 요구사항을 말로써 직접 표현하여 원하는 서비스에 접근할 수 있다.
또한, 키오스크 단말(120)은 챗봇(chatbot)이나 페이지톡(pagetalk) 기능을 제공할 수 있고, 사용자는 키오스크 단말(120)을 이용하여 대화하는 방식으로 자신이 원하는 서비스에 손쉽게 접근할 수 있다. 여기에서, 페이지톡(pagetalk) 기능은 홈페이지형 챗봇 기능으로 키오스크 단말(120)의 디스플레이 화면에 적용되어 사용자가 키오스크 단말(120)과 직접 대화(talk)하는 방식으로 제공될 수 있다. 따라서, 사용자는 별도의 게시판이나 컨택 페이지, 검색창으로 전환하지 않더라도 페이지톡 화면 내에서 키오스크 단말(120)과의 다양한 상호작용을 수행할 수 있다.
일 실시예에서, 맞춤형 캐릭터 제공부(320)는 사용자 식별정보를 기초로 기 정의된 복수의 디지털 캐릭터들 중 어느 하나를 선택하거나 또는 해당 사용자 영상을 기초로 디지털 캐릭터화 하여 사용자 맞춤형 캐릭터로서 제공하면서 상황 컨텍스트에 따라 해당 디지털 캐릭터의 최초 표정을 동적으로 갱신할 수 있다. 여기에서, 사용자 식별정보는 사용자의 성별, 나이, 직업, 성향 정보 등을 포함할 수 있고, 상황 컨텍스트는 날씨, 시간, 온도, 습도, 사용자의 보행속도 등을 포함할 수 있다.
즉, 맞춤형 캐릭터 제공부(320)는 사용자에 따라 사용자 선호도가 높은 디지털 캐릭터를 사용자 맞춤형 캐릭터로 제공하여 사용자가 키오스크 단말(120)을 이용하는 과정에서 친근감을 갖도록 할 수 있다. 또한, 맞춤형 캐릭터 제공부(320)는 실제 사용자 영상을 직접 디지털화 하여 디지털 캐릭터를 생성할 수 있고 해당 디지털 캐릭터를 사용자 맞춤형 캐릭터로 제공함으로써 풍부한 사용자의 경험을 제공할 수 있다. 한편, 맞춤형 캐릭터 제공부(320)는 사용자가 접근하는 시점에서의 외부 날씨, 시간, 온도나 습도 등의 환경정보 뿐만 아니라 사용자의 보행속도, 동료 유무 등 사용자로부터 도출되는 동적정보들을 기초로 사용자 맞춤형 캐릭터의 최초 표정을 동적으로 갱신할 수 있다.
또한, 맞춤형 캐릭터 제공부(320)는 외부 환경정보에 따라 사용자 맞춤형 캐릭터의 동작을 동적으로 표현할 수도 있다. 예를 들어, 날씨가 비나 눈이 오는 상황인 경우 맞춤형 캐릭터 제공부(320)는 사용자 맞춤형 캐릭터가 우산을 들고 있는 동작으로 변경하여 키오스크 단말(120)을 통해 디스플레이 할 수 있다. 키오스크 단말(120)로의 사용자의 접근속도가 빠른 경우 맞춤형 캐릭터 제공부(320)는 사용자 맞춤형 캐릭터가 사용자의 주의를 환기하는 동작으로 변경할 수 있다.
토크 수집부(330)는 사용자의 요청을 처리하는 과정에서 사용자 맞춤형 캐릭터와 사용자 간의 토크 내용을 수집하여 저장할 수 있다. 이 때, 토크 내용은 페이지톡 기능을 통해 처리된 대화 내용을 포함할 수 있고, 사용자가 음성 또는 터치 방식으로 입력한 텍스트와 이에 응답하여 제공된 키오스크 단말(120)의 화면 정보를 포함할 수 있으며, 사용자가 선택한 메뉴 정보와 이에 응답하여 제공된 키오스크 단말(120)의 화면 정보를 포함할 수 있다. 이를 위하여, 토크 수집부(330)는 키오스크 단말(120)의 화면 정보 또는 사용자가 선택한 메뉴 정보를 각각 대화형식의 텍스트로 변환하는 전처리 동작을 수행할 수 있다.
일 실시예에서, 토크 수집부(330)는 토크 내용을 전처리하여 학습 데이터 집합을 생성할 수 있다. 이 때, 학습 데이터 집합은 제1 대화와 이에 응답하는 제2 대화로 그룹화된 단위 대화들로 구성될 수 있고, 단위 대화들은 사용자와의 연관성을 기준으로 선별될 수 있다. 토크 수집부(330)에 의해 수집된 토크 내용은 사용자 단위의 학습에 사용될 수 있으며, 이를 위한 전처리 동작으로서 토크 수집부(330)는 토크 내용을 기초로 학습 데이터 집합을 생성할 수 있다. 학습 데이터 집합은 단위 대화들로 구성될 수 있으며, 단위 대화들은 질의와 응답에 관한 대화 쌍에 해당할 수 있다.
한편, 단위 대화에 대한 사용자와의 연관성은 제1 및 제2 대화들 각각과 사용자 식별정보 간의 유사성을 기초로 산출될 수 있다. 보다 구체적으로, 제1 및 제2 대화들 각각은 소정의 단위로 분리될 수 있다. 이 때, 분리 단위는 음소, 음절, 형태소, 단어 및 어절 중 어느 하나에 해당할 수 있다. 그 다음, 제1 및 제2 대화들에서 분리된 각 요소들에 대한 사용자 식별정보와의 유사도가 결정될 수 있다. 예를 들어, 유사도는 단어 임베딩(embedding)을 통해 도출되는 벡터 간의 코사인 유사도를 통해 산출될 수 있다.
그 다음으로, 각 요소들에 대한 사용자 식별정보와의 유사도를 통합한 결과로서 제1 및 제2 대화들 각각의 유사성이 도출되고, 제1 및 제2 대화들의 유사성을 통합한 결과로서 사용자와의 연관성이 결정될 수 있다. 제1 및 제2 대화들의 유사성 간의 통합 방식은 구체적인 수식으로 정의되는 함수로 정의될 수 있다.
프로모션 제공부(340)는 토크 내용을 사용자 단위로 학습하여 생성된 적어도 하나의 인공지능을 이용하여 사용자 맞춤형 컨텐츠를 제공할 수 있다. 즉, 프로모션 제공부(340)는 사용자 단위로 토크 내용을 수집하고 이를 활용하여 사용자에게 최적화된 컨텐츠를 추천할 수 있다. 예를 들어, 프로모션 제공부(340)는 키오스크 단말(120)로 접근하는 사용자를 식별한 후 해당 시점이 점심시간인 경우 인근의 주요 맛집 리스트를 추천할 수 있고, 해당 사용자의 과거 토크 내용을 기초로 추천 순서를 재정렬하여 제공할 수 있다. 한편, 사용자 단위는 사용자 개인 별로 정의될 수 있고, 유사한 사용자들을 하나의 그룹으로 그룹화한 사용자 그룹 별로 정의될 수도 있다.
일 실시예에서, 프로모션 제공부(340)는 학습 데이터 집합에서 사용자에게 제공되는 서비스 유형 별로 기 설정된 유효 기간 내의 단위 대화들 만을 추출하여 학습을 수행할 수 있다. 즉, 프로모션 제공부(340)는 사용자 단위의 토크 내용에 대해 서비스 유형에 따라 과거 사용내역은 제외하고 특정 기간 동안의 최신 내용만을 이용하여 컨텐츠 추천을 수행할 수 있다. 예를 들어, 프로모션 제공부(340)는 사용자가 선택한 서비스의 유형이 유행에 민감한 경우 상대적으로 최근에 수집된 정보만을 이용하여 사용자 맞춤형 컨텐츠를 결정할 수 있다. 또한, 서비스 유형에 따른 유효 시간은 인공지능 키오스크 장치(130)에 의해 사전에 설정되어 활용될 수 있다.
일 실시예에서, 프로모션 제공부(340)는 사용자 맞춤형 컨텐츠의 제공 과정에서 영상 모듈을 통해 사용자의 제스처를 검출하고, 제스처가 사용자 단말에 관한 동작에 해당하면서 키오스크 단말(120)의 인근으로부터 사용자의 이탈과 함께 검출된 경우 사용자 맞춤형 컨텐츠의 제공을 사용자 단말(110)로 자동 전환할 수 있다.
보다 구체적으로, 사용자는 키오스크 단말(120)을 이용하여 필요한 정보를 획득한 경우에는 다음 목적지를 향해 이동할 수 있다. 다만, 급박한 상황 발생으로 인해 정보 획득이 완료되지 않은 경우라 하더라도 다른 곳으로 이동하는 상황이 발생할 수 있으며, 프로모션 제공부(340)는 사용자의 동작을 감지하여 사용자 단말(110)을 통해 사용자 맞춤형 컨텐츠의 제공이 계속적으로 수행되도록 할 수 있다.
예를 들어, 사용자 맞춤형 컨텐츠가 키오스크 단말(120)을 통해 제공되는 동안 사용자가 키오스크 단말(120) 앞에서 손을 흔드는 동작을 취한 경우, 프로모션 제공부(340)는 키오스크 단말(120)의 영상 모듈을 통해 사용자의 손움직임 제스처를 검출할 수 있다. 이 때, 해당 손움직임이 사용자 단말(110)을 든 상태에서 이루어진 것이고, 이후 사용자가 키오스크 단말(120)로부터 멀어지는 경우라면 프로모션 제공부(340)는 키오스크 단말(120)을 통해 제공 중이던 사용자 맞춤형 컨텐츠를 사용자 단말(110)로 자동 전송함으로써 사용자에게 사용자 맞춤형 컨텐츠를 계속하여 제공할 수 있다.
이 경우, 프로모션 제공부(340)는 사용자 단말(110)에 전용 애플리케이션의 자동 실행에 관한 제어 명령을 전송하여 사용자 맞춤형 컨텐츠의 제공을 위한 디스플레이 화면을 전환시킬 수 있다. 또한, 사용자 단말(110)은 키오스크 단말(120) 또는 인공지능 키오스크 장치(130)에 사용자와 함께 사전 등록될 수 있다. 한편, 해당 동작을 위하여 사용자로부터 사용자 맞춤형 컨텐츠의 자동 전환 제공에 대한 사전 승인이 필요할 수 있다.
제어부(350)는 인공지능 키오스크 장치(130)의 전체적인 동작을 제어하고, 사용자 식별부(310), 맞춤형 캐릭터 제공부(320), 토크 수집부(330) 및 프로모션 제공부(340) 간의 제어 흐름 또는 데이터 흐름을 관리할 수 있다.
도 4는 본 발명의 일 실시예에 따른 개인 맞춤형 인공지능 키오스크 장치를 이용한 서비스 과정을 설명하는 순서도이다.
도 4를 참조하면, 인공지능 키오스크 장치(130)는 사용자 식별부(310)를 통해 키오스크 단말(120)의 인근에서 사용자의 접근이 검출되면 해당 사용자를 식별할 수 있다(단계 S410). 즉, 인공지능 키오스크 장치(130)는 얼굴과 목소리로 지능형 개인 자동 식별을 수행할 수 있으며, 이를 통해 사용자에 관한 다양한 정보를 자동 수집 및 분류하여 지능형 프로파일링을 제공할 수 있다.
인공지능 키오스크 장치(130)는 맞춤형 캐릭터 제공부(320)를 통해 키오스크 단말(120)을 통해 사용자의 요청을 처리하는 사용자 맞춤형 캐릭터를 제공할 수 있다(단계 S420). 즉, 인공지능 키오스크 장치(130)는 지능형 개인화된 맞춤형 캐릭터를 생성할 수 있다. 다른 실시예로서, 인공지능 키오스크 장치(130)는 지능형 개인화된 맞춤형 캐릭터와 함께 지능형 개인화된 맞춤형 캐릭터 목소리를 생성하여 제공할 수도 있다.
또한, 인공지능 키오스크 장치(130)는 토크 수집부(330)를 통해 요청을 처리하는 과정에서 사용자 맞춤형 캐릭터와 사용자 간의 토크 내용을 수집하여 저장할 수 있다(단계 S430). 인공지능 키오스크 장치(130)는 키오스크 상황에 특화된 지능형 제스처 인식 기능 및 MRC(Machine Reading Comprehension)를 제공할 수 있다. 보다 구체적으로, 인공지능 키오스크 장치(130)는 제스처 인식 및 음성 인식을 수행할 수 있고, 인식과 판독 및 의미를 텍스트로 전환하여 제공할 수 있다. 또한, 인공지능 키오스크 장치(130)는 지능형 개인화된 맞춤형 질의응답 서비스를 제공하여 무인 주문 과정에서 풍부한 사용자 경험을 제공할 수 있다.
또한, 인공지능 키오스크 장치(130)는 프로모션 제공부(340)를 통해 토크 내용을 사용자 단위로 학습하여 생성된 적어도 하나의 인공지능을 이용하여 사용자 맞춤형 컨텐츠를 제공할 수 있다(단계 S440). 즉, 인공지능 키오스크 장치(130)는 지능형 개인화된 맞춤형 컨텐츠, 지능형 개인화된 맞춤형 서비스 및 지능형 개인화된 맞춤형 광고를 선택적으로 제공하여 사용자의 만족감을 향상시킬 수 있다.
도 5는 본 발명의 일 실시예에 따른 개인 맞춤형 인공지능 키오스크 장치의 화면 구성을 설명하는 예시도이다.
도 5를 참조하면, 인공지능 키오스크 장치(130)는 키오스크 단말(120)을 통해 다양한 컨텐츠들을 제공할 수 있다. 도 5a의 경우, 키오스크 단말(120)은 주변에 사람이 없는 경우 일반 컨텐츠(540)를 디스플레이 화면을 통해 재생할 수 있다. 일반 컨텐츠(540)는 날씨 정보, 오피스 주요 공지사항, 웰컴메시지 등을 포함할 수 있으며, 오피스 주요 공지사항은 행사 캘린더 일정, 공지사항, 이벤트정보 등으로 구성될 수 있다. 또한, 키오스크 단말(120)은 인공지능 키오스크 장치(130)에 의해 동작하는 맞춤형 캐릭터(520)를 디스플레이 화면을 통해 재생할 수도 있다.
도 5b의 경우, 인공지능 키오스크 장치(130)는 키오스크 단말(120)에 설치된 영상/음성 인식모듈(510)을 통해 사용자의 접근을 감지할 수 있다. 이때, 인공지능 키오스크 장치(130)는 영상/음성 인식모듈(510)을 통해 수집된 사용자에 관한 영상이나 음성 신호를 분석하여 사용자를 식별할 수 있고, 해당 사용자에 적합한 캐릭터를 맞춤형 캐릭터(520)로 제공할 수 있다. 사용자는 키오스크 단말(120)의 디스플레이 화면의 음성인식 활성화 버튼(530)을 터치하여 맞춤형 캐릭터(520)와 상호작용할 수 있다.
한편, 사용자는 키오스크 단말(120)을 통해 제공되는 페이지톡을 통해 맞춤형 컨텐츠(550)에 접근할 수 있다. 맞춤형 컨텐츠(550)는 회의실 예약, 버스 안내, 사주보기, 명언보기, 포춘쿠키 등을 포함할 수 있으며, 인공지능 키오스크 장치(130)는 사용자의 접근이 감지되면 사용자를 식별한 후 해당 사용자에 맞춤화된 컨텐츠를 선별하여 디스플레이 화면을 통해 자동으로 제공할 수 있다.
예를 들어, 인공지능 키오스크 장치(130)는 점심시간에 점심메뉴를 추천할 수 있다. 사용자들이 오피스 주변 맞집들을 등록해 놓은 경우 인공지능 키오스크 장치(130)는 처음 방문하는 사람들에게도 관련 정보로서 제공할 수 있고, 음식점 소개 밑으로 추천 또는 비추천에 관한 음식점 리뷰도 함께 제공할 수 있다.
또한, 인공지능 키오스크 장치(130)는 사용자들에게 날씨에 따른 안내 정보 또는 교통 정보를 제공할 수 있다. 예를 들어, 인공지능 키오스크 장치(130)는 점심을 위해 밖으로 나가는 사용자들에게 비가 오니 우산을 챙기라는 안내를 제공할 수 있으며, 실시간 교통 정보를 제공할 수 있다. 즉, 인공지능 키오스크 장치(130)는 상황별, 시간별 맞춤형 정보를 실시간으로 제공하여 사용자들에게 편의를 제공할 수 있다.
상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
100: 개인 맞춤형 인공지능 키오스크 시스템
110: 사용자 단말 120: 키오스크 단말
130: 인공지능 키오스크 장치 140: 데이터베이스
210: 프로세서 220: 메모리
230: 사용자 입출력부 240: 네트워크 입출력부
310: 사용자 식별부 320: 맞춤형 캐릭터 제공부
330: 토크 수집부 340: 프로모션 제공부
350: 제어부
510: 영상/음성 인식모듈 520: 맞춤형 캐릭터
530: 음성인식 활성화 버튼 540: 일반 컨텐츠
550: 맞춤형 컨텐츠
110: 사용자 단말 120: 키오스크 단말
130: 인공지능 키오스크 장치 140: 데이터베이스
210: 프로세서 220: 메모리
230: 사용자 입출력부 240: 네트워크 입출력부
310: 사용자 식별부 320: 맞춤형 캐릭터 제공부
330: 토크 수집부 340: 프로모션 제공부
350: 제어부
510: 영상/음성 인식모듈 520: 맞춤형 캐릭터
530: 음성인식 활성화 버튼 540: 일반 컨텐츠
550: 맞춤형 컨텐츠
Claims (8)
- 키오스크 단말을 통해 일반 컨텐츠를 제공하는 과정에서 상기 키오스크 단말의 인근에서 사용자의 접근이 검출되면 해당 사용자를 식별하는 사용자 식별부;
상기 키오스크 단말을 통해 상기 사용자의 요청을 처리하는 사용자 맞춤형 캐릭터를 제공하는 맞춤형 캐릭터 제공부;
상기 요청을 처리하는 과정에서 상기 사용자 맞춤형 캐릭터와 상기 사용자 간의 토크 내용을 수집하여 저장하는 토크 수집부; 및
상기 토크 내용을 사용자 단위로 학습하여 생성된 적어도 하나의 인공지능을 이용하여 사용자 맞춤형 컨텐츠를 제공하는 프로모션 제공부를 포함하되,
상기 토크 수집부는 상기 토크 내용을 전처리하여 학습 데이터 집합을 생성하고,
상기 학습 데이터 집합은 제1 대화와 이에 응답하는 제2 대화로 그룹화된 단위 대화들로 구성되며,
상기 단위 대화들은 상기 사용자와의 연관성을 기준으로 선별되는 것을 특징으로 하는 개인 맞춤형 인공지능 키오스크 장치.
- 제1항에 있어서, 상기 사용자의 요청은
상기 키오스크 단말에 의해 제공되는 음성인식 기능을 이용한 음성 명령, 텍스트인식 기능을 이용한 텍스트 명령 및 메뉴기능을 이용한 터치 명령을 포함하는 것을 특징으로 하는 개인 맞춤형 인공지능 키오스크 장치.
- 제1항에 있어서, 상기 사용자 식별부는
상기 인근의 영상을 획득하는 영상 모듈을 포함하고,
상기 영상 모듈에 의해 수집된 영상에서 사용자 얼굴이 검출된 경우 해당 사용자 얼굴이 등록된 사용자에 해당하는지 여부를 결정하며,
사용자 등록이 필요한 경우 사용자의 선택 입력을 수신하여 사용자 등록 모드로의 전환을 수행하는 것을 특징으로 하는 개인 맞춤형 인공지능 키오스크 장치.
- 제1항에 있어서, 상기 맞춤형 캐릭터 제공부는
사용자 식별정보를 기초로 기 정의된 복수의 디지털 캐릭터들 중 어느 하나를 선택하거나 또는 해당 사용자 영상을 기초로 디지털 캐릭터화 하여 상기 사용자 맞춤형 캐릭터로서 제공하면서 상황 컨텍스트에 따라 해당 디지털 캐릭터의 최초 표정을 동적으로 갱신하는 것을 특징으로 하는 개인 맞춤형 인공지능 키오스크 장치.
- 삭제
- 제1항에 있어서, 상기 프로모션 제공부는
상기 학습 데이터 집합에서 상기 사용자에게 제공되는 서비스 유형 별로 기 설정된 유효 기간 내의 단위 대화들 만을 추출하여 상기 학습을 수행하는 것을 특징으로 하는 개인 맞춤형 인공지능 키오스크 장치.
- 제3항에 있어서, 상기 프로모션 제공부는
상기 사용자 맞춤형 컨텐츠의 제공 과정에서 상기 영상 모듈을 통해 상기 사용자의 제스처를 검출하고, 상기 제스처가 사용자 단말에 관한 동작에 해당하면서 상기 인근으로부터 상기 사용자의 이탈과 함께 검출된 경우 상기 사용자 맞춤형 컨텐츠의 제공을 상기 사용자 단말로 자동 전환하는 것을 특징으로 하는 개인 맞춤형 인공지능 키오스크 장치.
- 키오스크 단말을 통해 일반 컨텐츠를 제공하는 단계;
상기 키오스크 단말의 인근에서 사용자의 접근이 검출되면 해당 사용자를 식별하는 단계;
상기 키오스크 단말을 통해 상기 사용자의 요청을 처리하는 사용자 맞춤형 캐릭터를 제공하는 단계;
상기 요청을 처리하는 과정에서 상기 맞춤형 캐릭터와 상기 사용자 간의 토크 내용을 수집하여 저장하는 단계; 및
상기 토크 내용을 사용자 단위로 학습하여 생성된 적어도 하나의 인공지능을 이용하여 사용자 맞춤형 컨텐츠를 제공하는 단계를 포함하되,
상기 토크 내용을 수집하여 저장하는 단계는 상기 토크 내용을 전처리하여 학습 데이터 집합을 생성하는 단계를 포함하고,
상기 학습 데이터 집합은 제1 대화와 이에 응답하는 제2 대화로 그룹화된 단위 대화들로 구성되며,
상기 단위 대화들은 상기 사용자와의 연관성을 기준으로 선별되는 것을 특징으로 하는 개인 맞춤형 인공지능 키오스크 장치를 이용한 서비스 방법.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200121422A KR102412643B1 (ko) | 2020-09-21 | 2020-09-21 | 개인 맞춤형 인공지능 키오스크 장치 및 이를 이용한 서비스 방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200121422A KR102412643B1 (ko) | 2020-09-21 | 2020-09-21 | 개인 맞춤형 인공지능 키오스크 장치 및 이를 이용한 서비스 방법 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20220038959A KR20220038959A (ko) | 2022-03-29 |
| KR102412643B1 true KR102412643B1 (ko) | 2022-06-24 |
Family
ID=80997429
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020200121422A KR102412643B1 (ko) | 2020-09-21 | 2020-09-21 | 개인 맞춤형 인공지능 키오스크 장치 및 이를 이용한 서비스 방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102412643B1 (ko) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102509449B1 (ko) * | 2022-05-25 | 2023-03-14 | 주식회사 투바앤 | 인공 지능 기반의 상대방 맞춤형 캐릭터 제어를 포함하는 디지털 컨텐츠 제공 방법 및 서버 |
| KR20240072454A (ko) | 2022-11-16 | 2024-05-24 | 주식회사 큐버 | 키오스크 데이터 연합학습 처리 방법 |
| KR20240076882A (ko) | 2022-11-23 | 2024-05-31 | 주식회사 큐버 | 인공지능을 이용한 시퀀스 기반의 키오스크 작동 방법 |
| KR102667599B1 (ko) * | 2023-11-24 | 2024-05-24 | 주식회사 올댓페이 | 컨벤션 경조사 키오스크 시스템 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101860269B1 (ko) | 2017-08-21 | 2018-05-23 | 이지스엔터프라이즈 주식회사 | 대화형 음성 인터페이스 기반 자동 이체 처리를 위한 서버 및 방법 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100537024B1 (ko) * | 2003-06-14 | 2005-12-16 | 에스케이 텔레콤주식회사 | 캐릭터에 따른 콘텐츠 제공 방법 |
| KR20190007768A (ko) | 2017-07-13 | 2019-01-23 | 주식회사 비스켓글로벌 | 무인 주문결제 통합 플랫폼 키오스크 서비스 방법 |
| KR102098633B1 (ko) * | 2017-08-22 | 2020-04-08 | 네이버 주식회사 | 인공지능 기기에서의 연속 대화 기능 |
| KR20190141410A (ko) * | 2018-06-14 | 2019-12-24 | (주)이지위드 | 키오스크 서비스 제공 시스템 및 방법 |
-
2020
- 2020-09-21 KR KR1020200121422A patent/KR102412643B1/ko active IP Right Grant
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101860269B1 (ko) | 2017-08-21 | 2018-05-23 | 이지스엔터프라이즈 주식회사 | 대화형 음성 인터페이스 기반 자동 이체 처리를 위한 서버 및 방법 |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20220038959A (ko) | 2022-03-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102412643B1 (ko) | 개인 맞춤형 인공지능 키오스크 장치 및 이를 이용한 서비스 방법 | |
| CN109478106B (zh) | 利用环境上下文以用于增强的通信吞吐量 | |
| US20190221208A1 (en) | Method, user interface, and device for audio-based emoji input | |
| CN108847214B (zh) | 语音处理方法、客户端、装置、终端、服务器和存储介质 | |
| JP6966979B2 (ja) | 対話システムの制御方法、対話システム及びプログラム | |
| CN110797022B (zh) | 一种应用控制方法、装置、终端和服务器 | |
| WO2017218244A1 (en) | Virtual keyboard with intent-based, dynamically generated task icons | |
| EP3720060B1 (en) | Apparatus and method for providing conversation topic | |
| US10755711B2 (en) | Information presentation device, information presentation system, and terminal device | |
| JP2017513115A (ja) | ユーザーの明示宣言に基づく個別化された推薦 | |
| CN117033578A (zh) | 基于设备间对话通信的主动协助 | |
| CN110598576A (zh) | 一种手语交互方法、装置及计算机介质 | |
| US10586528B2 (en) | Domain-specific speech recognizers in a digital medium environment | |
| KR101780809B1 (ko) | 이모티콘이 함께 제공되는 번역문 제공 방법, 사용자 단말, 서버 및 컴퓨터 프로그램 | |
| US20220148576A1 (en) | Electronic device and control method | |
| US20060190240A1 (en) | Method and system for locating language expressions using context information | |
| JP6652231B1 (ja) | 会話制御プログラム、会話制御方法および情報処理装置 | |
| JP2019056956A (ja) | 情報処理システム、情報処理プログラム、情報処理装置及び情報処理方法 | |
| KR20220044074A (ko) | 여론 획득과 단어 점도 모델의 훈련 방법 및 기기, 서버와 매체 | |
| KR102222637B1 (ko) | 감성 분석 장치, 이를 포함하는 대화형 에이전트 시스템, 감성 분석을 수행하기 위한 단말 장치 및 감성 분석 방법 | |
| KR20210067426A (ko) | 음성 일기 장치 | |
| CN110383271A (zh) | 具有示例生成器的数据输入*** | |
| Tao | Scalable and vision free user interface approaches for indoor navigation systems for the visually impaired | |
| CN103915094A (zh) | 基于目标名称识别的共享语音操控方法与装置 | |
| US11430429B2 (en) | Information processing apparatus and information processing method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |