KR101907885B1 - 단말 및 그의 제어 방법 - Google Patents
단말 및 그의 제어 방법 Download PDFInfo
- Publication number
- KR101907885B1 KR101907885B1 KR1020170134765A KR20170134765A KR101907885B1 KR 101907885 B1 KR101907885 B1 KR 101907885B1 KR 1020170134765 A KR1020170134765 A KR 1020170134765A KR 20170134765 A KR20170134765 A KR 20170134765A KR 101907885 B1 KR101907885 B1 KR 101907885B1
- Authority
- KR
- South Korea
- Prior art keywords
- information
- terminal
- display unit
- server
- image
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 239000003550 marker Substances 0.000 claims description 159
- 238000004891 communication Methods 0.000 claims description 44
- 230000004044 response Effects 0.000 claims description 17
- 230000033001 locomotion Effects 0.000 claims description 13
- 238000003909 pattern recognition Methods 0.000 claims description 7
- 230000008569 process Effects 0.000 claims description 7
- 230000006870 function Effects 0.000 description 56
- 230000003190 augmentative effect Effects 0.000 description 11
- 230000000694 effects Effects 0.000 description 9
- 238000010295 mobile communication Methods 0.000 description 7
- 230000036961 partial effect Effects 0.000 description 7
- 230000001737 promoting effect Effects 0.000 description 7
- 238000001514 detection method Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 238000007792 addition Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 230000007774 longterm Effects 0.000 description 4
- 238000004091 panning Methods 0.000 description 4
- 230000002194 synthesizing effect Effects 0.000 description 4
- OIWCYIUQAVBPGV-DAQGAKHBSA-N {1-O-hexadecanoyl-2-O-[(Z)-octadec-9-enoyl]-sn-glycero-3-phospho}serine Chemical compound CCCCCCCCCCCCCCCC(=O)OC[C@H](COP(O)(=O)OC[C@H](N)C(O)=O)OC(=O)CCCCCCC\C=C/CCCCCCCC OIWCYIUQAVBPGV-DAQGAKHBSA-N 0.000 description 4
- PCTMTFRHKVHKIS-BMFZQQSSSA-N (1s,3r,4e,6e,8e,10e,12e,14e,16e,18s,19r,20r,21s,25r,27r,30r,31r,33s,35r,37s,38r)-3-[(2r,3s,4s,5s,6r)-4-amino-3,5-dihydroxy-6-methyloxan-2-yl]oxy-19,25,27,30,31,33,35,37-octahydroxy-18,20,21-trimethyl-23-oxo-22,39-dioxabicyclo[33.3.1]nonatriaconta-4,6,8,10 Chemical compound C1C=C2C[C@@H](OS(O)(=O)=O)CC[C@]2(C)[C@@H]2[C@@H]1[C@@H]1CC[C@H]([C@H](C)CCCC(C)C)[C@@]1(C)CC2.O[C@H]1[C@@H](N)[C@H](O)[C@@H](C)O[C@H]1O[C@H]1/C=C/C=C/C=C/C=C/C=C/C=C/C=C/[C@H](C)[C@@H](O)[C@@H](C)[C@H](C)OC(=O)C[C@H](O)C[C@H](O)CC[C@@H](O)[C@H](O)C[C@H](O)C[C@](O)(C[C@H](O)[C@H]2C(O)=O)O[C@H]2C1 PCTMTFRHKVHKIS-BMFZQQSSSA-N 0.000 description 3
- 230000002829 reductive effect Effects 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000001308 synthesis method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000010411 cooking Methods 0.000 description 1
- 239000002537 cosmetic Substances 0.000 description 1
- 239000010408 film Substances 0.000 description 1
- 235000013305 food Nutrition 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 229910052754 neon Inorganic materials 0.000 description 1
- GKAOGPIIYCISHV-UHFFFAOYSA-N neon atom Chemical compound [Ne] GKAOGPIIYCISHV-UHFFFAOYSA-N 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 235000012149 noodles Nutrition 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 239000010454 slate Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 238000005406 washing Methods 0.000 description 1
Images
Classifications
-
- G06F17/3087—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9537—Spatial or temporal dependent retrieval, e.g. spatiotemporal queries
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/01—Social networking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
- H04M1/72457—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to geographic location
-
- H04M1/72572—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2250/00—Details of telephonic subscriber devices
- H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Human Computer Interaction (AREA)
- Business, Economics & Management (AREA)
- Databases & Information Systems (AREA)
- Marketing (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Automation & Control Theory (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Data Mining & Analysis (AREA)
- Environmental & Geological Engineering (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
본 발명은 단말 및 그의 제어 방법을 개시한다. 즉, 본 발명은 서버에 미리 등록된 복수의 정보 중에서 단말의 현재 위치를 기준으로 미리 설정된 반경 내에 위치하며 단말의 사용자 입력에 따른 키워드 및/또는 인식된 패턴에 대응하는 적어도 하나의 정보가 존재하지 않는 경우, 미리 설정된 카테고리 정보를 표시하고, 상기 표시되는 카테고리 정보 중에서 선택되는 특정 카테고리에 대응하는 적어도 하나의 정보를 상기 단말에 제공함으로써, 가상 현실 또는 혼합 현실이 적용된 업체 정보 제공에 따라 홍보 효과를 높이고, 관심 있는 상품 및/서비스에 대한 실시간 정보를 용이하게 확인할 수 있다.
Description
본 발명은 단말 및 그의 제어 방법에 관한 것으로, 특히 서버에 미리 등록된 복수의 정보 중에서 단말의 현재 위치를 기준으로 미리 설정된 반경 내에 위치하며 단말의 사용자 입력에 따른 키워드 및/또는 인식된 패턴에 대응하는 적어도 하나의 정보가 존재하지 않는 경우, 미리 설정된 카테고리 정보를 표시하고, 상기 표시되는 카테고리 정보 중에서 선택되는 특정 카테고리에 대응하는 적어도 하나의 정보를 상기 단말에 제공하는 단말 및 그의 제어 방법에 관한 것이다.
일반적으로, 이동 단말기(Mobile Terminal)는, GPS(Global Positioning System) 기능 및 통화 기능(또는, 호(call) 기능)을 수행하여, 그 수행 결과를 사용자에게 제공하는 장치이다.
이러한 이동 단말기는 세대를 거듭할수록 더 많은 정보를 더 짧은 시간에 송수신할 수 있고, 다양한 기능이 부가되고 있으나, 이러한 기능에 맞춘 사용자 중심의 편의성을 위한 UI(User Interface) 개발이 부족한 상태이다.
본 발명의 목적은 서버에 미리 등록된 복수의 정보 중에서 단말의 현재 위치를 기준으로 미리 설정된 반경 내에 위치하며 단말의 사용자 입력에 따른 키워드 및/또는 인식된 패턴에 대응하는 적어도 하나의 정보가 존재하지 않는 경우, 미리 설정된 카테고리 정보를 표시하고, 상기 표시되는 카테고리 정보 중에서 선택되는 특정 카테고리에 대응하는 적어도 하나의 정보를 상기 단말에 제공하는 단말 및 그의 제어 방법을 제공하는 데 있다.
본 발명의 다른 목적은 서버에 미리 등록된 복수의 정보 중에서 단말의 현재 위치를 기준으로 미리 설정된 반경 내에 위치하며 단말의 사용자 입력에 따른 키워드 및/또는 인식된 패턴에 대응하는 적어도 하나의 정보가 존재하는 경우, 해당하는 적어도 하나의 정보를 상기 단말에 제공하는 단말 및 그의 제어 방법을 제공하는 데 있다.
본 발명의 실시예에 따른 단말의 제어 방법은 단말의 제어 방법에 있어서, 사용자 입력에 따른 키워드를 수신하거나 객체에 대한 패턴 인식에 따른 패턴 정보를 수신할 때, 통신부에 의해, 상기 키워드, 상기 패턴 정보, 단말의 위치 정보 및 단말의 식별 정보를 서버에 전송하는 단계; 상기 통신부에 의해, 상기 서버에 저장된 복수의 정보 중에서 상기 키워드, 상기 패턴 정보 및 상기 단말의 위치 정보에 대응하는 정보가 존재하지 않을 때, 상기 서버로부터 전송되는 카테고리 정보를 수신하는 단계; 표시부에 의해, 상기 수신된 카테고리 정보를 표시하는 단계; 제어부에 의해, 상기 표시부에 표시되는 카테고리 정보 중에서 사용자 선택에 따라 선택된 특정 카테고리에 대응하는 적어도 하나의 정보를 표시하도록 상기 표시부를 제어하는 단계; 상기 표시부에 표시되는 적어도 하나의 정보 중에서 특정 정보가 선택될 때, 상기 표시부에 의해, 상기 선택된 특정 정보를 표시하는 단계; 및 상기 표시부에 상기 특정 정보가 표시 중인 상태에서 미리 설정된 이벤트가 감지될 때, 상기 제어부에 의해, 상기 이벤트에 대응하여 미리 설정된 기능을 수행하고, 상기 기능 수행 결과를 표시하도록 상기 표시부를 제어하는 단계를 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 통신부에 의해, 상기 서버에 저장된 복수의 정보 중에서 상기 키워드, 상기 패턴 정보 및 상기 단말의 위치 정보 중 적어도 하나에 대응하는 정보가 존재할 때, 상기 서버에 전송된 위치 정보에 응답하여 상기 서버로부터 제공되는 정보를 수신하는 단계; 및 상기 표시부에 의해, 상기 수신된 정보를 표시하는 단계를 더 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 이벤트는, 상기 단말에 표시 중인 정보에 포함된 복수의 항목 중 어느 하나의 항목에 대한 선택이 감지되는 경우, 상기 단말에 구비된 버튼에 대한 선택이 감지되는 경우, 상기 단말의 상/하/좌/우 방향으로의 미리 설정된 임계값 이상의 기울임이 감지되는 경우, 상기 단말의 상/하 방향이나 좌/우 방향이나 대각선 방향으로의 일정 횟수 이상의 움직임이 감지되는 경우, 상기 단말의 시계/반시계 방향으로의 일정 횟수의 이상의 회전이 감지되는 경우 및 상기 단말의 사용자에 의한 터치 제스처가 감지되는 경우 중 어느 하나의 경우를 포함하며, 상기 단말의 사용자에 의한 터치 제스처는, 탭(tap), 터치&홀드(touch & hold), 더블 탭(double tap), 드래그(drag), 플릭(flick), 드래그 앤드 드롭(drag & drop), 핀치(pinch) 및 스와이프(swipe) 중 어느 하나를 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 이벤트에 대응하여 미리 설정된 기능을 수행하고, 상기 기능 수행 결과를 표시하도록 상기 표시부를 제어하는 단계는, 상기 정보에 포함된 상기 키워드와 관련한 MR 콘텐츠를 확인하기 위한 링크 정보가 선택될 때, 상기 표시부에 의해, 상기 선택된 링크 정보와 관련한 MR 콘텐츠를 표시할 수 있다.
본 발명과 관련된 일 예로서 상기 이벤트에 대응하여 미리 설정된 기능을 수행하고, 상기 기능 수행 결과를 표시하도록 상기 표시부를 제어하는 단계는, 상기 정보에 포함된 상기 단말의 현재 위치에서 상기 정보에 포함된 목적지까지의 경로 안내 정보를 표시하기 위한 링크 정보가 선택될 때, 상기 표시부에 의해, 상기 단말의 현재 위치에 대응하는 화면상에 상기 정보에 포함된 목적지까지의 경로 정보를 오버랩하여 제 1 화면을 표시하는 과정; 및 상기 표시부에 표시되는 경로 정보를 선택한 상태가 유지되는 동안, 상기 표시부에 의해, 상기 제 1 화면에서 상기 목적지까지의 미리 설정된 속도로 자동 이동 기능을 수행에 따라 변화하는 연속된 화면을 표시하는 과정을 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 경로 정보는, 차선 정보, 도로 정보, 주행 제한 속도 정보, 턴바이턴 정보, 교통 안전 정보, 교통 안내 정보, 차량 정보, 길 찾기 정보 및 건물 내의 통로 정보 중 적어도 하나의 정보를 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 이벤트에 대응하여 미리 설정된 기능을 수행하고, 상기 기능 수행 결과를 표시하도록 상기 표시부를 제어하는 단계는, 상기 정보에 포함된 상기 키워드와 관련한 블로그나 소셜 네트워크 서비스로 접속하기 위한 링크 정보가 선택될 때, 상기 표시부에 의해, 상기 선택된 링크 정보와 관련한 블로그에 대응하는 화면 또는 상기 소셜 네트워크 서비스에 대응하는 화면을 표시할 수 있다.
본 발명과 관련된 일 예로서 상기 정보는, MR 콘텐츠를 포함하며, 상기 MR 콘텐츠는, 상기 키워드와 관련한 파노라마 영상 정보, 상기 파노라마 영상 정보에 포함된 객체와 관련한 코드, 상기 코드의 종류에 대응하는 객체 마커, 이미지 또는 동영상 내에서의 객체 마커의 위치 정보 및 객체 마커의 속성 정보 중 적어도 하나를 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 MR 콘텐츠는, 상기 표시부에 의해, 파노라마 영상 정보를 상기 표시부의 영상 표시 영역에 표시하는 과정; 상기 표시부의 객체 마커 표시 영역에 표시되는 복수의 객체 마커 중에서 선택된 제 1 객체 마커가 드래그 앤 드랍 기능에 의해 상기 영상 표시 영역 상의 제 1 영역에 드랍될 때, 상기 제어부에 의해, 상기 영상 표시 영역 내의 제 1 영역에 상기 선택된 제 1 객체 마커를 배치하는 과정; 및 상기 영상 표시 영역 내에 배치된 제 1 객체 마커가 선택될 때, 상기 제어부에 의해, 사용자 입력을 근거로 상기 선택된 제 1 객체 마커에 대한 속성 정보를 설정하는 과정을 통해 생성될 수 있다.
본 발명의 실시예에 따른 단말은 단말에 있어서, 사용자 입력에 따른 키워드를 수신하거나 객체에 대한 패턴 인식에 따른 패턴 정보를 수신할 때 상기 키워드, 상기 패턴 정보, 단말의 위치 정보 및 단말의 식별 정보를 서버에 전송하며, 상기 서버에 저장된 복수의 정보 중에서 상기 키워드, 상기 패턴 정보 및 상기 단말의 위치 정보에 대응하는 정보가 존재하지 않을 때 상기 서버로부터 전송되는 카테고리 정보를 수신하는 통신부; 상기 수신된 카테고리 정보를 표시하는 표시부; 및 상기 표시부에 표시되는 카테고리 정보 중에서 사용자 선택에 따라 선택된 특정 카테고리에 대응하는 적어도 하나의 정보를 표시하도록 상기 표시부를 제어하고, 상기 표시부에 표시되는 적어도 하나의 정보 중에서 특정 정보가 선택될 때 상기 선택된 특정 정보를 표시하도록 상기 표시부를 제어하고, 상기 표시부에 상기 특정 정보가 표시 중인 상태에서 미리 설정된 이벤트가 감지될 때 상기 이벤트에 대응하여 미리 설정된 기능을 수행하고, 상기 기능 수행 결과를 표시하도록 상기 표시부를 제어하는 제어부를 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 표시부는, 상기 정보에 포함된 상기 키워드와 관련한 MR 콘텐츠를 확인하기 위한 링크 정보가 선택될 때, 상기 선택된 링크 정보와 관련한 MR 콘텐츠를 표시할 수 있다.
본 발명과 관련된 일 예로서 상기 표시부는, 상기 정보에 포함된 상기 단말의 현재 위치에서 상기 정보에 포함된 목적지까지의 경로 안내 정보를 표시하기 위한 링크 정보가 선택될 때, 상기 단말의 현재 위치에 대응하는 화면상에 상기 정보에 포함된 목적지까지의 경로 정보를 오버랩하여 제 1 화면을 표시하며, 상기 표시부에 표시되는 경로 정보를 선택한 상태가 유지되는 동안, 상기 제 1 화면에서 상기 목적지까지의 미리 설정된 속도로 자동 이동 기능을 수행에 따라 변화하는 연속된 화면을 표시할 수 있다.
본 발명과 관련된 일 예로서 상기 표시부는, 상기 정보에 포함된 상기 키워드와 관련한 블로그나 소셜 네트워크 서비스로 접속하기 위한 링크 정보가 선택될 때, 상기 선택된 링크 정보와 관련한 블로그에 대응하는 화면 또는 상기 소셜 네트워크 서비스에 대응하는 화면을 표시할 수 있다.
본 발명은 서버에 미리 등록된 복수의 정보 중에서 단말의 현재 위치를 기준으로 미리 설정된 반경 내에 위치하며 단말의 사용자 입력에 따른 키워드 및/또는 인식된 패턴에 대응하는 적어도 하나의 정보가 존재하지 않는 경우, 미리 설정된 카테고리 정보를 표시하고, 상기 표시되는 카테고리 정보 중에서 선택되는 특정 카테고리에 대응하는 적어도 하나의 정보를 상기 단말에 제공함으로써, 가상 현실 또는 혼합 현실이 적용된 업체 정보 제공에 따라 홍보 효과를 높이고, 관심 있는 상품 및/서비스에 대한 실시간 정보를 용이하게 확인할 수 있는 효과가 있다.
또한, 본 발명은 서버에 미리 등록된 복수의 정보 중에서 단말의 현재 위치를 기준으로 미리 설정된 반경 내에 위치하며 단말의 사용자 입력에 따른 키워드 및/또는 인식된 패턴에 대응하는 적어도 하나의 정보가 존재하는 경우, 해당하는 적어도 하나의 정보를 상기 단말에 제공함으로써, 사용자 편의를 위한 사용자 인터페이스를 제공하고, 사용자의 편의성을 향상시킬 수 있는 효과가 있다.
도 1은 본 발명의 실시예에 따른 콘텐츠 제공 시스템의 구성을 나타낸 블록도이다.
도 2는 본 발명의 실시예에 따른 단말의 구성을 나타낸 블록도이다.
도 3 내지 도 15는 본 발명의 실시예에 따른 단말의 화면을 나타낸 도이다.
도 2는 본 발명의 실시예에 따른 단말의 구성을 나타낸 블록도이다.
도 3 내지 도 15는 본 발명의 실시예에 따른 단말의 화면을 나타낸 도이다.
본 발명에서 사용되는 기술적 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 발명에서 사용되는 기술적 용어는 본 발명에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 발명에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.
또한, 본 발명에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함한다. 본 발명에서 "구성된다" 또는 "포함한다" 등의 용어는 발명에 기재된 여러 구성 요소들 또는 여러 단계를 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.
또한, 본 발명에서 사용되는 제 1, 제 2 등과 같이 서수를 포함하는 용어는 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성 요소는 제 2 구성 요소로 명명될 수 있고, 유사하게 제 2 구성 요소도 제 1 구성 요소로 명명될 수 있다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다.
도 1은 본 발명의 실시예에 따른 단말(100)이 적용된 콘텐츠 제공 시스템(또는 콘텐츠 제공 장치)(10)의 구성을 나타낸 블록도이다.
도 1에 도시한 바와 같이, 콘텐츠 제공 시스템(10)은 단말(100) 및 서버(200)로 구성된다. 도 1에 도시된 콘텐츠 제공 시스템(10)의 구성 요소 모두가 필수 구성 요소인 것은 아니며, 도 1에 도시된 구성 요소보다 많은 구성 요소에 의해 콘텐츠 제공 시스템(10)이 구현될 수도 있고, 그보다 적은 구성 요소에 의해서도 콘텐츠 제공 시스템(10)이 구현될 수도 있다.
상기 단말(100)은 스마트 폰(Smart Phone), 휴대 단말기(Portable Terminal), 이동 단말기(Mobile Terminal), 개인 정보 단말기(Personal Digital Assistant: PDA), PMP(Portable Multimedia Player) 단말기, 텔레매틱스(Telematics) 단말기, 내비게이션(Navigation) 단말기, 개인용 컴퓨터(Personal Computer), 노트북 컴퓨터, 슬레이트 PC(Slate PC), 태블릿 PC(Tablet PC), 울트라북(ultrabook), 웨어러블 디바이스(Wearable Device, 예를 들어, 워치형 단말기(Smartwatch), 글래스형 단말기(Smart Glass), HMD(Head Mounted Display) 등 포함), 와이브로(Wibro) 단말기, IPTV(Internet Protocol Television) 단말기, 스마트 TV, 디지털방송용 단말기, AVN(Audio Video Navigation) 단말기, A/V(Audio/Video) 시스템, 플렉시블 단말기(Flexible Terminal) 등과 같은 다양한 단말기에 적용될 수 있다.
도 2에 도시된 바와 같이, 상기 단말(100)은 입력부(110), 리더기(120), 통신부(130), GPS 수신기(140), 저장부(150), 표시부(160), 음성 출력부(170) 및 제어부(180)로 구성된다. 도 2에 도시된 단말(100)의 구성 요소 모두가 필수 구성 요소인 것은 아니며, 도 2에 도시된 구성 요소보다 많은 구성 요소에 의해 단말(100)이 구현될 수도 있고, 그보다 적은 구성 요소에 의해서도 단말(100)이 구현될 수도 있다.
상기 입력부(110)는 사용자에 의한 버튼 조작 또는 임의의 기능 선택에 따른 신호를 수신하거나, 디스플레이되는 화면을 터치/스크롤하는 등의 조작에 의해 생성된 명령 또는 제어 신호를 수신한다.
또한, 상기 입력부(110)는 사용자에 의해 입력된 정보에 대응하는 신호를 수신하며, 키 패드(Key Pad), 돔 스위치 (Dome Switch), 터치 패드(예를 들어 접촉식 정전 용량 방식, 압력식 저항막 방식, 적외선 감지 방식, 표면 초음파 전도 방식, 적분식 장력 측정 방식, 피에조 효과 방식 등 포함), 터치 스크린(Touch Screen), 조그 휠, 조그 스위치, 조그 셔틀(Jog Shuttle), 마우스(mouse), 스타일러스 펜(Stylus Pen), 터치 펜(Touch Pen) 등의 다양한 장치가 사용될 수 있다.
또한, 상기 입력부(110)는 오디오 신호 또는 비디오 신호를 입력받기 위한 적어도 하나 이상의 마이크(미도시)와 카메라(미도시) 등을 포함할 수 있다. 상기 마이크는 통화 모드, 녹음 모드, 음성 인식 모드, 영상 회의 모드, 영상 통화 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호(사용자의 음성(음성 신호 또는 음성 정보) 포함)를 수신하여 전기적인 음성 데이터로 처리한다. 또한, 상기 처리된 음성 데이터는 상기 음성 출력부(170)를 통해 출력하거나 또는 상기 통신부(130)를 통하여 외부 단말기로 송신 가능한 형태로 변환되어 출력될 수 있다. 또한, 상기 마이크는 외부의 음향 신호를 입력받는 과정에서 발생하는 잡음을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수도 있다.
또한, 상기 카메라는 영상 통화 모드, 촬영 모드, 영상 회의 모드 등에서 이미지 센서(카메라 모듈 또는 카메라)에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 즉, 코덱(CODEC)에 따라 상기 이미지 센서에 의해 얻어지는 해당 화상 데이터들을 각 규격에 맞도록 인코딩/디코딩한다. 상기 처리된 화상 프레임은 상기 제어부(180)의 제어에 의해 상기 표시부(160)에 표시될 수 있다. 일 예로, 상기 카메라는 객체(또는 피사체)(사용자 영상 또는 화상 회의자)를 촬영하고, 그 촬영된 영상(피사체 영상)에 대응하는 비디오 신호를 출력한다.
또한, 상기 카메라에서 처리된 화상 프레임은 상기 저장부(150)에 저장되거나 상기 통신부(130)를 통해 외부 단말기(화상 회의 시스템에 포함된 임의의 화상 회의 단말기 포함)로 전송될 수 있다.
또한, 상기 카메라는 객체(예를 들어 사람의 얼굴, 지문, 상품, 건물, 상품/진열대에 구비/부착된 태그 등 포함)를 촬영하고, 상기 촬영된 객체를 포함하는 영상 정보를 상기 제어부(180)에 제공한다.
상기 리더기(120)는 상품이나 임의의 장소(예를 들어 진열대 등 포함)에 구비되거나 부착된 태그(예를 들어 바코드, QR 코드 등 포함)를 인식(또는 태깅)한다.
또한, 상기 리더기(120)는 인식된 태그 정보를 상기 제어부(180)에 제공한다.
이와 같이, 본 발명은 상기 입력부(110) 및/또는 상기 리더기(120)를 통해 임의의 객체가 포함된 영상 정보를 통해 패턴 정보를 확인하거나 또는, 상기 객체에 대한 스캔을 통해 패턴 정보를 확인할 수 있다.
상기 통신부(130)는 유/무선 통신망을 통해 내부의 임의의 구성 요소 또는 외부의 임의의 적어도 하나의 단말기와 통신 연결한다. 이때, 상기 외부의 임의의 단말기는 상기 서버(200) 등을 포함할 수 있다. 여기서, 무선 인터넷 기술로는 무선랜(Wireless LAN: WLAN), DLNA(Digital Living Network Alliance), 와이브로(Wireless Broadband: Wibro), 와이맥스(World Interoperability for Microwave Access: Wimax), HSDPA(High Speed Downlink Packet Access), HSUPA(High Speed Uplink Packet Access), IEEE 802.16, 롱 텀 에볼루션(Long Term Evolution: LTE), LTE-A(Long Term Evolution-Advanced), 광대역 무선 이동 통신 서비스(Wireless Mobile Broadband Service: WMBS) 등이 있으며, 상기 통신부(130)는 상기에서 나열되지 않은 인터넷 기술까지 포함한 범위에서 적어도 하나의 무선 인터넷 기술에 따라 데이터를 송수신하게 된다. 또한, 근거리 통신 기술로는 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association: IrDA), UWB(Ultra Wideband), 지그비(ZigBee), 인접 자장 통신(Near Field Communication: NFC), 초음파 통신(Ultra Sound Communication: USC), 가시광 통신(Visible Light Communication: VLC), 와이 파이(Wi-Fi), 와이 파이 다이렉트(Wi-Fi Direct) 등이 포함될 수 있다. 또한, 유선 통신 기술로는 전력선 통신(Power Line Communication: PLC), USB 통신, 이더넷(Ethernet), 시리얼 통신(serial communication), 광/동축 케이블 등이 포함될 수 있다.
또한, 상기 통신부(130)는 유니버설 시리얼 버스(Universal Serial Bus: USB)를 통해 임의의 단말과 정보를 상호 전송할 수 있다.
또한, 상기 통신부(130)는 이동통신을 위한 기술표준들 또는 통신방식(예를 들어, GSM(Global System for Mobile communication), CDMA(Code Division Multi Access), CDMA2000(Code Division Multi Access 2000), EV-DO(Enhanced Voice-Data Optimized or Enhanced Voice-Data Only), WCDMA(Wideband CDMA), HSDPA(High Speed Downlink Packet Access), HSUPA(High Speed Uplink Packet Access), LTE(Long Term Evolution), LTE-A(Long Term Evolution-Advanced) 등)에 따라 구축된 이동 통신망 상에서 기지국, 상기 서버(200) 등과 무선 신호를 송수신한다.
또한, 상기 통신부(130)는 상기 제어부(180)의 제어에 의해 키워드, 패턴 정보, 실시간으로 확인되는 단말(100)의 위치 정보, 단말(100)의 식별 정보 등을 서버(200)에 전송한다. 이때, 상기 단말(100)의 식별 정보는 MDN(Mobile Directory Number), 모바일 IP, 모바일 MAC, Sim(subscriber identity module: 가입자 식별 모듈) 카드 고유정보, 시리얼번호 등을 포함한다.
또한, 상기 통신부(130)는 상기 제어부(180)의 제어에 의해 상기 전송된 키워드, 패턴 정보, 단말(100)의 위치 정보 등에 응답하여 상기 서버(200)로부터 전송되는 정보를 수신한다.
상기 GPS 수신기(140)는 위성으로부터 전송된 GPS 신호를 수신하고, 상기 수신된 GPS 신호에 포함된 경도 좌표 및 위도 좌표를 근거로 상기 단말(100)의 위치 데이터를 실시간으로 발생시키고, 상기 발생된 위치 데이터를 상기 제어부(180)에 출력한다. 여기서, 상기 발생된 위치 데이터는 상기 단말(100)의 현재 위치(또는 현재 위치 데이터)로 정의한다. 여기서, 상기 GPS 수신기(140)뿐만 아니라 와이 파이(Wi-Fi) 또는 와이브로(Wibro) 통신을 통해 위치 정보를 수신할 수도 있다.
또한, 상기 GPS 수신기(140)를 통해 수신되는 신호는 IEEE(Institute of Electrical and Electronics Engineers)에서 제안한 무선 LAN 및 일부 적외선 통신 등을 포함하는 무선 LAN에 대한 무선 네트워크의 표준 규격인 802.11과, 블루투스, UWB, 지그비 등을 포함하는 무선 PAN(Personal Area Network)에 대한 표준 규격인 802.15과, 도시 광대역 네트워크(Fixed Wireless Access: FWA) 등을 포함하는 무선 MAN(Metropolitan Area Network), 광대역 무선 접속(Broadband Wireless Access: BWA)에 대한 표준 규격인 802.16과, 와이브로(Wibro), 와이맥스(WiMAX) 등을 포함하는 무선 MAN(Mobile Broadband Wireless Access: MBWA)에 대한 모바일 인터넷에 대한 표준 규격인 802.20 등의 무선 통신 방식을 이용하여 단말기의 위치 정보를 상기 단말(100)에 제공하도록 구성할 수도 있다.
상기 저장부(150)는 다양한 사용자 인터페이스(User Interface: UI), 그래픽 사용자 인터페이스(Graphic User Interface: GUI) 등을 저장한다.
또한, 상기 저장부(150)는 상기 단말(100)이 동작하는데 필요한 데이터와 프로그램 등을 저장한다.
즉, 상기 저장부(150)는 상기 단말(100)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 단말(100)의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는 무선 통신을 통해 외부 서버로부터 다운로드 될 수 있다. 또한 이러한 응용 프로그램 중 적어도 일부는 단말(100)의 기본적인 기능(예를 들어, 전화 착신, 발신 기능, 메시지 수신, 발신 기능)을 위하여 출고 당시부터 단말(100)상에 존재할 수 있다. 한편, 응용 프로그램은 상기 저장부(150)에 저장되고, 단말(100)에 설치되어, 제어부(180)에 의하여 상기 단말(100)의 동작(또는 기능)을 수행하도록 구동될 수 있다.
또한, 상기 저장부(150)는 플래시 메모리 타입(Flash Memory Type), 하드 디스크 타입(Hard Disk Type), 멀티미디어 카드 마이크로 타입(Multimedia Card Micro Type), 카드 타입의 메모리(예를 들면, SD 또는 XD 메모리 등), 자기 메모리, 자기 디스크, 광디스크, 램(Random Access Memory: RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory: ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 중 적어도 하나의 저장매체를 포함할 수 있다. 또한, 단말(100)은 인터넷(internet)상에서 저장부(150)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영하거나, 또는 상기 웹 스토리지와 관련되어 동작할 수도 있다.
또한, 상기 저장부(150)는 상기 통신부(130)를 통해 수신된 상기 키워드, 상기 패턴 정보, 상기 단말(100)의 위치 정보 등에 대응하는 정보를 저장한다.
상기 표시부(160)는 상기 제어부(180)의 제어에 의해 상기 저장부(150)에 저장된 사용자 인터페이스 및/또는 그래픽 사용자 인터페이스를 이용하여 다양한 메뉴 화면 등과 같은 다양한 콘텐츠를 표시할 수 있다. 여기서, 상기 표시부(160)에 표시되는 콘텐츠는 다양한 텍스트 또는 이미지 데이터(각종 정보 데이터 포함)와 아이콘, 리스트 메뉴, 콤보 박스 등의 데이터를 포함하는 메뉴 화면 등을 포함한다. 또한, 상기 표시부(160)는 터치 스크린 일 수 있다.
또한, 상기 표시부(160)는 액정 디스플레이(Liquid Crystal Display: LCD), 박막 트랜지스터 액정 디스플레이(Thin Film Transistor-Liquid Crystal Display: TFT LCD), 유기 발광 다이오드(Organic Light-Emitting Diode: OLED), 플렉시블 디스플레이(Flexible Display), 3차원 디스플레이(3D Display), 전자잉크 디스플레이(e-ink display), LED(Light Emitting Diode) 중에서 적어도 하나를 포함할 수 있다.
또한, 상기 표시부(160)는 상기 제어부(180)의 제어에 의해 상기 수신된 상기 키워드, 상기 패턴 정보, 단말(100)의 위치 정보 등에 대응하는 정보를 표시한다.
상기 음성 출력부(170)는 상기 제어부(180)에 의해 소정 신호 처리된 신호에 포함된 음성 정보를 출력한다. 여기서, 상기 음성 출력부(170)에는 리시버(receiver), 스피커(speaker), 버저(buzzer) 등이 포함될 수 있다.
또한, 상기 음성 출력부(170)는 상기 제어부(180)에 의해 생성된 안내 음성을 출력한다.
또한, 상기 음성 출력부(170)는 상기 제어부(180)에 의해 상기 수신된 상기 키워드, 상기 패턴 정보, 단말(100)의 위치 정보 등에 대응하는 정보에 대응하는 음성 정보를 출력한다.
상기 제어부(180)는 상기 단말(100)의 전반적인 제어 기능을 실행한다.
또한, 제어부(180)는 저장부(150)에 저장된 프로그램 및 데이터를 이용하여 단말(100)의 전반적인 제어 기능을 실행한다. 제어부(180)는 RAM, ROM, CPU, GPU, 버스를 포함할 수 있으며, RAM, ROM, CPU, GPU 등은 버스를 통해 서로 연결될 수 있다. CPU는 저장부(150)에 액세스하여, 저장부(150)에 저장된 O/S를 이용하여 부팅을 수행할 수 있으며, 저장부(150)에 저장된 각종 프로그램, 콘텐츠, 데이터 등을 이용하여 다양한 동작을 수행할 수 있다.
또한, 상기 제어부(180)는 상기 서버(200)로부터 제공되는 하나 이상의 파노라마 영상 정보를 상기 통신부(130)를 통해 수신한다.
본 발명의 실시예에서는, 상기 파노라마 영상 정보를 상기 서버(200) 또는 다른 단말로부터 제공받는 것을 설명하고 있으나, 상기 제어부(180)에서 상기 파노라마 영상 정보를 생성할 수도 있다.
즉, 상기 제어부(180)는 특정 매장에 구비된 360도 카메라(미도시)를 통해 촬영된 영상에 포함된 코드(또는 스티커)를 인식한다. 여기서, 상기 코드(또는 스티커)는 해당 매장 내의 상품, POP(Point of Purchase), 전단(leaflet), 배너광고(banner advertisement), 게시판 광고, 포스터 광고(billing), 간판(signboard), 가격표 등과 관련한 정보(또는 카테고리 정보)를 포함하며, 숫자, 문자, 기호, 도형 등의 조합에 의해 생성될 수 있다. 이때, 상기 360도 카메라는 2차원 또는 3차원 형태의 파노라마 영상을 촬영할 수 있다.
또한, 상기 제어부(180)는 상기 인식된 코드와 관련하여 상기 인식된 코드의 종류에 대응하는 임시 마커, 상기 영상 내에서의 임시 마커의 위치 정보, 상기 영상(예를 들어 이미지, 동영상 등 포함)과 관련한 카테고리 정보(예를 들어 대분류, 중분류, 소분류 정보 등 포함), 상기 360도 카메라의 카메라 번호, 상기 영상(또는 파노라마 영상)의 파일 번호, 촬영 일자 및 시각 정보, 런 타임 정보, 영상 유형 정보(예를 들어 VOD, 라이브, 미설정 등 포함) 등을 각각 확인한다.
또한, 상기 제어부(180)는 상기 인식된 코드, 상기 인식된 코드의 고유 식별 정보, 상기 인식된 코드의 종류, 상기 영상 내에서의 코드의 위치 정보, 상기 인식된 코드의 종류에 대응하는 임시 마커, 상기 영상 내에서의 임시 마커의 위치 정보, 상기 영상(예를 들어 이미지, 동영상 등 포함)과 관련한 카테고리 정보(예를 들어 대분류, 중분류, 소분류 정보 등 포함), 카메라 번호, 파노라마 영상 파일 번호, 촬영 일자 및 시각 정보, 런 타임 정보, 영상 유형 정보(예를 들어 VOD, 라이브, 미설정 등 포함) 등의 정보를 해당 영상(예를 들어 이미지, 동영상 등 포함)과 연동하여 파노라마 영상 정보를 생성한다.
또한, 상기 제어부(180)는 상기 특정 매장에 구비된 특정 360도 카메라를 통해 촬영된 영상을 근거로 생성된 파노라마 영상 정보를 상기 저장부(150)에 저장한다.
또한, 상기 제어부(180)는 상기 특정 매장에 구비된 특정 360도 카메라를 통해 촬영된 영상을 근거로 생성된 파노라마 영상 정보를 상기 통신부(130)를 통해 상기 서버(200), 상기 다른 단말 등에 전송한다.
이와 같이, 상기 파노라마 영상 정보는 상기 서버(200), 상기 다른 단말에서 생성된 후, 상기 단말(100)에 제공되거나 또는, 상기 단말(100) 자체에서 생성할 수 있다.
또한, 상기 표시부(160)에 상기 수신된 파노라마 영상 정보를 표시하고자 하는 경우, 상기 제어부(180)는 상기 파노라마 영상 정보를 표시하기 위한 앱이 상기 단말(100)에 설치된 상태인지 여부를 확인한다.
상기 확인 결과, 상기 파노라마 영상 정보를 표시하기 위한 앱이 상기 단말(100)에 설치되지 않은 상태인 경우, 상기 제어부(180)는 상기 서버(200)와의 연동에 의해 해당 앱을 상기 단말(100)에 설치한다.
또한, 상기 확인 결과, 상기 단말(100)에 설치된 앱이 실행되는 경우, 상기 제어부(180)는 앱 실행 결과 화면을 상기 표시부(160)에 표시한다. 여기서, 상기 앱 실행 결과 화면은 전시회 관리(예를 들어 전시회 생성, 삭제, 수정, 추가 등 포함)를 위한 전시회 관리 항목(또는 메뉴/버튼), MR(Mixed Reality) 콘텐츠를 편집하고 생성하기 위한 MR 콘텐츠 관리 항목, MR 콘텐츠를 공유하기 위한 MR 콘텐츠 배포 항목 등을 포함한다. 상기 앱 실행 결과 화면은 회원 정보를 입력받거나 전송하기 위한 회원 정보 항목, 앱의 기능을 설정하기 위한 설정 항목, MR 콘텐츠 편집 이력 정보 등을 관리하기 위한 마이 페이지 항목 등을 더 포함할 수도 있다. 이때, 상기 단말(100)는 백그라운드 상태로 해당 앱과 관련한 서버(200)와 통신한다.
또한, 상기 제어부(180)는 특정 매장, 특정 전시회 등과 관련한 파노라마 영상 정보를 요청하기 위한 파노라마 영상 정보 요청 신호를 생성한다.
또한, 상기 제어부(180)는 상기 생성된 파노라마 영상 정보 요청 신호, 상기 단말(100)의 식별 정보 등을 상기 통신부(130)를 통해 상기 서버(200)에 전송한다.
또한, 상기 제어부(180)는 상기 전송된 파노라마 영상 정보 요청 신호에 응답하여 상기 서버(200)로부터 전송되는 특정 매장, 특정 전시회 등과 관련한 특정 파노라마 영상 정보를 상기 통신부(130)를 통해 수신한다.
또한, 상기 제어부(180)는 상기 수신된 특정 파노라마 영상 정보를 상기 저장부(150)에 저장한다.
상기 표시부(160)에 표시되는 앱 실행 결과 화면 내의 미리 설정된 메뉴(또는 버튼)가 선택되는 경우, 상기 제어부(180)는 상기 표시부(160)의 목록/리스트 표시 영역에 저장부(150)에 저장된 하나 이상의 파노라마 영상 정보에 대한 목록(또는 리스트)을 표시한다. 여기서, 상기 파노라마 영상 정보는 이미지, 동영상 등을 포함한다. 또한, 상기 파노라마 영상 정보는 상기 이미지/동영상 외에, 상기 이미지/동영상에 포함된 객체와 관련한 코드, 코드의 고유 식별 정보, 코드의 종류, 이미지/동영상 내에서의 코드의 위치 정보, 코드의 종류에 대응하는 임시 마커(또는 예비 마커), 이미지/동영상 내에서의 임시 마커의 위치 정보, 이미지/동영상과 관련한 카테고리 정보(예를 들어 대분류, 중분류, 소분류 정보 등 포함), 카메라 번호, 파노라마 영상 파일 번호, 촬영 일자 및 시각 정보, 런 타임 정보, 영상 유형 정보(예를 들어 VOD, 생방송, 미설정 등 포함) 등을 포함한다. 이때, 상기 미리 설정된 메뉴 선택에 따른 화면은 파노라마 영상을 표시하기 위한 제 1 영역(또는 영상 표시 영역), 카테고리 분류를 표시하기 위한 제 2 영역(또는 카테고리 영역), 객체 마커를 표시하기 위한 제 3 영역(또는 객체 마커 표시 영역), 설정 메뉴를 표시하기 위한 제 4 영역(또는 설정 영역), 하나 이상의 파노라마 영상 정보를 포함하는 목록을 표시하기 위한 제 5 영역(또는 목록/리스트 표시 영역) 등을 포함할 수 있다.
또한, 상기 제 1 영역(또는 영상 표시 영역)은 상기 파노라마 영상에 해당하는 이미지, 동영상 등을 표시하는 영역이다. 이때, 상기 파노라마 영상이 동영상인 경우, 상기 제 1 영역의 일측에 상기 동영상을 표시하고, 상기 제 1 영역의 다른 일측에 해당 동영상의 재생, 일시정지, 2배속 정방향/역방향 재생 등을 위한 메뉴와, 하이라이트 재생 지점을 나타내는 메뉴와, 해당 동영상의 전체 런 타임과 재생 중인 지점의 시간 등을 나타내는 메뉴 등을 표시할 수 있다.
또한, 상기 제 2 영역(또는 카테고리 영역)은 상기 전시회 관리 메뉴 등을 통해 설정된(또는 등록된) 하나 이상의 전시회 항목을 리스트 박스, 콤보 박스 등의 형태로 표시하는 영역이다. 이때, 상기 카테고리 영역은 대분류, 중분류, 소분류 등에 의한 복수의 카테고리 영역으로 구분할 수 있다. 또한, 상기 카테고리 영역을 통해 어느 하나의 카테고리가 선택되는 경우, 상기 제어부(180)는 상기 선택된 카테고리에 대응하는 파노라마 영상 정보를 포함하는 목록을 상기 제 5 영역에 표시한다.
또한, 상기 제 3 영역(또는 객체 마커 표시 영역)은 파노라마 영상 정보에 추가될 수 있는 미리 설정된 객체 마커(예를 들어 샵카메라(또는 카메라), 상품, 업체, 이벤트 정보 등 포함)를 표시하는 영역이다. 이때, 특정 객체 마커가 상기 파노라마 영상 정보에 배치된 이후 해당 특정 객체 마커가 선택(또는 터치/더블 클릭 등 포함)되는 경우, 상기 제어부(180)는 상기 제 3 영역의 일측에 상기 선택된 특정 객체 마커에 대한 속성 정보를 설정하기 위한 화면을 추가로 표시한다.
또한, 상기 제 4 영역(또는 설정 영역)은 편집 중인 파노라마 영상 정보에 대해서 미리보기 기능, 삭제 기능, 저장 기능, 취소 기능 등의 메뉴 항목을 표시하는 영역이다.
또한, 상기 제 5 영역(또는 목록/리스트 표시 영역)은 상기 저장부(150)에 저장된 하나 이상의 파노라마 영상 정보에 대한 목록(또는 리스트)을 표시하는 영역이다.
또한, 상기 표시부(160)에 표시되는 하나 이상의 파노라마 영상 정보 중에서 어느 하나의 파노라마 영상 정보가 선택되는 경우, 상기 제어부(180)는 상기 선택된 파노라마 영상 정보를 상기 표시부(160)의 제 1 영역(또는 영상 표시 영역)에 표시한다. 이때, 상기 표시부(160)의 제 1 영역에 표시되는 파노라마 영상 정보는 카메라(미도시)를 통해 촬영된 코드가 포함된 이미지 또는 동영상 외에, 상기 코드와 관련한 하나 이상의 임시 마커가 포함된 상태일 수 있다. 여기서, 상기 임시 마커는 상기 코드와 관련하여 상기 코드 종류를 표시하기 위한 것으로, 샵카메라, 상품, 업체, 이벤트 정보 등을 표시하기 위한 용도이다. 또한, 상기 임시 마커는 샵카메라를 나타내기 위한 샵카메라 임시 마커(예를 들어 'CM'으로 표시), 상품을 나타내기 위한 상품 임시 마커(예를 들어 'PD'로 표시), 업체를 나타내기 위한 업체 임시 마커(예를 들어 'CO'로 표시), 이벤트 정보를 나타내기 위한 이벤트 정보 임시 마커(예를 들어 'EV'로 표시), 프로모션 정보를 나타내기 위한 프로모션 정보 임시 마커(예를 들어 'PR'로 표시) 등을 포함한다. 또한, 상기 임시 마커는 객체 마커와의 구분을 위해서, 실제 객체 마커로 대체(또는 교체/변경)되기 이전까지는 해당 임시 마커의 테두리를 점선 처리하거나, 배경색을 투명하게 설정하거나 또는 특정 색상으로 설정한 상태로 표시한다.
또한, 상기 제어부(180)는 상기 표시부(160)에 표시되는 파노라마 영상 정보의 다른 일측에 360도 파노라마 영상의 상/하/좌/우로 패닝(panning)하기 위한 패닝 버튼 등을 표시할 수 있다.
이때, 상기 제어부(180)는 사용자 선택(또는 사용자 터치/사용자 입력)에 따라 상기 표시부(160)에 표시되는 화면 내의 제 2 영역(또는 카테고리 영역)에 표시되는 상기 하나 이상의 파노라마 영상 정보에 대응하는 카테고리에 대한 정보를 선택하고, 상기 선택된 카테고리 정보에 대응하는 적어도 하나의 파노라마 영상 정보 중에서 선택되는 어느 하나의 파노라마 영상 정보를 상기 표시부(160)의 제 1 영역(또는 영상 표시 영역)에 표시할 수도 있다.
또한, 상기 제어부(180)는 사용자 입력(또는 MR 콘텐츠 제작에 관한 제어/조작 명령/사용자 터치/사용자 선택)에 따라 상기 제 3 영역(또는 객체 마커 표시 영역)에 표시되는 하나 이상의 객체 마커 중에서 어느 하나의 객체 마커가 선택된 후, 상기 제 1 영역(또는 영상 표시 영역) 상의 특정 영역(또는 특정 위치)이 선택되는 경우, 상기 선택된 특정 영역(또는 특정 위치)에 대응하는 코드 종류와 상기 선택된 객체 마커의 종류를 비교한다. 여기서, 상기 특정 영역(또는 특정 위치)에 대응하는 코드 종류(또는 상기 코드 종류에 대응하는 임시 마커의 종류)는 샵카메라, 상품, 업체, 이벤트 정보, 관련 데이터 없음 중 어느 하나일 수 있다. 또한, 상기 객체 마커의 종류는 샵카메라, 상품, 업체, 이벤트 정보 중 어느 하나일 수 있다.
즉, 상기 표시부(160)에 표시되는 하나 이상의 객체 마커 중에서 어느 하나의 객체 마커가 선택된 후, 상기 표시부(160)에 표시되는 파노라마 영상 정보 상의 특정 영역에 상기 선택된 객체 마커를 배치하고자 하는 경우, 상기 제어부(180)는 상기 특정 영역에 대해서 미리 설정된 코드 종류(또는 상기 코드 종류에 대응하는 임시 마커의 종류)와 상기 선택된 객체 마커의 종류가 일치하는지 여부를 확인(또는 판단)한다.
이때, 상기 제어부(180)는 상기 표시부(160)에 대한 드래그 앤 드롭(drag & drop) 기능을 사용하여 상기 제 3 영역(또는 객체 마커 표시 영역)에서의 객체 마커 중 어느 하나의 객체 마커가 선택(또는 드래그)된 후, 드래그 앤 드랍 기능에 의해, 상기 제 1 영역(또는 영상 표시 영역) 상의 특정 영역(또는 특정 위치)에 드랍될 때, 상기 객체 마커가 드랍된 특정 영역(또는 특정 위치)에 대응하는 코드 종류와, 상기 선택된 어느 하나의 객체 마커의 종류를 비교할 수도 있다.
이와 같이, 상기 제어부(180)는 상기 특정 영역(또는 특정 위치)에 배치하고자 하는 객체 마커에 대해서, 상기 객체 마커가 상기 특정 영역에 대응하여 미리 설정된 임시 마커와 동일한 종류(또는 동일/유사 분야/카테고리)의 마커에 해당하는지 여부를 검증한다.
상기 비교 결과(또는 상기 확인/판단 결과), 상기 선택된 특정 영역(또는 특정 위치)에 대응하는 코드 종류가 관련 데이터 없음이거나 또는, 상기 선택된 특정 영역(또는 특정 위치)에 대응하는 코드 종류와 상기 선택된 객체 마커의 종류가 일치하지 않는 경우, 상기 제어부(180)는 객체 마커 설정이 실패하였음을 나타내는 정보를 상기 표시부(160)의 일부 영역에 팝업 형태 등으로 표시하거나 상기 영상 표시 영역에 표시한다.
또한, 상기 표시부(160)에 표시되는 객체 마커 설정이 실패하였음을 나타내는 정보의 일측에 표시되는 미리 설정된 확인 버튼이 선택되는 경우, 상기 제어부(180)는 상기 선택된 객체 마커를 해제(또는 상기 드랍된 객체 마커를 삭제)하고, 상기 선택된 특정 영역(또는 특정 위치)에 대응하는 임시 마커를 계속하여 표시하고, 객체 마커를 선택하기 위한 상태로 전환한다.
또한, 상기 비교 결과(또는 상기 확인/판단 결과), 상기 선택된 특정 영역(또는 특정 위치)에 대응하는 코드 종류와 상기 선택된 객체 마커의 종류가 일치하는 경우, 상기 제어부(180)는 상기 특정 영역(또는 특정 위치)에 상기 객체 마커를 배치한다. 여기서, 상기 제어부(180)는 상기 특정 영역/특정 위치에 대응하여 미리 설정된 다른 위치에 상기 객체 마커를 배치할 수도 있다. 이때, 상기 제어부(180)는 상기 객체 마커의 배치에 따라, 해당 특정 영역(또는 특정 위치)에 위치했던 임시 마커는 삭제한다.
이와 같이, 상기 특정 영역에 배치할 객체 마커에 대한 검증(또는 확인)이 정상적으로 완료된 경우, 상기 제어부(180)는 상기 특정 영역에 대응하여 배치되었던 임시 마커를 상기 객체 마커로 교체(또는 업데이트/전환/변경/적용)한다.
또한, 상기 제어부(180)는 사용자 입력(또는 MR 콘텐츠 제작에 관한 제어/조작 명령/사용자 터치/사용자 선택)에 따라 상기 제 3 영역(또는 객체 마커 표시 영역)에 표시되는 하나 이상의 객체 마커 중에서 어느 하나의 객체 마커가 선택된 후, 상기 제 1 영역(또는 영상 표시 영역) 상의 특정 영역(또는 특정 위치)이 선택되는 경우, 상기 특정 영역(또는 특정 위치)에 상기 객체 마커를 배치한다. 여기서, 상기 제어부(180)는 상기 특정 영역/특정 위치에 대응하여 미리 설정된 다른 위치에 상기 객체 마커를 배치할 수도 있다. 이때, 상기 객체 마커의 종류는 샵카메라, 상품, 업체, 프로모션, 크리에이터(creator) 중 어느 하나일 수 있다. 또한, 상기 객체 마커의 테두리는 실선 처리할 수 있다.
이때, 상기 제어부(180)는 상기 표시부(160)에 대한 드래그 앤 드롭 기능을 사용하여 상기 제 3 영역(또는 객체 마커 표시 영역)에서의 객체 마커 중 어느 하나의 객체 마커가 선택(또는 드래그)된 후, 드래그 앤 드랍 기능에 의해, 상기 제 1 영역(또는 영상 표시 영역) 상의 특정 영역(또는 특정 위치)에 드랍될 때, 상기 객체 마커가 드랍된 특정 영역(또는 특정 위치)에 상기 객체 마커를 배치할 수도 있다.
이와 같이, 상기 파노라마 영상 정보에 임시 마커가 포함된 경우, 상기 제어부(180)는 상기 임시 마커와 동일 종류의 객체 마커로 해당 임시 마커를 교체(또는 배치)할 수 있다.
또한, 상기 파노라마 영상 정보에 임시 마커가 포함되지 않은 경우, 상기 제어부(180)는 해당 파노라마 영상 정보 내의 특정 위치에 사용자 선택에 따른 객체 마커를 배치할 수 있다.
또한, 상기 파노라마 영상 정보에 임시 마커가 포함된 경우에 있어서도, 상기 제어부(180)는 해당 임시 마커가 위치하지 않은 다른 특정 위치에 사용자 선택에 따른 객체 마커를 배치하고, 상기 임시 마커와 동일 종류의 다른 객체 마커로 해당 임시 마커를 교체(또는 배치)할 수도 있다.
이와 같이, 상기 파노라마 영상 정보에 임시 마커의 포함 여부에 따라, 상기 제어부(180)는 임시 마커를 대체하여 해당 임시 마커와 동일 종류의 객체 마커를 배치하거나, 파노라마 영상 정보 내의 특정 위치에 신규로 객체 마커를 배치할 수 있다.
또한, 상기 표시부(160)에 표시되는 제 1 영역(또는 상기 영상 표시 영역)에 위치된(또는 배치된) 객체 마커가 선택(또는 터치/더블 클릭)되는 경우, 상기 제어부(180)는 사용자 입력(또는 사용자 터치/사용자 선택)을 근거로 상기 선택된 객체 마커에 대한 속성 정보를 설정한다. 여기서, 상기 객체 마커에 대한 속성 정보는 객체 마커의 종류에 따라 다를 수 있다.
즉, 상기 객체 마커가 상품인 경우, 상기 제어부(180)는 상품에 대한 이미지, 상품명, 상품 고유 코드, 가격 정보, 상품과 관련한 동영상 링크/추가, 상세 설명, 카탈로그, 외부에 저장된 상세 페이지 주소 링크 등을 설정(또는 편집/수정/삭제/추가)한다.
또한, 상기 객체 마커가 샵카메라인 경우, 상기 제어부(180)는 해당 파노라마 영상과 관련한 하나 이상의 카메라 중에서 적어도 하나의 카메라의 링크 등을 설정(또는 편집/수정/삭제/추가)한다.
또한, 상기 객체 마커가 업체(또는 업체 정보)인 경우, 상기 제어부(180)는 업체명, 업체에 대한 이미지, 업체 로고, 업체 고유 코드, 업체와 관련한 동영상 링크/추가, 업체 설명, 카탈로그, 외부에 저장된 업체 상세 설명 페이지 주소 링크 등을 설정(또는 편집/수정/삭제/추가)한다.
또한, 상기 객체 마커가 이벤트(또는 이벤트 정보)인 경우, 상기 제어부(180)는 이벤트명, 이벤트에 대한 이미지/동영상, 이벤트 고유 코드, 이벤트 설명, 외부에 저장된 이벤트 상세 설명 페이지 주소 링크 등을 설정(또는 편집/수정/삭제/추가)한다.
또한, 상기 객체 마커가 프로모션(또는 프로모션 정보/이벤트/이벤트 정보)인 경우, 상기 제어부(180)는 상기 저장부(150)에 미리 저장된 하나 이상의 프로모션 정보를 상기 표시부(160)에 표시한다. 또한, 상기 제어부(180)는 상기 표시부(160)에 표시되는 하나 이상의 프로모션 정보 중에서 사용자 선택에 따른 특정 프로모션(또는 특정 프로모션 정보)을 확인한다. 또한, 상기 제어부(180)는 상기 선택된 프로모션 정보에 포함된 프로모션명, 프로모션에 대한 이미지/동영상, 프로모션 고유 코드, 프로모션 설명, 외부에 저장된 프로모션 상세 설명 페이지 주소 링크 등을 설정(또는 편집/수정/삭제/추가)한다.
또한, 상기 객체 마커가 크리에이터인 경우, 상기 제어부(180)는 상기 저장부(150)에 미리 저장된 하나 이상의 크리에이터(또는 쇼핑호스트) 정보를 상기 표시부(160)에 표시한다. 또한, 상기 제어부(180)는 상기 표시부(160)에 표시되는 하나 이상의 크리에이터 정보 중에서 사용자 선택에 따른 특정 크리에이터(또는 특정 크리에이터 정보)를 확인한다. 또한, 상기 제어부(180)는 상기 선택된 크리에이터 정보에 포함된 크리에이터명, 이미지(또는 동영상), 크리에이터 고유 코드, 크리에이터 설명 등을 설정(또는 편집/수정/삭제/추가)한다.
또한, 상기 제어부(180)는 상기 표시부(160)에 표시되는 복수의 객체 마커 사이즈 중에서 사용자 선택에 따른 객체 마커의 크기를 설정하기 위한 특정 객체 마커 사이즈(또는 객체 마커 사이즈 정보)를 설정(또는 확인)한다.
또한, 상기 제어부(180)는 상기 사용자 입력에 따른 객체 마커 선택 및 제 1 영역(또는 영상 표시 영역) 상의 특정 영역에 상기 선택된 객체 마커를 배치하고, 상기 배치된 객체 마커에 대한 속성 정보를 설정하는 과정을 반복 수행하여, 상기 선택된 파노라마 영상 정보에 포함된 모든 임시 마커에 대해서 객체 마커 배치 및 속성 정보 설정 과정을 수행하여 MR 콘텐츠를 편집(또는 제작/저작)한다.
이와 같이, 상기 표시부(160)의 제 1 영역(또는 영상 표시 영역)에 하나 이상의 임시 마커가 포함된 파노라마 영상 정보가 표시되고 있는 상태에서, 상기 제어부(180)는 사용자 입력(또는 사용자 선택/사용자 터치)에 따라 상기 하나 이상의 임시 마커를 대체하여 객체 마커를 배치하고, 상기 배치된 객체 마커에 대한 속성 정보를 설정하는 과정을 상기 파노라마 영상 정보에 포함된 모든 임시 마커에 대해서 수행한다.
이때, 상기 파노라마 영상 정보가 동영상인 상태에서 상기 임시 마커가 상기 객체 마커로 변경(또는 대체/교체/배치)되는 경우, 상기 제어부(180)는 상기 임시 마커에 대응하는 코드의 고유 식별 정보(또는 상기 객체 마커가 배치된 영역/위치와 관련한 코드의 고유 식별 정보)를 근거로, 해당 동영상에 포함된 해당 임시 마커 및 코드와 관련한 정보를 상기 설정되는 객체 마커(또는 객체 마커의 속성 정보를 포함하는 객체 마커)로 한 번에 모두 변경(또는 매칭/연동시킨다/업데이트)한다.
또한, 상기 파노라마 영상 정보가 동영상인 상태에서 상기 객체 마커가 배치되는 경우, 상기 제어부(180)는 상기 객체 마커에 대응하는 코드의 고유 식별 정보(또는 상기 객체 마커가 배치된 영역/위치와 관련한 코드의 고유 식별 정보/상기 객체 마커가 배치된 영역/위치에 대한 정보)를 근거로, 해당 동영상 내에서의 객체 마커가 배치된 영역/위치에 상기 설정되는 객체 마커(또는 객체 마커의 속성 정보를 포함하는 객체 마커)로 한 번에 모두 변경(또는 매칭/연동시킨다/업데이트/적용)한다. 이때, 상기 제어부(180)는 해당 동영상 중에서 상기 객체 마커가 배치되는 위치를 기준으로 미리 설정된 프레임의 개수만큼 전/후 프레임에 상기 설정되는 객체 마커를 추가로 적용할 수도 있다.
또한, 상기 표시부(160)에 상기 객체 마커가 배치되는 경우 또는 상기 표시부(160)에 배치된 객체 마커에 대한 속성 정보의 설정이 완료되는 경우, 상기 제어부(180)는 상기 객체 마커와 관련한 상기 이미지/동영상에 포함된 객체(또는 상기 객체와 관련한 코드, 상기 객체/코드와 관련한 임시 마커)와, 상기 객체 마커를 연동하여 저장한다.
이때, 상기 제어부(180)는 상기 배치된 객체 마커의 외곽선을 상기 이미지/동영상에 포함된 상기 객체 마커와 관련한 임시 마커에 대응하는 객체의 외곽선까지 연장 형성한다. 즉, 상기 제어부(180)는 상기 배치된 객체 마커의 외곽선의 좌표값을 상기 객체 마커와 관련한 임시 마커에 대응하는 객체의 외곽선의 좌표값으로 매칭하여 저장한다.
예를 들어, 상기 제어부(180)는 ABCD 간판에 대응하는 객체와 관련한 임시 마커를 대체하여 이벤트 정보 객체 마커가 배치되고, 상기 배치된 이벤트 정보 객체 마커에 대한 속성 정보 설정이 완료되는 경우, 상기 배치된 이벤트 정보 객체 마커의 외곽선의 좌표값을 상기 ABCD 간판의 외곽선의 좌표값으로 매칭(또는 연장 형성)한다.
이와 같이, 상기 객체 마커의 외곽선을 상기 객체 마커와 관련한 객체의 외곽선으로 연장 형성함에 따라, 추후 해당 객체를 선택할 경우에도, 해당 객체 마커를 선택한 효과를 얻을 수 있다.
또한, 상기 표시부(160)에 표시되는 미리 설정된 미리보기 메뉴(또는 버튼)가 선택되는 경우, 상기 제어부(180)는 상기 파노라마 영상 정보에 배치된 하나 이상의 객체 마커에 대한 결과 화면을 팝업 형태 등으로 상기 표시부(160)에 표시한다.
즉, 상기 표시부(160)에 표시되는 미리 설정된 미리보기 메뉴(또는 버튼)가 선택되는 경우, 상기 제어부(180)는 MR 콘텐츠 저작의 결과 영상(또는 상기 파노라마 영상 정보에 배치된 하나 이상의 객체 마커의 속성 정보에 대한 화면)을 미리보기 형태로 상기 표시부(160)에 표시한다.
또한, 상기 표시부(160)에 표시되는 미리 설정된 저장 메뉴(또는 버튼)가 선택되는 경우, 상기 제어부(180)는 상기 제 1 영역(또는 상기 영상 표시 영역)의 파노라마 영상 정보 상에 배치된 복수의(또는 하나 이상의) 객체 마커를 포함하는 MR 콘텐츠를 생성한다. 이때, 상기 MR 콘텐츠는 상기 파노라마 영상 정보(예를 들어 이미지/동영상), 이미지/동영상에 포함된 객체와 관련한 코드, 코드의 고유 식별 정보, 코드의 종류, 이미지/동영상 내에서의 코드의 위치 정보, 코드의 종류에 대응하는 임시 마커, 이미지/동영상 내에서의 임시 마커의 위치 정보, 이미지/동영상과 관련한 카테고리 정보(예를 들어 대분류, 중분류, 소분류 정보 등 포함), 카메라 번호, 파노라마 영상 파일 번호, 촬영 일자 및 시각 정보, 런 타임 정보, 영상 유형 정보(예를 들어 VOD, 생방송, 미설정 등 포함) 등 포함) 이외에, 코드의 종류에 대응하는 객체 마커, 이미지/동영상 내에 배치된 객체 마커(예를 들어 샵카메라, 상품, 업체, 프로모션, 크리에이터 등 포함), 이미지/동영상 내에서의 객체 마커의 위치 정보, 객체 마커의 속성 정보 등을 더 포함한다.
즉, 상기 표시부(160)에 표시되는 미리 설정된 저장 메뉴가 선택되는 경우, 상기 제어부(180)는 상기 제 1 영역의 파노라마 영상 정보에 포함된 모든 임시 마커에 대해서, 사용자 선택에 따른 객체 마커 배치 및 객체 마커의 속성 정보 설정이 모두 완료된 상태인지 여부를 확인한다.
또한, 상기 확인 결과, 상기 제 1 영역의 파노라마 영상 정보에 포함된 모든 임시 마커에 대해서, 사용자 선택에 따른 객체 마커 배치 및 객체 마커의 속성 정보 설정이 모두 완료되지 않은 상태인 경우, 상기 제어부(180)는 상기 모든 임시 마커 중에서 객체 마커 배치 및/또는 객체 마커의 속성 정보 설정이 완료되지 않은 임시 마커를 상기 표시부(160)에 표시하며, 해당 객체 마커 배치 및/또는 객체 마커의 속성 정보 설정이 완료되지 않은 임시 마커에 대한 객체 마커 배치 및/또는 객체 마커의 속성 정보 설정에 대한 안내 정보를 상기 표시부(160)의 일측에 표시한다.
또한, 확인 결과, 상기 제 1 영역의 파노라마 영상 정보에 포함된 모든 객체 마커에 대해서, 사용자 선택에 따른 객체 마커 배치 및 객체 마커의 속성 정보 설정이 모두 완료되지 않은 상태인 경우, 상기 제어부(180)는 상기 모든 임시 마커 중에서 객체 마커 배치 및/또는 객체 마커의 속성 정보 설정이 완료되지 않은 임시 마커, 상기 신규로 배치된 복수의 객체 마커 중에서 속성 정보 설정이 완료되지 않은 하나 이상의 객체 마커 등을 상기 표시부(160)에 표시하며, 해당 객체 마커 배치 및/또는 객체 마커의 속성 정보 설정이 완료되지 않은 임시 마커에 대한 객체 마커 배치 및/또는 객체 마커의 속성 정보 설정에 대한 안내 정보, 상기 객체 정보의 속성 정보 설정이 완료되지 않은 객체 마커의 속성 정보 설정에 대한 안내 정보 등을 상기 표시부(160)의 일측에 표시한다.
또한, 상기 확인 결과, 상기 제 1 영역의 파노라마 영상 정보에 포함된 모든 임시 마커에 대해서, 사용자 선택에 따른 객체 마커 배치 및 객체 마커의 속성 정보 설정이 모두 완료된 경우, 상기 제어부(180)는 상기 제 1 영역(또는 상기 영상 표시 영역)의 파노라마 영상 정보 상에 배치된 복수의(또는 하나 이상의) 객체 마커를 포함하는 MR 콘텐츠를 생성한다.
또한, 상기 미리 설정된 저장 메뉴가 선택되는 경우, 상기 제어부(180)는 상기 제 1 영역의 파노라마 영상 정보에 포함된(또는 배치된) 모든 객체 마커에 대해서, 해당 객체 마커의 속성 정보 설정이 모두 완료된 상태인지 여부를 확인한다.
또한, 확인 결과, 상기 제 1 영역의 파노라마 영상 정보에 포함된 모든 객체 마커에 대해서, 객체 마커의 속성 정보 설정이 모두 완료되지 않은 상태인 경우, 상기 제어부(180)는 상기 모든 객체 마커 중에서 속성 정보 설정이 완료되지 않은 하나 이상의 객체 마커를 상기 표시부(160)에 표시하며, 상기 객체 정보의 속성 정보 설정이 완료되지 않은 객체 마커의 속성 정보 설정에 대한 안내 정보를 상기 표시부(160)의 일측에 표시한다.
또한, 상기 확인 결과, 상기 제 1 영역의 파노라마 영상 정보에 포함된 모든 객체 마커에 대해서, 객체 마커의 속성 정보 설정이 모두 완료된 경우, 상기 제어부(180)는 상기 제 1 영역(또는 상기 영상 표시 영역)의 파노라마 영상 정보 상에 배치된 복수의(또는 하나 이상의) 객체 마커를 포함하는 MR 콘텐츠를 생성한다.
또한, 상기 파노라마 영상 정보가 동영상이고 상기 동영상 내의 특정 화면(또는 특정 이미지)에서 하나 이상의 객체 마커 배치 및 객체 마커의 속성 정보 설정이 완료된 상태에서 상기 미리 설정된 저장 버튼이 선택되는 경우, 상기 제어부(180)는 상기 객체 마커가 배치된 임시 마커와 관련한 코드의 고유 식별 정보(또는 상기 객체 마커가 배치된 영역/위치와 관련한 코드의 고유 식별 정보)를 근거로, 해당 동영상에 포함된 코드 및 임시 마커와 관련한 정보를 상기 설정되는 객체 마커(또는 객체 마커의 속성 정보를 포함하는 객체 마커)로 모두 변경하여(또는 매칭하여/연동시켜/업데이트) 저장한다.
이때, 상기 설정 영역에 임시 저장 항목이 추가로 포함된 상태인 경우, 상기 파노라마 영상 정보에 포함된 모든 임시 마커에 대해서 상기 객체 마커 배치 및 속성 정보 설정의 과정이 완료되지 않은 상태이더라도, 상기 임시 저장 항목이 선택되는 경우, 상기 제어부(180)는 해당 시점까지 설정된 객체 마커 배치 및 속성 정보, 객체 마커로 설정되지 않고 남아있는 임시 마커에 대한 정보 등을 임시로 상기 저장부(150)에 저장할 수도 있다.
또한, 상기 파노라마 영상 정보가 동영상이고 상기 동영상 내의 특정 화면(또는 특정 이미지)에서 하나 이상의 객체 마커 배치 및 객체 마커의 속성 정보 설정이 완료된 상태에서 상기 미리 설정된 저장 버튼이 선택되는 경우, 상기 제어부(180)는 상기 객체 마커에 대응하는 코드의 고유 식별 정보(또는 상기 객체 마커가 배치된 영역/위치와 관련한 코드의 고유 식별 정보/상기 객체 마커가 배치된 영역/위치에 대한 정보)를 근거로, 해당 동영상 내에서의 객체 마커가 배치된 영역/위치에 상기 설정되는 객체 마커(또는 객체 마커의 속성 정보를 포함하는 객체 마커)로 모두 변경하여(또는 매칭하여/연동시켜/업데이트하여/적용하여) 저장한다. 이때, 상기 제어부(180)는 해당 동영상 중에서 상기 객체 마커가 배치되는 위치를 기준으로 미리 설정된 프레임의 개수만큼 전/후 프레임에 상기 설정되는 객체 마커를 적용하여 저장할 수도 있다.
또한, 상기 표시부(160)에 표시되는 앱 실행 결과 화면에 포함된 전시회 관리 항목이 선택되는 경우, 상기 제어부(180)는 사용자 입력을 근거로 하나 이상의 전시회 관련 정보를 신규 추가한다.
또한, 상기 표시부(160)에 표시되는 상기 전시회 관리 항목이 선택된 상태에서, 상기 제어부(180)는 상기 저장부(150)에 미리 저장된 하나 이상의 파노라마 영상 정보 중에서 선택되는 특정 파노라마 영상 정보에 대해서 카테고리 항목, 전시회 항목 등을 신규로 추가(또는 연동/매칭)하거나, 변경(또는 업데이트)하거나, 삭제하는 등의 기능을 수행한다.
또한, 상기 표시부(160)에 표시되는 앱 실행 결과 화면에 포함된 MR 콘텐츠 배포 항목이 선택되는 경우, 상기 제어부(180)는 상기 통신부(130)를 통해 접속되는 하나 이상의 다른 단말, 서버(200), 상기 단말(100)과 관련한 소셜 네트워크 서비스(Social Networking Service: SNS) 등에 상기 저장부(150)에 저장된 MR 콘텐츠 중 적어도 하나의 MR 콘텐츠를 전송(또는 공유)한다.
이와 같이, 상기 제어부(180)는 MR 콘텐츠를 생성하고, 상기 생성된 MR 콘텐츠를 상기 통신부(130)를 통해 상기 서버(200) 또는 다른 단말에 제공한다.
본 발명의 실시예에서 설명하는 정보에 포함된 상기 MR 콘텐츠는 상기 단말(100)에서 생성된 MR 콘텐츠이거나 또는 다른 단말에서 생성된 MR 콘텐츠일 수 있다.
또한, 단말(100)에서 단말(100)의 사용자 입력(또는 사용자 선택/터치)에 따른 키워드를 수신하는 경우, 단말(100)에서 임의의 객체(예를 들어 사람의 얼굴, 지문, 상품, 건물, 상품/진열대에 구비/부착된 태그 등 포함)에 대한 패턴을 인식하는 경우 등이 발생하는 경우, 상기 제어부(180)는 상기 수신된 키워드, 실시간으로 확인되는 단말(100)의 위치 정보, 단말(100)의 식별 정보 등을 상기 통신부(130)를 통해 상기 서버(200)에 전송한다. 이때, 상기 단말(100)의 식별 정보는 MDN, 모바일 IP, 모바일 MAC, Sim(가입자 식별 모듈) 카드 고유정보, 시리얼번호 등을 포함한다.
여기서, 상기 키워드는 사용자 입력에 따른 문자 형태의 키워드, 사용자 입력에 따른 음성 형태의 키워드 등을 포함한다.
또한, 상기 단말(100)에서 상기 사용자 입력에 따른 음성 형태의 키워드를 포함하는 음성 정보를 수신하는 경우, 상기 제어부(180)는 상기 수신된 음성 정보에 대해서 음성 인식 기능을 수행한다.
또한, 상기 제어부(180)는 상기 수행된 음성 인식 기능 수행 결과인 상기 키워드를 확인한다.
또한, 상기 제어부(180)는 상기 확인된 키워드, 상기 단말(100)의 위치 정보, 상기 단말(100)의 식별 정보 등을 상기 통신부(130)를 통해 상기 서버(200)에 전송할 수도 있다.
또한, 상기 입력부(110)를 통해 얼굴, 지문, 상품, 건물 등의 객체를 포함하는 영상 정보를 수신하는 경우, 상기 제어부(180)는 상기 수신된 영상 정보에 대해서 공지된 특징점을 추출하는 패턴 인식 기능을 수행한다.
또한, 상기 제어부(180)는 상기 수행된 패턴 인식 기능 수행 결과인 상기 패턴 정보를 확인한다.
또한, 상기 제어부(180)는 상기 확인된 패턴 정보, 상기 단말(100)의 위치 정보, 상기 단말(100)의 식별 정보 등을 상기 통신부(130)를 통해 상기 서버(200)에 전송할 수도 있다.
이와 같이, 상기 제어부(180)는 사람의 얼굴, 지문 등에 대한 스캔 기능이 수행될 때, 해당 스캔에 따른 얼굴, 지문 등에 대한 하나 이상의 특징점을 추출하고, 상기 추출된 특징점을 포함하는 패턴 정보를 상기 단말(100)의 위치 정보와 함께 상기 서버(200)에 전송할 수 있다.
또한, 상기 리더기(120)를 통해 태그(예를 들어 바코드, QR 코드 등 포함)를 인식하는 경우, 상기 제어부(180)는 상기 인식된 태그에 포함된 정보(또는 패턴 정보)를 확인한다.
또한, 상기 제어부(180)는 상기 확인된 패턴 정보, 상기 단말(100)의 위치 정보, 상기 단말(100)의 식별 정보 등을 상기 통신부(130)를 통해 상기 서버(200)에 전송할 수도 있다.
또한, 상기 제어부(180)는 앞서 전송된 키워드, 상기 패턴 정보, 상기 단말(100)의 위치 정보, 상기 단말(100)의 식별 정보 등에 응답하여 상기 서버(200)로부터 전송되는 하나 이상의 정보(또는 상기 단말(100)의 위치 정보 및 상기 키워드에 대응하는 하나 이상의 정보)를 상기 통신부(130)를 통해 수신한다.
또한, 상기 제어부(180)는 상기 수신된 하나 이상의 정보를 상기 표시부(160) 및/또는 상기 음성 출력부(170)를 통해 출력한다. 여기서, 상기 정보(또는 콘텐츠)는 임의의 업체 관계자 또는 일반 사용자가 상기 서버(200)에 등록한 업체 정보, 상품 정보, 서비스 정보, 개인 정보 등을 포함한다. 또한, 상기 정보는 상기 임의의 업체 관계자 또는 일반 사용자에 대응하는 키워드/패턴정보와 관련한 파노라마 영상 정보, 해당 파노라마 영상 정보에 포함된 객체와 관련한 코드, 해당 코드의 종류에 대응하는 객체 마커, 이미지/동영상 내에서의 객체 마커의 위치 정보, 객체 마커의 속성 정보 등을 포함하는 MR 콘텐츠(또는 상기 MR 콘텐츠를 포함하는 정보)와 연동하는 정보일 수 있다.
또한, 상기 제어부(180)는 앞서 전송된 키워드, 상기 패턴 정보, 상기 단말(100)의 위치 정보, 상기 단말(100)의 식별 정보 등에 응답하여 상기 서버(200)로부터 전송되는 카테고리 정보를 상기 통신부(130)를 통해 수신한다.
또한, 상기 제어부(180)는 상기 수신된 카테고리 정보를 상기 표시부(160) 및/또는 상기 음성 출력부(170)를 통해 출력한다. 여기서, 상기 카테고리 정보는 상기 키워드 및/또는 상기 패턴 정보와 관련한 카테고리 정보일 수도 있다.
또한, 상기 제어부(180)는 상기 서버(200)와 연동하여, 상기 단말(100)에 표시되는 카테고리 정보 중에서 사용자 선택(또는 사용자 터치/입력)에 따라 선택되는 특정 카테고리에 대응하는 적어도 하나의 정보를 상기 표시부(160) 및/또는 상기 음성 출력부(170)를 통해 출력한다.
즉, 상기 표시부(160)에 표시되는 카테고리 정보 중에서 특정 카테고리가 선택되는 경우, 상기 제어부(180)는 상기 선택된 특정 카테고리에 대한 정보를 상기 통신부(130)를 통해 상기 서버(200)에 전송한다.
또한, 상기 제어부(180)는 상기 전송에 응답하여 상기 서버(200)로부터 전송되는 상기 선택된 특정 카테고리와 관련한 적어도 하나의 정보를 상기 통신부(130)를 통해 수신한다.
또한, 상기 제어부(180)는 상기 수신된 적어도 하나의 정보를 상기 표시부(160) 및/또는 상기 음성 출력부(170)를 통해 출력한다.
또한, 상기 표시부(160)에 표시되는 적어도 하나의 정보 중에서 특정 정보가 선택되는 경우, 상기 제어부(180)는 상기 선택된 특정 정보(또는 상기 선택된 특정 정보에 대한 상세 정보)를 상기 표시부(160) 및/또는 상기 음성 출력부(170)를 통해 출력한다.
또한, 상기 표시부(160)에서 정보가 표시 중인 상태에서 미리 설정된 이벤트가 감지되는 경우, 상기 제어부(180)는 상기 이벤트에 대응하여 미리 설정된 기능을 수행한다. 여기서, 상기 이벤트는 상기 단말(100)에 표시 중인 정보에 포함된 복수의 항목(예를 들어 AR 길 찾기 항목(또는 메뉴), 콘텐츠 정보 항목, 지도 정보 항목, 쿠폰 정보 항목, 통화 항목, 메시지 보내기 항목, 블로그 접속 항목, 소셜 네트워크 서비스 접속 항목 등 포함) 중 어느 하나의 항목에 대한 터치(또는 선택/클릭)가 감지되는 경우, 상기 단말(100)에 구비된 버튼(또는 메뉴)에 대한 터치(또는 선택/클릭)가 감지되는 경우, 상기 단말(100)의 상/하/좌/우 방향으로의 미리 설정된 임계값 이상의 기울임이 감지되는 경우, 상기 단말(100)의 상/하(또는 위/아래) 방향 또는 좌/우 방향 또는 대각선 방향으로의 일정 횟수 이상의 움직임(또는 흔들림/진동)이 감지되는 경우, 상기 단말(100)의 시계/반시계 방향으로의 일정 횟수의 이상의 회전(또는 움직임)이 감지되는 경우, 상기 단말(100)의 사용자에 의한 터치 제스처가 감지되는 경우 등을 포함한다. 이때, 상기 단말(100)의 사용자에 의한 터치 제스처는 탭, 터치&홀드, 더블 탭, 드래그, 플릭, 드래그 앤드 드롭, 핀치, 스와이프 등을 포함한다.
즉, 상기 표시부(160)에서 정보가 표시 중인 상태에서 상기 정보에 포함된 복수의 항목(예를 들어 AR 길 찾기 항목(또는 메뉴), 콘텐츠 정보 항목, 지도 정보 항목, 쿠폰 정보 항목, 통화 항목, 메시지 보내기 항목, 블로그 접속 항목, 소셜 네트워크 서비스 접속 항목 등 포함) 중 어느 하나의 항목에 대한 터치(또는 선택/클릭)가 감지되는 경우, 상기 제어부(180)는 상기 터치된 항목과 관련한 콘텐츠를 상기 표시부(160) 및/또는 상기 음성 출력부(170)를 통해 출력한다.
또한, 상기 표시부(160)에서 정보가 표시 중인 상태에서 상기 단말(100)에 구비된 버튼(또는 메뉴)에 대한 터치(또는 선택/클릭)가 감지되는 경우, 상기 제어부(180)는 상기 터치된 버튼과 관련한 콘텐츠를 상기 표시부(160) 및/또는 상기 음성 출력부(170)를 통해 출력한다.
또한, 상기 표시부(160)에서 정보가 표시 중인 상태에서 상기 단말(100)의 상/하/좌/우 방향으로의 미리 설정된 임계값 이상의 기울임이 감지되는 경우, 상기 제어부(180)는 특정 방향의 기울임에 대응하여 미리 설정된 콘텐츠를 상기 표시부(160) 및/또는 상기 음성 출력부(170)를 통해 출력한다.
또한, 상기 표시부(160)에서 정보가 표시 중인 상태에서 상기 단말(100)의 상/하(또는 위/아래) 방향 또는 좌/우 방향 또는 대각선 방향으로의 일정 횟수 이상의 움직임(또는 흔들림/진동)이 감지되는 경우, 상기 제어부(180)는 특정 방향으로의 움직임에 대응하여 미리 설정된 다른 콘텐츠를 상기 표시부(160) 및/또는 상기 음성 출력부(170)를 통해 출력한다.
또한, 상기 표시부(160)에서 정보가 표시 중인 상태에서 상기 단말(100)의 시계/반시계 방향으로의 일정 횟수의 이상의 회전(또는 움직임)이 감지되는 경우, 상기 제어부(180)는 시계/반시계 방향으로의 회전에 대응하여 미리 설정된 또 다른 콘텐츠를 상기 표시부(160) 및/또는 상기 음성 출력부(170)를 통해 출력한다.
또한, 상기 표시부(160)에서 정보가 표시 중인 상태에서 상기 단말(100)의 사용자에 의한 터치 제스처가 감지되는 경우, 상기 제어부(180)는 상기 터치 제스처에 대응하여 미리 설정된 또 다른 콘텐츠를 상기 표시부(160) 및/또는 상기 음성 출력부(170)를 통해 출력한다. 이때, 상기 단말(100)의 사용자에 의한 터치 제스처는 탭, 터치&홀드, 더블 탭, 드래그, 플릭, 드래그 앤드 드롭, 핀치, 스와이프 등을 포함한다.
"탭(tap)"은 사용자가 손가락이나 터치 도구(예컨대, 전자 펜)를 이용하여 화면(예를 들어 객체, 지명, 부가 정보 등 포함)을 터치한 후 움직이지 않은 채 화면에서 즉시 들어올리는 동작을 나타낸다.
"터치&홀드(touch & hold)"는 사용자가 손가락이나 터치 도구(예컨대, 전자 펜)을 이용하여 화면(예를 들어 객체, 지명, 부가 정보 등 포함)을 터치한 후, 임계 시간(예컨대, 2초) 이상 터치 입력을 유지하는 동작을 나타낸다. 즉, 터치-인 시점과 터치-아웃 시점 간의 시간 차이가 임계 시간(예컨대, 2초) 이상인 경우를 의미한다. 터치 입력이 탭인지 터치&홀드인지를 사용자에게 인식시키도록 하기 위하여 터치 입력이 임계 시간 이상 유지되면 시각적 또는 청각적 또는 촉각적으로 피드백 신호를 제공할 수도 있다. 상기 임계 시간은 구현 예에 따라서 변경될 수 있다.
"더블 탭(double tap)"은 사용자가 손가락이나 터치 도구(stylus)를 이용하여 화면(예를 들어 객체, 지명, 부가 정보 등 포함)을 두 번 터치하는 동작을 나타낸다.
"드래그(drag)"는 사용자가 손가락이나 터치 도구를 화면(예를 들어 객체, 지명, 부가 정보 등 포함)에 터치한 후 터치를 유지한 상태에서 손가락이나 터치 도구를 화면 내의 다른 위치로 이동시키는 동작을 의미한다. 드래그 동작으로 인하여 오브젝트가 이동되거나 후술할 패닝 동작이 수행된다.
"플릭(flick)"은 사용자가 손가락이나 터치 도구를 화면(예를 들어 객체, 지명, 부가 정보 등 포함)에 터치한 후 사용자가 손가락이나 터치 도구를 이용하여 임계 속도(예컨대, 100 pixel/s) 이상으로 드래그하는 동작을 나타낸다. 손가락이나 터치 도구의 이동 속도가 임계 속도(예컨대, 100 pixel/s) 이상인지에 기초하여 드래그(또는 패닝)와 플릭을 구별할 수 있다.
"드래그 앤드 드롭(drag & drop)"은 사용자가 손가락이나 터치 도구를 이용해 오브젝트(예를 들어 객체, 지명, 부가 정보 등 포함)를 화면 내 소정 위치에 드래그한 후 놓는 동작을 의미한다.
"핀치(pinch)"는 사용자가 두 손가락을 화면(예를 들어 객체, 지명, 부가 정보 등 포함) 위에 터치한 상태에서 서로 다른 방향으로 움직이는 동작을 나타낸다.
"스와이프(swipe)"는 손가락이나 터치 도구로 화면 위의 오브젝트(예를 들어 객체, 지명, 부가 정보 등 포함)를 터치한 상태에서 수평 또는 수직 방향으로 일정 거리를 움직이는 동작이다. 사선 방향의 움직임은 스와이프 이벤트로 인식되지 않을 수 있다.
또한, 상기 이벤트(또는 상기 터치 제스처)에 대응하는 기능이 종료되는 경우, 상기 제어부(180)는 상기 이벤트 감지 전의 영상인 상기 증강 현실 영상 또는 추가 정보가 표시되는 증강 현실 영상으로 복귀한다.
즉, 상기 특정 객체, 특정 추가 객체 및 특정 추가 정보 중 어느 하나를 선택한 상태가 해제되는 경우, 상기 제어부(180)는 상기 이벤트 감지 전의 영상인 상기 증강 현실 영상 또는 추가 정보가 표시되는 증강 현실 영상으로 복귀한다.
또한, 상기 단말(100)의 사용자에 의한 터치 제스처 감지 이후 상기 미리 설정된 시간이 경과한 경우, 상기 제어부(180)는 상기 이벤트 감지 전의 영상인 상기 증강 현실 영상 또는 추가 정보가 표시되는 증강 현실 영상으로 복귀한다.
또한, 상기 이벤트 감지에 따라 상기 단말(100)의 현재 위치에서 목적지까지의 경로 안내 정보를 표시하는 경우, 상기 제어부(180)는 상기 서버(200)로부터 제공되거나 상기 저장부(150)에 저장된 항공뷰(또는 스트리트 뷰/로드 뷰/전경 뷰)를 상기 표시부(160)에 표시한다. 이때, 상기 항공뷰, 상기 스트리트 뷰, 상기 로드 뷰, 상기 전경 뷰 등은 가상 현실로 구현된 상태이거나 또는 카메라 등을 통해 사전에 촬영된 이미지(또는 영상)일 수 있다.
본 발명에서 설명하는 상기 항공뷰는 항공기에 구비된 카메라(미도시)를 통해 촬영된 영상을 나타내며, 상기 스트리트 뷰(또는 로드 뷰/전경 뷰)는 도로(또는 인도)나 건물 등에서 상기 단말(100)에 구비된 카메라(미도시) 등을 통해 촬영된 영상을 나타낼 수 있다.
또한, 상기 카메라를 통해 상기 단말(100)이 위치한 지역의 영상을 확인하는 경우, 상기 제어부(180)는 상기 카메라를 통해 확인되는 영상(예를 들어 스트리트 뷰(또는 로드 뷰/전경 뷰))을 상기 표시부(160)(또는 뷰 파인더(view finder))에 표시한다.
또한, 상기 제어부(180)는 상기 단말(100)의 현재 위치, 상기 표시되는 스트리트 뷰(또는 로드 뷰/전경 뷰) 내의 객체에 대한 정보(예를 들어 상기 스트리트 뷰(또는 로드 뷰/전경 뷰) 내에 포함되는 간판 등 포함) 등을 근거로 해당 스트리트 뷰와 관련한 증강 현실 정보를 확인한다.
또한, 상기 제어부(180)는 상기 확인된 증강 현실 정보를 상기 스트리트 뷰(또는 로드 뷰/전경 뷰)에 적용하여, 앞서 카메라(130)를 통해 확인되는 영상에 상기 증강 현실 정보가 적용된 영상을 상기 표시부(160)에 표시한다.
이와 같이, 본 발명에 따른 실시예는, 항공뷰, 스트리트 뷰, 로드 뷰, 전경 뷰 등이 실제 이미지, 가상 현실, 증강 현실 등의 형태로 제공될 수 있다.
또한, 상기 제어부(180)는 상기 서버(200)로부터 전송되는 상기 단말(100)에 표시되는 화면 상에서의 단말(100)(또는 해당 화면 상에서의 아바타/해당 화면과 관련한 위치나 좌표 정보)의 현재 위치와 관련한 적어도 하나의 이벤트 정보를 상기 통신부(130)를 통해 수신한다.
또한, 상기 제어부(180)는 상기 수신된 적어도 하나의 이벤트 정보 및 상기 표시부(160)에 표시되는 화면 상에서의 단말(100)(또는 해당 화면 상에서의 아바타/해당 화면과 관련한 위치나 좌표 정보)의 현재 위치를 근거로 해당 적어도 하나의 이벤트 정보에 대응하는 적어도 하나의 경로 정보를 각각 생성한다. 여기서, 상기 경로 정보는 차선 정보, 도로 정보, 주행 제한 속도 정보, 턴바이턴 정보, 교통 안전 정보, 교통 안내 정보, 차량 정보, 길 찾기 정보, 건물 내의 통로(또는 복도) 정보 등의 주행(또는 이동)과 관련한 각종 정보를 포함한다.
또한, 상기 제어부(180)는 이벤트명 및 상기 생성된 적어도 하나의 경로 정보를 상기 표시부(160)의 화면(예를 들어 항공뷰, 스트리트 뷰, 로드뷰, 전경 뷰 등 포함) 상에 오버랩하여 표시한다. 여기서, 상기 경로 정보는 상기 이벤트 정보에 대응하는 목적지를 가기 위한 턴바이턴 형태의 화살표 또는 선 형태로 표시할 수 있다.
또한, 상기 표시부(160)의 화면에 상기 이벤트명 및 상기 적어도 하나의 경로 정보를 오버랩하여 표시할 때, 상기 제어부(180)는 상기 이벤트 정보 내의 이벤트 기간 및 이벤트 시간대 정보를 근거로 이벤트 종료(또는 이벤트 마감)에 임박한 경우(또는 상기 이벤트 기간 및 이벤트 시간대가 미리 설정된 임계값 이내인 경우), 해당 경로 정보에 포함된 화살표나 선의 굵기를 상대적으로 굵게 표시하고, 이벤트 종료까지 미리 설정된 임계값 이상 남아 있는 경우 해당 경로 정보에 포함된 화살표나 선의 굵기를 상기 이벤트 종료에 임박한 경우보다 상대적으로 얇게 표시할 수 있다.
이와 같이, 본 발명의 실시예에서는 단말(100)에서 가상 현실 또는 증강 현실로 표현되는 화면을 표시하고 있는 상태에서, 해당 화면 상에서의 상기 단말(100)이나 아바타의 위치에 대응하는 적어도 하나의 이벤트 정보가 존재하는 경우, 상기 단말(100)이 상기 서버(200)로부터 제공되는 적어도 하나의 이벤트 정보를 수신하고, 상기 수신된 적어도 하나의 이벤트 정보에 대응하는 적어도 하나의 경로 정보를 각각 생성하고, 상기 생성된 적어도 하나의 경로 정보 및 이벤트 정보에 대응하는 이벤트 명을 상기 화면 상에 오버랩하여 표시하는 것을 설명하고 있으나, 이에 한정되는 것은 아니며, 상기 가상 현실 또는 증강 현실로 화면을 표시하기 이전에 해당 화면 상에서의 상기 단말(100)이나 아바타의 위치에 대응하는 이벤트 정보의 존재 여부를 미리 확인한 후, 해당 화면 상에서의 상기 단말(100)이나 아바타의 위치에 대응하는 이벤트 정보가 존재할 때 경로 정보를 생성하고, 경로 정보 및 이벤트 명이 적용된 화면을 표시하도록 구성할 수도 있다.
또한, 상기 단말(100)에서 상기 서버(200)로부터 복수의 이벤트 정보를 제공받아 상기 단말(100)에 저장하고 있는 상태에서, 상기 단말(100)에 표시되는 화면 상에서의 상기 단말(100)이나 아바타의 위치에 대응하는 하나 이상의 이벤트 정보가 존재하는 경우, 상기 하나 이상의 이벤트 정보에 대응하는 하나 이상의 경로 정보를 생성하고, 상기 생성된 하나 이상의 경로 정보를 상기 단말(100)에 표시되는 화면 상에 오버랩하여 표시함에 따라, 상기 서버(200)의 부하를 줄일 수도 있다.
본 발명의 실시예에서는, 상기 단말(100)에서 상기 서버(200)로부터 제공되는 적어도 하나의 이벤트 정보를 근거로 적어도 하나의 경로 정보를 생성한 후, 상기 생성된 적어도 하나의 경로 정보를 상기 화면 상에 오버랩하여 표시하는 것을 설명하고 있으나, 이에 한정되는 것은 아니며, 상기 서버(200)는 상기 적어도 하나의 이벤트 정보 및 상기 단말(100)이나 아바타의 위치 정보를 근거로 적어도 하나의 경로 정보를 생성하고, 상기 생성된 적어도 하나의 경로 정보를 상기 단말(100)에 제공한다. 이때, 상기 서버(200)는 상기 화면 상에 상기 생성된 적어도 하나의 경로 정보를 오버랩하여 새로운 화면을 생성하고, 상기 생성된 화면(또는 상기 적어도 하나의 경로 정보가 적용된 화면)을 상기 단말(100)에 제공할 수도 있다. 이후, 상기 단말(100)은 상기 서버(200)로부터 제공되는 적어도 하나의 경로 정보를 수신하고, 상기 수신된 적어도 하나의 경로 정보를 상기 단말(100)에 표시되고 있는 화면에 오버랩하여 표시할 수 있다.
또한, 상기 이벤트명 및 상기 생성된 적어도 하나의 경로 정보가 적용된 화면에서 상기 단말(100)이나 상기 아바타의 위치가 변경함에 따라 상기 적어도 하나의 이벤트 정보의 적용 상태가 변경하는 경우, 상기 단말(100)은 상기 변경된 이벤트 정보에 따른 경로 정보를 생성하고, 이벤트 정보 적용이 해제되는 이벤트 정보에 대응하는 경로 정보를 삭제하고, 상기 생성된 변경된 이벤트 정보에 따른 경로 정보를 표시할 수 있다.
예를 들어, AAA 백화점 1층 로비에서의 3D 파노라마 영상 내에서 지하 1층 수산물 코너의 할인 행사와 관련한 제 1 경로 정보와, 지상 3층 의류 코너의 할인 행사와 관련한 제 2 경로 정보가 표시되고 있는 상태에서, 상기 백화점 1층 로비에서의 3D 파노라마 영상이 사용자 제어(또는 사용자 터치)에 따라 화면 이동(또는 화면 전환)되어 상기 백화점 1층 로비에서 50여 미터 전진하여 에스컬레이터까지 이동된 3D 파노라마 영상(또는 AAA 백화점 1층 에스컬레이터와 관련한 3D 파노라마 영상)이 표시될 때, 상기 단말(100)은 상기 복수의 이벤트 정보 중에서 상기 AAA 백화점 1층 에스컬레이터와 관련한 3D 파노라마 영상 내에서의 아바타의 위치에 대응하는 하나 이상의 이벤트 정보를 상기 서버(200)로부터 제공받는다. 이때, 상기 AAA 백화점 1층 에스컬레이터와 관련한 3D 파노라마 영상 내에서의 아바타의 위치에 대응하는 하나 이상의 이벤트 정보는 앞선 AAA 백화점 1층 로비에서의 3D 파노라마 영상 내에서의 아바타의 위치에 대응하는 적어도 하나의 이벤트 정보와 비교하여, 지하 1층 수산물 코너의 할인 행사와 관련한 이벤트 정보는 그대로 유지하고 있으나, 지상 3층 의류 코너의 할인 행사와 관련한 이벤트 정보는 포함하지 않은 상태이며, 대신에 지상 2층 가전 코너의 할인 행사와 관련한 이벤트 정보를 포함한 상태일 수 있다. 또한, 상기 단말(100)은 상기 수신된 하나 이상의 이벤트 정보를 근거로 상기 지하 1층 수산물 코너의 할인 행사와 관련한 제 11 경로 정보를 생성하고, 상기 지상 2층 가전 코너의 할인 행사와 관련한 제 12 경로 정보를 생성한다. 또한, 상기 단말(100)은 상기 AAA 백화점 1층 에스컬레이터와 관련한 3D 파노라마 영상에 상기 생성된 제 11 경로 정보, 제 12 경로 정보 등을 오버랩하여 표시한다.
이와 같이, 상기 복수의 이벤트 정보 중에서 상기 단말(100)에 현재 표시되고 있는 화면 내에서의 상기 단말(100)이나 아바타의 위치 정보를 근거로 해당 단말(100)이나 아바타의 위치 정보와 관련한 적어도 하나의 이벤트 정보가 존재하는 경우, 상기 단말(100)은 실시간으로 해당 이벤트 정보를 적용하여 경로 정보를 생성하고, 상기 생성된 경로 정보를 표시할 수 있다.
즉, 상기 단말(100)은 상기 단말(100)이나 아바타의 위치 이동에 따라 인터랙티브(interactive) 개념이 적용되어 상기 단말(100)이나 아바타의 현재 위치에 따른 실시간 경로 정보를 제공할 수 있다.
또한, 상기 서버(200)에 타임 세일 이벤트가 등록된 상태에서 상기 단말(100)에 표시되고 있는 화면 상의 상기 단말(100)이나 아바타의 현재 위치가 해당 타임 세일 이벤트와 관련한 지역에 포함된 경우, 상기 단말(100)은 상기 서버(200)로부터 제공되는 타임 세일 이벤트 정보를 수신한다. 여기서, 상기 타임 세일 이벤트(또는 시간 세일 이벤트)는 시간대를 설정한 상태에서 일부 상품이나 서비스에 대한 가격을 할인해주는 이벤트일 수 있다.
또한, 상기 단말(100)은 상기 수신된 타입 세일 이벤트 정보를 상기 이벤트명 및 상기 생성된 적어도 하나의 경로 정보가 적용된 화면의 다른 일측에 추가로 표시할 수 있다.
또한, 상기 단말(100)에 표시되는 타임 세일 이벤트 정보가 선택되는 경우, 상기 단말(100)은 상기 선택된 타임 세일 이벤트 정보에 대한 상세 화면을 표시하거나 또는, 상기 선택된 타임 세일 이벤트 정보와 관련한 3D 파노라마 영상을 표시한다.
또한, 상기 표시부(160)에 표시되는 적어도 하나의 경로 정보 중에서 어느 하나의 경로 정보를 선택(또는 터치/클릭)한 상태가 유지되는 경우, 상기 제어부(180)는 출발지(또는 기준점/시작점)에 해당하는 상기 적어도 하나의 경로 정보가 오버랩되어 표시되는 화면 상의 위치(또는 상기 단말(100)/화면 내의 아바타의 현재 위치)에서 상기 선택된 경로 정보에 대응하는 목적지까지의 남은 거리, 해당 목적지까지의 평균 이동 시간 정보(또는 평균 주행 시간 정보), 해당 경로 정보와 관련한 이벤트 정보 등을 상기 표시부(160)의 적어도 하나의 경로 정보가 오버랩되어 표시되는 화면의 일측에 표시하고, 상기 화면 상의 위치에서 해당 목적지까지의 미리 설정된 속도로 자동 이동 기능(또는 자동 주행 기능)을 수행한 화면을 상기 표시부(160)에 연속적으로 표시한다.
또한, 상기 제어부(180)는 상기 표시부(160)에 표시되는 적어도 하나의 경로 정보 중에서 선택되는 어느 하나의 경로 정보를 선택한 터치 상태에 대한 압력을 감지한다. 또한, 상기 제어부(180)는 상기 감지된 압력(또는 터치 압력)의 세기에 따른 다른 기능을 수행할 수도 있다.
즉, 상기 표시부(160)에 표시되는 적어도 하나의 경로 정보 중에서 어느 하나의 경로 정보를 선택(또는 터치/클릭)한 상태가 유지되는 상태에서 상기 제어부(180)는 상기 단말(100)에 포함된 센서부(미도시)를 통해 상기 선택(또는 터치)에 따른 압력을 감지한다.
또한, 상기 감지된 압력이 미리 설정된 기준값보다 작거나 같은 경우, 상기 제어부(180)는 상기 출발지(또는 기준점/시작점)에 해당하는 상기 적어도 하나의 경로 정보가 오버랩되어 표시되는 화면 상의 위치에서 상기 선택된 경로 정보에 대응하는 목적지까지의 남은 거리, 해당 목적지까지의 평균 이동 시간 정보(또는 평균 주행 시간 정보), 해당 경로 정보와 관련한 이벤트 정보 등을 상기 적어도 하나의 경로 정보가 오버랩되어 표시되는 화면의 일측에 표시하고, 상기 화면 상의 위치에서 해당 목적지까지의 미리 설정된 속도로 자동 이동 기능(또는 자동 주행 기능)을 수행한 화면을 연속적으로 표시하는 과정을 수행한다.
또한, 상기 감지된 압력이 미리 설정된 기준값보다 큰 경우, 상기 제어부(180)는 상기 표시부(160)에 표시되는 적어도 하나의 경로 정보가 적용된 화면에서 상기 선택된 경로 정보에 대응하는 최종 목적지와 관련한 화면을 상기 표시부(160)에 표시한다.
또한, 상기 표시부(160)에 대한 상기 어느 하나의 경로 정보를 선택한 상태가 해제되는 경우, 상기 제어부(180)는 상기 선택된 어느 하나의 경로 정보와 관련하여 상기 표시부(160)에 표시되고 있는 목적지까지의 자동 이동 기능(또는 자동 주행 기능)에 따른 화면의 표시를 중지하고, 상기 적어도 하나의 경로 정보가 오버랩되어 표시되는 화면을 상기 표시부(160)에 표시한다.
상기 서버(200)는 상기 단말(100) 등과 통신한다.
또한, 상기 서버(200)는 해당 서버(200)에 포함된 복수의 카메라(미도시)를 통해 오프라인 또는 가두 매장 상의 하나 이상의 매장, 해당 매장 내의 상품, 전시 상품, POP, 전단, 배너 광고, 게시판 광고, 포스터 광고, 간판, 가격표 등을 포함하는 제 1 영상과 제 2 영상을 촬영한다. 여기서, 상기 매장은 백화점, 쇼핑몰, 아울렛, 음식점, 병원, 빌딩(또는 건축물) 등을 포함한다. 이때, 상기 서버(200)는 상기 제 1 영상과 제 2 영상을 촬영하는 지점의 위치 정보(예를 들어 GPS 위치 정보 등 포함)를 확인하고, 상기 확인된 위치 정보를 상기 촬영한 제 1 영상과 제 2 영상과 매칭(또는 연동)하여 저장한다.
여기서, 상기 POP(Point of Purchase)는 매장을 찾아온 고객에게 즉석에서 상품 및/또는 서비스에 대한 정보를 제공하는 광고를 나타낸다. 또한, 상기 전단(leaflet)(또는 전단 광고/전단지/전단지 광고)은 광고나 선전을 목적으로 배포하는 간단한 인쇄물의 형태를 나타낸다. 또한, 상기 배너 광고(banner advertisement)는 매장의 특정 위치에 설치되어 특정 상품 및/또는 서비스에 대한 정보를 제공하는 광고를 나타낸다. 또한, 상기 포스터 광고(billing)는 광고 선전용으로 제작하여 붙이는 종이를 나타내며, 시각에 호소하는 것이기 때문에 주목을 끌수 있도록 문자, 도형, 문장 등을 고려하여 제작한다. 또한, 상기 간판(signboard)은 매장과 관련한 회사명, 상점명, 상품명, 서비스명 등을 표시하는 판을 나타낸다.
또한, 상기 서버(200)는 상기 촬영된 제 1 영상 및 제 2 영상에 대해 픽셀의 방향성을 기준으로 상기 제 1 영상 및 제 2 영상이 중첩되는 중첩 영역을 획득한다.
또한, 상기 서버(200)는 상기 획득된 중첩 영역을 기준으로 상기 제 1 영상 및 제 2 영상을 합성하여 예비 파노라마 영상을 생성한다. 이때, 상기 서버(200)는 미리 공지된 다양한 합성 방법에 의해서 상기 촬영된 제 1 영상 및 제 2 영상을 합성하여 예비 파노라마 영상을 생성할 수 있다. 이때, 상기 생성되는 예비 파노라마 영상은 상기 예비 파노라마 영상에 포함된 제 1 객체, 상품, 지점(point)(또는 좌표) 등에 대한 위치 정보를 포함(또는 연동/매칭)한다.
즉, 상기 예비 파노라마 영상은 영상뿐만 아니라, 추후 임의의 단말의 위치 정보(예를 들어 구매 단말(100)의 위치 정보 등 포함)에 대응하는 3D 파노라마 영상을 검색(또는 확인)할 수 있도록 해당 예비 파노라마 영상에 포함된 제 1 객체, 상품, 지점 등에 대한 위치 정보를 포함하도록 구성한다.
본 발명의 실시예에서는, 상기 획득된 중첩 영역을 기준으로 상기 제 1 영상 및 제 2 영상을 합성하여 상기 예비 파노라마 영상을 생성하는 것으로 설명하고 있으나, 이에 한정되는 것은 아니며, 상기 서버(200)는 미리 공지된 다양한 합성 방법에 의해서 상기 촬영된 제 1 영상 및 제 2 영상을 합성하여 상기 예비 파노라마 영상을 생성할 수도 있다.
이때, 상기 서버(200)는 별도로 구성되는 복수의 카메라(예를 들어 3D 파노라마 영상을 촬영하기 위한 특수 장치, 특수 차량 등에 구성된 복수의 카메라)를 통해서 촬영된 제 1 영상 및 제 2 영상을 근거로 상기 예비 파노라마 영상을 생성할 수도 있다.
또한, 상기 서버(200)는 상기 예비 파노라마 영상 내에 포함된 하나 이상의 제 1 객체를 각각 인식한다. 여기서, 상기 제 1 객체는 상기 오프라인 상에 위치하는 각각의 매장일 수도 있고, 상기 오프라인 상에 위치하거나 각 매장 내에 위치하는 POP(Point of Purchase), 전단(Leaflet), 배너 광고(Banner), 포스터 광고(Poster), 간판(Signboard), 가격표(Price Tag) 등을 포함할 수 있다. 이때, 본 발명에서의 상기 제 1 객체는 각 매장에서 제공하는 상품 및 서비스를 제외하거나 또는 포함한 상태일 수 있다. 또한, 상기 POP, 전단, 배너 광고, 포스터 광고, 간판 등은 할인 행사 코드를 나타내며, 상기 가격표는 상품 코드를 나타낼 수 있다.
즉, 상기 서버(200)는 상기 예비 파노라마 영상 내에 포함된 하나 이상의 매장을 각각 인식하거나, 상기 예비 파노라마 영상 내에 포함된 POP, 전단, 배너 광고, 포스터 광고, 간판, 가격표 등을 각각 인식한다.
또한, 상기 서버(200)는 상기 인식된 하나 이상의 제 1 객체에 각각 대응하는 판매 광고, 확대 이미지, 동영상(또는 홍보용 동영상), 쿠폰(예를 들어 할인 쿠폰, 무료 쿠폰 등 포함), 기부, 댓글 등의 정보를 제공하기 위한 객체 및/또는 화면 전환을 위한 다른 추가 객체를 상기 예비 파노라마 영상 내의 해당 제 1 객체 상의 일부 영역에 추가(또는 삽입)하거나 또는 상기 제 1 객체로부터 미리 설정된 거리 이내에 인접하게 추가(또는 삽입)하여 3D 파노라마 영상을 생성한다.
즉, 상기 서버(200)는 상기 인식된 하나 이상의 제 1 객체에 대응하는 판매 광고와 관련한 객체를 상기 예비 파노라마 영상 내의 해당 제 1 객체 상의 일부 영역에 추가(또는 삽입)하거나 또는 상기 제 1 객체로부터 미리 설정된 거리 이내에 인접하게 추가(또는 삽입)하여 3D 파노라마 영상을 생성한다. 여기서, 상기 판매 광고는 POP, 전단, 배너 광고, 포스터 광고, 간판, 가격표 등을 포함한다.
또한, 상기 서버(200)는 상기 인식된 하나 이상의 제 1 객체에 대응하는 확대 이미지를 제공하기 위한 객체를 상기 예비 파노라마 영상 내의 해당 제 1 객체 상의 일부 영역에 추가(또는 삽입)하거나 또는 상기 제 1 객체로부터 미리 설정된 거리 이내에 인접하게 추가(또는 삽입)하여 3D 파노라마 영상을 생성한다. 여기서, 상기 확대 이미지는 냉장고, 세탁기 등의 상품에 대한 내부 사진(또는 상품과 관련한 추가 이미지)이거나 신선 식품의 확대 사진일 수 있으며, 복수인 경우 슬라이드 방식으로 순서별로 정렬된 상태일 수 있다.
또한, 상기 서버(200)는 상기 인식된 하나 이상의 제 1 객체에 대응하는 동영상(또는 홍보용 동영상)을 제공하기 위한 객체를 상기 예비 파노라마 영상 내의 해당 제 1 객체 상의 일부 영역에 추가(또는 삽입)하거나 또는 상기 제 1 객체로부터 미리 설정된 거리 이내에 인접하게 추가(또는 삽입)하여 3D 파노라마 영상을 생성한다. 여기서, 상기 동영상(또는 홍보용 동영상)은 해당 상품 및/또는 서비스와 관련한 영상, 상품의 사용법과 관련한 동영상(예를 들어 화장품의 사용법에 대한 동영상, 의류 착용 예시에 대한 동영상, 장난감 조립 방법에 대한 동영상, 공구 사용법에 대한 동영상, 조리 방법에 대한 동영상 등 포함) 등을 포함하며, 문자 및/또는 음성 메시지를 포함할 수도 있다.
또한, 상기 서버(200)는 상기 인식된 하나 이상의 제 1 객체에 대응하는 쿠폰을 제공하기 위한 객체를 상기 예비 파노라마 영상 내의 해당 제 1 객체 상의 일부 영역에 추가(또는 삽입)하거나 또는 상기 제 1 객체로부터 미리 설정된 거리 이내에 인접하게 추가(또는 삽입)하여 3D 파노라마 영상을 생성한다. 여기서, 상기 쿠폰은 해당 상품 구매시 할인이 적용되는 쿠폰이며, 복수인 경우 슬라이드 방식으로 순서별로 정렬된 상태이며, 사용자 선택에 따라 상기 구매 단말(100)에 다운로드 될 수 있다.
또한, 상기 서버(200)는 상기 인식된 하나 이상의 제 1 객체와 관련한 상품 및/또는 서비스 구매 시 제공되는 기부 정보를 제공하기 위한 객체를 상기 예비 파노라마 영상 내의 해당 제 1 객체 상의 일부 영역에 추가(또는 삽입)하거나 또는 상기 제 1 객체로부터 미리 설정된 거리 이내에 인접하게 추가(또는 삽입)하여 3D 파노라마 영상을 생성한다. 여기서, 상기 기부는 해당되는 상품 구매시 적용되는 기부 정보에 대한 상세 안내 정보를 표시하며, 복수의 경우 슬라이드 방식으로 정렬된 상태일 수 있다.
또한, 상기 서버(200)는 상기 인식된 하나 이상의 제 1 객체와 관련한 상품 및/또는 서비스에 대한 댓글 정보를 제공하기 위한 객체를 상기 예비 파노라마 영상 내의 해당 제 1 객체 상의 일부 영역에 추가(또는 삽입)하거나 또는 상기 제 1 객체로부터 미리 설정된 거리 이내에 인접하게 추가(또는 삽입)하여 3D 파노라마 영상을 생성한다. 여기서, 상기 댓글은 해당 상품 및/또는 서비스를 구매한 다른 단말에서 등록한 해당되는 상품 및/또는 서비스와 관련한 정보(예를 들어 구매 소감, 이용 후기 등 포함)를 포함한다.
이때, 상기 예비 파노라마 영상 정보에 추가되는 객체 및/또는 다른 추가 객체는 해당 객체(또는 상기 다른 추가 객체)의 확인이 용이하도록 미리 설정된 주기로 해당 객체에 대해서 불빛(또는 특정 색상)이 최대 상태에서 점차 소등되고 다시 소등 상태에서 점차 최대 상태로 반복적으로 변화하는 효과, 불빛의 깜빡임 효과, 네온 사인 효과, 불빛의 색상이 미리 설정된 주기로 서로 다른 색상으로 변하는 효과 등이 적용된 상태일 수 있다.
이와 같이, 예비 파노라마 영상 정보에 추가되는 객체 및/또는 다른 추가 객체에 대해서 다양한 효과를 적용하여, 3D 파노라마 영상 정보 내에서의 식별이 용이하도록 구성할 수 있다.
또한, 상기 생성되는 3D 파노라마 영상은 상기 3D 파노라마 영상에 포함된 제 1 객체, 상품, 지점(또는 좌표) 등에 대한 위치 정보를 포함(또는 연동/매칭)한다.
또한, 상기 서버(200)는 언어별 특성을 고려하여 언어별로 상기 3D 파노라마 영상을 생성할 수도 있다.
본 발명의 실시예에 따라 생성되는 3D 파노라마 영상은 상기 3D 파노라마 영상에 포함된 제 1 객체, 상품, 지점(또는 좌표) 등에 대한 위치 정보를 포함(또는 연동/매칭)한다.
즉, 상기 3D 파노라마 영상은 영상뿐만 아니라, 추후 임의의 단말(예를 들어 상기 구매 단말(100)의 위치 정보 등 포함)에 대응하는 3D 파노라마 영상을 검색(또는 확인)할 수 있도록 해당 3D 파노라마 영상에 포함된 제 1 객체, 상품, 지점 등에 대한 위치 정보를 포함하도록 구성한다.
이에 따라, 상기 임의의 단말에서 위치 정보에 대응하는 3D 파노라마 영상을 요청하는 경우, 상기 서버(200)는 미리 저장된 하나 이상의 객체, 상품, 지점 등의 위치 정보를 포함하는 복수의 3D 파노라마 영상 정보 중에서 상기 임의의 단말로부터 요청된 특정 위치 정보에 대응하는 3D 파노라마 영상 정보를 확인하고, 상기 확인된 3D 파노라마 영상 정보를 해당 단말에 제공할 수 있다.
예를 들어, 상기 서버(200)는 복수의 객체 및/또는 상품의 위치 정보와 연동된 3D 파노라마 영상 정보 중에서, 상기 임의의 단말의 위치 정보인 서울특별시 강남구 역삼로 123-45에 대응하는 객체가 포함된 3D 파노라마 영상 정보를 확인할 수 있다.
또한, 상기 복수의 객체 및/또는 상품의 위치 정보와 연동된 3D 파노라마 영상 정보 중에서, 상기 임의의 단말의 위치 정보인 서울특별시 강남구 역삼로 123-45에 대응하는 객체 및/또는 상품이 없는 경우, 상기 서버(200)는 상기 임의의 단말의 위치 정보와 유사한(예를 들어 서울특별시 강남구 역삼로 123-44 또는 123-46 등 포함) 객체 및/또는 상품이 포함된 3D 파노라마 영상 정보를 확인할 수도 있다.
또한, 상기 복수의 3D 파노라마 영상 정보가 미리 설정된 간격으로 구성된 GPS 정보와 매칭된 경우, 상기 서버(200)는 상기 임의의 단말의 위치 정보와 상기 미리 설정된 간격으로 구성된 GPS 정보를 근거로 상기 임의의 단말의 위치 정보에 대응하는(또는 유사한/관련한) 하나의 3D 파노라마 영상 정보를 확인할 수도 있다.
이외에도, 상기 서버(200)에 미리 저장된 복수의 3D 파노라마 영상 정보 중에서 특정 위치 정보에 대응하는 3D 파노라마 영상 정보를 확인하는 방법은 지도 검색 서비스에서 활용되는 기술들을 적용할 수도 있다.
이와 같이, 본 발명에 의해 생성되는 3D 파노라마 영상 정보는 위치 정보와 연동된 상태로, 임의의 단말로부터 전송되는 특정 위치 정보에 대해서, 상기 서버(200)에 미리 저장된 복수의 3D 파노라마 영상 정보 중에서 상기 특정 위치 정보에 대응하는 3D 파노라마 영상 정보를 확인하고, 상기 확인된 3D 파노라마 영상 정보를 상기 특정 위치 정보를 전송한 해당 단말에 제공할 수 있다.
또한, 상기 서버(200)는 미리 설정된 주기(예를 들어 10초, 1분 등 포함)로 앞선 단계들을 반복적으로 수행하여, 새로운 3D 파노라마 영상을 생성한다.
즉, 상기 서버(200)는 미리 설정된 주기(예를 들어 10초, 1분 등 포함)로 상기 복수의 카메라를 통해 실시간으로 촬영되는 영상들을 합성하여 새로운 예비 파노라마 영상을 생성하고, 상기 생성된 새로운 예비 파노라마 영상 내에 포함된 하나 이상의 제 1 객체를 인식하고, 상기 인식된 하나 이상의 제 1 객체에 대응하는 제 1 코드를 상기 새로운 예비 파노라마 영상 내에 추가하여 상기 새로운 3D 파노라마 영상을 생성한다.
이때, 상기 생성된 새로운 예비 파노라마 영상 내에서 사람이 인식되는 경우, 상기 서버(200)는 상기 새로운 예비 파노라마 영상 내에서의 사람의 윤곽선을 획득(또는 추출)하고, 상기 새로운 예비 파노라마 영상 내에서 상기 인식된 사람을 제거하고, 상기 사람이 제거된 새로운 예비 파노라마 영상 내에 상기 인식된 하나 이상의 제 1 객체에 대응하는 제 1 코드 및 상기 획득된(또는 추출된) 사람의 윤곽선을 추가하여 상기 새로운 3D 파노라마 영상을 생성한다. 여기서, 상기 서버(200)는 상기 새로운 예비 파노라마 영상 내에서의 사람의 위치에 상기 획득된 사람의 윤곽선을 추가한다.
이와 같이, 상기 생성되는 새로운 예비 파노라마 영상 내에 사람이 포함된 경우, 상기 서버(200)는 개인 정보 보호를 위해서 상기 새로운 예비 파노라마 영상 내에 포함된 사람에 대해서 해당 사람의 윤곽선만을 유지하고, 사람의 윤곽선 내부 영역은 빈 공간으로 처리하거나 직전 단계에서 생성된 직전 예비 파노라마 영상의 화면으로 대체하도록 처리할 수 있다.
또한, 상기 서버(200)는 상기 생성된 새로운 3D 파노라마 영상과 앞서 생성된 3D 파노라마 영상(또는 상기 생성된 새로운 3D 파노라마 영상 정보와 앞서 생성된 3D 파노라마 영상 정보) 간의 차이를 확인한다.
또한, 상기 서버(200)는 상기 확인된 차이를 상기 앞서 생성된 3D 파노라마 영상에 실시간으로 보상하여 최신의 3D 파노라마 영상을 유지한다.
즉, 상기 생성된 새로운 3D 파노라마 영상과 상기 앞서 생성된 3D 파노라마 영상이 동일한 경우(또는 차이가 없는 경우), 상기 서버(200)는 상기 앞서 생성된 3D 파노라마 영상에 포함된 하나 이상의 제 1 객체 및/또는 상품의 상태에 변화가 없는 것으로 판단하여, 앞서 생성된 3D 파노라마 영상을 최신의 3D 파노라마 영상으로 그대로 유지한다.
또한, 상기 생성된 새로운 3D 파노라마 영상과 상기 앞서 생성된 3D 파노라마 영상에 차이가 있는 경우, 상기 서버(200)는 변화가 있는 부분(또는 상기 확인된 차이)을 상기 앞서 생성된 3D 파노라마 영상에 보상(또는 반영)하여, 비교 대상 3D 파노라마 영상 간의 차이가 보상된 3D 파노라마 영상을 최신의 새로운 3D 파노라마 영상으로 생성한다.
또한, 상기 새로운 3D 파노라마 영상에 사람이 포함된 경우(또는 상기 새로운 3D 파노라마 영상에서 사람이 인식된 경우), 상기 서버(200)는 상기 앞서 생성된 3D 파노라마 영상에 상기 새로운 3D 파노라마 영상 내에 포함된 사람의 윤곽선을 추가하여, 상기 윤곽선 형태의 사람이 포함된 3D 파노라마 영상을 최신의 새로운 3D 파노라마 영상으로 생성할 수도 있다.
이와 같이, 상기 생성되는 새로운 3D 파노라마 영상 내에 사람이 포함된 경우, 상기 서버(200)는 개인 정보 보호를 위해서 상기 새로운 3D 파노라마 영상 내에 포함된 사람에 대해서 해당 사람의 윤곽선만을 유지하고, 사람의 윤곽선 내부 영역은 빈 공간으로 처리하거나 직전 단계에서 생성된 직전 3D 파노라마 영상의 화면으로 대체하도록 처리할 수 있다.
또한, 상기 새로 생성되는 새로운 3D 파노라마 영상 내에 사람이 포함된 경우, 상기 서버(200)는 상기 새로운 3D 파노라마 영상 내에 포함된 사람을 윤곽선 처리하고 해당 윤곽선 처리된 사람 내부 영역은 직전 단계에서 생성된 직전 3D 파노라마 영상의 화면을 표시함에 따라, 해당 사람에 의해 3D 파노라마 영상 내의 객체, 상품 등이 가려져서 보이지 않게 되는 경우를 방지할 수 있다.
이때, 상기 서버(200)는 상기 앞서 생성된 3D 파노라마 영상에서 차이가 있는 부분만을 보상할 수도 있고, 상기 앞서 생성된 3D 파노라마 영상 대신 상기 생성된 새로운 3D 파노라마 영상을 최신의 새로운 3D 파노라마 영상으로 대체할 수도 있다.
이와 같이, 상기 서버(200)는 백그라운드 모델링을 통해 실시간으로 최신의 3D 파노라마 영상을 유지할 수 있다.
또한, 상기 서버(200)는 상기 단말(100)로부터 전송되는 상기 키워드, 상기 패턴 정보, 상기 단말(100)의 위치 정보, 상기 단말(100)의 식별 정보 등을 수신한다.
또한, 상기 서버(200)는 상기 서버(200)에 미리 등록된(또는 저장된) 복수의 정보 중에서 상기 단말(100)의 위치 정보 및, 상기 키워드와 패턴 정보 중 적어도 하나에 대응하는 정보가 존재하는지 여부를 판단(또는 식별)한다. 여기서, 상기 정보는 임의의 업체 관계자 또는 일반 사용자가 상기 서버(200)에 등록한 업체 정보, 상품 정보, 서비스 정보, 개인 정보 등을 포함한다. 또한, 상기 정보는 상기 임의의 업체 관계자 또는 일반 사용자에 대응하는 키워드/패턴정보와 관련한 파노라마 영상 정보, 해당 파노라마 영상 정보에 포함된 객체와 관련한 코드, 해당 코드의 종류에 대응하는 객체 마커, 이미지/동영상 내에서의 객체 마커의 위치 정보, 객체 마커의 속성 정보 등을 포함하는 MR 콘텐츠와 연동하는 정보일 수 있다.
즉, 상기 서버(200)는 상기 서버(200)에 미리 등록된(또는 저장된) 복수의 정보 중에서 상기 단말(100)의 위치 정보를 기준으로 미리 설정된 반경 내에 위치하며, 상기 키워드 및 상기 패턴 정보 중 적어도 하나에 대응하는 정보가 존재하는지 여부를 판단(또는 식별)한다. 여기서, 상기 미리 설정된 반경은 상기 단말(100)의 사용자에 의해 사전에 단말별로 설정된 상태이거나 또는, 상기 서버(200)의 관리자에 의해 디폴트 값으로 설정된 상태일 수 있다.
이와 같이, 상기 서버(200)는 사람의 얼굴, 지문 등에 대한 스캔 기능을 통해 추출된 하나 이상의 특징점을 포함하는 패턴 정보에 대해서, 상기 서버(200)에 미리 저장된 정보 중에서 상기 패턴 정보에 대응하는 정보가 존재하는지 여부를 판단할 수 있다.
상기 판단 결과(또는 상기 식별 결과), 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 단말(100)의 위치 정보 및, 상기 키워드와 상기 패턴 정보 중 적어도 하나에 대응하는 정보가 존재하는 경우, 상기 서버(200)는 해당 하나 이상의 정보를 상기 단말(100)에 전송한다.
즉, 상기 판단 결과(또는 상기 식별 결과), 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 단말(100)의 위치 정보를 기준으로 미리 설정된 반경 내에 위치하며, 상기 키워드 및/또는 상기 패턴 정보에 대응하는 하나 이상의 정보가 존재하는 경우, 상기 서버(200)는 상기 단말(100)의 위치 정보, 상기 키워드, 상기 패턴 정보 등에 대응하는 상기 하나 이상의 정보를 상기 단말(100)에 전송한다.
또한, 상기 판단 결과(또는 상기 식별 결과), 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 단말(100)의 위치 정보, 상기 키워드, 상기 패턴 정보 등에 대응하는 정보가 존재하지 않는 경우, 상기 서버(200)는 상기 서버(200)에 미리 설정된 카테고리 정보(또는 카테고리 리스트)를 상기 단말(100)에 전송한다. 여기서, 상기 카테고리 정보는 상기 키워드 및/또는 상기 패턴 정보와 관련한 카테고리 정보일 수도 있다.
즉, 상기 판단 결과(또는 상기 식별 결과), 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 단말(100)의 위치 정보를 기준으로 미리 설정된 반경 내에 위치하며, 상기 키워드 및/또는 상기 패턴 정보에 대응하는 정보가 존재하지 않는 경우, 상기 서버(200)는 상기 서버(200)에 미리 설정된 카테고리 정보(또는 카테고리 리스트)를 상기 단말(100)에 전송한다. 이때, 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 단말(100)의 위치 정보를 기준으로 미리 설정된 반경 내에 위치하며, 상기 키워드 및/또는 상기 패턴 정보에 대응하는 정보가 존재하지 않는 경우, 상기 서버(200)는 상기 반경을 추가로 확장하고, 상기 서버(200)에 등록된 복수의 정보 중에서 상기 확장된 반경 내에 위치하며 상기 키워드 및/또는 상기 패턴 정보에 대응하는 정보가 존재하는지 여부를 추가로 판단할 수도 있다. 여기서, 상기 반경 확장 기능은 미리 설정된 횟수만큼 반복될 수도 있다.
이와 같이, 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 키워드, 상기 패턴 정보 및 상기 단말의 위치 정보 중 적어도 하나에 대응하는 정보가 존재하지 않는 경우, 상기 서버(200)는 상기 서버(200)에 미리 설정된 카테고리 정보(또는 카테고리 리스트)를 상기 단말(100)에 전송할 수 있다.
또한, 상기 서버(200)에서 상기 단말(100)로 상기 카테고리 정보를 전송할 때, 상기 서버(200)는 상기 서버(200)에 미리 설정된 카테고리 정보를 상기 단말(100)에 전송하거나 또는, 상기 수신된 키워드 및/또는 상기 수신된 패턴 정보와 관련한 카테고리 정보를 상기 단말(100)에 전송할 수 있다.
또한, 상기 단말(100)에서 미리 설정된 선호 카테고리를 상기 서버(200)에 등록한 상태인 상태에서, 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 단말(100)의 위치 정보를 기준으로 미리 설정된 반경 내에 위치하며, 상기 키워드에 대응하는 정보가 존재하지 않는 경우, 상기 서버(200)는 해당 단말(100)에서 상기 서버(200)에 등록한 해당 선호 카테고리에 대응하는 하나 이상의 정보를 상기 단말(100)에 전송하거나 또는, 상기 단말(100)의 현재 위치를 기준으로 상기 단말(100)에서 기존에 방문하였거나 결제 기능을 수행한 업체(또는 매장)가 있는지 여부를 확인하고, 상기 확인되는 기존에 방문하였거나 결제 기능을 수행한 업체와 관련한 카테고리에 대응하는 하나 이상의 정보를 상기 단말(100)에 제공할 수도 있다.
또한, 상기 미리 설정된 반경은 하나일 수도 있고, 서로 다른 값으로 복수(예를 들어 1Km, 2Km, 3Km 등 포함)일 수도 있다.
또한, 상기 미리 설정된 반경이 서로 다른 값으로 복수의 반경(예를 들어 제 1 반경, 제 2 반경, 제 3 반경 등 포함)으로 구성되는 경우, 상기 서버(200)는 먼저 상기 복수의 반경 중에서 가장 작은 값인 제 1 반경을 선택하고, 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 제 1 반경 내에 위치하며 상기 키워드에 대응하는 정보가 존재하는지 여부를 판단한다. 판단 결과, 상기 제 1 반경 내에 위치하며 상기 키워드에 대응하는 정보가 존재하는 경우, 상기 서버(200)는 해당 정보를 상기 단말(100)에 전송한다. 또한, 판단 결과, 상기 제 1 반경 내에 위치하며 상기 키워드에 대응하는 정보가 존재하지 않는 경우, 상기 서버(200)는 상기 복수의 반경 중에서 상기 제 1 반경 다음 순서인 제 2 반경(예를 들어 상기 제 1 반경보다 값이 크고 나머지 다른 반경들보다는 값이 작음)을 선택하고, 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 제 2 반경 내에 위치하며 상기 키워드에 대응하는 정보가 존재하는지 여부를 판단한다. 판단 결과, 상기 2 반경 내에 위치하며 상기 키워드에 대응하는 정보가 존재하는 경우, 상기 서버(200)는 해당 정보를 상기 단말(100)에 전송한다. 또한, 판단 결과, 상기 제 2 반경 내에 위치하며 상기 키워드에 대응하는 정보가 존재하지 않는 경우, 상기 서버(200)는 상기 복수의 반경 중에서 상기 제 2 반경 다음 순서인 제 3 반경(예를 들어 상기 제 2 반경보다 값이 크고 나머지 다른 반경들보다는 값이 작음)을 선택하고, 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 제 3 반경 내에 위치하며 상기 키워드에 대응하는 정보가 존재하는지 여부를 판단하는 과정 등을 반복적으로 수행할 수도 있다.
또한, 상기 패턴 정보와 관련한 카테고리 정보의 확인이 불가능한 상태인 경우, 상기 서버(200)는 상기 단말(100)에 카테고리 정보를 제공하지 않을 수도 있다.
또한, 상기 서버(200)는 상기 단말(100)과 연동하여 상기 단말(100)에 표시되는 카테고리 정보 중에서 사용자 선택(또는 사용자 터치/입력)에 따라 선택되는 특정 카테고리에 대응하는 적어도 하나의 정보를 상기 단말(100)에 제공한다.
즉, 상기 단말(100)에 표시되는 카테고리 정보 중에서 사용자 선택에 따라 특정 카테고리가 선택되는 경우, 상기 서버(200)는 상기 단말(100)로부터 전송되는 상기 선택된 특정 카테고리에 대한 정보를 수신한다.
또한, 상기 서버(200)는 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 수신된 특정 카테고리와 관련한 적어도 하나의 정보를 확인하고, 상기 확인된 상기 특정 카테고리와 관련한 적어도 하나의 정보를 상기 단말(100)에 전송한다.
이와 같이, 서버에 미리 등록된 복수의 정보 중에서 단말의 현재 위치를 기준으로 미리 설정된 반경 내에 위치하며 단말의 사용자 입력에 따른 키워드 및/또는 인식된 패턴에 대응하는 적어도 하나의 정보가 존재하지 않는 경우, 미리 설정된 카테고리 정보를 표시하고, 상기 표시되는 카테고리 정보 중에서 선택되는 특정 카테고리에 대응하는 적어도 하나의 정보를 상기 단말에 제공할 수 있다.
또한, 이와 같이, 서버에 미리 등록된 복수의 정보 중에서 단말의 현재 위치를 기준으로 미리 설정된 반경 내에 위치하며 단말의 사용자 입력에 따른 키워드 및/또는 인식된 패턴에 대응하는 적어도 하나의 정보가 존재하는 경우, 해당하는 적어도 하나의 정보를 상기 단말에 제공할 수 있다.
이하에서는, 본 발명에 따른 단말이 적용된 콘텐츠 제공 시스템의 제어 방법을 도 1 내지 도 15를 참조하여 상세히 설명한다.
도 3은 본 발명의 실시예에 따른 단말이 적용된 콘텐츠 제공 시스템의 제어 방법을 나타낸 흐름도이다.
먼저, 단말(100)에서 단말(100)의 사용자 입력(또는 사용자 선택/터치)에 따른 키워드를 수신하는 경우, 단말(100)에서 임의의 객체(예를 들어 사람의 얼굴, 지문, 상품, 건물, 상품/진열대에 구비/부착된 태그 등 포함)에 대한 패턴을 인식하는 경우 등이 발생하는 경우, 상기 단말(100)은 상기 수신된 키워드, 상기 인식된 패턴과 관련한 패턴 정보, 실시간으로 확인되는 단말(100)의 위치 정보, 단말(100)의 식별 정보 등을 서버(200)에 전송한다. 이때, 상기 단말(100)의 식별 정보는 MDN, 모바일 IP, 모바일 MAC, Sim(가입자 식별 모듈) 카드 고유정보, 시리얼번호 등을 포함한다.
여기서, 상기 키워드는 사용자 입력에 따른 문자 형태의 키워드, 사용자 입력에 따른 음성 형태의 키워드 등을 포함한다.
또한, 상기 단말(100)에서 상기 사용자 입력에 따른 음성 형태의 키워드를 포함하는 음성 정보를 수신하는 경우, 상기 단말(100)은 상기 수신된 음성 정보에 대해서 음성 인식 기능을 수행하고, 상기 수행된 음성 인식 기능 수행 결과인 상기 키워드를 확인하고, 상기 확인된 키워드, 상기 단말(100)의 위치 정보, 상기 단말(100)의 식별 정보 등을 상기 서버(200)에 전송할 수도 있다.
또한, 상기 단말(100)에서 상기 단말(100)에 포함된 입력부(110)를 통해 얼굴, 지문, 상품, 건물 등의 객체를 포함하는 영상 정보를 수신하는 경우, 상기 단말(100)은 상기 수신된 영상 정보에 대해서 특징점을 추출하는 패턴 인식 기능을 수행하고, 상기 수행된 패턴 인식 기능 수행 결과인 상기 패턴 정보를 확인하고, 상기 확인된 패턴 정보, 상기 단말(100)의 위치 정보, 상기 단말(100)의 식별 정보 등을 상기 서버(200)에 전송할 수도 있다.
또한, 상기 단말(100)에서 상기 단말(100)에 포함된 리더기(120)를 통해 태그(예를 들어 바코드, QR 코드 등 포함)를 인식하는 경우, 상기 단말(100)은 상기 인식된 태그에 포함된 정보(또는 패턴 정보)를 확인하고, 상기 확인된 패턴 정보, 상기 단말(100)의 위치 정보, 상기 단말(100)의 식별 정보 등을 상기 서버(200)에 전송할 수도 있다.
일 예로, 제 1 단말(100)에서 제 1 단말의 사용자 입력에 따른 문자 형태의 제 1 키워드(예를 들어 백화점)를 수신할 때, 상기 제 1 단말은 상기 제 1 단말의 실시간 현재 위치(예를 들어 서울특별시 강남구 테헤란로 201)를 확인하고, 상기 수신된 제 1 키워드(예를 들어 백화점), 상기 확인된 제 1 단말의 위치 정보(예를 들어 서울특별시 강남구 테헤란로 201), 상기 제 1 단말의 식별 정보 등을 상기 서버(200)에 전송한다.
다른 일 예로, 제 2 단말(100)에서 제 2 단말의 사용자 입력에 따른 음성 형태의 제 2 키워드(예를 들어 김철수 과장)를 포함하는 음성 정보를 수신할 때, 상기 제 2 단말은 상기 제 2 단말의 실시간 현재 위치(예를 들어 서울특별시 강남구 논현로 507)를 확인한다.
또한, 상기 제 2 단말은 상기 수신된 음성 정보에 대해서 음성 인식 기능을 수행하고, 상기 음성 인식 기능 수행 결과에 따라 상기 제 2 키워드(예를 들어 김철수 과장)를 추출(또는 판별)하고, 상기 추출된 제 2 키워드(예를 들어 김철수 과장), 상기 확인된 제 2 단말의 위치 정보(예를 들어 서울특별시 강남구 논현로 507), 상기 제 2 단말의 식별 정보 등을 상기 서버(200)에 전송한다.
또 다른 일 예로, 제 3 단말(100)에서 제 3 단말에 포함된 입력부(110)에 의해 잡지에 있는 CCC 연예인의 얼굴을 촬영한 제 3 영상 정보를 수신할 때, 상기 제 3 단말은 상기 제 3 단말의 실시간 현재 위치(예를 들어 서울특별시 강남구 역삼로 101)를 확인한다.
또한, 상기 제 3 단말은 상기 수신된 제 3 영상 정보에 포함된 객체인 CCC 연예인의 얼굴에 대해서 특징점을 추출하고, 상기 추출된 특징점을 포함하는 제 3 패턴 정보를 생성하고, 상기 생성된 제 3 패턴 정보, 상기 확인된 제 3 단말의 위치 정보(예를 들어 서울특별시 강남구 역삼로 101), 상기 제 3 단말의 식별 정보 등을 상기 서버(200)에 전송한다.
또 다른 일 예로, 제 4 단말(100)에서 제 4 단말의 사용자 입력에 따른 문자 형태의 제 4 키워드(예를 들어 편의점) 및 제 4 단말에 포함된 리더기(120)에 의해 DDD 상품(또는 DDD 라면)에 부착된 태그를 인식한 태그 정보를 수신할 때, 상기 제 4 단말은 상기 제 4 단말의 실시간 현재 위치(예를 들어 서울특별시 강남구 논현로 511)를 확인한다.
또한, 상기 제 4 단말은 상기 수신된 제 4 키워드(예를 들어 편의점), 상기 수신된 태그 정보(또는 제 4 패턴 정보), 상기 확인된 제 4 단말의 위치 정보(예를 들어 서울특별시 강남구 논현로 511), 상기 제 4 단말의 식별 정보 등을 상기 서버(200)에 전송한다(S310).
이후, 상기 서버(200)는 상기 단말(100)로부터 전송되는 상기 키워드, 상기 패턴 정보, 상기 단말(100)의 위치 정보, 상기 단말(100)의 식별 정보 등을 수신한다.
또한, 상기 서버(200)는 상기 서버(200)에 미리 등록된(또는 저장된) 복수의 정보 중에서 상기 단말(100)의 위치 정보 및, 상기 키워드와 패턴 정보 중 적어도 하나에 대응하는 정보가 존재하는지 여부를 판단(또는 식별)한다. 여기서, 상기 정보는 임의의 업체 관계자 또는 일반 사용자가 상기 서버(200)에 등록한 업체 정보, 상품 정보, 서비스 정보, 개인 정보 등을 포함한다. 또한, 상기 정보는 상기 임의의 업체 관계자 또는 일반 사용자에 대응하는 키워드/패턴정보와 관련한 파노라마 영상 정보, 해당 파노라마 영상 정보에 포함된 객체와 관련한 코드, 해당 코드의 종류에 대응하는 객체 마커, 이미지/동영상 내에서의 객체 마커의 위치 정보, 객체 마커의 속성 정보 등을 포함하는 MR 콘텐츠와 연동하는 정보일 수 있다.
즉, 상기 서버(200)는 상기 서버(200)에 미리 등록된(또는 저장된) 복수의 정보 중에서 상기 단말(100)의 위치 정보를 기준으로 미리 설정된 반경 내에 위치하며, 상기 키워드 및 상기 패턴 정보 중 적어도 하나에 대응하는 정보가 존재하는지 여부를 판단(또는 식별)한다. 여기서, 상기 미리 설정된 반경은 상기 단말(100)의 사용자에 의해 사전에 단말별로 설정된 상태이거나 또는, 상기 서버(200)의 관리자에 의해 디폴트 값으로 설정된 상태일 수 있다.
일 예로, 상기 서버(200)는 상기 제 1 단말로부터 전송되는 상기 제 1 키워드(예를 들어 백화점), 상기 제 1 단말의 위치 정보(예를 들어 서울특별시 강남구 테헤란로 201), 상기 제 1 단말의 식별 정보 등을 수신한다.
또한, 상기 서버(200)는 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 제 1 단말의 위치 정보를 기준으로 미리 설정된 반경(예를 들어 1Km) 내에 위치하며, 상기 제 1 키워드(예를 들어 백화점)에 대응하는 정보(예를 들어 업체 정보)가 존재하는지 여부를 판단한다. 여기서, 상기 업체 정보는 업체명, 업종(또는 카테고리), 전화번호, 위치 정보(또는 주소 정보/거리 정보), 해당 업체와 관련한 MR 콘텐츠(또는 AR 콘텐츠) 등을 포함한다.
다른 일 예로, 상기 서버(200)는 상기 제 2 단말로부터 전송되는 상기 제 2 키워드(예를 들어 김철수 과장), 상기 제 2 단말의 위치 정보(예를 들어 서울특별시 강남구 논현로 507), 상기 제 2 단말의 식별 정보 등을 수신한다.
또한, 상기 서버(200)는 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 제 2 단말의 위치 정보를 기준으로 미리 설정된 반경(예를 들어 1Km) 내에 위치하며, 상기 제 2 키워드(예를 들어 김철수 과장)에 대응하는 정보(예를 들어 개인 정보)가 존재하는지 여부를 판단한다. 여기서, 상기 개인 정보는 이름/호칭/별명, 전화번호, 위치 정보(단말(100)에 대한 상대적인 거리 정보), 해당 개인과 관련한 MR 콘텐츠(또는 AR 콘텐츠), 해당 개인과 관련한 이메일 주소, 블로그 정보, 소셜 네트워크 서비스 정보 등을 포함한다. 이때, 상기 서버(200)는 상기 서버(200)에 해당 개인 정보를 등록한 시점의 해당 개인 정보와 관련한 다른 단말의 위치 정보가 상기 제 2 단말의 위치 정보를 기준으로 상기 반경 내에 위치하거나 또는, 상기 판단 시점에 실시간으로 확인되는 상기 다른 단말의 위치 정보가 상기 제 2 단말의 위치 정보를 기준으로 상기 반경 내에 위치하는지 여부를 판단할 수도 있다.
또 다른 일 예로, 상기 서버(200)는 상기 제 3 단말로부터 전송되는 상기 제 3 패턴 정보, 상기 제 3 단말의 위치 정보(예를 들어 서울특별시 강남구 역삼로 101), 상기 제 3 단말의 식별 정보 등을 수신한다.
또한, 상기 서버(200)는 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 제 3 단말의 위치 정보를 기준으로 미리 설정된 반경(예를 들어 1Km) 내에 위치하며, 상기 3 패턴 정보(예를 들어 잡지에 있는 CCC 연예인 얼굴과 관련한 패턴 정보)에 대응하는 정보(예를 들어 CCC 연예인과 관련한 정보)가 존재하는지 여부를 판단한다.
또 다른 일 예로, 상기 서버(200)는 상기 제 4 단말로부터 전송되는 상기 제 4 키워드(예를 들어 편의점), 상기 태그 정보(또는 제 4 패턴 정보), 상기 제 4 단말의 위치 정보(예를 들어 서울특별시 강남구 논현로 511), 상기 제 4 단말의 식별 정보 등을 수신한다.
또한, 상기 서버(200)는 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 제 4 단말의 위치 정보를 기준으로 미리 설정된 반경(예를 들어 1Km) 내에 위치하며, 상기 제 4 키워드(예를 들어 편의점) 및 상기 제 4 패턴 정보(예를 들어 DDD 라면과 관련한 패턴 정보)에 대응하는 정보(예를 들어 DDD 라면을 판매하는 편의점과 관련한 정보)가 존재하는지 여부를 판단한다(S320).
상기 판단 결과(또는 상기 식별 결과), 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 단말(100)의 위치 정보 및, 상기 키워드와 상기 패턴 정보 중 적어도 하나에 대응하는 정보가 존재하는 경우, 상기 서버(200)는 해당 하나 이상의 정보를 상기 단말(100)에 전송한다.
즉, 상기 판단 결과(또는 상기 식별 결과), 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 단말(100)의 위치 정보를 기준으로 미리 설정된 반경 내에 위치하며, 상기 키워드 및/또는 상기 패턴 정보에 대응하는 하나 이상의 정보가 존재하는 경우, 상기 서버(200)는 상기 단말(100)의 위치 정보, 상기 키워드, 상기 패턴 정보 등에 대응하는 상기 하나 이상의 정보를 상기 단말(100)에 전송한다.
일 예로, 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 제 1 단말의 위치 정보를 기준으로 미리 설정된 반경(예를 들어 1Km) 내에 위치하며, 상기 제 1 키워드(예를 들어 백화점)에 대응하는 제 1 정보가 존재할 때, 상기 서버(200)는 상기 제 1 정보를 상기 제 1 단말에 전송한다. 여기서, 상기 제 1 정보는 제 1 업체명(예를 들어 ABC 백화점), 제 1 카테고리(예를 들어 쇼핑), 제 1 전화번호(예를 들어 02-1234-5678), 상기 제 1 단말로부터의 거리 정보(예를 들어 505m), ABC 백화점과 관련한 제 1 MR 콘텐츠 등을 포함한다.
다른 일 예로, 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 제 2 단말의 위치 정보를 기준으로 미리 설정된 반경(예를 들어 1Km) 내에 위치하며, 상기 제 2 키워드(예를 들어 김철수 과장)에 대응하는 제 2 정보가 존재할 때, 상기 서버(200)는 상기 제 2 정보를 상기 제 2 단말에 전송한다. 여기서, 상기 제 2 정보는 제 2 이름(예를 들어 철수), 제 2 전화번호(예를 들어 010-9876-5432), 상기 김철수 과장과 관련한 제 2 이메일 주소, 상기 김철수 과장과 관련한 제 2 블로그 정보, 상기 김철수 과장과 관련한 제 2 소셜 네트워크 서비스 정보 등을 포함한다.
또 다른 일 예로, 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 제 3 단말의 위치 정보를 기준으로 미리 설정된 반경(예를 들어 1Km) 내에 위치하며, 상기 3 패턴 정보(예를 들어 잡지에 있는 CCC 연예인 얼굴과 관련한 패턴 정보)에 대응하는 제 3 정보가 존재할 때, 상기 서버(200)는 상기 제 3 정보를 상기 제 3 단말에 전송한다. 여기서, 상기 제 3 정보는 CCC 연예인의 이름, CCC 연예인과 관련한 이미지, CCC 연예인과 관련한 블로그 정보, CCC 연예인과 관련한 홈페이지 주소, CCC 연예인과 관련한 소셜 네트워크 서비스 정보, CCC 연예인과 관련한 소속 회사 정보 등을 포함한다.
또 다른 일 예로, 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 제 4 단말의 위치 정보를 기준으로 미리 설정된 반경(예를 들어 1Km) 내에 위치하며, 상기 제 4 키워드(예를 들어 편의점) 및 상기 제 4 패턴 정보(예를 들어 DDD 라면과 관련한 패턴 정보)에 대응하는 제 4 정보가 존재할 때, 상기 서버(200)는 상기 제 4 정보를 상기 제 4 단말에 전송한다. 여기서, 상기 제 4 정보는 상기 제 4 단말의 주변에 위치한 복수의 편의점 중에서 상기 DDD 라면을 판매하는 적어도 하나의 편의점명, 편의점별 전화번호, 상기 제 4 단말로부터의 편의점별 거리 정보, 각각의 편의점과 관련한 MR 콘텐츠 등을 포함한다(S330).
이후, 상기 단말(100)은 앞서 전송된 키워드, 상기 패턴 정보, 상기 단말(100)의 위치 정보, 상기 단말(100)의 식별 정보 등에 응답하여 상기 서버(200)로부터 전송되는 하나 이상의 정보(또는 상기 단말(100)의 위치 정보 및 상기 키워드에 대응하는 하나 이상의 정보)를 수신한다.
또한, 상기 단말(100)은 상기 수신된 하나 이상의 정보를 표시한다.
일 예로, 상기 제 1 단말은 상기 서버(200)로 상기 제 1 키워드(예를 들어 백화점), 상기 제 1 단말의 위치 정보(예를 들어 서울특별시 강남구 테헤란로 201), 상기 제 1 단말의 식별 정보 등을 전송한 이후, 도 4에 도시된 바와 같이, 상기 제 1 키워드 및 상기 제 1 단말의 위치 정보에 대응하는 정보를 검색 중인 상태임을 나타내는 정보(400)를 표시할 수 있다.
또한, 상기 제 1 단말은 앞서 전송된 상기 제 1 키워드(예를 들어 백화점), 상기 제 1 단말의 위치 정보(예를 들어 서울특별시 강남구 테헤란로 201), 상기 제 1 단말의 식별 정보 등에 응답하여 상기 서버(200)로부터 전송되는 제 1 정보를 수신한다.
또한, 도 5에 도시된 바와 같이, 상기 제 1 단말은 상기 수신된 제 1 정보(500)를 표시한다. 여기서, 상기 제 1 정보(500)는 제 1 업체명(예를 들어 ABC 백화점)(510), 제 1 카테고리(예를 들어 쇼핑)(520), 제 1 전화번호(예를 들어 02-1234-5678)(530), 상기 제 1 단말로부터의 거리 정보(예를 들어 505m)(540), 사용 가능한 쿠폰 정보(550), 상기 ABC 백화점과 연동하는 쇼핑몰 서버(미도시)에 대한 제 1 링크 정보(560), 상기 ABC 백화점에서 제공하는 이벤트나 상품 정보 등을 확인하기 위한 제 2 링크 정보(570), 상기 ABC 백화점과 관련한 제 1 MR 콘텐츠를 확인하기 위한 제 3 링크 정보(580), 상기 제 1 단말의 현재 위치에서 상기 ABC 백화점까지의 경로 안내를 위한 제 4 링크 정보(590) 등을 포함한다.
다른 일 예로, 상기 제 2 단말은 앞서 전송된 상기 제 2 키워드(예를 들어 김철수 과장), 상기 제 2 단말의 위치 정보(예를 들어 서울특별시 강남구 논현로 507), 상기 제 2 단말의 식별 정보 등에 응답하여 상기 서버(200)로부터 전송되는 제 2 정보를 수신한다.
또한, 도 6에 도시된 바와 같이, 상기 제 2 단말은 상기 수신된 제 2 정보(600)를 표시한다. 여기서, 상기 제 2 정보(600)는 제 2 이름(예를 들어 철수)(610), 제 2 전화번호(예를 들어 010-9876-5432)(620), 상기 제 2 단말로부터의 거리 정보(예를 들어 450m)(630), 상기 김철수 과장과 관련한 다른 단말로 메시지를 전송하기 위한 제 11 링크 정보(640), 상기 김철수 과장과 관련한 제 2 이메일 주소로 메일을 전송하기 위한 제 11 링크 정보(650), 상기 김철수 과장과 관련한 제 2 블로그로 접속하기 위한 제 12 링크 정보(660), 상기 김철수 과장과 관련한 제 2 소셜 네트워크 서비스로 접속하기 위한 제 13 링크 정보(670) 등을 포함한다.
또 다른 일 예로, 상기 제 3 단말은 앞서 전송된 상기 제 3 패턴 정보, 상기 제 3 단말의 위치 정보(예를 들어 서울특별시 강남구 역삼로 101), 상기 제 3 단말의 식별 정보 등에 응답하여 상기 서버(200)로부터 전송되는 제 3 정보를 수신한다.
또한, 상기 제 3 단말은 상기 수신된 CCC 연예인의 이름, CCC 연예인과 관련한 이미지, CCC 연예인과 관련한 블로그 정보, CCC 연예인과 관련한 홈페이지 주소, CCC 연예인과 관련한 소셜 네트워크 서비스 정보, CCC 연예인과 관련한 소속 회사 정보 등을 포함하는 상기 제 3 정보를 표시한다.
또 다른 일 예로, 상기 제 4 단말은 앞서 전송된 상기 제 4 키워드(예를 들어 편의점), 상기 태그 정보(또는 제 4 패턴 정보), 상기 제 4 단말의 위치 정보(예를 들어 서울특별시 강남구 논현로 511), 상기 제 4 단말의 식별 정보 등에 응답하여 상기 서버(200)로부터 전송되는 제 4 정보를 수신한다.
또한, 상기 제 4 단말은 상기 수신된 상기 제 4 단말의 주변에 위치한 복수의 편의점 중에서 상기 DDD 라면을 판매하는 적어도 하나의 편의점명, 편의점별 전화번호, 상기 제 4 단말로부터의 편의점별 거리 정보, 각각의 편의점과 관련한 MR 콘텐츠 등을 포함하는 상기 제 4 정보를 표시한다(S340).
또한, 상기 판단 결과(또는 상기 식별 결과), 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 단말(100)의 위치 정보, 상기 키워드, 상기 패턴 정보 등에 대응하는 정보가 존재하지 않는 경우, 상기 서버(200)는 상기 서버(200)에 미리 설정된 카테고리 정보(또는 카테고리 리스트)를 상기 단말(100)에 전송한다. 여기서, 상기 카테고리 정보는 상기 키워드 및/또는 상기 패턴 정보와 관련한 카테고리 정보일 수도 있다.
즉, 상기 판단 결과(또는 상기 식별 결과), 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 단말(100)의 위치 정보를 기준으로 미리 설정된 반경 내에 위치하며, 상기 키워드 및/또는 상기 패턴 정보에 대응하는 정보가 존재하지 않는 경우, 상기 서버(200)는 상기 서버(200)에 미리 설정된 카테고리 정보(또는 카테고리 리스트)를 상기 단말(100)에 전송한다. 이때, 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 단말(100)의 위치 정보를 기준으로 미리 설정된 반경 내에 위치하며, 상기 키워드 및/또는 상기 패턴 정보에 대응하는 정보가 존재하지 않는 경우, 상기 서버(200)는 상기 반경을 추가로 확장하고, 상기 서버(200)에 등록된 복수의 정보 중에서 상기 확장된 반경 내에 위치하며 상기 키워드 및/또는 상기 패턴 정보에 대응하는 정보가 존재하는지 여부를 추가로 판단할 수도 있다. 여기서, 상기 반경 확장 기능은 미리 설정된 횟수만큼 반복될 수도 있다.
또한, 상기 서버(200)에서 상기 단말(100)로 상기 카테고리 정보를 전송할 때, 상기 서버(200)는 상기 서버(200)에 미리 설정된 카테고리 정보를 상기 단말(100)에 전송하거나 또는, 상기 수신된 키워드 및/또는 상기 수신된 패턴 정보와 관련한 카테고리 정보를 상기 단말(100)에 전송할 수 있다.
또한, 상기 패턴 정보와 관련한 카테고리 정보의 확인이 불가능한 상태인 경우, 상기 서버(200)는 상기 단말(100)에 카테고리 정보를 제공하지 않을 수도 있다.
일 예로, 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 제 1 단말의 위치 정보를 기준으로 미리 설정된 반경(예를 들어 1Km) 내에 위치하며, 상기 제 1 키워드(예를 들어 백화점)에 대응하는 적어도 하나의 정보가 존재하지 않을 때, 상기 서버(200)는 상기 제 1 키워드(예를 들어 백화점)와 관련한 제 1 카테고리 정보를 상기 제 1 단말에 전송한다.
다른 일 예로, 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 제 2 단말의 위치 정보를 기준으로 미리 설정된 반경(예를 들어 1Km) 내에 위치하며, 상기 제 2 키워드(예를 들어 김철수 과장)에 대응하는 제 2 정보가 존재하지 않을 때, 상기 서버(200)는 상기 서버(200)에 미리 등록된 제 2 카테고리 정보를 상기 제 2 단말에 전송한다.
또 다른 일 예로, 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 제 3 단말의 위치 정보를 기준으로 미리 설정된 반경(예를 들어 1Km) 내에 위치하며, 상기 3 패턴 정보(예를 들어 잡지에 있는 CCC 연예인 얼굴과 관련한 패턴 정보)에 대응하는 정보(예를 들어 CCC 연예인과 관련한 정보)가 존재하지 않을 때, 상기 서버(200)는 상기 서버(200)에 미리 등록된 상기 제 3 패턴 정보와 관련한 제 3 카테고리 정보(예를 들어 연예 카테고리 정보)를 상기 제 3 단말에 전송한다.
또 다른 일 예로, 상기 서버(200)에 미리 등록된 복수의 정보 중에서 상기 제 4 단말의 위치 정보를 기준으로 미리 설정된 반경(예를 들어 1Km) 내에 위치하며, 상기 제 4 키워드(예를 들어 편의점) 및 상기 제 4 패턴 정보(예를 들어 DDD 라면과 관련한 패턴 정보)에 대응하는 정보(예를 들어 DDD 라면을 판매하는 편의점과 관련한 정보)가 존재하지 않을 때, 상기 서버(200)는 상기 DDD 라면과 상기 편의점과 관련한 제 4 카테고리 정보를 상기 제 4 단말에 전송한다(S350).
이후, 상기 단말(100)은 앞서 전송된 키워드, 상기 패턴 정보, 상기 단말(100)의 위치 정보, 상기 단말(100)의 식별 정보 등에 응답하여 상기 서버(200)로부터 전송되는 카테고리 정보를 수신한다.
또한, 상기 단말(100)은 상기 수신된 카테고리 정보를 표시한다.
일 예로, 상기 제 1 단말은 앞서 전송된 상기 제 1 키워드(예를 들어 백화점), 상기 제 1 단말의 위치 정보(예를 들어 서울특별시 강남구 테헤란로 201), 상기 제 1 단말의 식별 정보 등에 응답하여 상기 서버(200)로부터 전송되는 상기 제 1 키워드(예를 들어 백화점)와 관련한 제 1 카테고리 정보를 수신한다.
또한, 도 7에 도시된 바와 같이, 상기 제 1 단말은 상기 수신된 상기 제 1 키워드(예를 들어 백화점)와 관련한 제 1 카테고리 정보(700)를 표시한다.
다른 일 예로, 상기 제 2 단말은 앞서 전송된 상기 제 2 키워드(예를 들어 김철수 과장), 상기 제 2 단말의 위치 정보(예를 들어 서울특별시 강남구 논현로 507), 상기 제 2 단말의 식별 정보 등에 응답하여 상기 서버(200)로부터 전송되는 상기 서버(200)에 미리 등록된 제 2 카테고리 정보를 수신하고, 상기 수신된 제 2 카테고리 정보를 표시한다.
또 다른 일 예로, 상기 제 3 단말은 앞서 전송된 상기 제 3 패턴 정보, 상기 제 3 단말의 위치 정보(예를 들어 서울특별시 강남구 역삼로 101), 상기 제 3 단말의 식별 정보 등에 응답하여 상기 서버(200)로부터 전송되는 상기 서버(200)에 미리 등록된 상기 제 3 패턴 정보와 관련한 제 3 카테고리 정보를 수신하고, 상기 수신된 제 3 카테고리 정보를 표시한다.
또 다른 일 예로, 상기 제 4 단말은 앞서 전송된 상기 제 4 키워드(예를 들어 편의점), 상기 태그 정보(또는 제 4 패턴 정보), 상기 제 4 단말의 위치 정보(예를 들어 서울특별시 강남구 논현로 511), 상기 제 4 단말의 식별 정보 등에 응답하여 상기 서버(200)로부터 전송되는 상기 DDD 라면과 상기 편의점과 관련한 제 4 카테고리 정보를 수신하고, 상기 수신된 제 4 카테고리 정보를 표시한다(S360).
이후, 상기 단말(100)은 상기 서버(200)와 연동하여, 상기 단말(100)에 표시되는 카테고리 정보 중에서 사용자 선택(또는 사용자 터치/입력)에 따라 선택되는 특정 카테고리에 대응하는 적어도 하나의 정보를 표시한다.
일 예로, 상기 제 1 단말에 표시되는 제 1 카테고리 정보(700) 중에서 쇼핑 카테고리(710)가 선택될 때, 상기 제 1 단말은 상기 선택된 쇼핑 카테고리에 대한 정보를 상기 서버(200)에 전송하고, 상기 전송에 응답하여 상기 서버(200)로부터 전송되는 상기 선택된 쇼핑 카테고리와 관련한 제 11 정보 내지 제 14 정보를 수신한다. 또한, 도 8에 도시된 바와 같이, 상기 제 1 단말은 상기 수신된 제 11 정보 내지 제 14 정보(예를 들어 ABCD 백화점, POPS 백화점, AAA 쇼핑몰, BBB 쇼핑몰 등 포함)(800)를 표시한다(S370).
이후, 상기 단말(100)에 표시되는 적어도 하나의 정보 중에서 특정 정보가 선택되는 경우, 상기 단말(100)은 상기 선택된 특정 정보(또는 상기 선택된 특정 정보에 대한 상세 정보)를 표시한다.
일 예로, 상기 도 8에 도시되는 제 11 정보 내지 제 14 정보 중에서 사용자 선택에 따라 제 12 정보(예를 들어 POPS 백화점)(810)가 선택될 때, 도 9에 도시된 바와 같이, 상기 제 1 단말은 상기 선택된 제 12 정보(예를 들어 POPS 백화점)에 대한 정보(900)를 표시한다(S380).
이후, 상기 단말(100)에서 정보가 표시 중인 상태에서 미리 설정된 이벤트가 감지되는 경우, 상기 단말(100)은 상기 이벤트에 대응하여 미리 설정된 기능을 수행한다. 여기서, 상기 이벤트는 상기 단말(100)에 표시 중인 정보에 포함된 복수의 항목(예를 들어 AR 길 찾기 항목(또는 메뉴), 콘텐츠 정보 항목, 지도 정보 항목, 쿠폰 정보 항목, 통화 항목, 메시지 보내기 항목, 블로그 접속 항목, 소셜 네트워크 서비스 접속 항목 등 포함) 중 어느 하나의 항목에 대한 터치(또는 선택/클릭)가 감지되는 경우, 상기 단말(100)에 구비된 버튼(또는 메뉴)에 대한 터치(또는 선택/클릭)가 감지되는 경우, 상기 단말(100)의 상/하/좌/우 방향으로의 미리 설정된 임계값 이상의 기울임이 감지되는 경우, 상기 단말(100)의 상/하(또는 위/아래) 방향 또는 좌/우 방향 또는 대각선 방향으로의 일정 횟수 이상의 움직임(또는 흔들림/진동)이 감지되는 경우, 상기 단말(100)의 시계/반시계 방향으로의 일정 횟수의 이상의 회전(또는 움직임)이 감지되는 경우, 상기 단말(100)의 사용자에 의한 터치 제스처가 감지되는 경우 등을 포함한다. 이때, 상기 단말(100)의 사용자에 의한 터치 제스처는 탭, 터치&홀드, 더블 탭, 드래그, 플릭, 드래그 앤드 드롭, 핀치, 스와이프 등을 포함한다.
일 예로, 상기 제 1 단말에서 제 1 정보(500)가 표시 중인 상태에서 사용자 터치에 따라 상기 사용 가능한 쿠폰 정보(550)가 선택(또는 터치)될 때, 도 10에 도시된 바와 같이, 상기 제 1 단말은 상기 선택된 사용 가능한 쿠폰 정보에 대한 상세 정보(1000)를 표시한다.
다른 일 예로, 상기 제 1 단말에서 제 1 정보(500)가 표시 중인 상태에서 사용자 터치에 따라 상기 ABC 백화점에서 제공하는 이벤트나 상품 정보 등을 확인하기 위한 제 2 링크 정보(570)가 선택(또는 터치)될 때, 도 11에 도시된 바와 같이, 상기 제 1 단말은 상기 선택된 제 2 링크 정보와 관련한 이벤트 정보(1100)를 표시한다.
또 다른 일 예로, 상기 제 1 단말에서 제 1 정보(500)가 표시 중인 상태에서 사용자 터치에 따라 상기 ABC 백화점과 관련한 제 1 MR 콘텐츠를 확인하기 위한 제 3 링크 정보(580)가 선택(또는 터치)될 때, 도 12에 도시된 바와 같이, 상기 제 1 단말은 상기 선택된 제 3 링크 정보와 관련한 제 1 MR 콘텐츠(1200)를 표시한다.
또 다른 일 예로, 상기 제 1 단말에서 제 1 정보(400)가 표시 중인 상태에서 상기 제 1 단말의 시계 방향으로의 2회전이 감지될 때, 도 13에 도시된 바와 같이, 상기 제 1 단말은 상기 시계 방향으로의 2회전에 대응하여 미리 설정된 상기 제 4 링크 정보와 관련한 상기 제 1 단말의 현재 위치에서 상기 ABC 백화점까지의 경로 안내 정보(1300)를 표시한다.
또 다른 일 예로, 상기 제 2 단말에서 제 2 정보(600)가 표시 중인 상태에서 상기 제 2 단말의 우측 방향으로 미리 설정된 제 1 임계값 이상의 기울임이 감지될 때, 도 14에 도시된 바와 같이, 상기 제 2 단말은 상기 우측 방향으로 미리 설정된 제 1 임계값 이상의 기울임에 대응하여 미리 설정된 상기 제 13 링크 정보와 관련한 상기 김철수 과장과 관련한 제 2 소셜 네트워크 서비스로 접속하여, 상기 김철수 과장과 관련한 제 2 소셜 네트워크 서비스에서 제공하는 화면(1400)을 표시한다.
또 다른 일 예로, 상기 제 1 단말에서 제 12 정보(900)가 표시 중인 상태에서 상기 제 1 단말의 상/하 방향으로의 2회 움직임이 감지될 때, 도 15에 도시된 바와 같이, 상기 제 1 단말은 상기 제 1 단말의 현재 위치에서 상기 제 12 정보와 관련한 POPS 백화점까지의 경로 안내를 위한 경로 안내 정보(1500)를 표시한다(S390).
본 발명의 실시예는 앞서 설명된 바와 같이, 서버에 미리 등록된 복수의 정보 중에서 단말의 현재 위치를 기준으로 미리 설정된 반경 내에 위치하며 단말의 사용자 입력에 따른 키워드 및/또는 인식된 패턴에 대응하는 적어도 하나의 정보가 존재하지 않는 경우, 미리 설정된 카테고리 정보를 표시하고, 상기 표시되는 카테고리 정보 중에서 선택되는 특정 카테고리에 대응하는 적어도 하나의 정보를 상기 단말에 제공하여, 가상 현실 또는 혼합 현실이 적용된 업체 정보 제공에 따라 홍보 효과를 높이고, 관심 있는 상품 및/서비스에 대한 실시간 정보를 용이하게 확인할 수 있는 효과가 있다.
또한, 본 발명의 실시예는 앞서 설명된 바와 같이, 서버에 미리 등록된 복수의 정보 중에서 단말의 현재 위치를 기준으로 미리 설정된 반경 내에 위치하며 단말의 사용자 입력에 따른 키워드 및/또는 인식된 패턴에 대응하는 적어도 하나의 정보가 존재하는 경우, 해당하는 적어도 하나의 정보를 상기 단말에 제공하여, 사용자 편의를 위한 사용자 인터페이스를 제공하고, 사용자의 편의성을 향상시킬 수 있는 효과가 있다.
전술된 내용은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
본 발명은 서버에 미리 등록된 복수의 정보 중에서 단말의 현재 위치를 기준으로 미리 설정된 반경 내에 위치하며 단말의 사용자 입력에 따른 키워드 및/또는 인식된 패턴에 대응하는 적어도 하나의 정보가 존재하지 않는 경우, 미리 설정된 카테고리 정보를 표시하고, 상기 표시되는 카테고리 정보 중에서 선택되는 특정 카테고리에 대응하는 적어도 하나의 정보를 상기 단말에 제공함으로써, 가상 현실 또는 혼합 현실이 적용된 업체 정보 제공에 따라 홍보 효과를 높이고, 관심 있는 상품 및/서비스에 대한 실시간 정보를 용이하게 확인할 수 있는 것으로, 가상 현실 분야, 증강 현실 분야, 혼합 현실(MR) 분야, 단말 분야, 파노라마 영상 분야, 쇼핑 정보 제공 분야, 마케팅 분야, 서버 분야 등에서 광범위하게 이용될 수 있다.
10: 콘텐츠 제공 시스템 100: 단말
200: 서버 110: 입력부
120: 리더기 130: 통신부
140: GPS 수신기 150: 저장부
160: 표시부 170: 음성 출력부
180: 제어부
200: 서버 110: 입력부
120: 리더기 130: 통신부
140: GPS 수신기 150: 저장부
160: 표시부 170: 음성 출력부
180: 제어부
Claims (13)
- 단말의 제어 방법에 있어서,
사용자 입력에 따른 키워드를 수신하거나 객체에 대한 패턴 인식에 따른 패턴 정보를 수신할 때, 통신부에 의해, 상기 키워드 또는 패턴 정보, 단말의 위치 정보 및 단말의 식별 정보를 서버에 전송하는 단계;
상기 통신부에 의해, 상기 서버에 저장된 복수의 정보 중에서 상기 단말의 위치 정보와, 상기 키워드 또는 상기 패턴 정보에 대응하는 제 1 정보가 존재하지 않을 때, 상기 서버로부터 전송되는 카테고리 정보를 수신하는 단계;
표시부에 의해, 상기 수신된 카테고리 정보를 표시하는 단계;
제어부에 의해, 상기 표시부에 표시되는 카테고리 정보 중에서 사용자 선택에 따라 선택된 특정 카테고리에 대응하는 적어도 하나의 제 2 정보를 표시하도록 상기 표시부를 제어하는 단계;
상기 표시부에 표시되는 적어도 하나의 제 2 정보 중에서 특정 정보가 선택될 때, 상기 표시부에 의해, 상기 선택된 특정 정보를 표시하는 단계; 및
상기 표시부에 상기 특정 정보가 표시 중인 상태에서 미리 설정된 이벤트가 감지될 때, 상기 제어부에 의해, 상기 이벤트에 대응하여 미리 설정된 기능을 수행하고, 상기 기능 수행 결과를 표시하도록 상기 표시부를 제어하는 단계를 포함하며,
상기 객체는,
사람의 얼굴, 지문, 상품, 건물, 상품이나 진열대에 구비된 태그 및, 영상 정보에 포함된 얼굴이나 지문이나 상품이나 건물 중 적어도 하나를 포함하는 것을 특징으로 하는 단말의 제어 방법. - 제 1 항에 있어서,
상기 통신부에 의해, 상기 서버에 저장된 복수의 정보 중에서 상기 단말의 위치 정보와, 상기 키워드 또는 상기 패턴 정보에 대응하는 제 1 정보가 존재할 때, 상기 서버에 전송된 위치 정보에 응답하여 상기 서버로부터 제공되는 제 1 정보를 수신하는 단계; 및
상기 표시부에 의해, 상기 수신된 제 1 정보를 표시하는 단계를 더 포함하는 것을 특징으로 하는 단말의 제어 방법. - 제 1 항에 있어서,
상기 이벤트는,
상기 단말에 표시 중인 제 1 정보에 포함된 복수의 항목 중 어느 하나의 항목에 대한 선택이 감지되는 경우, 상기 단말에 구비된 버튼에 대한 선택이 감지되는 경우, 상기 단말의 상/하/좌/우 방향으로의 미리 설정된 임계값 이상의 기울임이 감지되는 경우, 상기 단말의 상/하 방향이나 좌/우 방향이나 대각선 방향으로의 일정 횟수 이상의 움직임이 감지되는 경우, 상기 단말의 시계/반시계 방향으로의 일정 횟수의 이상의 회전이 감지되는 경우 및 상기 단말의 사용자에 의한 터치 제스처가 감지되는 경우 중 어느 하나의 경우를 포함하며,
상기 단말의 사용자에 의한 터치 제스처는,
탭(tap), 터치&홀드(touch & hold), 더블 탭(double tap), 드래그(drag), 플릭(flick), 드래그 앤드 드롭(drag & drop), 핀치(pinch) 및 스와이프(swipe) 중 어느 하나를 포함하는 것을 특징으로 하는 단말의 제어 방법. - 제 1 항에 있어서,
상기 이벤트에 대응하여 미리 설정된 기능을 수행하고, 상기 기능 수행 결과를 표시하도록 상기 표시부를 제어하는 단계는,
상기 제 1 정보에 포함된 상기 키워드와 관련한 MR 콘텐츠를 확인하기 위한 링크 정보가 선택될 때, 상기 표시부에 의해, 상기 선택된 링크 정보와 관련한 MR 콘텐츠를 표시하는 것을 특징으로 하는 단말의 제어 방법. - 제 1 항에 있어서,
상기 이벤트에 대응하여 미리 설정된 기능을 수행하고, 상기 기능 수행 결과를 표시하도록 상기 표시부를 제어하는 단계는,
상기 제 1 정보에 포함된 상기 단말의 현재 위치에서 상기 제 1 정보에 포함된 목적지까지의 경로 안내 정보를 표시하기 위한 링크 정보가 선택될 때, 상기 표시부에 의해, 상기 단말의 현재 위치에 대응하는 화면상에 상기 제 1 정보에 포함된 목적지까지의 경로 정보를 오버랩하여 제 1 화면을 표시하는 과정; 및
상기 표시부에 표시되는 경로 정보를 선택한 상태가 유지되는 동안, 상기 표시부에 의해, 상기 제 1 화면에서 상기 목적지까지의 미리 설정된 속도로 자동 이동 기능을 수행에 따라 변화하는 연속된 화면을 표시하는 과정을 포함하는 것을 특징으로 하는 단말의 제어 방법. - 제 5 항에 있어서,
상기 경로 정보는,
차선 정보, 도로 정보, 주행 제한 속도 정보, 턴바이턴 정보, 교통 안전 정보, 교통 안내 정보, 차량 정보, 길 찾기 정보 및 건물 내의 통로 정보 중 적어도 하나의 정보를 포함하는 것을 특징으로 하는 단말의 제어 방법. - 제 1 항에 있어서,
상기 이벤트에 대응하여 미리 설정된 기능을 수행하고, 상기 기능 수행 결과를 표시하도록 상기 표시부를 제어하는 단계는,
상기 제 1 정보에 포함된 상기 키워드와 관련한 블로그나 소셜 네트워크 서비스로 접속하기 위한 링크 정보가 선택될 때, 상기 표시부에 의해, 상기 선택된 링크 정보와 관련한 블로그에 대응하는 화면 또는 상기 소셜 네트워크 서비스에 대응하는 화면을 표시하는 것을 특징으로 하는 단말의 제어 방법. - 제 1 항에 있어서,
상기 제 1 정보는,
MR 콘텐츠를 포함하며,
상기 MR 콘텐츠는,
상기 키워드와 관련한 파노라마 영상 정보, 상기 파노라마 영상 정보에 포함된 객체와 관련한 코드, 상기 코드의 종류에 대응하는 객체 마커, 이미지 또는 동영상 내에서의 객체 마커의 위치 정보 및 객체 마커의 속성 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 단말의 제어 방법. - 제 8 항에 있어서,
상기 MR 콘텐츠는,
상기 표시부에 의해, 파노라마 영상 정보를 상기 표시부의 영상 표시 영역에 표시하는 과정;
상기 표시부의 객체 마커 표시 영역에 표시되는 복수의 객체 마커 중에서 선택된 제 1 객체 마커가 드래그 앤 드랍 기능에 의해 상기 영상 표시 영역 상의 제 1 영역에 드랍될 때, 상기 제어부에 의해, 상기 영상 표시 영역 내의 제 1 영역에 상기 선택된 제 1 객체 마커를 배치하는 과정; 및
상기 영상 표시 영역 내에 배치된 제 1 객체 마커가 선택될 때, 상기 제어부에 의해, 사용자 입력을 근거로 상기 선택된 제 1 객체 마커에 대한 속성 정보를 설정하는 과정을 통해 생성된 것을 특징으로 하는 단말의 제어 방법. - 단말에 있어서,
사용자 입력에 따른 키워드를 수신하거나 객체에 대한 패턴 인식에 따른 패턴 정보를 수신할 때 상기 키워드 또는 패턴 정보, 단말의 위치 정보 및 단말의 식별 정보를 서버에 전송하며, 상기 서버에 저장된 복수의 정보 중에서 상기 단말의 위치 정보와, 상기 키워드 또는 상기 패턴 정보에 대응하는 제 1 정보가 존재하지 않을 때 상기 서버로부터 전송되는 카테고리 정보를 수신하는 통신부;
상기 수신된 카테고리 정보를 표시하는 표시부; 및
상기 표시부에 표시되는 카테고리 정보 중에서 사용자 선택에 따라 선택된 특정 카테고리에 대응하는 적어도 하나의 제 2 정보를 표시하도록 상기 표시부를 제어하고, 상기 표시부에 표시되는 적어도 하나의 제 2 정보 중에서 특정 정보가 선택될 때 상기 선택된 특정 정보를 표시하도록 상기 표시부를 제어하고, 상기 표시부에 상기 특정 정보가 표시 중인 상태에서 미리 설정된 이벤트가 감지될 때 상기 이벤트에 대응하여 미리 설정된 기능을 수행하고, 상기 기능 수행 결과를 표시하도록 상기 표시부를 제어하는 제어부를 포함하며,
상기 객체는,
사람의 얼굴, 지문, 상품, 건물, 상품이나 진열대에 구비된 태그 및, 영상 정보에 포함된 얼굴이나 지문이나 상품이나 건물 중 적어도 하나를 포함하는 것을 특징으로 하는 단말. - 제 10 항에 있어서,
상기 표시부는,
상기 제 1 정보에 포함된 상기 키워드와 관련한 MR 콘텐츠를 확인하기 위한 링크 정보가 선택될 때, 상기 선택된 링크 정보와 관련한 MR 콘텐츠를 표시하는 것을 특징으로 하는 단말. - 제 10 항에 있어서,
상기 표시부는,
상기 제 1 정보에 포함된 상기 단말의 현재 위치에서 상기 제 1 정보에 포함된 목적지까지의 경로 안내 정보를 표시하기 위한 링크 정보가 선택될 때, 상기 단말의 현재 위치에 대응하는 화면상에 상기 제 1 정보에 포함된 목적지까지의 경로 정보를 오버랩하여 제 1 화면을 표시하며, 상기 표시부에 표시되는 경로 정보를 선택한 상태가 유지되는 동안, 상기 제 1 화면에서 상기 목적지까지의 미리 설정된 속도로 자동 이동 기능을 수행에 따라 변화하는 연속된 화면을 표시하는 것을 특징으로 하는 단말. - 제 10 항에 있어서,
상기 표시부는,
상기 제 1 정보에 포함된 상기 키워드와 관련한 블로그나 소셜 네트워크 서비스로 접속하기 위한 링크 정보가 선택될 때, 상기 선택된 링크 정보와 관련한 블로그에 대응하는 화면 또는 상기 소셜 네트워크 서비스에 대응하는 화면을 표시하는 것을 특징으로 하는 단말.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020170134765A KR101907885B1 (ko) | 2017-10-17 | 2017-10-17 | 단말 및 그의 제어 방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020170134765A KR101907885B1 (ko) | 2017-10-17 | 2017-10-17 | 단말 및 그의 제어 방법 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR101907885B1 true KR101907885B1 (ko) | 2018-12-18 |
Family
ID=64952151
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020170134765A KR101907885B1 (ko) | 2017-10-17 | 2017-10-17 | 단말 및 그의 제어 방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR101907885B1 (ko) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20210154957A (ko) * | 2020-03-13 | 2021-12-21 | 네이버 주식회사 | 동영상 콘텐츠에 대한 태그 삽입 방법 및 시스템 |
-
2017
- 2017-10-17 KR KR1020170134765A patent/KR101907885B1/ko active
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20210154957A (ko) * | 2020-03-13 | 2021-12-21 | 네이버 주식회사 | 동영상 콘텐츠에 대한 태그 삽입 방법 및 시스템 |
| KR102620445B1 (ko) * | 2020-03-13 | 2024-01-02 | 네이버 주식회사 | 동영상 콘텐츠에 대한 태그 삽입 방법 및 시스템 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20140111542A1 (en) | Platform for recognising text using mobile devices with a built-in device video camera and automatically retrieving associated content based on the recognised text | |
| JP6179592B2 (ja) | 画像認識装置、その処理方法、およびプログラム | |
| US20140079281A1 (en) | Augmented reality creation and consumption | |
| CN104823152A (zh) | 使用视线追踪实现扩增实境 | |
| CN103189864A (zh) | 用于确定个人的共享好友的方法、设备和计算机程序产品 | |
| KR101815158B1 (ko) | Mr 콘텐츠 제작 장치 및 그 방법 | |
| US20140078174A1 (en) | Augmented reality creation and consumption | |
| US9491368B2 (en) | Information obtaining and viewing device, data processing method thereof, and non-transitory computer readable medium storing a program | |
| US9607094B2 (en) | Information communication method and information communication apparatus | |
| US9710826B1 (en) | System and method of advertising a plurality of varied multimedia content | |
| KR101715828B1 (ko) | 단말 및 그의 제어 방법 | |
| KR101809673B1 (ko) | 단말 및 그의 제어 방법 | |
| US20140019378A1 (en) | Evaluation system, method, and computer-readable recording medium | |
| KR102211453B1 (ko) | 쇼핑 정보 제공 시스템 | |
| KR101907885B1 (ko) | 단말 및 그의 제어 방법 | |
| KR101705812B1 (ko) | Mr 콘텐츠 제작 장치 및 그 방법 | |
| KR20200008359A (ko) | Mr 콘텐츠 제공 시스템 및 그 방법 | |
| KR20190043001A (ko) | 단말 및 그의 제어 방법 | |
| KR20180004643A (ko) | 단말 및 그의 제어 방법 | |
| JP5929573B2 (ja) | 評価システム、プログラム | |
| KR20170112975A (ko) | 이벤트에 따른 경로 정보 제공 장치 및 그 방법 | |
| KR101722053B1 (ko) | 목적별 관심 영상으로 반복 전환하는 안내 장치 및 그 방법 | |
| KR20190140311A (ko) | 단말 및 그의 제어 방법 | |
| KR101779502B1 (ko) | 이벤트에 따른 경로 정보 제공 장치 및 그 방법 | |
| KR20190140310A (ko) | 단말 및 그의 제어 방법 |