KR100944734B1 - Zone information providing system and method using image pick up apparatus - Google Patents
Zone information providing system and method using image pick up apparatus Download PDFInfo
- Publication number
- KR100944734B1 KR100944734B1 KR1020090059128A KR20090059128A KR100944734B1 KR 100944734 B1 KR100944734 B1 KR 100944734B1 KR 1020090059128 A KR1020090059128 A KR 1020090059128A KR 20090059128 A KR20090059128 A KR 20090059128A KR 100944734 B1 KR100944734 B1 KR 100944734B1
- Authority
- KR
- South Korea
- Prior art keywords
- information
- zone
- terminal
- unit
- image
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C11/00—Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
- G01C11/02—Picture taking arrangements specially adapted for photogrammetry or photographic surveying, e.g. controlling overlapping of pictures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/40—Data acquisition and logging
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Databases & Information Systems (AREA)
- Computer Hardware Design (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
본 발명은 존(Zone) 정보 제공 시스템 및 방법에 관한 것으로서, 보다 상세하게는 임의의 복수의 위치에 부착된 위치 송신장치에서 전송되는 위치정보를 수신하는 위치 수신장치 및 촬상장치를 구비한 휴대형 단말기를 이용하여 존에서 특정 위치나 매장 또는 물건에 대한 각종 정보를 제공할 수 있는 촬상장치를 이용한 존 정보 제공 시스템 및 방법에 관한 것이다. BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a system and method for providing zone information, and more particularly, to a portable terminal having a location receiver and an imaging device for receiving location information transmitted from a location transmitter attached to a plurality of locations. The present invention relates to a zone information providing system and method using an imaging device that can provide various information about a specific location, a store, or an object in a zone.
일반적으로 위성항법시스템(global positioning system, 이하 'GPS'라 한다)은 3개 이상의 위성으로부터 정확한 시간과 거리를 측정하여 3개의 각각 다른 거리를 삼각 방법에 따라서 현 위치를 계산할 수 있다. 특히, 종래의 GPS는 네비게이션 등에 사용되어 차량의 위치정보 또는 경로 정보를 제공하는데 사용되었다. In general, a global positioning system (GPS) may measure accurate time and distance from three or more satellites and calculate three different distances according to a triangulation method. In particular, the conventional GPS has been used to provide location information or route information of a vehicle, for example, for navigation.
하지만, GPS는 오차가 크므로 오차 범위내의 작은 공간에서 사용자가 정밀한 위치 정보를 얻기에는 어려움이 있으며, 특히 건물의 1층과 2층의 구분과 같은 3차원적인 위치 정보를 얻을 수 없다. 또한, 방해물이 많아 위성 신호가 수신되지 않는 공간이 다수 존재하는 존(Zone)이거나 지하 상가와 같이 위성 신호가 완전히 수 신되지 않는 존(Zone)에서 GPS를 사용하고자 할때는 사용자의 위치 정보를 획득하는데 어려움이 있는 문제점이 있다.However, since GPS has a large error, it is difficult for a user to obtain accurate location information in a small space within the error range. In particular, GPS cannot obtain three-dimensional location information such as the division of the first and second floors of a building. In addition, when you want to use GPS in a zone where there are many spaces where satellite signals are not received due to a lot of obstructions or in a zone where satellite signals are not completely received, such as an underground shopping mall, you can obtain user location information. There is a problem with difficulty.
따라서, 존(Zone)에서 특정 위치나 물건에 대한 정보를 얻는 방법으로 일반적으로 무선주파수를 사용하거나 RFID를 이용하여 안내정보를 제공한다. Therefore, as a method of obtaining information about a specific location or object in a zone, guide information is generally provided using radio frequency or RFID.
여기에서 존(Zone)은 확실한 특징이 있는 경계가 명확한 구역을 말하며, 예를 들어 용산 전자상가내의 어느 상가건물을 존이라고 볼 수도 있고, 특정 백화점 전체 혹은 특정 쇼핑몰의 일부를 존이라고 볼 수도 있다. 혹은, 박물관, 미술관 또는 예술의 전당과 같은 음악관등을 존이라고 볼 수도 있다.Here, the zone refers to an area with a definite boundary. For example, a zone in an electronic shopping mall in Yongsan may be regarded as a zone, or a whole department or a part of a specific shopping mall may be considered as a zone. Or a museum, an art museum, or a music hall such as an art hall can be considered a zone.
존에서 안내정보를 제공하는 방법 중 무선주파수를 이용하는 방법의 한 예로서 정보 안내를 원하는 존 내부의 일정 영역에 따라 FM주파수를 변조하여 수신기가 자동으로 송신주파수를 검색하여 음성안내를 수행하는 방식이 있다.An example of a method of providing guide information in a zone is a method in which a receiver automatically searches for a transmission frequency to perform voice guidance by modulating an FM frequency according to a predetermined area inside a zone where information is desired. have.
또한, RFID를 이용하는 방법은 주로 물품을 식별하기 위해 사용되며, RFID태그를 물품에 부착하고 사용자는 RFID판독기를 이용하여 RFID태그의 정보를 수신함으로써 물품을 식별한다.In addition, a method using RFID is mainly used to identify an article, and the RFID tag is attached to the article and the user identifies the article by receiving information of the RFID tag using an RFID reader.
하지만, 무선 주파수를 이용하는 방법은 어느 일정 영역에 대한 정보만을 얻을 수 있고 상기 일정 영역내의 물품 정보나 세부 위치정보는 식별할 수 없다. 또한, 공간에 따른 비용의 비례적 증가 및 유지보수의 난이성들로 운영상의 문제점이 있다. 그리고, RFID를 이용하는 방법은 물품의 정보나 상기 일정 영역내의 세부 위치정보를 식별할 수 있을 뿐, 상기 일정 영역의 전체적인 구조 파악이나 경로 탐색등이 불가능하다.However, in the method using the radio frequency, only information on a certain area can be obtained, and item information or detailed location information in the certain area cannot be identified. In addition, there are operational problems due to the proportional increase in cost and difficulty of maintenance. In addition, in the method using RFID, only the information of the article and the detailed position information in the predetermined region can be identified, and the overall structure of the predetermined region and the path search are not possible.
또한, 위와 같은 방식으로 매장이나 물품의 정보를 얻고자 할때 매장의 디스플레이가 바뀐다던가 진열된 물품의 가격정보가 변할때에도 실시간으로 변경된 정보를 반영하지 않는다면 사용중인 단말기에서 변경된 정보를 인식하지 못함으로써 사용에 상당한 불편을 야기할 것이다.In addition, when the display of the store is changed or the price information of the displayed item is changed when the information on the store or the product is changed in the above manner, if the changed information is not reflected in real time, the changed terminal may not recognize the changed information. It will cause considerable inconvenience to use.
따라서, 백화점 혹은 용산전자상가와 같은 존에서 정보를 제공하기 위한 방법으로서, 상기 존의 전체적인 구조 및 현재 위치가 식별 가능하고, 동시에 상기 존 내부의 일정 영역인 매장등도 식별 가능하며, 상기 매장등에서 판매하는 물품의 정보도 실시간으로 제공이 가능한 존 정보 제공 시스템 및 방법이 필요하다.Accordingly, as a method for providing information in a zone such as a department store or a Yongsan electronic shopping mall, the overall structure and current location of the zone can be identified, and at the same time, a store which is a predetermined area inside the zone can be identified. There is a need for a zone information providing system and method capable of providing information of goods to be sold in real time.
전술한 문제점을 개선하기 위한 본 발명 실시예들의 목적은 일정 존에서 위치를 식별할 수 있는 위치 수신장치와 촬상장치를 이용한 단말기를 구비한 존 정보 제공 시스템을 사용함으로써 상기 존의 전체적인 구조 및 현재 위치가 식별 가능하며, 동시에 상기 존 내부의 일정 영역 또는 물품도 식별 가능한 촬상장치를 이용한 존 정보 제공 시스템 및 방법을 제공하는 것이다. Summary of the Invention An object of the embodiments of the present invention for improving the above-described problem is to use a zone information providing system having a location receiving apparatus capable of identifying a location in a certain zone and a terminal using an imaging device, and thus the overall structure and current position of the zone. It is possible to provide a zone information providing system and method using an imaging device that can be identified and at the same time can identify a certain area or article within the zone.
본 발명 실시예들의 다른 목적은 단말기가 존의 최신 정보를 저장한 서버와 실시간 통신을 함으로써 존 내부의 일정 영역 또는 물품의 실시간 갱신 정보를 습득 가능한 촬상장치를 이용한 존 정보 제공 시스템 및 방법을 제공하는 것이다. Another object of the embodiments of the present invention is to provide a zone information providing system and method using an imaging device capable of acquiring real time update information of a certain area or an article in a zone by the terminal communicating in real time with a server storing the latest information of the zone. will be.
본 발명 실시예들의 또 다른 목적은 단말기를 사용하여 촬영한 영상을 필터링 또는 패턴 분석을 통해 다른 형태로 바꾸어 검색함으로써 검색 속도를 빠르게 하고 저장 장치의 용량을 줄일 수 있도록 한 촬상장치를 이용한 존 정보 제공 시스템 및 방법을 제공하는 것이다. Another object of the embodiments of the present invention is to provide zone information by using an image pickup device, which makes it possible to increase the search speed and reduce the storage capacity by retrieving an image captured using a terminal into another form through filtering or pattern analysis. It is to provide a system and method.
상기와 같은 목적을 달성하기 위하여, 본 발명의 일 실시예에 따른 촬상장치를 이용한 존 정보 제공 시스템은 무선으로 존 내부의 임의의 위치 정보를 송신하는 위치 송신 장치와, 상기 위치 송신 장치에서 전송되는 위치 정보를 수신하고 서버와 통신하여 내부에 기 저장한 존 정보를 최신 존 정보로 갱신하며 촬상장치를 이용하여 주변의 영상을 촬영하여 촬영한 영상으로써 존 정보를 검색하여 제공하는 단말기와, 존 정보를 저장하며 저장한 존 정보를 상기 단말기로 전송하고 상기 존에 속한 매장의 매장 단말기로부터 존 정보 갱신 요청이 전송되면 상기 매장의 존 정보를 갱신하는 서버를 포함한다. In order to achieve the above object, the zone information providing system using the image pickup apparatus according to an embodiment of the present invention is a position transmitting apparatus for transmitting arbitrary position information in the zone wirelessly, and is transmitted from the position transmitting apparatus A terminal that receives location information and communicates with the server to update previously stored zone information with the latest zone information, and searches for and provides zone information as a photographed image by using an image pickup device, and zone information And storing the stored zone information and transmitting the stored zone information to the terminal and updating the zone information of the store when a zone information update request is transmitted from a store terminal of a store belonging to the zone.
상기 위치 송신 장치는 존 내부의 임의의 복수의 위치에 부착되고 개개의 위치 송신 장치는 상기 단말기가 현재 위치를 파악할 수 있게 하기위해 무선으로 위치 정보를 상기 단말기로 송신한다. 상기 위치 송신 장치로써 지그비(Zigbee)나 블루투스(Bluetooth) 같은 무선 송신 장치가 사용될 수 있다.The location transmitter is attached to any plurality of locations within the zone and the individual location transmitters transmit location information wirelessly to the terminal to enable the terminal to determine the current location. A wireless transmission device such as Zigbee or Bluetooth may be used as the location transmission device.
상기 단말기는 상기 위치 정보로써 존 내부에서 현재 자신의 위치를 파악하며 부착된 촬상장치를 이용하여 주변의 영상을 촬영하고 상기 현재 위치 정보 및 촬영한 영상을 기 설정된 순서에 의해 특정한 형태로 선처리한 후 선처리된 특정한 형태와 동일한 형태로 기 저장된 존 특정정보와 검색하여 검색된 존 특정정보에 해당하는 존 정보를 제공한다. The terminal grasps its current location within the zone using the location information, photographs a surrounding image using an attached image capturing device, and preprocesses the current location information and the captured image in a specific form in a predetermined order. Zone-specific information previously stored in the same form as the pre-processed specific form and zone information corresponding to the retrieved zone-specific information are provided.
상기 단말기는 상기 존 특정정보 및 존 정보가 최신 정보인지 확인하고 상기 존 특정정보 및 존 정보를 다운로드받기 위해 상기 서버와 통신할 수 있다. The terminal may communicate with the server to check whether the zone specific information and the zone information are up to date and to download the zone specific information and the zone information.
상기 서버는 상기 단말기의 검색에 필요한 존 특정정보 및 존 정보를 저장하며, 단말기로부터 존 특정정보 및 존 정보 전송이 요청되면 해당 단말기로 존 특정정보 및 존 정보를 전송한다. 또한, 상기 서버는 존의 매장 단말기등에서 물품의 디스플레이 방식이 변경되었다던지 물품 가격이 바뀌었다던지 하는 이유로 존 정보의 갱신을 요청하면, 상기 매장 단말기가 전송한 최신의 존 정보로 업데이트하여 저장하고, 저장된 존 정보중 일부를 상기 단말기의 검색에 이용되는 존 특정정보 형태로 변환하여 저장한다.The server stores zone specific information and zone information necessary for searching for the terminal, and transmits the zone specific information and the zone information to the corresponding terminal when the zone specific information and the zone information transmission are requested from the terminal. In addition, when the server requests to update the zone information on the basis of whether the display method of the goods is changed or the price of the goods is changed in the store terminal of the zone, the server updates and stores the latest zone information transmitted by the store terminal. A part of the stored zone information is converted into a zone specific information type used for searching for the terminal and stored.
상기 매장 단말기는 전체 존 정보를 구성하는 정보 중 일부분을 담당하는 객체로서 예를들면, 상기 존이 어떤 쇼핑몰이라고 할때, 각 매장이나 점포중 해당 매장이나 점포의 존 정보를 관리하는 존 정보 관리 컴퓨터등이 그 예이다. 혹은, 상기 존을 박물관이나 미술관이라고 할때, 상기 박물관이나 미술관을 일정 구역으로 구분하여 어느 일정 구역의 존 정보를 관리하는 단말기가 될 수도 있다. 상기 매장 단말기는 상기 존 정보의 갱신을 위해 상기 서버와 연결되어 있으며, 해당 매장의 디스플레이 정보나 물품의 바코드 정보 혹은 할인정보등을 존 정보로 하여 상기 서버에 전송할 수 있다.The store terminal is an object in charge of a part of information constituting the entire zone information. For example, when the zone is a certain shopping mall, a zone information management computer managing zone information of the corresponding store or store among the stores or stores. For example. Alternatively, when the zone is referred to as a museum or an art gallery, it may be a terminal for managing the zone information of a certain area by dividing the museum or art gallery into a certain area. The store terminal is connected to the server for updating the zone information, and may transmit the display information, bar code information, or discount information of the store as zone information to the server.
본 발명 실시예에 따른 촬상장치를 이용한 존 정보 제공 시스템 및 방법은 일정 존에서 위치를 식별할 수 있는 위치 수신장치와 촬상장치를 이용한 단말기를 구비한 존 정보 제공 시스템을 사용함으로써 상기 존의 전체적인 구조 및 현재 위치가 식별 가능하며, 동시에 상기 존 내부의 일정 영역 또는 물품도 식별 가능하여 사용자가 편리하게 사용할 수 있는 효과가 있다.The zone information providing system and method using the imaging device according to the embodiment of the present invention is the overall structure of the zone by using a zone information providing system having a position receiving apparatus capable of identifying a position in a certain zone and a terminal using the imaging apparatus. And it is possible to identify the current location, and at the same time identify a certain area or article in the zone there is an effect that can be conveniently used by the user.
본 발명 실시예에 따른 촬상장치를 이용한 존 정보 제공 시스템 및 방법은 단말기가 존의 최신 정보를 저장한 서버와 실시간 통신을 함으로써 존 내부의 일정 영역 또는 물품의 실시간 갱신 정보를 습득 가능하여 사용자가 빠르게 존 내부의 최신 정보를 습득할 수 있는 효과가 있다.The zone information providing system and method using the image pickup apparatus according to the embodiment of the present invention enables the user to quickly acquire real-time update information of a certain area or an article in the zone by allowing the terminal to communicate in real time with a server storing the latest information on the zone. It is effective to learn the latest information in the zone.
본 발명 실시예에 따른 촬상장치를 이용한 존 정보 제공 시스템 및 방법은 단말기를 사용하여 촬영한 영상을 필터링 또는 패턴 분석을 통해 다른 형태로 바꾸어 검색함으로써 검색 속도를 빠르게 하고 저장 장치의 용량을 줄일 수 있도록 하여 사용자의 사용성을 개선시키는 효과가 있다.The zone information providing system and method using the image pickup device according to the embodiment of the present invention can be searched by changing the image captured by the terminal to another form through filtering or pattern analysis to speed up the search speed and reduce the capacity of the storage device. Thereby improving the usability of the user.
상기한 바와 같은 본 발명을 첨부된 도면들과 실시예들을 통해 상세히 설명하도록 한다.The present invention as described above will be described in detail with reference to the accompanying drawings and embodiments.
도 1은 본 발명의 일 실시예에 따른 촬상장치를 이용한 존 정보 제공 시스템의 구성도를 나타낸 것으로, 무선으로 존 내부의 임의의 위치 정보를 송신하는 위치 송신 장치(10)와, 상기 위치 송신 장치에서 전송되는 위치 정보를 수신하고 서버(200)와 통신하여 내부에 기 저장한 존 정보를 최신 존 정보로 갱신하며 촬상장치를 이용하여 주변의 영상을 촬영하여 촬영한 영상으로써 존 정보를 검색하여 제공하는 단말기(100)와, 존 정보를 저장하며 저장한 존 정보를 상기 단말기로 전송하고 상기 존에 속한 매장의 매장 단말기(300)로부터 존 정보 갱신 요청이 전송되면 상기 매장의 존 정보를 갱신하는 서버(200)를 포함한다. 1 is a block diagram of a system for providing zone information using an imaging apparatus according to an embodiment of the present invention. The apparatus includes a
상기 위치 송신 장치(10)는 존 내부의 임의의 복수의 위치에 부착되고 개개의 위치 송신 장치는 상기 단말기가 현재 위치를 파악할 수 있게 하기위해 무선으로 위치 정보를 상기 단말기로 송신한다. 상기 위치 송신 장치로써 지그비(Zigbee) 나 블루투스(Bluetooth) 같은 무선 송신 장치가 사용될 수 있다.The
상기 단말기(100)는 상기 위치 정보로써 존 내부에서 현재 자신의 위치를 파악하며 부착된 촬상장치를 이용하여 주변의 영상을 촬영하고 상기 현재 위치 정보 및 촬영한 영상을 기 설정된 순서에 의해 특정한 형태로 선처리한 후 선처리된 특정한 형태와 동일한 형태로 기 저장된 존 특정정보와 검색하여 검색된 존 특정정보에 해당하는 존 정보를 제공한다. The
상기 단말기(100)는 상기 존 특정정보 및 존 정보가 최신 정보인지 확인하고 상기 존 특정정보 및 존 정보를 다운로드받기 위해 상기 서버와 통신할 수 있다. The
상기 서버(200)는 상기 단말기의 검색에 필요한 존 특정정보 및 존 정보를 저장하며, 단말기로부터 존 특정정보 및 존 정보 전송이 요청되면 해당 단말기로 존 특정정보 및 존 정보를 전송한다. 또한, 상기 서버는 존의 매장 단말기(300)등에서 물품의 디스플레이 방식이 변경되었다던지 물품 가격이 바뀌었다던지 하는 이유로 존 정보의 갱신을 요청하면, 상기 매장 단말기가 전송한 최신의 존 정보로 업데이트하여 저장하고, 저장된 존 정보중 일부를 상기 단말기의 검색에 이용되는 존 특정정보 형태로 변환하여 저장한다.The
상기 매장 단말기(300)는 전체 존 정보를 구성하는 정보 중 일부분을 담당하는 객체로서 예를들면, 상기 존이 어떤 쇼핑몰이라고 할때, 각 매장이나 점포중 해당 매장이나 점포의 존 정보를 관리하는 존 정보 관리 컴퓨터등이 그 예이다. 상기 매장 단말기(300)는 상기 존 정보의 갱신을 위해 상기 서버와 연결되어 있으며, 해당 매장의 디스플레이 정보나 물품의 바코드 정보 혹은 할인정보등을 존 정보로 하 여 상기 서버에 전송할 수 있다.The
상기 단말기(100)는 기 저장된 존 정보와 상기 위치 송신장치와 통신하여 파악된 현재 위치를 이용하여 상기 존의 전체적인 구조 및 현재 위치가 식별 가능하며, 부착된 촬상장치를 이용하여 촬영한 영상으로써 기 저장된 존 정보와 검색하여 상기 존 내부의 일정 영역 또는 물품도 식별 가능하다.The terminal 100 can identify the overall structure and the current location of the zone by using the pre-stored zone information and the current location identified through communication with the location transmitter, and the image is captured using an attached imaging device. By searching the stored zone information, a certain area or article in the zone can be identified.
상기 단말기(100)는 존의 최신 정보를 저장한 서버와 실시간 통신을 함으로써 존 내부의 일정 영역 또는 물품의 실시간 갱신 정보를 습득 가능하다.The terminal 100 may acquire real-time update information of a predetermined area or an item in the zone by performing real-time communication with a server storing the latest information of the zone.
도 2는 본 발명의 일 실시예에 따른 단말기(100)의 구성도를 나타낸 것으로, 위치 송신장치로부터 전송되는 위치 정보를 수신하는 위치수신부(110)와, 영상을 촬영하는 촬상부(105)와, 촬영한 영상을 검색하기 위한 존 특정정보와 사용자에게 제공하기 위한 존 정보가 기 저장된 저장부(125)와, 저장부(125)에 저장된 존 특정정보와 존 정보를 최신 정보로 유지하기위해 서버와 통신하는 무선 통신부(115)와, 상기 위치 정보로 상기 촬영한 영상을 선처리하는 위치 정보 선처리부(140)와, 상기 촬영한 영상의 일부분이나 특징을 이용하여 선처리하고 저장부에 저장된 존 특정정보와 비교 가능한 형태인 촬영 특정 정보로 변환하는 영상 정보 선처리부(150)와, 상기 촬영 특정 정보와 상기 존 특정정보를 이용하여 존 정보를 검색하는 검색부(160)와, 상기 검색부에서 검색된 존 정보를 다양한 형태로 제공하는 정보 제공부(170)와, 정보 제공부(170)에서 제공한 존 정보를 사용자에게 디스플레이하는 표시부(120)와, 검색을 위해 일부 정보를 입력하거나 검색 결과로 표시된 정보 중 일 부를 선택하는 사용자 입력부(180)와, 상기 촬상부/ 위치수신부/ 저장부/ 무선 통신부/ 위치 정보 선처리부/ 영상 정보 선처리부/ 검색부/ 정보 제공부/ 사용자 입력부/ 표시부를 제어하는 제어부(130)로 이루어진다.2 is a block diagram of a terminal 100 according to an embodiment of the present invention, a
상기 위치 수신부는 위치 송신장치로부터 전송되는 위치 정보를 수신하며 단일의 위치 송신장치로부터 전송되는 단일 위치정보뿐 아니라, 수신 가능한 복수개의 위치 송신장치로부터 전송되는 위치 정보를 수집할 수도 있다.The location receiver may receive location information transmitted from the location transmitter and may collect location information transmitted from a plurality of receivable location transmitters as well as single location information transmitted from a single location transmitter.
상기 촬상부는 스틸사진 또는 동영상을 촬상할 수 있는 카메라모듈로서, 상기 단말기에 배치된다. 또한, 상기 촬상부는 디지털카메라 또는 디지털캠코더 등으로 구현되어 상기 단말기와 연결되고 촬영한 영상을 상기 단말기에 전송하여도 무방하다. The imaging unit is a camera module capable of capturing still photos or moving images, and is disposed in the terminal. In addition, the imaging unit may be implemented as a digital camera or a digital camcorder, and may be connected to the terminal and transmit the captured image to the terminal.
상기 저장부는 램, 하드디스크 드라이브, 플래쉬메모리 등으로서, 상기 촬영한 영상과 촬영위치가 함께 저장되고, 메모리카드 등을 통해 상기 단말기에 착탈가능하게 설치될 수 있다. The storage unit may be a RAM, a hard disk drive, a flash memory, and the like, in which the captured image and the photographing position are stored together and detachably installed in the terminal through a memory card.
상기 저장부는 상기 촬상부에서 촬영한 영상을 비교하는데 필요한 영상정보가 기 저장되어 있으며, 상기 기 저장된 영상정보는 검색속도를 빠르게 하고 저장공간을 줄이기 위해 해당 위치의 영상에 대해 영상의 형태가 아니며 영상정보의 특정한 부분만으로 구성된 특정 정보 형태인 존 특정정보로 구성된다.The storage unit pre-stores the image information necessary to compare the images taken by the image pickup unit, the pre-stored image information is not in the form of an image for the image of the position in order to speed up the search speed and reduce the storage space Zone specific information, which is a specific type of information consisting only of a specific part of the information.
또한, 상기 저장부는 기 저장된 존 특정정보와 관련되어 검색시 제공될 존 정보가 저장된다.In addition, the storage unit stores zone information to be provided at the time of searching in association with previously stored zone specifying information.
상기 무선 통신부는 존 내부에서 무선랜(Wireless LAN)등을 통하여 상기 서 버와 실시간 통신이 가능하다.The wireless communication unit may perform real time communication with the server through a wireless LAN in a zone.
상기 위치 정보 선처리부는 위치 수신부로부터 수신된 하나 이상의 위치정보를 조합하여 현재의 위치를 계산한다. 또는, 단말기(100)가 어떠한 이유로 위치 송신 장치로부터 위치 정보를 수신받지 못하는 경우, 상기 단말기가 일정 시간 이전동안 움직인 이동 경로를 파악하여 현재의 위치를 예측할 수도 있다. 또한, 상기 위치 정보 선처리부는 계산하거나 예측한 현재의 위치 정보를 이용하여 상기 촬영한 영상을 현재의 위치를 한정정보로 설정하여 상기 촬영 특정정보를 구성하도록 한다.The location information preprocessor calculates a current location by combining one or more location information received from the location receiver. Alternatively, when the terminal 100 does not receive the location information from the location transmitting apparatus for some reason, the terminal 100 may determine the current location by identifying the moving path that the terminal has moved for a predetermined time. The location information preprocessor may configure the photographing specific information by setting the current location as the limited information using the current location information calculated or predicted.
상기 영상정보 선처리부는 촬상부(105)로부터 촬영한 영상과 위치 정보 선처리부(140)에서 계산된 현재 위치 정보를 전송받아, 촬영되는 영상과 위치에 따라 이동하는 물체는 제거하거나 간판, 표지판등의 특정 부위의 패턴을 인식하는등의 영상 선처리를 통해 촬영된 영상 데이터를 가공한 후 저장부(125)에 기 저장된 존 특정정보와 비교할 수 있는 형태인 촬영 특정정보로 변환한다.The image information preprocessor receives the image captured by the
상기 검색부는 상기 영상정보 선처리부에서 변환한 촬영 특정정보를 사용자가 입력한 키워드나, 촬영한 위치등에 특정되어 상기 저장부에 기 저장된 존 특정정보의 검색 영역을 설정한 후, 해당 영역에 대해 검색하여, 검색된 존 특정정보에 해당하는 존 정보를 제공한다.The search unit sets a search region of zone specifying information previously stored in the storage unit by specifying the photographing specific information converted by the image information preprocessing unit by a user input keyword or a photographed position, and then searching for the corresponding region. Then, the zone information corresponding to the retrieved zone specific information is provided.
상기 정보 제공부는 상기 검색부에서 제공한 존 정보를 현재 위치, 촬영한 영상에 따라 기 설정된 다양한 포맷으로 변형하여 제공할 수 있으며, 사용자에게 추천정보를 제공하거나 안내나 지도 표시와 같은 부가 기능을 제공할 수도 있다. 또한, 상기 정보 제공부는 상기 존 정보를 번역하여 외국어 포맷으로 제공하거나 상기 존 정보중 상품가격, 할인 금액과 같은 일부의 정보만을 추출하여 제공이 가능하다.The information providing unit may transform the zone information provided by the search unit into various preset formats according to the current location and the captured image, and provide recommendation information to the user or provide additional functions such as guidance or map display. You may. In addition, the information providing unit may translate and provide the zone information in a foreign language format or extract and provide only a part of information such as a product price and a discounted price among the zone information.
상기 표시부는 사용자와 시각적으로 인터페이스가 가능한 화면으로 구성되고, 상기 정보 제공부에서 제공한 존 정보를 사용자에게 디스플레이한다.The display unit is configured as a screen visually interfaced with the user, and displays the zone information provided by the information providing unit to the user.
또한, 상기 표시부는 상기 정보 제공부에서 제공한 존 정보를 문장의 형태로 촬영한 영상위에 중첩하여 표시할 수 있으며, 촬영한 영상이 제공되는 동안 음성, 음향, 영상, 진동등으로 표시할 수 있다.In addition, the display unit may display the zone information provided by the information providing unit superimposed on the image taken in the form of sentences, and may be displayed as voice, sound, image, vibration, etc. while the captured image is provided. .
상기 사용자 입력부는 터치스크린이나 키패드등의 사용자 인터페이스로 구성되며, 상기 촬상부에서 촬영한 영상을 보다 쉽게 검색할 수 있도록 사용자가 특정 범위에서 한정해서 검색할 수 있게 하거나, 제공한 존 정보중 특정 부분을 선택할 수 있게 한다. 또한, 검색 범위를 키워드나 디렉토리로 한정하여 검색할 수 있으며, 상기 정보 제공부에서 추천하는 정보로 검색할 수도 있다.The user input unit is configured with a user interface such as a touch screen or a keypad, and the user can search in a specific range in a specific range so that the image captured by the imaging unit can be easily searched, or a specific part of the provided zone information. Allows you to select In addition, the search range may be limited to keywords or directories, and may be searched by information recommended by the information provider.
상기 제어부는 촬상부/ 위치수신부/ 저장부/ 무선 통신부/ 위치 정보 선처리부/ 영상 정보 선처리부/ 검색부/ 정보 제공부/ 사용자 입력부/ 표시부를 제어하며, 각 부 사이의 데이터를 전송하기 위한 통신을 중계한다.The control unit controls the image pickup unit / location receiving unit / storage unit / wireless communication unit / location information preprocessor / image information preprocessor / search unit / information providing unit / user input unit / display unit, communication for transmitting data between each unit Relays
상기 단말기(100)를 사용하여 매장의 전면을 촬영하여 매장에서 판매하는 물품이나 할인정보등 매장의 정보를 얻을 수 있고, 존 내부의 복도나 로비등에서 복수개의 매장이 포함된 영상을 촬영하여 각 매장의 물품정보를 한 화면에서 얻을 수도 있다.By using the terminal 100, the front of the store may be photographed to obtain information on the store, such as goods or discount information sold in the store, and each store may be photographed by capturing an image including a plurality of stores in a corridor or a lobby inside the zone. You can also get the item information on one screen.
도 3은 본 발명의 일 실시예에 따른 영상 정보 선처리부(150)의 구성도를 나타낸 것으로, 촬영한 영상 중 이동하는 물체를 감지하여 제거하는 이동 물체 감지부(151)와, 간판, 표지판등의 특정 부위의 패턴을 인식하는 패턴 분석부(152)와, 촬영한 영상을 상기 저장부에 기 저장된 존 특정정보와 비교할 수 있는 형태로 변환하는 검색 정보 추출부(153)로 이루어진다. 3 is a block diagram of the image
상기 이동 물체 감지부는 촬영한 영상 중 이동하는 물체를 감지하여 제거하는 것으로, 영상 내에 사람이나 동물, 차, 자전거등 움직이는 물체가 감지되었다면 그 부분의 영상 정보를 제거하는 선처리를 수행한다. The moving object detecting unit detects and removes a moving object from the photographed image. If a moving object such as a person, an animal, a car, or a bicycle is detected in the image, the moving object detecting unit performs preprocessing to remove image information of the portion.
상기 패턴 분석부는 촬영한 영상 중 간판이나 표지판등과 같이 숫자, 문자등이 포함되어 뚜렷한 구분이 가능한 객체를 추출하여 그 부분의 영상 정보를 강조하는 선처리를 수행한다. 예를 들어, 촬영한 영상 중 일정 부분이 간판이라면, 상기 일정 부분이 간판임을 인식하여 간판에 씌여진 문자중 상호명을 추출하여 해당 부분의 영상정보를 강조한다던지, 혹은 촬영한 영상 중 일정 부분이 바코드라면, 상기 일정 부분이 바코드임을 인식하여 해당 부분의 영상정보가 바코드 정보임을 표시할 수 있다.The pattern analyzer extracts an object that can be clearly distinguished by including numbers, letters, and the like from the photographed image, and performs line processing to emphasize the image information of the portion. For example, if a certain portion of the photographed image is a signage, it recognizes that the predetermined portion is a signage and extracts a business name from the characters written on the signage to emphasize the image information of the corresponding portion, or a portion of the captured image If it is a bar code, the predetermined part is recognized as a bar code, and the image information of the corresponding part may be displayed as bar code information.
상기 검색 정보 추출부는 상기 이동 물체 감지부(151)와 패턴 분석부(152)를 통해 선처리된 영상 정보를 상기 저장부에 기 저장된 존 특정정보와 비교할 수 있는 형태인 촬영 특정 정보로 변환한다. 상기 촬영 특정 정보는 선처리하여 제거된 부분의 검색 가중치는 0이 되고 선처리하여 강조된 부분의 검색 가중치는 증가하여 변환되게 하는 등의 검색 가중치를 조정하여 변환할 수 있다.The search information extracting unit converts the image information preprocessed through the moving
상기 예에서는 상술한 바와 같이 선처리로써 이동 물체 감지, 패턴 분석, 가중치 조정등이 제시되었으나, 이 외에도 상기 촬영한 영상 정보를 표준화, 특정화 시키기 위한 부가적인 방법이 추가되거나 이들 중 일부는 결합 또는 생략될 수 있다.In the above example, as described above, moving object detection, pattern analysis, weight adjustment, and the like have been proposed, but additional methods for standardizing and specifying the captured image information may be added or some of them may be combined or omitted. Can be.
상기와 같이 영상을 선처리하여 상기 저장부에 기 저장된 존 특정정보와 비교할 수 있는 형태로 변환하여 비교함으로써 특징적인 정보들만 추출하여 검색할 수 있음으로 하여 저장부의 공간을 크게 줄일 수 있고 검색 속도를 빠르게 할 수 있다.By pre-processing the image as described above, the image is converted into a form that can be compared with the zone-specific information previously stored in the storage unit, so that only the characteristic information can be extracted and searched, thereby greatly reducing the storage space and speeding up the search speed. can do.
도 4는 본 발명의 일 실시예에 따른 검색부(160)의 구성도를 나타낸 것으로, 존에 대한 정보가 갱신되었는지 확인하는 갱신 정보 확인부(161)와, 촬영한 영상에 대해 검색 영역을 한정하여 검색을 실시하는 정보 검색부(162)로 이루어진다.4 is a block diagram of the
상기 갱신 정보 확인부는 검색을 실시하기 전에 현재의 위치를 기준으로 일정 범위내에서, 저장부의 존 정보보다 갱신된 존 특정정보 및 존 정보가 서버(200)에 존재하는지 확인하기 위해 상기 서버와 통신하며 상기 서버에 갱신된 존 특정정보 및 존 정보가 존재할 경우 갱신된 존 특정정보 및 존 정보를 수신받아 저장부에 저장한다.The update information checking unit communicates with the server to check whether there is updated zone specific information and zone information in the
상기 정보 검색부는 상기 영상 정보 선처리부에서 변환된 촬영 특정 정보의 검색 영역을 상기 촬영 특정 정보에 포함된 위치 정보 선처리, 이동 물체 감지, 패 턴 분석, 가중치 조정 중 적어도 하나 이상의 구성요소들의 조합으로 한정한 후, 저장부(125)에 기 저장된 존 특정 정보들 중 상기 한정한 검색 영역을 대상으로 검색을 실시하여 검색된 존 특정정보에 해당하는 존 정보를 추출한다. The information retrieval unit limits the search region of the photographing specific information converted by the image information preprocessor to a combination of at least one or more components of position information preprocessing, moving object detection, pattern analysis, and weight adjustment included in the photographing specific information. Afterwards, the zone information corresponding to the searched zone specification information is extracted by searching the limited search region among the zone specification information previously stored in the
상기 갱신 정보 확인부는 검색을 실시하기 전에 서버(200)로부터 최신의 존 정보를 확인하고 수신받음으로써 존 내부의 일정 영역 또는 물품의 실시간 갱신 정보를 습득 가능해진다.The update information confirmation unit checks and receives the latest zone information from the
도 5는 본 발명의 일 실시예에 따른 서버(200)의 구성도를 나타낸 것으로, 단말기(100)와 통신하는 무선 통신부(210)와, 매장 단말기(300)로부터 존 정보 중 해당 매장의 존 정보 업데이트 요청과 업데이트 정보를 수신받는 통신부(240)와, 존 특정 정보와 존 정보를 저장한 저장부(250)와, 상기 매장 단말기(300)로부터 존 정보 업데이트 요청을 받아 존 정보를 업데이트하고 업데이트한 존 정보 중 일부분을 특정정보 형태로 변환하는 존 특정정보 변환부(220)와, 상기 무선 통신부/ 통신부/ 저장부/ 존 특정정보 변환부를 제어하는 제어부(230)로 이루어진다.5 is a block diagram of a
상기 무선 통신부는 단말기(100)와 통신하며, 상기 단말기로부터 존 특정정보와 존 정보를 요청받고 상기 단말기로 최신의 존 특정정보와 존 정보를 전송한다.The wireless communication unit communicates with the terminal 100 and receives zone specific information and zone information from the terminal and transmits the latest zone specific information and zone information to the terminal.
상기 통신부는 매장 단말기(300)로부터 해당 존 정보의 업데이트 요청 및 업데이트 정보를 수신받기 위해 상기 매장 단말기(300)와 통신한다.The communication unit communicates with the
상기 존 특정정보 변환부는 매장 단말기(300)로부터 존 정보 업데이트 요청 을 받아 존 정보를 업데이트 하고 업데이트된 존 정보 중 검색에 필요한 부분은 존 특정정보 형태로 변환하여 저장부(250)에 저장한다. The zone specific information converting unit receives the zone information update request from the
상기 서버(200)는 상기 매장 단말기(300)로부터 존 정보를 받아 업데이트함으로써 존 정보 전체를 항상 최신 정보로 유지할 수 있고 단말기(100)와 실시간 통신을 통해 갱신된 정보를 상기 단말기로 전송함으로써 상기 단말기가 상기 존 내부에서 존 정보를 검색시 항상 갱신된 존 정보를 이용할 수 있다.The
도 6는 본 발명의 일 실시예에 따른 촬상장치를 이용한 존 정보 제공 시스템의 흐름도를 나타낸 것이다. 도 6을 참조하면, 매장 단말기는 매장 전면의 디스플레이를 바꾸었거나, 물품의 재고가 변경되었을 경우(S601) 그 변경 정보를 갱신하기 위해 서버로 정보 갱신을 요청하고 업데이트된 정보를 서버에 전송한다(S602).6 is a flowchart illustrating a zone information providing system using an image capturing apparatus according to an embodiment of the present invention. Referring to FIG. 6, when the display terminal of the store front is changed or the inventory of the item is changed (S601), the store terminal requests information update to the server to update the changed information and transmits the updated information to the server. (S602).
상기 정보 갱신 요청 및 업데이트된 정보 전송(S602)은 매장의 관리자에 의해 수작업으로 입력되어 상기 서버와 연결된 매장 단말기에 의해 전송되거나, 디스플레이 변경의 경우 매장 전면에 설치되고 상기 매장 단말기와 연결된 카메라를 이용하거나 물품 재고 변경의 경우 상기 매장 단말기내에 설치된 판매관리 프로그램을 이용해서 자동으로 전송될 수도 있다. The information update request and updated information transmission (S602) is manually input by a manager of a store and transmitted by a store terminal connected to the server, or in the case of a display change, a camera installed at the front of the store and connected to the store terminal. In addition, in the case of a change in the inventory of goods may be automatically transmitted using the sales management program installed in the store terminal.
서버는 매장의 존 정보 갱신 요청이 수신되면 서버의 저장부에 기 저장된 존 정보 중 요청된 정보에 해당하는 부분을 상기 업데이트된 정보로 갱신하며 존 특정 정보 형태로 바꾸어야할 부분은 서버의 존 특정정보 변환부에서 변환하여 저장한다.(S603)When the server receives a request for updating the zone information of the store, the server updates the information corresponding to the requested information among the zone information previously stored in the storage unit of the server with the updated information, and the portion to be changed to the zone specific information form is the zone specific information of the server. The conversion unit converts and stores the data (S603).
위치 송신 장치는 임의의 위치에서 자신의 위치 정보를 송신한다(S604). The position transmitting apparatus transmits its own position information at an arbitrary position (S604).
단말기는 위치 송신장치로부터 전송되는 위치 정보를 수신하며 단일의 위치 송신장치로부터 전송되는 단일 위치정보뿐 아니라, 수신 가능한 복수개의 위치 송신장치로부터 전송되는 위치 정보를 수집하여 현재의 위치를 파악한다(S605).The terminal receives the location information transmitted from the location transmitter and collects the location information transmitted from the plurality of receivable location transmitters as well as the single location information transmitted from the single location transmitter (S605). ).
단말기는 현재의 위치를 파악한 후, 만일 어떤 특정 존에 최초로 진입하여 해당 존에 대한 존 정보가 없다면 존 전체에 대한 존 특정정보 및 존 정보를 요청(S606)하고 서버로부터 수신받는다(S607, S608). 혹은, 상기 단말기 내에 상기 특정 존에 대한 정보가 기 저장되어 있다면, 상기 파악된 현재 위치로부터 일정 범위내의 영역에 대한 업데이트된 존 특정정보 및 존 정보를 요청(S606)하고 서버로부터 수신받는다(S607, S608). After determining the current location, if the terminal enters a specific zone for the first time and there is no zone information for the corresponding zone, the terminal requests zone specific information and zone information for the entire zone (S606) and receives it from the server (S607, S608). . Alternatively, if information about the specific zone is already stored in the terminal, the zone request information (S606) and the zone information updated for a region within a predetermined range from the current position identified and received from the server (S607, S608).
사용자가 상기 단말기에 부착된 촬상장치로 주변의 영상을 촬영하면(S609), 상기 단말기는 상기 촬영한 영상을 상기 현재의 위치를 한정정보로 설정하여 촬영 특정정보로 구성하도록 한다(S610).When the user photographs the surrounding image with the image capturing apparatus attached to the terminal (S609), the terminal sets the current position as the limited information to configure the photographing specific information (S610).
상기 단말기는 상기 촬영한 영상과 상기 현재 위치 정보를 이용하여, 촬영한 영상과 위치에 따라 이동하는 물체는 제거하거나 간판, 표지판등의 특정 부위의 패턴을 인식하는등의 영상 정보 선처리를 통해 촬영한 영상 데이터를 가공한 후, 상기 단말기에 기 저장된 존 특정정보와 비교할 수 있는 형태인 촬영 특정정보로 변환한다(S611).The terminal photographs through image information preprocessing such as removing a moving object or recognizing a pattern of a specific part such as a signboard or a sign by using the photographed image and the current location information. After the image data is processed, the image data is converted into photographing specific information which can be compared with the zone specifying information previously stored in the terminal (S611).
상기 단말기는 검색을 실시하기 전에 현재의 위치를 기준으로 일정 범위내에서, 기 저장된 존 정보보다 갱신된 존 정보가 서버에 존재하는지 확인하기 위해 서 버와 통신(S612)하며 서버에 갱신된 존 정보가 존재할 경우 갱신된 존 정보 및 존 특정정보를 수신받아 저장한다(S613, S614).The terminal communicates with the server to confirm whether there is updated zone information on the server within a predetermined range based on the current location before performing the search (S612), and updates the zone information on the server. If there is an updated zone information and zone specific information is received and stored (S613, S614).
상기 단말기는 상기 촬영 특정정보를 사용자가 입력한 키워드나, 상기 현재의 위치 정보등에 특정되어 기 저장된 존 특정정보의 검색 영역을 설정한 후, 상기 검색 영역에 대해 검색하여, 검색된 존 특정정보에 해당하는 존 정보를 추출한다(S615).The terminal sets a search region of previously stored zone specification information specified by a keyword or user's input of the photographing specific information or the current location information, and then searches for the search region to correspond to the searched zone specification information. Zone information is extracted (S615).
상기 단말기는 추출된 존 정보를 현재 위치, 촬영한 영상에 따라 기 설정된 다양한 포맷으로 변형하여 제공할 수 있으며, 사용자에게 추천정보를 제공하거나 안내나 지도 표시와 같은 부가 기능을 제공할 수도 있다. 또한, 상기 존 정보를 번역하여 외국어 포맷으로 제공하거나, 사용자가 원할경우 상품가격, 할인 금액과 같은 일부의 정보로 포맷이 변경되어 제공이 가능하다(S616).The terminal may transform the extracted zone information into various preset formats according to the current location and the captured image, and may provide recommendation information to the user or provide additional functions such as guidance or map display. In addition, the zone information may be translated and provided in a foreign language format, or if the user desires, the format may be changed to some information such as a product price and a discounted amount (S616).
상기 단말기는 제공한 존 정보를 사용자와 시각적으로 인터페이스가 가능한 화면에 디스플레이한다(S617).The terminal displays the provided zone information on a screen visually interfaced with the user (S617).
또한, 상기 단말기는 제공한 존 정보를 문장의 형태로 촬영한 영상위에 중첩하여 표시할 수 있으며, 촬영한 영상이 제공되는 동안 음성이나 음향으로 표시할 수 있다. In addition, the terminal may display the provided zone information superimposed on the captured image in the form of a sentence, and may be displayed by voice or sound while the captured image is provided.
도 7은 본 발명의 일 실시예에 따른 촬상장치를 이용한 존 정보 제공 시스템 중 단말기의 동작을 예시적으로 보여주는 순서도를 나타낸 것으로, 위치 송신장치로부터 전송되는 위치 정보를 수신하여 현재의 위치를 확인하는 위치 확인 단 계(S701)와, 상기 현재 위치에서 존 정보가 있는지 확인하는 정보 확인단계(S702)와, 상기 정보 확인단계에서 존 정보가 없다면 서버로부터 존 정보 및 존 특정정보를 수신받는 정보 수신단계(S703)와, 주변의 영상을 촬영하는 촬상 단계(S704)와, 상기 촬영한 영상을 상기 현재의 위치를 한정정보로 설정하여 촬영 특정정보로 구성하도록 하는 위치정보 선처리단계(S705)와, 상기 촬영한 영상과 상기 현재 위치 정보를 이용하여 촬영된 영상 데이터를 가공한 후, 상기 단말기에 기 저장된 존 특정정보와 비교할 수 있는 형태인 촬영 특정정보로 변환하는 영상정보 선처리단계(S706)와, 검색을 실시하기 전에 현재의 위치를 기준으로 일정 범위내에서 기 저장된 존 정보보다 갱신된 존 정보가 서버에 존재하는지 확인하기 위해 서버와 통신하는 갱신정보 확인단계(S707)와, 서버에 갱신된 존 정보가 존재할 경우 갱신된 존 정보 및 존 특정정보를 수신하는 갱신정보 수신단계(S708)와, 상기 영상 정보 선처리단계에서 변환된 촬영 특정정보를 이용하여 기 저장된 존 특정정보의 검색 영역을 설정한 후, 상기 검색 영역에 대해 검색하여, 검색된 존 특정정보에 해당하는 존 정보를 추출하는 정보 검색단계(S709)와, 추출된 존 정보를 현재 위치, 촬영한 영상에 따라 기 설정된 다양한 포맷으로 변형하여 제공하는 정보 제공단계(S710)와, 제공한 존 정보를 사용자와 시각적으로 인터페이스가 가능한 화면에 디스플레이하는 표시 단계(S711)로 이루어진다.FIG. 7 is a flowchart illustrating an example of an operation of a terminal in a zone information providing system using an imaging apparatus according to an embodiment of the present invention, and receiving a position information transmitted from a position transmitter to confirm a current position. A location checking step (S701), an information checking step of checking whether there is zone information at the current location (S702), and if there is no zone information in the information checking step, an information receiving step of receiving zone information and zone specific information from a server; (S703), an image capturing step (S704) of capturing a surrounding image, a positional information preprocessing step (S705) of setting the current image to limited information by setting the current position as limited information, and After processing the captured image data by using the captured image and the current location information, it is a form that can be compared with the zone specific information previously stored in the terminal Image information preprocessing step of converting to zero specific information (S706) and communicating with the server to check whether there is updated zone information in the server than zone information previously stored within a predetermined range based on the current position before performing the search. An update information checking step (S707), an updated information receiving step of receiving updated zone information and zone specifying information when updated zone information exists in the server (S708), and photographing specifying information converted in the image information preprocessing step; After setting the search region of the previously stored zone specific information using the search function, an information search step (S709) of searching for the search region and extracting zone information corresponding to the searched zone specific information, and the extracted zone information The information providing step of transforming and providing in various preset formats according to the position and the captured image (S710), and the interface information visually provided to the user with the provided zone information It comprises a display step (S711) of displaying on a single screen.
도시하지는 않았지만, 상기 영상 정보 선처리단계(S706)는 이동 물체 감지 단계, 패턴 분석단계, 검색 정보 추출단계등을 포함할 수 있다. 이동 물체 감지단계는 촬영한 영상 중 이동하는 물체를 감지하여 제거하는 것으로, 영상 내에 사람 이나 동물, 차, 자전거등 움직이는 물체가 감지되었다면 그 부분의 영상 정보를 제거하는 선처리를 수행한다. Although not shown, the image information preprocessing step S706 may include a moving object detection step, a pattern analysis step, a search information extraction step, and the like. The moving object detection step detects and removes a moving object from the photographed image. If a moving object such as a person, an animal, a car, or a bicycle is detected in the image, the moving object detection step removes the image information of the portion.
상기 패턴 분석단계는 촬영한 영상 중 간판이나 표지판등과 같이 숫자, 문자등이 포함되어 뚜렷한 구분이 가능한 객체를 추출하여 그 부분의 영상 정보를 강조하는 선처리를 수행한다.The pattern analysis step extracts an object that can be clearly distinguished by including numbers, letters, and the like from the photographed image, and performs line processing to emphasize the image information of the portion.
예를 들어, 촬영한 영상 중 일정 부분이 간판이라면, 상기 일정 부분이 간판임을 인식하여 간판에 씌여진 문자중 상호명을 추출하여 해당 부분의 영상정보를 강조한다던지, 혹은 촬영한 영상 중 일정 부분이 바코드라면, 상기 일정 부분이 바코드임을 인식하여 해당 부분의 영상정보가 바코드 정보임을 표시할 수 있다.For example, if a certain portion of the photographed image is a signage, it recognizes that the predetermined portion is a signage and extracts a business name from the characters written on the signage to emphasize the image information of the corresponding portion, or a portion of the captured image If it is a bar code, the predetermined part is recognized as a bar code, and the image information of the corresponding part may be displayed as bar code information.
상기 검색 정보 추출단계는 상기 이동 물체 감지단계와 패턴 분석단계를 통해 선처리된 영상 정보를 상기 저장부에 기 저장된 존 특정정보와 비교할 수 있는 형태인 촬영 특정 정보로 변환한다. 상기 촬영 특정 정보는 선처리하여 제거된 부분의 검색 가중치는 0이 되고 선처리하여 강조된 부분의 검색 가중치는 증가하여 변환되게 하는 등의 검색 가중치를 조정하여 변환할 수 있다.The search information extracting step converts the image information preprocessed through the moving object detecting step and the pattern analyzing step into photographing specific information which can be compared with the zone specifying information previously stored in the storage unit. The photographing specific information may be converted by adjusting the search weight such that the search weight of the portion removed by preprocessing becomes 0 and the search weight of the preemptively highlighted portion increases and is converted.
상기 단말기는 상기 위치 정보 선처리 단계와 상기 영상 정보 선처리 단계를 이용하여 상기 촬영한 영상을 선처리하여 검색함으로써 검색 시간을 단축하고 저장 공간을 줄일 수 있다.The terminal may reduce the search time and reduce the storage space by preprocessing the photographed image using the location information preprocessing step and the image information preprocessing step.
도 8은 본 발명의 일 실시예에 따른 촬상장치를 이용한 존 정보 제공 시스템 중 서버의 동작을 예시적으로 보여주는 순서도를 나타낸 것으로, 매장 단말기로부 터 존 정보 갱신 요청이나 단말기로부터 존 정보를 요청받는 요청정보 수신 단계(S801)와, 상기 요청정보가 상기 매장 단말기로부터 요청 받은것인지 단말기로부터 요청 받은것인지를 선별하는 요청정보 종류 선별단계(S802)와, 상기 요청정보 종류 선별단계에서 상기 요청정보가 상기 매장 단말기로부터 요청 받은것이면 기 저장된 정보 중 상기 매장의 영역에 해당하는 존 정보 및 존 특정정보를 갱신하는 서버정보 갱신단계(S803)와, 상기 요청정보 종류 선별단계에서 상기 요청 정보가 상기 단말기로부터 요청 받은것이면 요청 받은 존 정보를 검색하는 서버정보 검색 단계(S804)와, 상기 서버정보 검색단계에서 검색된 존 정보 및 검색된 존 정보 및 존 특정정보를 상기 단말기로 전송하는 서버정보 전송단계(S805)로 이루어진다.FIG. 8 is a flowchart illustrating an operation of a server in a zone information providing system using an imaging apparatus according to an embodiment of the present invention, and receives a zone information update request from a store terminal or requests for zone information from a terminal. Request information receiving step (S801), request information type selection step (S802) for selecting whether the request information is received from the terminal or the request from the terminal, and the request information is selected in the request information type selection step; The server information update step (S803) of updating the zone information and zone specific information corresponding to the area of the store among the previously stored information if the request is received from the store terminal, and the request information is requested from the terminal in the request information type selection step. Server information retrieval step (S804) for retrieving the requested zone information if received; In the search step, the server information transmission step (S805) of transmitting the searched zone information, the searched zone information, and the zone specifying information to the terminal is performed.
상기 매장 단말기는 전체 존 정보를 구성하는 정보 중 일부분을 담당하는 객체로서 예를들면, 상기 존이 어떤 쇼핑몰이라고 할때, 각 매장이나 점포중 해당 매장이나 점포의 존 정보를 관리하는 존 정보 관리 컴퓨터등이 그 예이다. 혹은, 상기 존을 박물관이나 미술관이라고 할때, 상기 박물관이나 미술관을 일정 구역으로 구분하여 어느 일정 구역의 존 정보를 관리하는 단말기가 될 수도 있다. 상기 매장 단말기는 상기 존 정보의 갱신을 위해 상기 서버와 연결되어 있으며, 해당 매장의 디스플레이 정보나 물품의 바코드 정보 혹은 할인정보등을 존 정보로 하여 상기 서버에 전송할 수 있다.The store terminal is an object in charge of a part of information constituting the entire zone information. For example, when the zone is a certain shopping mall, a zone information management computer managing zone information of the corresponding store or store among the stores or stores. For example. Alternatively, when the zone is referred to as a museum or an art gallery, it may be a terminal for managing the zone information of a certain area by dividing the museum or art gallery into a certain area. The store terminal is connected to the server for updating the zone information, and may transmit the display information, bar code information, or discount information of the store as zone information to the server.
도 9는 본 발명의 일 실시예에 따른 촬상장치를 이용한 존 정보 제공 시스템 중 단말기의 화면을 예시적으로 보여주는 예시도를 나타낸 것으로, 사용자가 쇼핑 몰의 매장에서 매장에 대한 정보를 얻기위해 매장 전면을 촬영한 화면이다. 도 9를 참조하면, 화면에 촬영된 매장 전경위에 매장에 대한 요약 정보(900)가 오버레이되어 표시되며 할인 정보 및 취급 품목에 대한 정보도 나타난다. 만일 사용자가 단말기의 사용자 입력부를 통해 원하는 정보가 상품가격이라고 입력하였다면, 상품가격에 대한 정보가 표시된다. 혹은, 사용자가 외국어로 번역된 정보를 보기 원한다면, 사용자는 사용자 입력부를 통해 외국어를 선택하고, 단말기의 정보제공부에서 외국어로 변역된 정보가 제공되어 화면에 표시된다.9 is an exemplary view showing a screen of a terminal in the zone information providing system using the image pickup apparatus according to an embodiment of the present invention, the user is in front of the store to obtain information about the store in the store of the shopping mall This is a screen shot. Referring to FIG. 9, the
도 10은 본 발명의 일 실시예에 따른 촬상장치를 이용한 존 정보 제공 시스템 중 단말기의 화면을 예시적으로 보여주는 예시도를 나타낸 것으로, 사용자가 쇼핑몰의 한 층에서 그 층에 대한 정보를 얻기위해 촬영한 화면이다. 도 10을 참조하면, 단말기는 각 매장을 인식하여 사용자가 촬영한 영상 위에 각 매장에 대한 정보(901, 902, 903)를 오버레이하여 표시한다. 예에서 도시하지는 않았지만 상기 표시되는 정보는 오버레이되는 문장뿐만 아니라 음성, 영상, 소리, 진동등 다양하게 표시될 수 있다.FIG. 10 is an exemplary view showing a screen of a terminal in a zone information providing system using an imaging apparatus according to an embodiment of the present invention, in which a user photographs a floor to obtain information about the floor. One screen. Referring to FIG. 10, the terminal recognizes each store and displays the
도 11은 본 발명의 일 실시예에 따른 촬상장치를 이용한 존 정보 제공 시스템 중 단말기의 화면을 예시적으로 보여주는 예시도를 나타낸 것으로, 사용자가 쇼핑몰에서 자신의 현재 위치 정보를 얻기위해 촬영한 화면이다. 도 11을 참조하면, 사용자는 중첩된 작은 화면으로 전체 쇼핑몰에서 자신의 위치(912)를 파악할 수 있 고, 화면에서 사용자가 원하는 구역이 표시되어, 그 구역까지의 경로(910)나 사용자가 원하는 쇼핑 정보(911)등을 파악할 수 있다.11 is an exemplary view showing a screen of a terminal in a zone information providing system using an imaging apparatus according to an embodiment of the present invention, which is a screen shot by a user to obtain his current location information in a shopping mall. . Referring to FIG. 11, a user may grasp his / her
이상에서는 본 발명에 따른 바람직한 실시예들에 대하여 도시하고 또한 설명하였다. 그러나 본 발명은 상술한 실시예에 한정되지 아니하며, 특허 청구의 범위에서 첨부하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능할 것이다. In the above described and illustrated with respect to preferred embodiments according to the present invention. However, the present invention is not limited to the above-described embodiments, and various changes and modifications may be made by those skilled in the art without departing from the scope of the present invention. .
도 1은 본 발명의 실시예에 따른 촬상장치를 이용한 존 정보 제공 시스템의구성도.1 is a configuration diagram of a zone information providing system using an imaging device according to an embodiment of the present invention.
도 2는 본 발명의 실시예에 따른 단말기의 구성도.2 is a block diagram of a terminal according to an embodiment of the present invention.
도 3는 본 발명의 실시예에 따른 영상 정보 선처리부의 구성도.3 is a block diagram of an image information preprocessor according to an embodiment of the present invention.
도 4는 본 발명의 실시예에 따른 검색부의 구성도.4 is a block diagram of a search unit according to an embodiment of the present invention.
도 5는 본 발명의 실시예에 따른 서버의 구성도.5 is a block diagram of a server according to an embodiment of the present invention.
도 6는 본 발명의 실시예에 따른 촬상장치를 이용한 존 정보 제공 방법의 흐름도.6 is a flowchart of a method for providing zone information using an imaging device according to an embodiment of the present invention.
도 7는 본 발명의 실시예에 따른 단말기의 순서도.7 is a flowchart of a terminal according to an embodiment of the present invention.
도 8은 본 발명의 실시예에 따른 서버의 순서도.8 is a flowchart of a server according to an embodiment of the present invention.
도 9은 본 발명의 실시예에 따른 단말기 화면의 제 1 예시도.9 is a first exemplary diagram of a terminal screen according to an embodiment of the present invention.
도 10는 본 발명의 실시예에 따른 단말기 화면의 제 2 예시도.10 is a second exemplary view of a terminal screen according to an embodiment of the present invention.
도 11는 본 발명의 실시예에 따른 단말기 화면의 제 3 예시도.11 is a third exemplary view of a terminal screen according to an embodiment of the present invention.
** 도면의 주요 부분에 대한 부호의 설명 **** Description of symbols for the main parts of the drawing **
10: 위치 송신 장치 100: 단말기 10: location transmitter 100: terminal
150: 영상정보 선처리부 160: 검색부150: image information preprocessing unit 160: search unit
200: 서버 300: 매장 단말기200: server 300: store terminal
Claims (22)
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020090059128A KR100944734B1 (en) | 2009-06-30 | 2009-06-30 | Zone information providing system and method using image pick up apparatus |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020090059128A KR100944734B1 (en) | 2009-06-30 | 2009-06-30 | Zone information providing system and method using image pick up apparatus |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR100944734B1 true KR100944734B1 (en) | 2010-03-03 |
Family
ID=42182775
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020090059128A KR100944734B1 (en) | 2009-06-30 | 2009-06-30 | Zone information providing system and method using image pick up apparatus |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR100944734B1 (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20110132771A (en) * | 2010-06-03 | 2011-12-09 | 엘지전자 주식회사 | Mobile terminal and method for controlling the same |
| KR101135525B1 (en) | 2010-04-27 | 2012-04-09 | 주식회사 다음커뮤니케이션 | Method for updating panoramic image and location search service using the same |
| KR102081517B1 (en) * | 2018-11-02 | 2020-02-25 | 주식회사 블루아이 | Intelligent integration control system and intelligent integration control method for linkage tracing of goal target |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20080098908A (en) * | 2007-05-07 | 2008-11-12 | 케이티파워텔 주식회사 | Method and system of understanding indoor position using zigbee |
| KR20090022981A (en) * | 2007-08-29 | 2009-03-04 | 전현주 | Index construction and retrieval method of building indoor drawing data and computer readable recording medium recording the method |
-
2009
- 2009-06-30 KR KR1020090059128A patent/KR100944734B1/en active IP Right Grant
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20080098908A (en) * | 2007-05-07 | 2008-11-12 | 케이티파워텔 주식회사 | Method and system of understanding indoor position using zigbee |
| KR20090022981A (en) * | 2007-08-29 | 2009-03-04 | 전현주 | Index construction and retrieval method of building indoor drawing data and computer readable recording medium recording the method |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101135525B1 (en) | 2010-04-27 | 2012-04-09 | 주식회사 다음커뮤니케이션 | Method for updating panoramic image and location search service using the same |
| KR20110132771A (en) * | 2010-06-03 | 2011-12-09 | 엘지전자 주식회사 | Mobile terminal and method for controlling the same |
| KR101685978B1 (en) * | 2010-06-03 | 2016-12-13 | 엘지전자 주식회사 | Mobile terminal and method for controlling the same |
| KR102081517B1 (en) * | 2018-11-02 | 2020-02-25 | 주식회사 블루아이 | Intelligent integration control system and intelligent integration control method for linkage tracing of goal target |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8416309B2 (en) | Camera-fitted information retrieval device | |
| KR102092392B1 (en) | Method and system for automatically collecting and updating information about point of interest in real space | |
| US7325061B2 (en) | Server system and image management method thereof | |
| KR100983912B1 (en) | Apparatus and Method for inputing and searching information for augumented reality | |
| EP2003611A9 (en) | Information presentation system, information presentation terminal, and server | |
| JP5858754B2 (en) | Imaging apparatus, display method, and program | |
| JP2005100274A (en) | Information providing system, information retrieval device and information providing method | |
| CN111199180A (en) | Information processing system, program, and information processing method | |
| JP2004259206A (en) | Information management apparatus, information output system, portable terminal, and information output method | |
| KR20120126529A (en) | ANALYSIS METHOD AND SYSTEM OF CORRELATION BETWEEN USERS USING Exchangeable Image File Format | |
| KR100944734B1 (en) | Zone information providing system and method using image pick up apparatus | |
| US9418284B1 (en) | Method, system and computer program for locating mobile devices based on imaging | |
| JP3776741B2 (en) | Map information acquisition method, map information acquisition system, and program | |
| JP2005100276A (en) | Information processing system, information processor, information processing method and program | |
| JP2006125871A (en) | Navigation apparatus | |
| JP2017016287A (en) | Transmission device, server device, control method, program, and storage medium | |
| JP6056375B2 (en) | Information processing system, information processing method, and computer program | |
| JP2013203481A (en) | System and method for management of article | |
| KR100956114B1 (en) | Image information apparatus and method using image pick up apparatus | |
| KR102010252B1 (en) | Apparatus and method for providing augmented reality service | |
| JP2014063300A (en) | Character recognition device, character recognition processing method, and program | |
| JP2006202103A (en) | Album preparing system | |
| CN113959454A (en) | Information processing apparatus, information processing method, and information processing system | |
| KR101539934B1 (en) | Auto guiding system and auto guiding method for providing information of images to be printed using kiosk | |
| KR20180116200A (en) | Service providing system and method for guiding a point, apparatus and computer readable medium having computer program recorded therefor |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| A302 | Request for accelerated examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20130208 Year of fee payment: 4 |
|
| FPAY | Annual fee payment |
Payment date: 20140207 Year of fee payment: 5 |
|
| FPAY | Annual fee payment |
Payment date: 20150212 Year of fee payment: 6 |
|
| FPAY | Annual fee payment |
Payment date: 20180219 Year of fee payment: 9 |
|
| FPAY | Annual fee payment |
Payment date: 20190218 Year of fee payment: 10 |
|
| FPAY | Annual fee payment |
Payment date: 20200217 Year of fee payment: 11 |