KR101561628B1 - 스마트 글래스의 영상 정보를 제공하는 검색 장치 및 검색 방법 - Google Patents

스마트 글래스의 영상 정보를 제공하는 검색 장치 및 검색 방법 Download PDF

Info

Publication number
KR101561628B1
KR101561628B1 KR1020130166469A KR20130166469A KR101561628B1 KR 101561628 B1 KR101561628 B1 KR 101561628B1 KR 1020130166469 A KR1020130166469 A KR 1020130166469A KR 20130166469 A KR20130166469 A KR 20130166469A KR 101561628 B1 KR101561628 B1 KR 101561628B1
Authority
KR
South Korea
Prior art keywords
information
search
image
wearable camera
search request
Prior art date
Application number
KR1020130166469A
Other languages
English (en)
Other versions
KR20150077708A (ko
Inventor
정영환
박범준
김현숙
송지완
Original Assignee
주식회사 케이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이티 filed Critical 주식회사 케이티
Priority to KR1020130166469A priority Critical patent/KR101561628B1/ko
Priority to US14/585,416 priority patent/US20150186426A1/en
Publication of KR20150077708A publication Critical patent/KR20150077708A/ko
Application granted granted Critical
Publication of KR101561628B1 publication Critical patent/KR101561628B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5854—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using shape and object relationship
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 스마트 글래스로부터 수신된 영상 정보를 검색 결과로 제공하는 검색 장치 및 검색 방법을 개시한다. 본 발명에 따른 검색 장치는, 사용자의 검색 요청을 수신하고, 수신된 검색 요청 데이터를 분석하여 검색 요청 정보로서 결정하는 검색 요청 분석부; 검색 요청 정보의 위치를 이용하여 검색 대상의 스마트 글래스를 선별하는 스마트 글래스 선별부; 스마트 글래스로 영상 정보의 제공을 요청하고, 웨어러블 카메라로부터 촬영된 영상 정보를 수신하는 영상 정보 수신부; 및 영상 정보 중에서 검색 요청 정보에 매칭되는 대표 영상을 검색 결과로서 제공하는 영상 정보 제공부를 포함한다. 본 발명은 사용자의 검색 요청을 분석하여 결정된 위치 또는 객체에 대응하는 스마트 글래스에 의해 촬영된 영상 정보를 사용자에게 제공한다.

Description

스마트 글래스의 영상 정보를 제공하는 검색 장치 및 검색 방법{Search apparatus for providing realtime display information of smart glass and method thereof}
본 발명은 검색 기술에 관한 것으로, 사용자의 요청을 분석하여 스마트 글래스에 의해 촬영된 영상 정보를 검색 결과로서 제공하는 검색 장치 및 검색 방법에 관한 것이다.
영상 정보에 기반하는 응용 기술로서 원격지 영상 서비스가 있다. 위치 A, B가 서로 다른 위치라 가정하고, A 위치의 사용자가 B 위치의 영상을 보려면, B 위치에 촬영 장비를 설치해야만 한다. 또한, B 위치에서 촬영된 영상 정보가 위치 A의 단말로 수신되기 위한 통신 장비도 필요하다. 원격지 영상 서비스는 A 위치의 촬영지의 영상을 B 위치의 사용자에게 제공해주는 서비스이다.
상기 원격지 영상 서비스는 원격지의 영상을 제공하는데 기술과 시간의 비용이 많이 든다. 또한, 원격지 영상 서비스는 촬영 장비 및 통신 장비에 제약을 받기에 특정 장소에 한하여 서비스되고 있는 실정이다. 국가 또는 공공 기관은 교통, 기상, 관제 등의 공익적 목적을 위해 원격지의 영상을 실시간으로 촬영하여 영상 정보를 이용한다. 그리고 민간 기업이나 개인의 경우는 유명 관광지의 영상을 촬영하여 사용자들에게 실시간으로 중계한다. 예를 들어, 구글사는 구글맵스, 스트리트 뷰 등의 서비스를 이용하여 특정 장소의 실시간 영상을 서비스한다. 또한, 유투브와 같은 사이트에서는 특정 장소의 영상을 보관하고, 조회 요청하는 사용자에게 제공한다.
그러나 상기와 같은 종래의 원격지 영상 서비스는 촬영 장비가 설치된 일부 고정된 위치에만 국한되어 다양한 위치의 영상을 요구하는 사용자를 만족시키지 못한다. 사용자는 필요에 따라 지구상의 다양한 위치에서 촬영된 영상 정보를 시청하기를 원한다. 또한, 사용자는 원격지 영상 서비스를 통해 기 저장된 영상을 제공받기보다는 실시간 촬영된 영상을 제공받기를 원한다.
또한, 각각의 사용자는 특정 위치의 영상을 조회하는 과정에서 촬영 거리, 각도, 위치 변경 등의 디테일하게 촬영된 영상을 원할 수 있다. 하지만, 사용자의 요구에 맞게 촬영하는 것은 불가능하여 사용자의 취향에 따른 개인화된 서비스를 제공하기 어렵다. 그리고 실시간 영상의 조회를 요청하는 사용자는 저장된 영상의 제공을 외면한다.
한국등록특허 10-0762414(2007.09.20 등록)
본 발명은 상기와 같은 종래 기술의 인식 하에 창출된 것으로서, 스마트 글래스를 이용하여 다양한 위치에서 촬영된 영상 정보를 사용자의 검색 요청에 대한 결과로 제공하는 검색 장치 및 그 검색 방법을 제공하는데 그 목적이 있다.
본 발명의 다른 목적은 사용자의 요청으로부터 위치 정보 및 객체 정보를 분석하여 분석된 정보에 부합하는 스마트 글래스의 영상을 선별하여 검색 결과로 제공하는데 있다.
상기 과제를 해결하기 위한 본 발명에 따른 검색 장치는, 웨어러블 카메라에 의해 촬영된 영상을 기반으로 검색 서비스를 제공하는 검색 장치에 있어서, 사용자의 검색 요청을 수신하고, 수신된 검색 요청 데이터에 대해 검색 대상의 위치 및 객체를 분석하여 검색 요청 정보로서 결정하는 검색 요청 분석부; 결정된 검색 요청 정보의 위치를 이용하여 검색 대상의 웨어러블 카메라를 선별하는 웨어러블 카메라 선별부; 선별된 웨어러블 카메라로 영상 정보의 제공을 요청하고, 웨어러블 카메라로부터 촬영된 영상 정보를 수신하는 영상 정보 수신부; 및 수신된 영상 정보 중에서 상기 검색 요청 정보에 매칭되는 대표 영상을 검색 결과로서 제공하는 영상 정보 제공부를 포함한다.
본 발명에 있어서, 상기 검색 장치는, 서비스 가입된 사용자들의 웨어러블 카메라로부터 위치 및 속도를 포함하는 기기 정보를 전송받아 저장하는 정보 수집부를 더 포함하고, 저장된 기기 정보가 상기 웨어러블 카메라를 선별하는데 이용된다.
본 발명의 일 측면에 따르면, 상기 검색 요청 분석부는, 음성, 이미지, 텍스트 중에서 적어도 하나 이상을 포함하는 상기 검색 요청 데이터를 수신하여 분석한다.
바람직하게, 상기 검색 요청 분석부는, 사용자 단말로부터 적어도 하나 이상의 단어가 포함된 상기 검색 요청 데이터를 수신하고, 상기 단어는 사용자 단말이 사용자가 검색 요청한 음성 데이터로부터 최소한의 의미를 갖는 단위로서 추출한다.
여기서, 상기 검색 요청 분석부는, 상기 검색 요청 데이터로서 사용자의 음성 데이터를 수신하고, 수신된 음성 데이터에 대해 단어 의미 분석을 통해 위치 및 객체의 의미를 갖는 적어도 하나 이상의 단어 정보를 상기 검색 요청 정보로서 추출한다.
나아가, 상기 검색 요청 분석부는, 상기 검색 요청 데이터에 대해 위치, 객체, 날씨, 이동 속도 중에서 적어도 하나 이상을 상기 검색 요청 정보로서 분석한다.
바람직하게, 상기 웨어러블 카메라 선별부는, 상기 검색 요청 정보의 위치에 가깝게 위치하는 적어도 하나 이상의 웨어러블 카메라를 선별한다.
여기서, 상기 웨어러블 카메라 선별부는, 상기 검색 요청 정보에 검색 대상의 위치가 특정되지 않는 경우, 사용자의 위치로부터 가까운 위치에 있는 순서로 적어도 하나 이상의 웨어러블 카메라를 선별한다.
바람직하게, 상기 검색 장치는, 수신된 상기 영상 정보를 이미지 분석하여 영상의 객체를 인식하는 영상 객체 인식부를 더 포함한다.
또한, 상기 검색 장치는, 상기 검색 요청 정보에 포함된 위치 및 객체 정보를 이용하여, 상기 객체 정보의 이미지를 검색하고, 상기 위치와 웨어러블 카메라의 위치가 매칭되며 검색된 이미지와 수신된 영상 정보의 영상 객체가 매칭되는 대표 영상을 선택하는 대표 영상 선택부를 더 포함한다.
여기서, 상기 대표 영상 선택부는, 복수의 웨어러블 카메라로부터 수신된 영상 정보에 대해 촬영된 객체의 크기 또는 촬영 거리를 기준 정보와 비교하여 가장 일치하는 것으로 선택된 제 1웨어러블 카메라의 영상 정보를 상기 대표 영상으로 선택하고, 제 1웨어러블 카메라의 이동에 의해 상기 기준 정보에 허용된 오차를 벗어난 것이 판단되면, 상기 기준 크기에 가장 일치하는 것으로 선택된 제 2웨어러블 카메라의 영상 정보를 대표 영상으로 선택한다.
또한, 상기 검색 장치는, 영상 정보를 촬영하는 웨어러블 카메라로부터 수신된 각각의 기기 정보의 위치와 속도를 기반으로 동일 이동 수단을 탑승한 사용자들의 웨어러블 카메라를 판단하고, 판단된 복수의 웨어러블 카메라를 그룹으로 지정하는 그룹 지정부를 더 포함하고, 상기 대표 영상 선택부는, 동일 그룹에 속한 영상 정보 중에서 제 1대표 영상이 선택된 후 제 2 대표 영상을 선택할 경우 상기 그룹에 속한 나머지 영상 정보를 우선적으로 고려한다.
본 발명의 다른 측면에 따르면, 상기 영상 정보 제공부는, 수신된 영상 정보에 대해 소정의 지연 시간에 따라 지연 제공하여, 제 1웨어러블 카메라의 영상 정보를 제공하다가 제 2웨어러블 카메라의 영상 정보를 제공하는 경우 영상 정보의 끊김 현상을 방지한다.
여기서, 상기 영상 정보 제공부는, 제 1영상 정보를 제공하는 과정에서 사용자의 명령에 의해 객체의 크기, 촬영 위치 및 촬영 각도가 다른 복수개의 후보 영상 정보를 제공하고, 사용자에 의해 특정 후보 영상 정보가 선택되면 제 1영상 정보를 대체하여 선택된 후보 영상 정보를 제공한다.
나아가, 상기 영상 정보 제공부는, 상기 영상 정보를 제공하는 과정에서 사용자의 명령에 의해 상기 영상 정보가 지정되어 촬영 위치 및 촬영 각도의 변경 요청을 수신하고, 수신된 사용자의 촬영 제어 요청을 상기 영상 정보를 촬영 중인 웨어러블 카메라로 전달하고, 전달된 촬영 제어 요청을 수락하는 웨어러블 카메라의 사용자에게 소정의 보상을 제공한다.
상기 기술적 과제를 달성하기 위한 본 발명에 따른 검색 방법은, 검색 장치가 웨어러블 카메라에 의해 촬영된 영상을 기반으로 검색 서비스를 제공하는 검색 방법에 있어서, (a)사용자의 검색 요청을 수신하고, 수신된 검색 요청 데이터에 대해 검색 대상의 위치 및 객체를 분석하여 검색 요청 정보로서 결정하는 검색 요청 분석 단계; (b)결정된 검색 요청 정보의 위치를 이용하여 검색 대상의 웨어러블 카메라를 선별하는 웨어러블 카메라 선별 단계; (c)선별된 웨어러블 카메라로 영상 정보의 제공을 요청하고, 웨어러블 카메라로부터 촬영된 영상 정보를 수신하는 영상 정보 수신 단계; 및 (d)수신된 영상 정보 중에서 상기 검색 요청 정보에 매칭되는 대표 영상을 검색 결과로서 제공하는 영상 정보 제공 단계를 포함한다.
본 발명의 일 측면에 따르면, 사용자가 검색을 요청하는 위치 또는 객체에 대해 해당 위치에 존재하는 웨어러블 카메라로 영상을 요청하고 웨어러블 카메라로부터 수신되는 영상 정보를 사용자에게 실시간으로 제공한다.
본 발명의 다른 측면에 따르면, 웨어러블 카메라는 전세계의 다양한 위치에 분포하기 때문에 사용자가 요청하는 임의 위치에서 촬영된 영상 정보를 제공할 수 있고, 검색 요청된 위치가 없는 경우에도 사용자의 검색 위치를 기반으로 가까운 위치의 영상 정보를 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 검색 시스템의 개략적 구성도이다.
도 2는 본 발명의 일 실시예에 따른 스마트 글래스의 개략적 내부 구조도이다.
도 3은 본 발명의 일 실시예에 따른 검색 서버의 개략적 내부 구조도이다.
도 4 내지 도 12는 도 3의 검색 서버가 영상 정보를 검색하는 예시도이다.
도 13은 본 발명의 일 실시예에 따른 검색 방법의 개략적 순서도이다.
상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일 실시예를 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 검색 시스템(1)의 개략적 구성도이다.
본 발명의 스마트 글래스(4)는 통신 기능과 촬영 기능을 갖는 웨어러블 카메라(wearable camera)에 해당한다. 안경, 시계 등과 같은 웨어러블 타입으로 제작된 웨어러블 디바이스(예 : 구글 글래스, 갤럭시 기어 등), 웨어러블 스마트 기기 등은 웨어러블 카메라에 해당한다. 이하에서는 웨어러블 카메라가 스마트 글래스(4)라 가정하여 설명한다.
본 발명의 일 실시예에 따른 검색 시스템(1)은 영상 정보의 검색을 요청하는 사용자 단말(2), 사용자의 검색 요청을 수신하여 스마트 글래스(4)가 촬영한 영상 정보의 검색 결과를 제공하는 검색 서버(3) 및 검색 서버(3)로부터 영상 정보의 제공을 요청받고 실시간 촬영된 영상 정보를 검색 서버(3)로 전송하는 스마트 글래스(4)를 포함하여 구성된다.
상기 사용자 단말(2)은 검색 서버(3)로 영상 정보의 검색을 요청하고 영상 정보를 검색 결과로서 수신하여 화면에 출력한다. 사용자 단말(2)은 입력 장치와 화면 출력 장치를 갖는 디스플레이형 기기(예 : 컴퓨터 단말, 스마트 단말, 휴대형 단말, IP TV 등)로서 특별한 제한을 두지 않는다. 사용자 단말(2)은 검색 서버(3)로 검색 요청 데이터를 전송하여 영상 정보의 검색을 요청한다. 여기서, 상기 검색 요청 데이터는 사용자가 사용자 단말(2)로 음성, 이미지, 텍스트 등의 방식으로 입력하여 검색을 요청하는 정보이다. 상기 검색 요청 데이터는 위치 또는 객체 정보를 포함할 수 있다.
상기 검색 서버(3)는 스마트 글래스(4)의 사용자로부터 서비스 가입을 신청받고, 서비스 가입된 사용자의 동의하에 사용자의 스마트 글래스(4)에서 촬영된 영상 정보를 수집하는 것이 가능하다. 그러면, 검색 서버(3)는 수집된 영상 정보를 이용하여 사용자 단말(2)로 본 발명에 따른 영상 정보의 검색 서비스를 제공할 수 있다.
상기 검색 서비스에서, 검색 서버(3)는 사용자 단말(2)로부터 상기 검색 요청 데이터를 수신하여 위치 또는 객체 등을 검색 요청 정보로서 분석한다. 분석된 검색 요청 정보의 위치 또는 객체는 스마트 글래스(4)의 위치를 특정한다. 검색 서버(3)는 분석된 위치에 있는 적어도 하나 이상의 스마트 글래스(4)로 영상의 촬영을 요청하고, 촬영된 영상 정보를 수신한다. 그러면, 검색 서버(3)는 수신된 영상 정보 중에서 사용자가 요청한 위치 또는 객체를 기반으로 매칭되는 대표 영상을 선택하고, 선택된 대표 영상을 사용자 단말(2)로 전송하는 영상 정보의 검색 서비스를 제공한다.
상기 스마트 글래스(4)는 사용자에 의해 착용되고, 사용자의 위치에서 보이는 영상을 촬영할 수 있다. 스마트 글래스(4)의 사용자는 전세계의 다양한 위치에 분포할 수 있다. 때문에, 스마트 글래스(4)의 위치를 기반으로 스마트 글래스(4)에서 촬영된 영상 정보를 수집하는 것이 가능하다.
도 2는 본 발명의 일 실시예에 따른 스마트 글래스(4)의 개략적 내부 구조도이다.
상기 스마트 글래스(4)는 검색 서버와 데이터를 송수신하는 통신 모듈(41), 영상을 촬영하는 카메라 센서(42), 오디오를 녹음하는 마이크 센서(43), 촬영된 영상에서 정보를 추출하는 영상 인식부(44), 영상 신호와 오디오 신호를 결합하여 하나의 영상 정보 파일로 변환하는 인코더(44), 스마트 글래스(4)의 위치 정보를 생성하는 GPS 센서(46), 스마트 글래스(4)의 현재 이동 속도를 측정하는 가속도 센서(47)를 포함한다.
본 발명의 영상 정보 검색 서비스에 가입된 상기 스마트 글래스(4)는 주기적으로 상기 위치 정보와 상기 속도 정보를 검색 서버(3)에 등록한다. 그러면, 검색 서버(3)는 수신된 위치 정보에 기반하여 사용자가 검색 요청하는 위치의 스마트 글래스(4)를 선별할 수 있다. 그리고 스마트 글래스(4)는 검색 서버(4)로부터 영상 정보의 제공을 요청받으면, 상기 영상 정보를 검색 서버(4)로 전송할 수 있다.
도 3은 본 발명의 일 실시예에 따른 검색 서버(3)의 개략적 내부 구조도이다. 또한, 도 4 내지 도 12는 도 3의 검색 서버(3)가 영상 정보를 검색하는 예시도이다. 이하에서는 도 3 내지 도 12를 참조하여 검색 서버(3)의 구성을 설명한다.
도 3을 참조하면, 상기 검색 서버(3)는 사용자 단말(2)로부터 사용자의 검색 요청을 수신하여 검색 요청 정보를 분석하는 검색 요청 분석부(31), 분석된 위치에 대응하는 스마트 글래스(4)를 선별하는 스마트 글래스 선별부(32), 선별된 스마트 글래스(4)로부터 웨어러블 카메라로부터 촬영된 영상 정보를 수신하는 영상 정보 수신부(33) 및 사용자 단말(2)로 상기 영상 정보를 제공하는 영상 정보 제공부(34)를 포함하여 구성된다.
바람직하게, 상기 검색 서버(3)는 스마트 글래스(4)의 기기 정보를 수집하는 정보 수집부(301), 스마트 글래스(4)로부터 수신된 영상 정보로부터 객체 정보를 인식하는 객체 정보 인식부(302), 영상 정보를 전송한 복수의 스마트 글래스(4)들을 상대로 동일 이동 수단으로 이동이 판단되는 그룹을 지정하는 그룹 지정부(303) 및 수신된 복수개의 영상 정보 중에서 검색 결과로서 제공되는 대표 영상을 선택하는 대표 영상 선택부(304)를 더 포함할 수 있다.
상기 정보 수집부(301)는 서비스에 가입된 스마트 글래스(4)들로부터 각각의 기기 정보를 주기적으로 수집하여 저장한다. 상기 기기 정보는 스마트 글래스(4)의 위치 정보 및 속도 정보 등을 포함한다.
여기서, 수집된 정보를 기반으로 검색 서버(3)는 해당 위치의 날씨, 교통, 시간, 뉴스 등의 부가 정보를 더 수집할 수 있다. 수집된 정보는 사용자 단말(2)로 영상 정보와 함께 검색 결과로 제공되어도 무방하다. 예를 들면, 사용자 단말(2)은 검색 결과를 수신하여 영상 정보가 출력되는 화면에 날씨, 시간 정보 등을 표시할 수 있다.
상기 검색 요청 분석부(31)는 사용자 단말(2)로부터 사용자의 검색 요청을 수신한다. 사용자가 검색을 요청하면, 검색 요청 분석부(31)는 사용자 단말(2)로부터 검색 요청 데이터를 수신하고, 수신된 데이터의 위치 및 객체 등의 정보를 분석하여 검색 요청 정보를 결정할 수 있다. 상기 검색 요청 정보의 위치 및 객체는 사용자가 검색을 요청하는 대상으로서 키워드로 이용될 수 있다.
도 4를 참조하면, 검색 요청 분석부(31)는 사용자 단말(2)로부터 검색 요청 데이터를 음성 포맷으로 수신할 수 있다. 예를 들면, 사용자는 검색 대상의 위치 또는 객체를 음성으로 입력하여 검색을 요청할 수 있다. 사용자 단말(2)은 사용자의 음성 입력을 받고 최소한의 의미를 갖는 단위로서 적어도 하나 이상의 단어(예 : 명사)를 추출할 수 있다. 그러면, 검색 요청 수신부(31)는 음성 포맷의 단어가 포함된 검색 요청 데이터를 수신할 수 있다.
도 5를 참조하면, 검색 요청 분석부(31)는 음성, 이미지, 텍스트 등의 포맷에 해당되는 상기 검색 요청 데이터를 수신할 수 있다. 바람직하게, 상기 검색 요청 데이터는 위치 또는 객체의 정보가 포함된다. 그러면, 검색 요청 분석부(31)는 수신된 검색 요청 데이터의 포맷에 상관없이 단어 의미 분석을 통해 위치 및 객체의 의미를 갖는 적어도 하나 이상의 단어 정보를 추출하고, 추출된 각각의 단어를 검색 요청 정보로서 결정한다. 결정된 검색 요청 정보는 위치, 객체, 날씨 및 이동 속도 중에서 적어도 하나 이상에 해당된다. 상기 단어 의미 분석 과정에서 검색 요청된 음성 및 이미지 데이터는 텍스트 변환 처리가 수반될 수 있다. 검색 요청 정보의 위치 및 객체 정보는 스마트 글래스(4)를 검색하는 검색 키워드로서 이용된다.
상기 스마트 글래스 선별부(32)는 검색 요청 정보의 위치를 기반으로 검색 대상이 되는 스마트 글래스(4)를 선별한다. 예를 들면, 스마트 글래스 선별부(32)는 검색 요청된 위치로 기 저장된 기기 정보를 조회하고, 상기 위치에 가깝게 위치하는 순서대로 적어도 하나 이상의 스마트 글래스(31)를 선별할 수 있다.
도 6을 참조하면, 상기 스마트 글래스 선별부(32)는 위치 정보가 결여된 경우, 사용자가 검색을 요청하는 위치(61)를 기반으로 스마트 글래스(4)를 선별할 수 있다. 검색 서버(3)는 위치 정보가 없는 검색 요청에 대해서도 위치 기반의 영상 정보 검색 서비스를 제공하는 것이 가능하다.
예를 들면, 사용자가 위치를 특정하지 않고 검색을 요청하여 검색 요청 데이터가 "맛있는 사과"인 경우이다. 여기서, 의미를 갖는 단어 "사과"가 추출되어 검색 요청 정보로 결정될 수 있다. 스마트 글래스 선별부(32)는 사용자의 검색 위치를 이용하여 가까운 위치에 있는 순서로 적어도 하나 이상의 스마트 글래스(4)를 선별한다. 따라서, 사용자의 검색 위치에서 반경 5km, 10km 등으로 검색 영역이 확장하면서 상기 검색 영역 내에 위치하는 가까운 거리의 스마트 글래스(4)들이 선별될 수 있다. 물론, 선별된 스마트 글래스(4)의 영상 정보 중에서 검색 대상의 객체는 상기 검색 요청 정보 "사과"가 된다. 그러므로 검색 결과는 사용자의 검색 위치에서 가까운 스마트 글래스(4)에 의해 촬영되고 "사과"가 등장하는 영상 정보가 된다.
상기 영상 정보 수신부(33)는 선별된 스마트 글래스(4)로 영상 정보의 제공을 요청한다. 스마트 글래스(4)는 상기 영상 정보의 제공을 요청받고 촬영을 시작할 수 있다. 그리고 영상 정보 수신부(33)는 스마트 글래스(4)로부터 라이브로 촬영되는 영상 정보를 수신한다.
도 7을 참조하면, 영상 정보 수신부(33)는 적어도 하나 이상의 스마트 글래스(4)로 영상 정보를 요청한 이후로, 각각의 스마트 글래스(4)로부터 실시간 촬영된 영상 정보를 수신한다. 영상 정보 수신부(33)는 스마트 글래스(4)로부터 수신된 영상 정보를 DB에 저장할 수 있다.
한편, 사용자의 검색 요청을 기반으로 분석된 위치에 스마트 글래스(4)가 존재하지 않아서 실시간 촬영된 영상 정보를 제공할 수 없는 경우, 검색 서버(3)는 상기 DB에 기 보관된 과거 영상을 검색 결과로 제공할 수 있다.
상기 영상 객체 인식부(302)는 수신된 각각의 영상 정보에 대해 이미지 분석 처리를 통해 객체를 인식한다. 예를 들면, 검색 요청 데이터 "맛있는 사과"의 경우, 검색 요청 정보 "사과"가 등장하는 영상 정보가 유효한 영상 정보에 해당되어 상기 이미지 분석 처리에 의한 객체 인식이 필요하다. 또한, 검색 요청 데이터가 "자유의 여신상"일 경우, 선별된 스마트 글래스(4)들의 위치가 미국 뉴욕에서 자유의 여신상과 가까운 위치이지만 촬영된 영상 정보에 자유의 여신상이 등장하지 않을 수 있기 때문에 객체 인식이 필요하다. 영상 객체 인식부(302)는 수신된 전체 영상 정보 중에서 객체 인식 처리를 통해 객체가 등장하는 영상 정보만을 필터링한다.
도 8을 참조하면, 영상 객체 인식부(302)는 이미지 인식 처리(91)를 통해 영상 정보의 객체 단위를 그루핑 처리(92)한다. 영상 객체 인식부(302)는 그루핑된 이미지를 객체 윤곽 탐색 처리(93)한다. 그러면, 영상 정보에서 객체 이미지의 윤곽이 인식된다. 그리고 영상 객체 인식부(302)는 윤곽이 인식된 이미지에 대해 물체 정보 추출(94) 처리한다. 그러면, 윤곽이 인식된 물체의 면적, 길이, 외형을 기반으로 객체 정보가 추출된다. 추출된 객체 정보는 객체를 식별하는 정보이다.
상기 그룹 지정부(303)는 객체가 등장하는 영상 정보의 스마트 글래스(4)들을 대상으로 동일 이동 수단을 탑승하는 것으로 판단되는 그룹을 지정한다. 동일 한 이동 수단을 탑승한 사용자들의 스마트 글래스(4)는 각각의 이동 속도가 동일하고 위치 이동의 패턴이 동일하다.
도 9를 참조하면, 그룹 지정부(303)는 사용자의 현재 위치(81)를 기반으로 그룹 영역(82) 내에 스마트 글래스(4)들이 위치하고, 각각의 가속도 센서 값이 동일한 스마트 글래스(4)들을 동일한 그룹으로 지정한다. 예를 들어, "강"의 경우 "50m"의 그룹 영역 내에서 그룹에 속하는 스마트 글래스(4)들이 판단된다.
만약, 동일한 그룹에 속하는 제 1스마트 글래스의 영상 정보가 검색 결과로서 사용자 단말(2)로 제공되다가 제 2스마트 글래스의 영상 정보로 대체해야 할 경우, 우선적으로 동일 그룹에 속하는 제 1스마트 글래스를 제외한 나머지 스마트 글래스(4)들이 상기 제 2스마트 글래스로 고려된다.
상기 대표 영상 선택부(304)는 객체가 등장하여 후보가 되는 복수개 영상 정보 중에서 가장 적합한 영상 정보를 사용자에게 제공할 대표 영상으로 선택한다. 대표 영상 선택부(304)는 현재의 대표 영상의 정보에서 객체가 사라지거나 또는 객체의 기준 정보를 벗어날 때마다, 상기 기준 정보에 부합하여 객체가 등장하는 새로운 대표 영상을 선택한다.
도 10을 참조하면, 대표 영상 선택부(304)는 촬영된 객체의 크기 또는 촬영 거리를 기준 정보와 비교하여 가장 일치하는 영상 정보를 상기 대표 영상으로 선택하는 처리를 수행한다. 상기 촬영 거리는 스마트 기기와 객체의 거리에 해당된다. 이후, 대표 영상의 정보가 스마트 글래스(4)의 이동에 의해 상기 기준 정보에 허용된 오차를 벗어난 것이 판단되면, 대표 영상 선택부(304)는 새로운 대표 영상을 선택하는 처리를 수행한다. 예를 들어, 상기 촬영 거리가 "촬영 대상으로부터 500m 떨어진 곳"일 경우, 상기 촬영 거리에 가장 근접하는 스마트 글래스(4)의 영상 정보가 대표 영상으로 선택될 수 있다. 그리고 대표 영상의 촬영 거리가 기준 오차의 범위를 초과할 경우 새로운 대표 영상이 선택된다.
상기 영상 정보 제공부(34)는 객체가 등장하는 것으로 판단되어 수신된 영상 정보 중에서 상기 검색 요청 정보에 매칭되는 어느 하나의 대표 영상을 검색 결과로서 사용자 단말(2)로 제공한다.
도 11을 참조하면, 영상 정보 제공부(34)는 실시간 촬영된 영상 정보를 소정의 지연 시간을 두고 사용자 단말(2)로 영상 정보를 제공한다. 예를 들면, 영상 정보 제공부(34)는 실시간 수신된 영상 정보에 대해 10초 이전에 수신된 영상 정보를 읽어서 사용자 단말(2)로 제공할 수 있다. 제 1스마트 글래스(111), 제 2스마트 글래스(112), 제 3스마트 글래스(113) 및 제 2스마트 글래스(112)의 순서로 대표 영상의 대체가 발생될 경우, 3번의 영상 대체 구간(114)에서 화면의 끊김 현상이 발생될 수 있다. 하지만, 상기 10초의 지연 시간 때문에 사용자는 화면의 끊김 현상이 배제된 부드러운 대표 영상의 재생 서비스를 제공받을 수 있다.
바람직하게, 상기 영상 정보 제공부(34)는 사용자 단말(2)에서 내려진 사용자의 명령에 따라 후보의 영상 정보를 사용자 단말(2)로 제공하고, 사용자에 의해 선택된 후보 영상을 사용자 단말(2)로 제공할 수 있다.
도 12를 참조하면, 영상 정보 제공부(34)가 검색 요청 데이터 "런던 타워 브릿지의 주변 모습을 보여줘"에 대해 "런던 타워 브릿지"의 대표 영상을 사용자 단말(2)로 제공하는 과정에서 사용자에 의해 후보 영상을 요청하는 명령이 수신된다. 영상 정보 제공부(34)는 사용자 단말(2)로 객체의 크기, 촬영 위치 및 촬영 각도가 다른 복수개의 후보 영상 정보를 섬네일 이미지로 제공한다. 사용자에 의해 특정 섬네일 이미지가 선택되면, 영상 정보 제공부(34)는 섬네일 이미지에 대응하는 영상 정보를 새로운 대표 영상으로서 사용자 단말(2)로 제공한다.
나아가, 영상 정보 제공부(34)는 검색 사용자와 스마트 글래스(4) 사용자의 통신을 중개하여 검색 사용자의 요청에 따른 맞춤형 영상을 제공하는 것이 가능하다.
예를 들면, 영상 정보 제공부(34)가 사용자 단말(2)로 대표 영상을 제공하는 과정에서 검색 사용자의 명령에 의해 대표 영상의 촬영 위치 및 촬영 각도의 변경과 같은 요청을 수신할 수 있다. 영상 정보 제공부(34)는 수신된 사용자의 촬영 제어 요청을 상기 대표 영상을 실시간으로 촬영 중인 스마트 글래스(4)로 전달한다. 스마트 글래스(4)의 사용자가 상기 촬영 제어 요청을 수락하면, 요청된 내용에 따라 영상 정보를 촬영하고, 촬영된 영상 정보가 대표 영상으로서 사용자 단말(2)로 제공된다. 이때, 검색 사용자의 촬영 요구대로 영상 정보를 촬영하는 스마트 글래스(4)의 사용자에게는 소정의 보상이 제공될 수 있다.
도 13은 본 발명의 일 실시예에 따른 검색 방법의 개략적 순서도이다.
검색 서버(3)는 서비스 가입된 사용자들의 스마트 글래스(4)로부터 각각의 기기 정보를 수집하여 DB에 저장한다(S301), 여기서, 상기 기기 정보는 스마트 글래스(4)의 위치, 속도 등의 정보를 포함한다. 또한, 검색 서버(3)는 기기 정보를 이용하여 해당 위치의 날씨, 뉴스 등의 부가 정보를 검색하여 상기 DB에 저장할 수 있다.
만약, 사용자가 "뉴욕의 내일 아침이 궁금해"라는 질의를 하는 경우, 검색 서버(3)는 사용자 단말(2)로 현재 뉴욕의 영상 정보와 함께 내일의 날씨, 뉴스 등의 부가 정보를 검색 결과로 제공하는 것이 가능하다.
사용자 단말(2)에 의해 검색 이벤트가 발생하면, 검색 서버(3)는 사용자의 검색 요청을 분석하여 추출된 단어를 검색 요청 정보로 결정한다(S31).
여기서, 검색 서버(3)는 사용자의 검색 요청에 의해 사용자 단말(2)로부터 검색 요청 데이터를 수신한다. 상기 검색 요청 데이터는 음성, 이미지, 텍스트 중에서 적어도 하나 이상의 포맷을 가지며 특별한 포맷으로 제한을 두지 않는다. 검색 요청 데이터는 사용자가 검색을 요청하는 위치 또는 객체의 정보 중에서 적어도 하나 이상을 포함한다.
또한, 검색 서버(3)는 수신된 검색 요청 데이터로부터 위치 또는 객체 정보가 포함된 검색 요청 정보를 분석한다. 사용자의 검색 요청 데이터는 사용자 단말(2)에서 사용자가 입력한 데이터로부터 의미 단위로서 추출된 단어 정보일 수 있다. 검색 서버(3)가 음성 포맷의 검색 요청 데이터를 수신할 경우, 의미 분석 처리, 단어 추출 처리 등을 통해 위치 또는 객체를 나타내는 단어 정보를 추출하여 검색 요청 정보로 결정할 수 있다. 검색 서버(3)가 결정한 검색 요청 정보는 검색 대상의 키워드 정보에 해당된다.
검색 요청 정보가 결정되면, 검색 서버(3)는 검색 요청 정보의 위치를 기반으로 상기 위치에 가까이 있는 적어도 하나 이상의 스마트 글래스(4)를 선별한다(32).
여기서, 상기 검색 요청 정보에 위치 정보가 없는 경우, 검색 서버(3)는 검색 사용자의 위치를 이용하여 가까이 있는 적어도 하나 이상의 스마트 글래스(4)를 선별한다. 위치 정보가 없기 때문에 검색 서버(3)는 객체 정보를 기반으로 영상 정보를 검색한다.
스마트 글래스(3)가 선별되면, 검색 서버(3)는 선별된 각각의 스마트 글래스(3)로 영상의 제공을 요청하고, 각각의 스마트 글래스(3)로부터 실시간 촬영되는 영상 정보를 수신한다(S33). 수신된 영상 정보는 DB에 저장될 수 있다.
영상 정보가 수신되면, 검색 서버(3)는 수신된 영상 정보를 이미지 분석 처리하여 영상 속의 객체를 인식한다(S302). 인식된 객체 정보는 영상 정보에 대응되어 DB에 저장될 수 있다.
또한, 검색 서버(3)는 영상 정보를 전송한 스마트 글래스(4)들을 대상으로 소정의 그룹 영역 내에 위치하고 이동 속도가 같은 스마트 글래스(4)를 동일 그룹으로 지정한다(S303).
여기서, 동일 그룹에 속하는 스마트 글래스(4)들에 의해 촬영된 각각의 영상 정보는 동일한 객체가 포함될 가능성이 높다. 따라서, 동일 그룹의 제 1영상 정보가 사용자의 검색 결과로 제공될 때, 제 1영상 정보를 대체할 제 2영상 정보의 선택이 고려되는 경우, 검색 서버(3)는 동일 그룹의 나머지 영상 정보들을 제 1영상 정보를 대체하는 제 2영상 정보로서 우선적으로 고려할 수 있다.
객체가 등장하는 복수의 영상 정보가 후보로서 결정되면, 검색 서버(3)는 영상 정보의 후보들 중에서 기준 정보에 가장 부합하는 영상 정보를 대표 영상으로 선택한다(S304). 대표 영상에서 검색된 객체가 사라질 경우, 검색 서버(3)는 객체가 등장하는 새로운 대표 영상을 선택한다.
여기서, 상기 기준 정보는 객체의 크기 또는 상기 촬영 거리를 포함한다. 검색 서버(3)는 대표 영상의 정보를 기준 정보와 비교하여 허용된 오차를 벗어난 것으로 판단하면, 새롭게 대표 영상을 선택한다.
대표 영상이 선택되면, 검색 서버(3)는 선택된 대표 영상을 검색 결과로서 사용자 단말(2)로 제공한다(S34). 사용자 단말(2)은 수신된 대표 영상을 재생하여 화면에 출력한다.
여기서, 검색 서버(3)는 스마트 글래스(4)로부터 수신된 영상 정보를 대표 영상으로서 사용자 단말(2)로 실시간 제공하는 대신에 소정의 지연 시간을 두고 이전의 영상 정보를 대표 영상으로 제공한다. 그러면, 대표 영상의 스마트 글래스(4)가 변경될 경우 화면의 끊김 현상이 방지된다.
또한, 검색 서버(3)는 사용자 단말(2)에서 내려진 사용자의 명령에 따라 후보의 영상 정보를 사용자 단말(2)로 제공하고, 사용자에 의해 선택된 후보 영상을 대표 영상으로써 사용자 단말(2)로 제공할 수 있다. 후보 영상은 동일한 객체에 대해 각각의 촬영 위치 및 촬영 각도가 다른 영상 정보이다.
나아가, 검색 서버(3)는 검색 사용자와 스마트 글래스(4) 사용자 사이에서 검색 사용자의 촬영 제어 요청을 스마트 글래스(4)로 전송할 수 있다. 스마트 글래스(4)의 사용자가 상기 촬영 제어 요청을 수락하면, 요청된 내용에 따라 영상 정보를 촬영하고, 촬영된 영상 정보가 대표 영상으로써 사용자 단말(2)로 제공된다. 이때, 검색 사용자의 촬영 요구대로 영상 정보를 촬영하는 스마트 글래스(4)의 사용자에게는 소정의 보상이 제공될 수 있다.
상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록 매체(씨디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다.
본 명세서는 많은 특징을 포함하는 반면, 그러한 특징은 본 발명의 범위 또는 특허청구범위를 제한하는 것으로 해석되어서는 아니된다. 또한, 본 명세서에서 개별적인 실시예에서 설명된 특징들은 단일 실시예에서 결합되어 구현될 수 있다. 반대로, 본 명세서에서 단일 실시예에서 설명된 다양한 특징들은 개별적으로 다양한 실시예에서 구현되거나, 적절한 부결합(subcombination)에서 구현될 수 있다.
도면에서 동작들이 특정한 순서로 설명되었으나, 그러한 동작들이 도시된 바와 같은 특정한 순서로 수행되는 것으로, 또는 일련의 연속된 순서, 또는 원하는 결과를 얻기 위해 모든 설명된 동작이 수행되는 것으로 이해되어서는 아니된다. 어떤 환경에서, 멀티태스킹 및 병렬 프로세싱이 유리할 수 있다. 아울러, 상술한 실시예에서 다양한 시스템 구성 요소의 구분은 모든 실시예에서 그러한 구분을 요구하지 않는 것으로 이해되어야 한다. 상술한 프로그램 구성요소 및 시스템은 일반적으로 단일 소프트웨어 제품 또는 멀티플 소프트웨어 제품에 패키지로 구현될 수 있다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.
1 : 검색 시스템 2 : 사용자 단말
3 : 검색 서버 4 : 스마트 글래스

Claims (30)

  1. 웨어러블 카메라에 의해 촬영된 영상을 기반으로 검색 서비스를 제공하는 검색 장치에 있어서,
    사용자의 검색 요청을 수신하고, 수신된 검색 요청 데이터에 대해 검색 대상의 위치 및 객체를 분석하여 검색 요청 정보로서 결정하는 검색 요청 분석부;
    결정된 검색 요청 정보의 위치를 이용하여 검색 대상의 웨어러블 카메라를 선별하고, 상기 위치가 특정되지 않으면 사용자의 위치로부터 가장 가까운 순서로 검색 대상의 웨어러블 카메라를 선별하는 웨어러블 카메라 선별부;
    적어도 하나 이상으로 선별된 웨어러블 카메라로 영상 정보의 제공을 요청하고, 웨어러블 카메라로부터 촬영된 영상 정보를 수신하는 영상 정보 수신부;
    수신된 상기 영상 정보를 이미지 분석하여 영상의 객체를 인식하는 영상 객체 인식부; 및
    객체가 인식된 영상 정보 중에서 상기 검색 요청 정보의 위치 및 객체에 매칭되거나 또는 상기 위치가 특정되지 않아서 사용자의 위치에 가장 가까운 위치이고 상기 객체에 매칭되는 대표 영상을 검색 결과로서 제공하는 영상 정보 제공부
    를 포함하는 것을 특징으로 하는 검색 장치.
  2. 제 1항에 있어서,
    서비스 가입된 사용자들의 웨어러블 카메라로부터 위치 및 속도를 포함하는 기기 정보를 전송받아 저장하는 정보 수집부를 더 포함하고, 저장된 기기 정보가 상기 웨어러블 카메라를 선별하는데 이용되는 것을 특징으로 하는 검색 장치.
  3. 제 1항에 있어서,
    상기 검색 요청 분석부는,
    음성, 이미지, 텍스트 중에서 적어도 하나 이상을 포함하는 상기 검색 요청 데이터를 수신하여 분석하는 것을 특징으로 하는 검색 장치.
  4. 제 1항에 있어서,
    상기 검색 요청 분석부는,
    사용자 단말로부터 적어도 하나 이상의 단어가 포함된 상기 검색 요청 데이터를 수신하고,
    상기 단어는 사용자 단말이 사용자가 검색 요청한 음성 데이터로부터 최소한의 의미를 갖는 단위로서 추출하는 것을 특징으로 하는 검색 장치.
  5. 제 1항에 있어서,
    상기 검색 요청 분석부는,
    상기 검색 요청 데이터로서 사용자의 음성 데이터를 수신하고, 수신된 음성 데이터에 대해 단어 의미 분석을 통해 위치 및 객체의 의미를 갖는 적어도 하나 이상의 단어 정보를 상기 검색 요청 정보로서 추출하는 것을 특징으로 하는 검색 장치.
  6. 제 1항에 있어서,
    상기 검색 요청 분석부는,
    상기 검색 요청 데이터에 대해 위치, 객체, 날씨, 이동 속도 중에서 적어도 하나 이상을 상기 검색 요청 정보로서 분석하는 것을 특징으로 하는 검색 장치.
  7. 제 1항에 있어서,
    상기 웨어러블 카메라 선별부는,
    상기 검색 요청 정보의 위치에 가깝게 위치하는 적어도 하나 이상의 웨어러블 카메라를 선별하는 것을 특징으로 하는 검색 장치.
  8. 삭제
  9. 삭제
  10. 제 1항에 있어서,
    상기 검색 요청 정보에 포함된 위치 및 객체 정보를 이용하여, 상기 객체 정보의 이미지를 검색하고, 상기 위치와 웨어러블 카메라의 위치가 매칭되며 검색된 이미지와 수신된 영상 정보의 영상 객체가 매칭되는 대표 영상을 선택하는 대표 영상 선택부를 더 포함하는 것을 특징으로 하는 검색 장치.
  11. 웨어러블 카메라에 의해 촬영된 영상을 기반으로 검색 서비스를 제공하는 검색 장치에 있어서,
    사용자의 검색 요청을 수신하고, 수신된 검색 요청 데이터에 대해 검색 대상의 위치 및 객체를 분석하여 검색 요청 정보로서 결정하는 검색 요청 분석부;
    결정된 검색 요청 정보의 위치를 이용하여 검색 대상의 웨어러블 카메라를 적어도 하나 이상으로 선별하는 웨어러블 카메라 선별부;
    선별된 웨어러블 카메라로 영상 정보의 제공을 요청하고, 웨어러블 카메라로부터 촬영된 영상 정보를 수신하는 영상 정보 수신부;
    상기 검색 요청 정보에 포함된 위치 및 객체 정보를 이용하여, 상기 객체 정보의 이미지를 검색하고, 상기 위치와 웨어러블 카메라의 위치가 매칭되며 검색된 이미지와 수신된 영상 정보의 영상 객체가 매칭되고, 매칭된 영상 정보에 대해 촬영된 객체의 크기 또는 촬영 거리를 기준 정보와 비교하여 가장 일치하는 것으로 선택된 제 1웨어러블 카메라의 영상 정보를 대표 영상으로 선택하고, 제 1웨어러블 카메라의 이동에 의해 상기 기준 정보에 허용된 오차를 벗어난 것이 판단되면, 상기 기준 크기에 가장 일치하는 것으로 선택된 제 2웨어러블 카메라의 영상 정보를 대표 영상으로 선택하는 대표 영상 선택부; 및
    선택된 대표 영상을 검색 결과로서 제공하는 영상 정보 제공부
    를 포함하는 것을 특징으로 하는 검색 장치.
  12. 제 11항에 있어서,
    영상 정보를 촬영하는 웨어러블 카메라로부터 수신된 각각의 기기 정보의 위치와 속도를 기반으로 동일 이동 수단을 탑승한 사용자들의 웨어러블 카메라를 판단하고, 판단된 복수의 웨어러블 카메라를 그룹으로 지정하는 그룹 지정부를 더 포함하고,
    상기 대표 영상 선택부는,
    동일 그룹에 속한 영상 정보 중에서 제 1대표 영상이 선택된 후 제 2 대표 영상을 선택할 경우 상기 그룹에 속한 나머지 영상 정보를 우선적으로 고려하는 것을 특징으로 하는 검색 장치.
  13. 웨어러블 카메라에 의해 촬영된 영상을 기반으로 검색 서비스를 제공하는 검색 장치에 있어서,
    사용자의 검색 요청을 수신하고, 수신된 검색 요청 데이터에 대해 검색 대상의 위치 및 객체를 분석하여 검색 요청 정보로서 결정하는 검색 요청 분석부;
    결정된 검색 요청 정보의 위치를 이용하여 검색 대상의 웨어러블 카메라를 적어도 하나 이상으로 선별하는 웨어러블 카메라 선별부;
    선별된 웨어러블 카메라로 영상 정보의 제공을 요청하고, 웨어러블 카메라로부터 촬영된 영상 정보를 수신하는 영상 정보 수신부; 및
    수신된 영상 정보 중에서 상기 검색 요청 정보에 매칭되는 대표 영상을 검색 결과로 제공하고, 제 1웨어러블 카메라의 매칭된 대표 영상을 제공하다가 제 2웨어러블 카메라의 매칭된 대표 영상을 제공하는 경우 상기 대표 영상의 끊김 현상을 방지하도록 상기 대표 영상에 대해 소정의 지연 시간에 따라 지연 제공하는 영상 정보 제공부
    를 포함하는 것을 특징으로 하는 검색 장치.
  14. 웨어러블 카메라에 의해 촬영된 영상을 기반으로 검색 서비스를 제공하는 검색 장치에 있어서,
    사용자의 검색 요청을 수신하고, 수신된 검색 요청 데이터에 대해 검색 대상의 위치 및 객체를 분석하여 검색 요청 정보로서 결정하는 검색 요청 분석부;
    결정된 검색 요청 정보의 위치를 이용하여 검색 대상의 웨어러블 카메라를 적어도 하나 이상으로 선별하는 웨어러블 카메라 선별부;
    선별된 웨어러블 카메라로 영상 정보의 제공을 요청하고, 웨어러블 카메라로부터 촬영된 영상 정보를 수신하는 영상 정보 수신부; 및
    수신된 영상 정보 중에서 상기 검색 요청 정보에 매칭되는 대표 영상을 검색 결과로서 제공하고, 상기 대표 영상을 제공하는 과정에서 사용자의 명령에 의해 객체의 크기, 촬영 위치 및 촬영 각도가 다른 복수개의 후보 영상 정보를 제공하고, 사용자에 의해 특정 후보 영상 정보가 선택되면 상기 대표 영상을 선택된 후보 영상 정보로 대체하여 제공하는 상기 영상 정보 제공부
    를 포함하는 것을 특징으로 하는 검색 장치.
  15. 웨어러블 카메라에 의해 촬영된 영상을 기반으로 검색 서비스를 제공하는 검색 장치에 있어서,
    사용자의 검색 요청을 수신하고, 수신된 검색 요청 데이터에 대해 검색 대상의 위치 및 객체를 분석하여 검색 요청 정보로서 결정하는 검색 요청 분석부;
    결정된 검색 요청 정보의 위치를 이용하여 검색 대상의 웨어러블 카메라를 적어도 하나 이상으로 선별하는 웨어러블 카메라 선별부;
    선별된 웨어러블 카메라로 영상 정보의 제공을 요청하고, 웨어러블 카메라로부터 촬영된 영상 정보를 수신하는 영상 정보 수신부; 및
    수신된 영상 정보 중에서 상기 검색 요청 정보에 매칭되는 대표 영상을 검색 결과로서 제공하고, 상기 대표 영상을 제공하는 과정에서 사용자의 명령에 의해 상기 대표 영상이 지정되어 촬영 위치 및 촬영 각도의 변경 요청을 수신하고, 수신된 사용자의 촬영 제어 요청을 상기 대표 영상의 영상 정보를 촬영 중인 웨어러블 카메라로 전달하고, 전달된 촬영 제어 요청을 수락하는 웨어러블 카메라의 사용자에게 소정의 보상을 제공하는 영상 정보 제공부
    를 포함하는 것을 특징으로 하는 검색 장치.
  16. 검색 장치가 웨어러블 카메라에 의해 촬영된 영상을 기반으로 검색 서비스를 제공하는 검색 방법에 있어서,
    (a)사용자의 검색 요청을 수신하고, 수신된 검색 요청 데이터에 대해 검색 대상의 위치 및 객체를 분석하여 검색 요청 정보로서 결정하는 검색 요청 분석 단계;
    (b)결정된 검색 요청 정보의 위치를 이용하여 검색 대상의 웨어러블 카메라를 선별하고, 상기 위치가 특정되지 않는 경우, 사용자의 위치로부터 가까운 위치에 있는 순서로 웨어러블 카메라를 선별하는 웨어러블 카메라 선별 단계;
    (c)적어도 하나 이상으로 선별된 웨어러블 카메라로 영상 정보의 제공을 요청하고, 웨어러블 카메라로부터 촬영된 영상 정보를 수신하는 영상 정보 수신 단계;
    (d)수신된 상기 영상 정보를 이미지 분석하여 영상의 객체를 인식하는 영상 객체 인식 단계; 및
    (e)객체가 인식된 영상 정보 중에서 상기 검색 요청 정보의 위치 및 객체에 매칭되거나 또는 상기 위치가 특정되지 않아서 사용자의 위치에 가장 가까운 위치이고 상기 객체에 매칭되는 대표 영상을 검색 결과로서 제공하는 영상 정보 제공 단계
    를 포함하는 것을 특징으로 하는 검색 방법.
  17. 제 16항에 있어서,
    상기 단계(a) 이전에
    서비스 가입된 사용자들의 웨어러블 카메라로부터 위치 및 속도를 포함하는 기기 정보를 전송받아 저장하는 정보 수집 단계를 더 포함하고, 저장된 기기 정보가 상기 웨어러블 카메라를 선별하는데 이용되는 것을 특징으로 하는 검색 방법.
  18. 제 16항에 있어서,
    상기 단계(a)는,
    음성, 이미지, 텍스트 중에서 적어도 하나 이상을 포함하는 상기 검색 요청 데이터를 수신하여 분석하는 단계인 것을 특징으로 하는 검색 방법.
  19. 제 16항에 있어서,
    상기 단계(a)는,
    사용자 단말로부터 적어도 하나 이상의 단어가 포함된 상기 검색 요청 데이터를 수신하는 단계로서,
    상기 단어는 사용자 단말이 사용자가 검색 요청한 음성 데이터로부터 최소한의 의미를 갖는 단위로서 추출하는 것을 특징으로 하는 검색 방법.
  20. 제 16항에 있어서,
    상기 단계(a)는,
    상기 검색 요청 데이터로서 사용자의 음성 데이터를 수신하고, 수신된 음성 데이터에 대해 단어 의미 분석을 통해 위치 및 객체의 의미를 갖는 적어도 하나 이상의 단어 정보를 상기 검색 요청 정보로서 추출하는 단계인 것을 특징으로 하는 검색 방법.
  21. 제 16항에 있어서,
    상기 단계(a)는,
    상기 검색 요청 데이터에 대해 위치, 객체, 날씨, 이동 속도 중에서 적어도 하나 이상을 상기 검색 요청 정보로서 분석하는 단계인 것을 특징으로 하는 검색 방법.
  22. 제 16항에 있어서,
    상기 단계(b)는,
    상기 검색 요청 정보의 위치에 가깝게 위치하는 적어도 하나 이상의 웨어러블 카메라를 선별하고, 선별된 각각의 웨어러블 카메라로 영상 정보의 제공을 요청하는 단계인 것을 특징으로 하는 검색 방법.
  23. 삭제
  24. 삭제
  25. 제 16항에 있어서,
    상기 단계(e) 이전에,
    상기 검색 요청 정보에 포함된 위치 및 객체 정보를 이용하여, 상기 객체 정보의 이미지를 검색하고, 상기 위치와 웨어러블 카메라의 위치가 매칭되며 검색된 이미지와 수신된 영상 정보의 영상 객체가 매칭되는 대표 영상을 선택하는 대표 영상 선택 단계를 더 포함하는 것을 특징으로 하는 검색 방법.
  26. 검색 장치가 웨어러블 카메라에 의해 촬영된 영상을 기반으로 검색 서비스를 제공하는 검색 방법에 있어서,
    (a)사용자의 검색 요청을 수신하고, 수신된 검색 요청 데이터에 대해 검색 대상의 위치 및 객체를 분석하여 검색 요청 정보로서 결정하는 검색 요청 분석 단계;
    (b)결정된 검색 요청 정보의 위치를 이용하여 검색 대상의 웨어러블 카메라를 적어도 하나 이상으로 선별하는 웨어러블 카메라 선별 단계;
    (c)선별된 웨어러블 카메라로 영상 정보의 제공을 요청하고, 웨어러블 카메라로부터 촬영된 영상 정보를 수신하는 영상 정보 수신 단계;
    (d)상기 검색 요청 정보에 포함된 위치 및 객체 정보를 이용하여, 상기 객체 정보의 이미지를 검색하고, 상기 위치와 웨어러블 카메라의 위치가 매칭되며 검색된 이미지와 수신된 영상 정보의 영상 객체가 매칭되고, 매칭된 영상 정보에 대해 촬영된 객체의 크기 또는 촬영 거리를 기준 정보와 비교하여 가장 일치하는 것으로 선택된 제 1웨어러블 카메라의 영상 정보를 대표 영상으로 선택하고, 제 1웨어러블 카메라의 이동에 의해 상기 기준 정보에 허용된 오차를 벗어난 것이 판단되면, 상기 기준 크기에 가장 일치하는 것으로 선택된 제 2웨어러블 카메라의 영상 정보를 대표 영상으로 선택하는 대표 영상 선택 단계; 및
    (e)선택된 대표 영상을 검색 결과로서 제공하는 영상 정보 제공 단계
    를 포함하는 것을 특징으로 하는 검색 방법.
  27. 제 26항에 있어서,
    상기 단계(d)이전에,
    영상 정보를 촬영하는 웨어러블 카메라로부터 수신된 각각의 기기 정보의 위치와 속도를 기반으로 동일 이동 수단을 탑승한 사용자들의 웨어러블 카메라를 판단하고, 판단된 복수의 웨어러블 카메라를 그룹으로 지정하는 그룹 지정 단계를 더 포함하고,
    상기 대표 영상 선택 단계는,
    동일 그룹에 속한 영상 정보 중에서 제 1대표 영상이 선택된 후 제 2 대표 영상을 선택할 경우 상기 그룹에 속한 나머지 영상 정보를 우선적으로 고려하는 것을 특징으로 하는 검색 방법.
  28. 검색 장치가 웨어러블 카메라에 의해 촬영된 영상을 기반으로 검색 서비스를 제공하는 검색 방법에 있어서,
    (a)사용자의 검색 요청을 수신하고, 수신된 검색 요청 데이터에 대해 검색 대상의 위치 및 객체를 분석하여 검색 요청 정보로서 결정하는 검색 요청 분석 단계;
    (b)결정된 검색 요청 정보의 위치를 이용하여 검색 대상의 웨어러블 카메라를 적어도 하나 이상으로 선별하는 웨어러블 카메라 선별 단계;
    (c)선별된 웨어러블 카메라로 영상 정보의 제공을 요청하고, 웨어러블 카메라로부터 촬영된 영상 정보를 수신하는 영상 정보 수신 단계; 및
    (d)수신된 영상 정보 중에서 상기 검색 요청 정보에 매칭되는 대표 영상을 검색 결과로서 제공하고, 제 1웨어러블 카메라의 매칭된 대표 영상을 제공하다가 제 2웨어러블 카메라의 매칭된 대표 영상을 제공하는 경우 상기 대표 영상의 끊김 현상을 방지하도록 상기 대표 영상에 대해 소정의 지연 시간에 따라 지연 제공하는 영상 정보 제공 단계
    를 포함하는 것을 특징으로 하는 검색 방법.
  29. 검색 장치가 웨어러블 카메라에 의해 촬영된 영상을 기반으로 검색 서비스를 제공하는 검색 방법에 있어서,
    (a)사용자의 검색 요청을 수신하고, 수신된 검색 요청 데이터에 대해 검색 대상의 위치 및 객체를 분석하여 검색 요청 정보로서 결정하는 검색 요청 분석 단계;
    (b)결정된 검색 요청 정보의 위치를 이용하여 검색 대상의 웨어러블 카메라를 선별하는 웨어러블 카메라 선별 단계;
    (c)선별된 웨어러블 카메라로 영상 정보의 제공을 요청하고, 웨어러블 카메라로부터 촬영된 영상 정보를 수신하는 영상 정보 수신 단계; 및
    (d)수신된 영상 정보 중에서 상기 검색 요청 정보에 매칭되는 대표 영상을 검색 결과로서 제공하고, 상기 대표 영상을 제공하는 과정에서 사용자의 명령에 의해 객체의 크기, 촬영 위치 및 촬영 각도가 다른 복수개의 후보 영상 정보를 제공하고, 사용자에 의해 특정 후보 영상 정보가 선택되면 상기 대표 영상을 선택된 후보 영상 정보로 대체하여 제공하는 영상 정보 제공 단계
    를 포함하는 것을 특징으로 하는 검색 방법.
  30. 검색 장치가 웨어러블 카메라에 의해 촬영된 영상을 기반으로 검색 서비스를 제공하는 검색 방법에 있어서,
    (a)사용자의 검색 요청을 수신하고, 수신된 검색 요청 데이터에 대해 검색 대상의 위치 및 객체를 분석하여 검색 요청 정보로서 결정하는 검색 요청 분석 단계;
    (b)결정된 검색 요청 정보의 위치를 이용하여 검색 대상의 웨어러블 카메라를 선별하는 웨어러블 카메라 선별 단계;
    (c)선별된 웨어러블 카메라로 영상 정보의 제공을 요청하고, 웨어러블 카메라로부터 촬영된 영상 정보를 수신하는 영상 정보 수신 단계; 및
    (d)수신된 영상 정보 중에서 상기 검색 요청 정보에 매칭되는 대표 영상을 검색 결과로서 제공하고, 상기 대표 영상을 제공하는 과정에서 사용자의 명령에 의해 상기 대표 영상이 지정되어 촬영 위치 및 촬영 각도의 변경 요청을 수신하고, 수신된 사용자의 촬영 제어 요청을 상기 대표 영상의 영상 정보를 촬영 중인 웨어러블 카메라로 전달하고, 전달된 촬영 제어 요청을 수락하는 웨어러블 카메라의 사용자에게 소정의 보상을 제공하는 영상 정보 제공 단계
    를 포함하는 것을 특징으로 하는 검색 방법.
KR1020130166469A 2013-12-30 2013-12-30 스마트 글래스의 영상 정보를 제공하는 검색 장치 및 검색 방법 KR101561628B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020130166469A KR101561628B1 (ko) 2013-12-30 2013-12-30 스마트 글래스의 영상 정보를 제공하는 검색 장치 및 검색 방법
US14/585,416 US20150186426A1 (en) 2013-12-30 2014-12-30 Searching information using smart glasses

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130166469A KR101561628B1 (ko) 2013-12-30 2013-12-30 스마트 글래스의 영상 정보를 제공하는 검색 장치 및 검색 방법

Publications (2)

Publication Number Publication Date
KR20150077708A KR20150077708A (ko) 2015-07-08
KR101561628B1 true KR101561628B1 (ko) 2015-10-20

Family

ID=53481992

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130166469A KR101561628B1 (ko) 2013-12-30 2013-12-30 스마트 글래스의 영상 정보를 제공하는 검색 장치 및 검색 방법

Country Status (2)

Country Link
US (1) US20150186426A1 (ko)
KR (1) KR101561628B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102505426B1 (ko) * 2021-12-07 2023-03-06 주식회사 에이치에이인터내셔날 원격 위치정보 서비스 제공

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10216765B2 (en) * 2014-10-28 2019-02-26 Here Global B.V. Image based routing and confirmation
KR101712022B1 (ko) * 2015-10-29 2017-03-13 김명락 니즈이동정보 데이터베이스 구축 및 활용 방법 및 이를 위한 서버
KR101715184B1 (ko) 2015-11-26 2017-03-13 주식회사 디엠에스 시각장애인용 벨트형 방향안내장치 및 그의 제어방법
US10957083B2 (en) * 2016-08-11 2021-03-23 Integem Inc. Intelligent interactive and augmented reality based user interface platform
CN109564706B (zh) * 2016-12-01 2023-03-10 英特吉姆股份有限公司 基于智能交互式增强现实的用户交互平台
JP2018092460A (ja) * 2016-12-06 2018-06-14 ソニーセミコンダクタソリューションズ株式会社 センサデバイス、センシングシステム、および、センサデバイスの制御方法
US10055644B1 (en) 2017-02-20 2018-08-21 At&T Intellectual Property I, L.P. On demand visual recall of objects/places
CN107808120B (zh) * 2017-09-30 2018-08-31 平安科技（深圳）有限公司 眼镜定位方法、装置及存储介质
KR102023573B1 (ko) * 2017-12-06 2019-09-24 한국과학기술연구원 지능형 음성 정보 제공 시스템 및 방법
KR102148021B1 (ko) * 2019-10-16 2020-08-25 주식회사 젠티 딥러닝 텍스트 탐지 기술을 활용한 실생활 영상 속의 정보 검색 방법 및 그 장치
KR102320851B1 (ko) * 2019-10-16 2021-11-02 주식회사 젠티 딥러닝 텍스트 탐지 기술을 활용한 실생활 영상 속의 정보 검색 방법
CN113093406A (zh) * 2021-04-14 2021-07-09 陈祥炎 智能眼镜

Family Cites Families (67)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3312345B2 (ja) * 1993-01-13 2002-08-05 株式会社リコー コンバータレンズを内蔵したレンズ鏡胴
US20060074546A1 (en) * 1999-04-19 2006-04-06 Dekock Bruce W System for providing traffic information
US6466862B1 (en) * 1999-04-19 2002-10-15 Bruce DeKock System for providing traffic information
JP2002015215A (ja) * 2000-06-30 2002-01-18 Hitachi Ltd マルチメデア情報配信システムおよび携帯情報端末装置
US6804707B1 (en) * 2000-10-20 2004-10-12 Eric Ronning Method and system for delivering wireless messages and information to personal computing devices
US7565008B2 (en) * 2000-11-06 2009-07-21 Evryx Technologies, Inc. Data capture and identification system and process
KR100504143B1 (ko) * 2003-01-11 2005-07-27 삼성전자주식회사 휴대단말기의 카메라 각도 제어장치 및 방법
JP2005173784A (ja) * 2003-12-09 2005-06-30 Nec Corp 映像情報配信システム及び方法と装置並びにプログラム
WO2005034041A1 (en) * 2003-10-07 2005-04-14 Openvr Co., Ltd. Apparatus and method for creating 3-dimensional image
US7683937B1 (en) * 2003-12-31 2010-03-23 Aol Inc. Presentation of a multimedia experience
US20070143785A1 (en) * 2005-12-20 2007-06-21 Sony Ericsson Mobile Communications Ab Mobile device display of multiple streamed data sources
US7797740B2 (en) * 2006-01-06 2010-09-14 Nokia Corporation System and method for managing captured content
US7667646B2 (en) * 2006-02-21 2010-02-23 Nokia Corporation System and methods for direction finding using a handheld device
US8498497B2 (en) * 2006-11-17 2013-07-30 Microsoft Corporation Swarm imaging
JP4788598B2 (ja) * 2006-12-28 2011-10-05 株式会社デンソー 渋滞度判定装置、渋滞情報報知装置及びプログラム
CN104243126B (zh) * 2007-06-22 2018-03-09 Tcl通讯科技控股有限公司 通信方法、基站及移动终端
JP5088143B2 (ja) * 2008-01-09 2012-12-05 富士通株式会社 位置判定方法
US9392572B2 (en) * 2008-03-04 2016-07-12 Yahoo! Inc. Using location-based request data for identifying beacon locations
US8060582B2 (en) * 2008-10-22 2011-11-15 Google Inc. Geocoding personal information
JP4545828B2 (ja) * 2008-12-19 2010-09-15 パナソニック株式会社 画像検索装置及び画像検索方法
IL196115A0 (en) * 2008-12-22 2009-09-22 Adi Gaash Method and system of searching for information pertaining target objects
US8040258B2 (en) * 2009-04-07 2011-10-18 Honeywell International Inc. Enhanced situational awareness system and method
US20100274569A1 (en) * 2009-04-23 2010-10-28 Douglas Reudink Real-time location sharing
US20100318535A1 (en) * 2009-06-11 2010-12-16 Microsoft Corporation Providing search results to a computing device
US20150058409A1 (en) * 2013-03-22 2015-02-26 Frank C. Wang Enhanced content delivery system and method spanning multiple data processing systems
US8694612B1 (en) * 2010-02-09 2014-04-08 Roy Schoenberg Connecting consumers with providers of live videos
WO2011100765A1 (en) * 2010-02-15 2011-08-18 Openwave Systems Inc. System and method for providing mobile user classification information for a target geographical area
JP5571498B2 (ja) * 2010-08-09 2014-08-13 Ｎｅｃマグナスコミュニケーションズ株式会社 周囲情報検索装置及び周囲情報検索方法
JP2012098573A (ja) * 2010-11-04 2012-05-24 Sony Corp 端末装置、端末装置のコンテンツ表示方法、サーバ装置、サーバ装置の表示データ送信方法およびサーバ装置のランキング情報送信方法
KR101786583B1 (ko) * 2011-02-14 2017-10-19 주식회사 케이티 교통 영상을 제공하는 장치
CN103477376B (zh) * 2011-04-20 2016-05-25 日本电气株式会社 交通状况监视***、方法和存储介质
US9176957B2 (en) * 2011-06-10 2015-11-03 Linkedin Corporation Selective fact checking method and system
US8917902B2 (en) * 2011-08-24 2014-12-23 The Nielsen Company (Us), Llc Image overlaying and comparison for inventory display auditing
KR20130040641A (ko) * 2011-10-14 2013-04-24 삼성테크윈 주식회사 레이다 연동 감시 시스템
JP2013090194A (ja) * 2011-10-19 2013-05-13 Sony Corp サーバ装置、画像送信方法、端末装置、画像受信方法、プログラムおよび画像処理システム
US20130106683A1 (en) * 2011-10-31 2013-05-02 Elwha LLC, a limited liability company of the State of Delaware Context-sensitive query enrichment
JP5425167B2 (ja) * 2011-12-02 2014-02-26 キヤノン株式会社 撮像手段を有する通信装置およびその制御方法
CN103188606A (zh) * 2011-12-30 2013-07-03 北大方正集团有限公司 基于位置的电子信息提供方法及装置
US9060409B2 (en) * 2012-02-13 2015-06-16 Lumenetix, Inc. Mobile device application for remotely controlling an LED-based lamp
KR101982150B1 (ko) * 2012-02-16 2019-05-27 삼성전자주식회사 데이터 전송을 위한 디바이스 검색 시스템 및 방법
US9105221B2 (en) * 2012-03-02 2015-08-11 Realtek Semiconductor Corp. Multimedia interaction system and related computer program product capable of blocking multimedia interaction commands that against interactive rules
US9620087B2 (en) * 2012-03-02 2017-04-11 Realtek Semiconductor Corp. Multimedia interaction system and related computer program product capable of avoiding unexpected interaction behavior
US9338251B2 (en) * 2012-04-18 2016-05-10 Niimblecat, Inc. Social-mobile-local (SML) networking with intelligent semantic processing
TWI510082B (zh) * 2012-06-06 2015-11-21 Etron Technology Inc 用於影像辨識之影像擷取方法及其系統
WO2013192583A1 (en) * 2012-06-22 2013-12-27 Google Inc Providing information about relevant elements from maps history based on location
WO2014003735A1 (en) * 2012-06-27 2014-01-03 Empire Technology Development Llc Determining reliability of online post
US10022041B2 (en) * 2012-06-27 2018-07-17 Camplex, Inc. Hydraulic system for surgical applications
US20140028799A1 (en) * 2012-07-25 2014-01-30 James Kuffner Use of Color and Intensity Modulation of a Display for Three-Dimensional Object Information
JP6200136B2 (ja) * 2012-08-06 2017-09-20 キヤノン株式会社 画像形成装置、検索システム、画像形成装置の制御方法及びプログラム
US20140052578A1 (en) * 2012-08-15 2014-02-20 Vernon REDWOOD Promoter system and method for processing product and service data
US10404946B2 (en) * 2012-09-26 2019-09-03 Waldstock, Ltd System and method for real-time audiovisual interaction with a target location
US8995640B2 (en) * 2012-12-06 2015-03-31 Ebay Inc. Call forwarding initiation system and method
US9161299B2 (en) * 2013-01-28 2015-10-13 Transpacific Ip Management Group Ltd. Remote radio header selection
US9898661B2 (en) * 2013-01-31 2018-02-20 Beijing Lenovo Software Ltd. Electronic apparatus and method for storing data
TWI483122B (zh) * 2013-03-11 2015-05-01 Hon Hai Prec Ind Co Ltd 網路裝置探尋系統及方法
US20140267730A1 (en) * 2013-03-15 2014-09-18 Carlos R. Montesinos Automotive camera vehicle integration
US20140358881A1 (en) * 2013-05-31 2014-12-04 Broadcom Corporation Search Infrastructure Supporting Identification, Setup and Maintenance of Machine to Machine Interactions
KR102039427B1 (ko) * 2013-07-01 2019-11-27 엘지전자 주식회사 스마트 글라스
JP5787949B2 (ja) * 2013-08-28 2015-09-30 ヤフー株式会社 情報処理装置、特定方法および特定プログラム
KR101494894B1 (ko) * 2013-09-13 2015-02-24 주식회사 비케이 사용자의 보유 정보를 타인과의 인터랙션을 통해 변경하기 위한 방법, 단말기 및 서버
KR101509926B1 (ko) * 2013-09-17 2015-04-07 현대자동차주식회사 일괄 검색 시스템 및 그 검색 방법
US9292764B2 (en) * 2013-09-17 2016-03-22 Qualcomm Incorporated Method and apparatus for selectively providing information on objects in a captured image
US9591512B2 (en) * 2013-12-30 2017-03-07 Motorola Solutions, Inc. Spatial quality of service prioritization algorithm in wireless networks
WO2015119371A1 (ko) * 2014-02-05 2015-08-13 에스케이플래닛 주식회사 Poi 그룹화를 이용한 poi 정보 제공 장치 및 방법
US10311115B2 (en) * 2014-05-15 2019-06-04 Huawei Technologies Co., Ltd. Object search method and apparatus
US10216765B2 (en) * 2014-10-28 2019-02-26 Here Global B.V. Image based routing and confirmation
TWI616829B (zh) * 2015-08-21 2018-03-01 緯創資通股份有限公司 物品定位追蹤的方法及其系統與電腦可讀取記錄媒體

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102505426B1 (ko) * 2021-12-07 2023-03-06 주식회사 에이치에이인터내셔날 원격 위치정보 서비스 제공

Also Published As

Publication number Publication date
KR20150077708A (ko) 2015-07-08
US20150186426A1 (en) 2015-07-02

Similar Documents

Publication Publication Date Title
KR101561628B1 (ko) 스마트 글래스의 영상 정보를 제공하는 검색 장치 및 검색 방법
US10410364B2 (en) Apparatus and method for generating virtual reality content
US10264207B2 (en) Method and system for creating virtual message onto a moving object and searching the same
EP3388958B1 (en) Method and system for managing viewability of location-based spatial object
US20180089229A1 (en) Method and system for sorting a search result with space objects, and a computer-readable storage device
EP3299971A1 (en) Method and system for remote management of location-based spatial object
US10606886B2 (en) Method and system for remote management of virtual message for a moving object
US9418284B1 (en) Method, system and computer program for locating mobile devices based on imaging
JP5072464B2 (ja) 画像提供装置、画像提供方法、画像提供プログラムおよびそのプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2006093955A (ja) 映像処理装置
KR20200024541A (ko) 동영상 컨텐츠 검색 지원 방법 및 이를 지원하는 서비스 장치
KR20120036494A (ko) 실시간 방송 정보 제공 방법 및 시스템
KR101831663B1 (ko) 스마트 단말에서 생태관광 컨텐츠 표시 방법
JP2020088855A (ja) ゴルフダイジェスト作成システム、移動撮影ユニットおよびダイジェスト作成装置
CN111323041A (zh) 信息处理***、存储介质和信息处理方法
KR101288851B1 (ko) 수치지도를 이용한 스마트폰 사용자 맞춤형 증강현실 서비스 시스템의 운용방법
KR101334127B1 (ko) 클라이언트 단말기를 이용한 동영상 콘텐츠 공유 서비스 제공 시스템 및 방법
KR102005034B1 (ko) 영상 기반의 객체 정보 획득 방법 및 장치
KR101882370B1 (ko) 지역 분할과 파노라마 분할 기법을 이용한 위치기반 관심지점 정보 검색 시스템 및 방법
KR101486506B1 (ko) 위치 기반 멀티미디어 콘텐츠 생성 장치 및 그 방법
KR20200079741A (ko) 개인화 서비스를 제공하는 단말, 방법 및 컴퓨터 프로그램
KR102027297B1 (ko) 장면 기반 동영상 네비게이션 장치
CN113704554B (zh) 基于电子地图的视频检索方法及***
KR102197885B1 (ko) 증강 현실 컨텐츠를 표시하는 단말 및 서버
KR101640020B1 (ko) 강화 이미지 제공 시스템 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
FPAY Annual fee payment

Payment date: 20181001

Year of fee payment: 4