KR20140064326A - 태그 정보 저장 방법 및 장치와 태그 정보를 이용한 이미지 검색 방법 및 장치 - Google Patents

태그 정보 저장 방법 및 장치와 태그 정보를 이용한 이미지 검색 방법 및 장치 Download PDF

Info

Publication number
KR20140064326A
KR20140064326A KR1020120131539A KR20120131539A KR20140064326A KR 20140064326 A KR20140064326 A KR 20140064326A KR 1020120131539 A KR1020120131539 A KR 1020120131539A KR 20120131539 A KR20120131539 A KR 20120131539A KR 20140064326 A KR20140064326 A KR 20140064326A
Authority
KR
South Korea
Prior art keywords
image
search
information
area
tag information
Prior art date
Application number
KR1020120131539A
Other languages
English (en)
Other versions
KR102059913B1 (ko
Inventor
황민경
강두석
임새미
정의창
최보근
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020120131539A priority Critical patent/KR102059913B1/ko
Priority to US14/083,773 priority patent/US9563818B2/en
Priority to EP13193428.3A priority patent/EP2733629B1/en
Priority to CN201310581238.3A priority patent/CN103838810B/zh
Publication of KR20140064326A publication Critical patent/KR20140064326A/ko
Application granted granted Critical
Publication of KR102059913B1 publication Critical patent/KR102059913B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/40—Data acquisition and logging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5854—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using shape and object relationship
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/587—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Library & Information Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 태그 정보 저장 및 저장된 태그 정보를 이용하여 이미지 검색을 수행하기 위한 방법 및 장치에 관한 것으로, 본 발명의 일 실시 예에 따른 태그 정보를 이용한 이미지 검색 방법은, 각각에 포함된 적어도 하나의 대상물의 배치에 관한 배치 정보를 태그 정보로서 포함하는 이미지들 중에 특정 배치를 갖는 대상물을 포함하는 이미지의 검색을 위한 배치 검색 정보를 입력받는 단계; 및 상기 이미지들 각각의 태그 정보를 분석하여, 상기 배치 검색 정보를 만족하는 배치 정보를 갖는 이미지를 검색하는 단계를 포함한다. 본 발명에 따르면, 사용자가 원하는 대상물 배치를 갖는 이미지를 간편하게 검색할 수 있는 이점이 있다.

Description

태그 정보 저장 방법 및 장치와 태그 정보를 이용한 이미지 검색 방법 및 장치{TAG STORING METHOD AND APPARATUS THEREOF, IMAGE SEARCHING METHOD USING TAG AND APPARAUTS THEREOF}
본 발명은 태그 정보 저장 방법 및 장치와, 태그 정보를 이용하여 이미지 검색을 수행하기 위한 방법 및 장치에 관한 것이다.
최근 멀티미디어 기술의 발달로 인하여, 스마트 폰 및 태블릿 PC 등의 미디어 기기의 보급이 널리 이루어지고 있다. 그리고, 이러한 미디어 기기에는, 이미지 촬영을 위한 카메라가 탑재되거나, 외부로부터 다운로드된 각 종 이미지를 관리하기 위한 각 종 프로그램이 탑재되고 있다.
이러한 미디어 기기의 사용자는, 자신이 원하는 이미지를 검색하기 위하여 이미지에 결합된 태그 정보를 이용할 수 있다. 태그 정보는, 각각의 이미지에 결합되며, 해당 이미지의 생성 시점, 생성 장소 및 해당 이미지에 포함된 각 종 사물 또는 인물에 대한 정보를 포함한다.
이러한 태그 정보를 이용한 이미지 검색 시에, 사용자는 원하는 검색어를 입력하여 자신이 원하는 이미지를 검색할 수 있다. 예를 들어, 특정 인물에 대한 이름을 검색어로서 입력함으로써 해당 특정 인물이 포함된 이미지를 검색할 수 있다.
그러나, 이러한 종래의 이미지 검색 방법은, 인물 또는 사물이 특정 배치를 갖는 이미지를 검색할 수 없는 문제점이 있다. 즉, 동일한 장소에서 촬영된 다수의 이미지 중에서 특정 사물 또는 인물이 이미지상의 특정 영역에 위치하는 이미지를 검색할 수 없는 문제점이 있다.
따라서, 사용자가 자신이 원하는 형태의 배치를 갖는 이미지를 검색하기 위하여는, 특정 검색어에 대한 검색 결과를 일일이 확인하며 원하는 이미지를 검색하여야 하는 문제점이 있다.
따라서, 본 발명은, 사용자가 원하는 이미지를 간편하게 검색할 수 있도록 하는 방안을 제공한다.
그 외의 본 발명에서 제공하고자 하는 목적은, 하기의 실시 예들을 통하여 파악될 수 있다.
이를 위하여, 본 발명의 일 실시 예에 따른 태그 정보 저장 방법은, 이미지에 포함된 적어도 하나의 대상물을 인식하는 단계; 상기 인식된 적어도 하나의 대상물의 명칭 및 상기 이미지 상에서 해당 대상물이 위치하는 영역인 대상물 영역을 규정하는 배치 정보를 생성하는 단계; 및 상기 생성된 배치 정보를 태그 정보로서 상기 이미지에 결합하는 단계를 포함한다.
한편, 본 발명의 일 실시 예에 따른 태그 정보를 이용한 이미지 검색 방법은, 각각에 포함된 적어도 하나의 대상물의 배치에 관한 배치 정보를 태그 정보로서 포함하는 이미지들 중에 특정 배치를 갖는 대상물을 포함하는 이미지의 검색을 위한 배치 검색 정보를 입력받는 단계; 및 상기 이미지들 각각의 태그 정보를 분석하여, 상기 배치 검색 정보를 만족하는 배치 정보를 갖는 이미지를 검색하는 단계를 포함한다.
한편, 본 발명의 일 실시 예에 따른 태그 정보 저장 장치는, 적어도 하나의 이미지를 저장하는 메모리부; 및 각각의 이미지에 포함된 적어도 하나의 대상물을 인식하고, 인식된 적어도 하나의 대상물의 명칭 및 해당 이미지 상에서 해당 대상물이 위치하는 영역인 대상물 영역을 규정하는 배치 정보를 생성하며, 상기 생성된 배치 정보를 태그 정보로서 상기 이미지에 결합하는 제어부를 포함한다.
한편, 본 발명의 일 실시 예에 따른 태그 정보를 이용한 이미지 검색 장치는, 각각에 포함된 적어도 하나의 대상물의 배치에 관한 정보를 태그 정보로서 포함하는 이미지들 중에 특정 배치를 갖는 대상물을 포함하는 이미지의 검색을 위한 배치 검색 정보를 입력받는 입력부; 및 상기 이미지들 각각의 태그 정보를 분석하여, 상기 배치 검색 정보를 만족하는 배치 정보를 갖는 이미지를 검색하는 제어부를 포함한다.
본 발명에 따르면, 사용자가 원하는 대상물 배치를 갖는 이미지를 간편하게 검색할 수 있는 이점이 있다.
도 1은 본 발명의 개념을 설명하기 위한 예시도,
도 2는 본 발명의 일 실시 예에 따른 태그 정보 저장 방법을 설명하기 위한 흐름도,
도 3은 본 발명의 일 실시 예에 따른 태그 정보 저장 방법을 설명하기 위한 예시도,
도 4는 본 발명의 일 실시 예에 따른 이미지 검색 방법을 설명하기 위한 흐름도,
도 5는 본 발명의 일 실시 예에 따른 배치 검색 정보를 입력하는 과정을 설명하기 위한 예시도,
도 6은 본 발명의 일 실시 예에 따른 이미지 검색을 수행하는 과정을 설명하기 위한 예시도,
도 7은 본 발명의 일 실시 예에 따른 이미지 검색 조건을 설명하기 위한 예시도,
도 8은 본 발명의 일 실시 예에 따른 해상도 조절 과정을 설명하기 위한 예시도,
도 9는 본 발명의 일 실시 예에 따른 이미지 검색 결과 화면을 설명하기 위한 예시도,
도 10은 본 발명의 실시 예들이 적용되는 장치를 설명하기 위한 블록도.
이하에서, 본 발명을 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다.
이하에서, 본 발명의 실시 예들을 설명함에 있어서, 설명의 편의를 위하여, 미디어 기기는, 터치 스크린(touch screen)을 구비하는 것으로 가정하나, 본 발명은 이에 한정되지 않고, 터치 스크린의 입력 및 디스플레이 기능을 대체 가능한 각 종 수단을 구비하는 장치에 적용될 수 있다. 예를 들어, 마우스 또는 디지타이저 등의 입력 장치와 모니터 등의 디스플레이 장치를 구비하는 각 종 장치에 본 발명의 실시 예들이 적용될 수 있다.
이하에서, 미디어 기기란, 이미지 및 텍스트 등의 각 종 미디어의 기록 및 표시 중 적어도 하나의 수행이 가능한 기기로서, 휴대 전화, 스마트 폰(smart phone), 네비게이션(navigation), 개인 휴대용 정보 단말기(Personal Digital Assistant; PDA), 휴대용 멀티미디어 플레이어(Portable Multimedia Player; PMP), MP3(Moving Picture Experts Group layer 3) 플레이어, 게임기, 태블릿(tablet), 넷북(netbook), 테스크탑 컴퓨터(desktop computer), 노트북 컴퓨터(notebook computer), 인터넷(internet) 접속이 가능한 통신 단말 및 방송 수신이 가능한 통신 단말 등을 포함하는 의미로 사용한다.
이하, 첨부되는 도면을 참조하여 본 발명의 실시 예들을 설명한다.
먼저, 도 1을 참조하여 본 발명의 개념에 대하여 설명한다.
미디어 기기에, 도 1의 (a) 및 도 1의 (b)에 도시된 바와 같은, 서울 타워(110)가 포함된 이미지와 그 밖의 여러 이미지가 저장되어 있다고 가정하자. 도 1의 (a)에 도시된 바와 같은 이미지에는 서울 타워(110)가 이미지의 중앙 영역에 위치하고, 도 1의 (b)에 도시된 바와 같은 이미지에는 서울 타워(110)가 이미지의 우측 하단부에 위치한다.
이 때, 사용자는 서울 타워(110)가 이미지의 중앙 영역에 위치하는 이미지를 검색하고자 할 수 있다. 이러한 경우, 단순히 이미지에 포함된 대상물의 명칭만을 태그 정보로서 저장하는 종래의 방법을 이용한다면, 도 1의 (a) 및 도 1의 (b)에 도시된 바와 같은, 서울 타워(110)를 포함하는 이미지가 모두 검색된다.
그러나, 본 발명에서는, 각 이미지에 포함된 대상물이 해당 이미지 상에서 위치하는 영역인 대상물 영역을 태그 정보로서 저장하여 두고, 이미지 검색 시에 이를 활용하는 방안을 제안한다. 즉, 사용자가 원하는 특정 대상물이 이미지 상의 특정 영역에 위치하는 이미지를 검색할 수 있도록 하는 방안을 제공한다.
따라서, 미디어 기기는, 사용자로부터 특정 검색 영역과 해당 검색 영역에서 검색을 수행할 대상물에 대한 검색어를 포함하는 검색 정보를 입력받고, 입력된 검색 정보를 기반으로 이미지 검색을 수행한다.
예를 들어, 사용자가 도 1의 (c)에 도시된 바와 같은 이미지 검색 화면에서, 미디어 기기의 디스플레이 영역의 일부를 선택하고, 선택된 영역(120)에 대응하는 검색어를 입력한 경우, 미디어 기기는, 입력된 검색어에 대응하는 대상물이 선택된 영역(120)에 대응하는 영역에 위치하는 이미지를 검색하고, 검색 결과를 사용자에게 제공한다. 따라서, 사용자가 선택한 검색 영역(120)에서 검색을 수행할 대상물을 '서울 타워'로 지정한 경우, 미디어 기기는, 검색 영역(120)에 대응하는 영역에 '서울 타워'가 포함된 이미지를 검색한다.
도 1의 (d)는 도 1의 (a)에 도시된 바와 같은 이미지와 사용자가 입력한 검색 정보를 비교하는 화면을 보여주는 예시도이다. 도 1의 (d)를 참조하면 사용자가 지정한 검색 영역(120)에 대응하는 영역에 서울 타워(110)가 포함되어 있으므로, 미디어 기기는 해당 이미지를 사용자가 검색하고자 하는 이미지로 판단하고, 검색 결과를 사용자에게 안내한다.
한편, 도 1의 (e)는 도 1의 (b)에 도시된 바와 같은 이미지와 사용자가 입력한 검색 정보를 비교하는 화면을 보여주는 예시도이다. 도 1의 (e)를 참조하면, 사용자가 지정한 검색 영역(120)에 대응하는 영역에 서울 타워(110)가 포함되어 있지 않으므로, 미디어 기기는 해당 이미지를 사용자가 검색하고자 하는 이미지가 아니라고 판단한다.
즉, 종래 기술에 따르면, 서울 타워(110)가 포함된 이미지인 도 1의 (a) 및 도 1의 (b)에 도시된 바와 같은 이미지를 검색 결과로서 모두 사용자에게 제공하므로 사용자는 제공된 이미지 중에서 자신이 원하는 이미지를 일일이 다시 찾아야 하는 불편함이 있지만, 전술한 본 발명에 따르면 사용자가 원하는 이미지를 간편하게 검색할 수 있는 이점이 있다.
한편, 전술한 이미지 검색을 수행하기 위하여는, 각각의 이미지에 포함된 대상물이 해당 이미지상에서 위치하는 영역인 대상물 영역에 관한 정보를 미리 저장하여 둘 필요가 있다.
이에, 본 발명에서는, 이미지 상에서 대상물이 위치하는 영역인 대상물 영역에 관한 정보를 저장하는 방법과 해당 정보를 이용하여 이미지 검색을 수행하는 방법을 제안한다. 이하, 각 방법을 관련되는 도면을 참조하여 설명한다.
먼저, 도 2를 참조하여, 이미지 상에서 대상물이 위치하는 영역인 대상물 영역에 관한 정보를 태그 정보로서 저장하는 방법에 대하여 살펴본다. 대상물 영역에 관한 정보는 해당 대상물의 명칭과 함께 저장되며, 이하에서는, 대상물 영역에 관한 정보와 해당 대상물의 명칭을 배치 정보라 한다.
단계(201)에서, 미디어 기기는, 이미지에 포함된 적어도 하나의 대상물을 인식한다. 여기서, 이미지는, 기존에 미디어 기기에 저장되어 있는 이미지일 수도 있고, 또는 미디어 기에 탑재된 카메라를 이용한 촬영 시점에 생성되는 이미지일 수도 있다. 즉, 대상물의 인식은 카메라를 이용한 촬영 시점에 자동으로 수행될 수도 있고, 특정 메뉴의 실행 시점에 미디어 기기에 기 저장된 이미지들에 대하여 수행될 수도 있다. 대상물의 인식에는 종래 이용되는 다양한 인식 기법이 적용될 수 있다. 인물 인식에는 인물의 얼굴, 반신, 전신 또는 자세를 인식하는 다양한 기법이 적용될 수 있다. 그리고, 이러한 인물 인식 기법에는, 소셜 네트워크(social network) 관련 어플리케이션 및 주소록 등이 이용될 수 있다. 예를 들어, 해당 어플리케이션 및 주소록에 등록된 인물의 사진 정보 등을 기반으로 인물 인식이 수행될 수 있다. 한편, 사물 인식에는 위치 정보를 기반으로 한 다양한 기법이 적용될 수 있다. 예를 들어, GPS(Global Positioning System) 정보 및 주변 맵 정보를 이용한 사물 인식 기법 등이 적용될 수 있다. 또한, GPS 정보 및 주 변 맵 정보에 더하여 화각에 대한 센싱 정보를 이용한 사물 인식 기법이 적용될 수 있는 데, 이러한 기법을 이용하면 대상물을 이미지 상에 표시될 수 없는 사물로 인식하는 오류를 줄일 수 있고, 또한 사물 인식에 소요되는 프로세스를 절감할 수 있다.
단계(203)에서, 미디어 기기는, 인식된 대상물에 대한 배치 정보를 생성한다. 전술한 바와 같이, 배치 정보는, 대상물의 명칭 및 해당 대상물의 대상물 영역에 관한 정보를 포함한다. 즉, 배치 정보는, 해당 이미지 상에서 인식된 대상물이 해당 이미지 상의 어느 영역에 위치하는지에 대한 정보를 포함한다.
단계(205)에서, 미디어 기기는, 생성된 배치 정보를 태그 정보로서 이미지에 결합한다. 태그 정보는, 이미지에 결합되는 정보로서, 배치 정보 이외에 해당 이미지의 생성 시점 및 생성 장소 등을 더 포함할 수 있다.
전술한 태그 정보 저장 방법의 예를 도 3을 참조하여 설명한다.
먼저, 미디어 기기는, 기 저장된 이미지 또는 촬영 시에 생성된 이미지에 포함된 대상물을 인식한다. 도 3에는 예를 들어, 하나의 이미지에서 두 개의 대상물(310, 320)이 인식된 경우를 도시하였다.
대상물(310, 320)이 인식되면, 미디어 기기는, 각 대상물(310, 320)의 배치 정보(330)를 생성한다. 전술한 바와 같이, 배치 정보는, 대상물이 해당 이미지 상에서 위치하는 영역인 대상물 영역을 나타낼 수 있는 정보이다. 이러한 대상물 영역은 다양한 형태로 표현될 수 있으나, 본 발명의 실시 예에서는, 연산의 간소화와 저장되는 정보량을 최소화하기 위하여 직사각형 형태로 규정되는 것으로 설명한다. 그러나, 본 발명이 이에 한정되는 것은 아니며, 인식된 대상물의 가장자리를 잇는 폐곡선 형태로 규정될 수도 있다.
대상물 영역이 직사각형 형태로 규정되는 경우, 대상물 영역은 설정된 어느 하나의 지점, 예를 들어 이미지의 상단 좌측을 출발점으로 한 좌표 정보로서 규정될 수 있다.
예를 들어, 이미지의 상단 좌측의 좌표를 (0, 0), 이미지의 하단 우측의 좌표를 (X, Y)라 할 때, 도 3의 (a)에 도시된 바와 같이, 대상물(310)의 대상물 영역은, 좌표(0, 0)로부터 가장 가까운 좌표(X1, Y1)와 가장 먼 좌표(X2, Y2)로 규정될 수 있고, 대상물(320)의 대상물 영역은, 좌표(0, 0)로부터 가장 가까운 좌표(X3, Y3)와 가장 먼 좌표(X4, Y4)로 규정될 수 있다.
다른 실시 예로, 대상물의 대상물 영역은, , 어느 하나의 좌표와 해당 좌표를 기준으로 한 상하 길이 및 좌우 길이로 규정될 수도 있다. 이를 도 3의 (b)에 도시하였다. 즉, 대상물(310)의 대상물 영역은, 좌표(0, 0)으로부터 가장 가까운 좌표(X1, Y1)와 해당 좌표(X1, Y1)을 기준으로 한 좌우 길이(α1) 및 상하 길이(β1)로 규정될 수 있고, 대상물(320)의 대상물 영역은, 좌표(0, 0)으로부터 가장 가까운 좌표(X3, Y3)와 해당 좌표 (X3, Y3)를 기준으로 한 좌우 길이(α2) 및 상하 길이(β2)로 규정될 수 있다.
각 대상물(310, 320)들의 대상물 영역이 결정되면, 미디어 기기는, 결정된 좌표 정보를 해당 대상물의 명칭에 맵핑한 배치 정보(330)를 생성하고, 생성된 배치 정보(330)를 태그 정보로서 해당 이미지에 결합한다.
이상에서는, 도 2 및 도3을 참조하여 본 발명의 일 실시 예에 따른 태그 정보 저장 방법에 대하여 살펴보았다. 이하에서는, 관련되는 도면을 참조하여 태그 정보를 이용한 이미지 검색 방법에 대하여 살펴본다.
도 4는 본 발명의 일 실시 예에 따른 이미지 검색 방법을 설명하기 위한 흐름도이다.
단계(401)에서, 미디어 기기는, 사용자로부터 특정 배치를 갖는 대상물을 포함하는 이미지 검색을 위한 검색 정보(이하, 배치 검색 정보라 함)를 입력 받는다. 여기서 배치 검색 정보는, 대상물이 이미지 상의 특정 영역에 위치하는 이미지를 검색하기 위한 정보를 의미한다. 배치 검색 정보는, 특정 대상물을 검색하기 위한 검색 영역과 해당 검색 영역에서 검색을 수행할 검색어를 포함한다.
이를 도 5를 참조하여 설명하면 다음과 같다.
연산의 간소화를 위하여 본 발명에서는, 디스플레이 영역을 설정된 개수로 분할한 디스플레이 화면을 사용자에게 제공하고, 분할된 디스플레이 영역 중 일부를 선택하는 사용자의 동작에 따라 검색 영역이 선택되는 실시 예를 설명한다. 그러나, 본 발명이 이에 한정되는 것은 아니며, 검색 영역의 선택은 도 5의 (a)에 도시된 바와 같이, 전자 펜 등을 이용한 폐곡선의 도시로 이루어질 수도 있다. 즉, 도시된 폐곡선 영역이 검색 영역이 될 수 있다.
사용자가 이미지 검색을 위한 메뉴를 실행하면, 미디어 기기는, 도 5의 (b)에 도시된 바와 같이, 디스플레이 영역이 설정된 개수로 분할된 화면을 사용자에게 제공한다. 그러면, 사용자는 디스플레이되는 화면을 보고 검색 영역을 선택할 수 있다. 일 실시 예에서, 검색 영역의 선택은, 전자 펜 또는 손가락 등을 이용한 터치 및 드래그 등의 각 종 동작으로 이루어질 수 있다. 따라서, 미디어 기기는, 도 5의 (c)에 도시된 바와 같이, 전자 펜의 궤적이 포함된 분할 영역들(510, 520, 530)이 검색 영역으로서 선택된 것으로 판단하거나, 도 5의 (d)에 도시된 바와 같이, 개별적으로 터치 동작이 이루어진 분할 영역들(510, 520, 530) 또는 터치 동작이 이루어진 어느 하나의 분할 영역(510)과 해당 분할 영역(510)으로부터 드래그 동작이 이루어진 분할 영역들(520, 530)이 검색 영역으로서 선택된 것으로 판단할 수 있다.
검색 영역이 선택되면, 미디어 기기는, 사용자가 해당 검색 영역에서 검색을 수행할 검색어를 입력할 수 있는 메뉴를 제공한다. 검색어의 입력은 도 5의 (e)에 도시된 바와 같이 전자 펜 등을 이용한 필기로 이루어질 수도 있고, 또는 도 5의 (f)에 도시된 바와 같이 디스플레이되는 키보드 상의 입력으로 이루어질 수도 있으며, 도 5의 (g)에 도시된 바와 같이 드랍(drop) 메뉴로서 제공되는 단어들의 선택으로 이루어질 수도 있다.
다시 도 4를 참조하여 설명하면, 단계(403)에서, 미디어 기기는, 저장된 이미지들의 배치 정보와 입력된 배치 검색 정보를 비교한다. 즉, 미디어 기기는 각 이미지들에 결합된 배치 정보를 분석하여 입력된 배치 검색 정보를 만족하는 이미지가 있는지 검색한다.
일 실시 예에서, 이미지의 검색은, 입력된 검색어를 배치 정보로서 포함하는 이미지를 먼저 검색하여 선택한 후, 선택된 이미지들 중에서 각 대상물이 위치하는 대상물 영역과 입력된 검색 영역을 비교하는 하는 방식으로 이루어질 수 있다.
이를 도 6을 참조하여 설명하면 다음과 같다.
도 6의 (a)에 도시된 바와 같은 배치 검색 정보가 입력되었을 때, 미디어 기기는, 저장된 이미지들 중 '아이'와 '서울 타워'가 배치 정보로서 저장된 이미지를 검색하여 선택한다. 이렇게 선택된 이미지의 예를 도 도 6의 (b) 내지 도 6의 (d)에 도시하였다.
이 후, 미디어 기기는, 선택된 3개의 이미지들 중에서 입력된 배치 검색 정보를 만족하는 이미지를 검색한다. 즉, 검색 영역(610)에 대응하는 영역에 '서울 타워'가 위치하고, 검색 영역(620)에 대응하는 영역에 '아이'가 위치하는 이미지를 검색한다.
따라서, 도 6의 (b) 내지 도 6의 (d)에 도시된 바와 같은 이미지들 중에서, 입력된 배치 검색 정보를 만족하는 이미지, 즉, 검색 영역(610)과 검색 영역(620)에 각각 대응되는 영역에 '서울 타워'와 '아이'가 위치하는 이미지인, 도 6의 (b)에 도시된 바와 같은 이미지가 선택된다.
한편, 이미지 검색 시에, 검색 영역과 대상물 영역이 완전히 일치하는 경우뿐만 아니라, 그 영역들이 설정 값 이상 겹치는 경우 검색 조건을 만족하는 것으로 설정할 수 있다. 예를 들어, 설정 값이 50%인 경우, 미디어 기기는, 도 7의 (a)에 도시된 바와 같은 이미지는 배치 검색 정보를 만족하는 것으로 판단하고, 도 7의 (b)에 도시된 바와 같은 이미지는 배치 검색 정보를 만족하지 못하는 것으로 판단할 수 있다.
한편, 하나의 검색 영역에서 다수의 검색어가 입력될 수 있다. 이러한 경우, 해당 검색 영역에서 다수의 검색어에 대응하는 대상물을 모두 포함하는 이미지만을 검색하거나, 다수의 검색어 중 어느 하나의 대상물을 포함하는 이미지가 검색되도록 할 수 있다. 이는 기 설정된 사항에 의하거나, 검색어 입력 시에 사용자에 의하여 선택된 연산자 'and' 또는 'or' 등을 이용한 연산을 통해 이루어질 수도 있다.
한편, 각 이미지의 해상도는 미디어 기기의 디스플레이 해상도와 다를 수 있다. 따라서, 미디어 기기는, 검색 영역과 대상물 영역의 비교 이전에, 각 이미지의 해상도와 미디어 기기의 디스플레이 해상도를 일치시키는 작업을 수행할 수 있다. 즉, 미디어 기기의 디스플레이 해상도를 기준으로 각 이미지에 포함된 대상물의 좌표 정보를 조절할 수 있다. 이러한 동작은 미디어 기기의 디스플레이의 해상도와 각 이미지 해상도의 비율을 고려하여 이루어질 수 있다. 예를 들어, 도 8의 (a)에 도시된 바와 같이, 검색 대상이 되는 이미지의 해상도가 250ⅹ500 이고, 도 8의 (b)에 도시된 바와 같이 미디어 기기의 디스플레이 해상도가 500 ⅹ1000인 경우라 가정하자. 이 때, 미디어 기기의 해상도는 해당 이미지 해상도의 2배이므로, 해당 이미지에 포함된 대상물의 좌표 값을 각각 2배로 하는 좌표 보정을 수행할 수 있다. 즉, 도 8의 (a)에 도시된 바와 같은 대상물의 좌표 정보 (100, 150), (200 250)는 (200, 300), (400, 500)으로 수정될 수 있다. 미디어 기기는, 좌표 정보를 수정한 이후, 대상물 영역과 검색 영역의 비교를 수행할 수 있다.
다시 도 4를 참조하여 설명하면, 단계(403)에서 미디어 기기는 검색 결과를 사용자에게 안내한다. 이를 도 9를 참조하여 설명하면 다음과 같다.
미디어 기기는 이미지 검색 결과를 도 9의 (a)에 도시된 바와 같이, 썸네일로서 디스플레이할 수 있다. 이때, 미디어 기기는, 검색된 각 이미지의 태그 정보 또는 메타 데이터 등을 참조하여 해당 이미지의 생성 시점 등의 각 종 정보를 함께 디스플레이할 수 있다.
또는, 미디어 기기는, 검색 결과를 도 9의 (b)에 도시된 바와 같이, 전체 디스플레이 영역에서 디스플레이할 수 있다. 그리고, 설정된 디스플레이 영역을 스와이프 하는 등의 사용자의 동작이 이루어지면, 검색된 다음 이미지를 디스플레이할 수 있다.
한편, 도 9를 참조하여 설명한 검색 결과 안내 화면에서, 미디어 기기는, 검색된 이미지에 우선 순위를 부여하여, 순서대로 사용자에게 안내할 수 있다. 예를 들어, 미디어 기기는, 검색 영역과 대상물 영역이 겹치는 영역이 가장 넓은 이미지에 우순 순위를 부여하거나, 해당 이미지에서의 대상물의 크기가 가장 큰 이미지에 우선 순위를 줄 수도 있다.
이상에서는, 도 1 내지 도 9를 참조하여, 본 발명의 실시 예들에 따른 태그 정보 저장 방법과 이미지 검색 방법에 대하여 살펴보았다. 이하에서는, 관련되는 도면을 참조하여 본 발명의 실시 예들이 적용되는 태그 정보 저장 장치와 이미지 검색 장치에 대하여 살펴본다.
도 10은 본 발명의 실시 예들이 적용되는 태그 정보 저장 장치와 이미지 검색 장치를 설명하기 위한 블록도이다.
본 발명의 실시 예들이 적용되는 태그 정보 저장 방법과 이미지 검색 방법은 별개의 장치에서 수행될 수도 있으나, 이하에서는, 설명의 편의를 위하여 두 방법이 하나의 장치에서 수행되는 것을 예로 들어 설명한다. 또한, 설명의 편의를 위하여, 터치 스크린을 구비하는 장치를 예로 들어 설명하나, 전술한 바와 같이, 본 발명은 이에 한정되지 않고, 터치 스크린의 입력 및 디스플레이 기능을 대체 가능한 각 종 수단을 구비하는 장치에 적용될 수 있다. 예를 들어, 마우스 또는 디지타이저 등의 입력 장치와 모니터 등의 디스플레이 장치를 구비하는 각 종 장치에 본 발명의 실시 예들이 적용될 수 있다.
제어부(1010)는, 이미지 생성 시점에 카메라부(1040)로부터 전달된 이미지들, 또는 사용자로부터 입력된 명령에 따라 메모리부(1020)에 저장된 이미지들의 태그 정보를 생성한다. 즉, 제어부(1010)는, 각각의 이미지에 포함된 적어도 하나의 대상물을 인식하고, 인식된 적어도 하나의 대상물의 명칭 및 해당 이미지 상에서 해당 대상물이 위치하는 영역인 대상물 영역을 규정하는 배치 정보를 생성하여, 생성된 배치 정보를 태그 정보로서 해당 이미지에 결합한다.
또한, 제어부(1010)는, 사용자로부터 입력된 배치 검색 정보를 기반으로 이미지 검색을 수행한다. 즉, 제어부(1010)는, 각각에 포함된 적어도 하나의 대상물의 배치에 관한 정보를 태그 정보로서 포함하는 이미지들 중에 특정 배치를 갖는 대상물을 포함하는 이미지의 검색을 위한 배치 검색 정보를 입력받고, 메모리부(1020)에 저장된 이미지들 각각의 태그 정보를 분석하여, 입력된 배치 검색 정보를 만족하는 이미지를 검색한다. 이 때, 제어부(1010)는, 메모리부(1020)에 저장된 이미지들뿐만 아니라, 특정 서버에 접속하여 해당 서버에 저장된 이미지에 대한 검색을 수행할 수도 있다.
한편, 제어부(1010)는, 이미지 검색을 위한 특정 메뉴의 입력이 있는 경우, 적어도 하나의 검색 영역과 각각의 검색 영역에서 검색을 수행할 적어도 하나의 대상물에 대한 검색어를 입력할 수 있는 가이드 화면을 터치스크린(1030)을 통하여 디스플레이한다. 이 때, 제어부(1010)는, 터치스크린(1030) 상의 디스플레이 영역을 설정된 다수의 분할 영역으로 구분하여 사용자에게 제공할 수 있다. 또한, 제어부(1010)는, 검색어의 입력을 위하여 키보드를 터치스크린(1030) 상에 디스플레이하거나, 전자 펜을 이용한 필기 입력이 가능하도록 터치스크린(1030)을 제어할 수 있다. 또는, 설정된 드랍 메뉴를 터치스크린(1030)을 통하여 디스플레이할 수 있다. 상기 드랍 메뉴는, 기 저장된 단어들이 속성에 따라 분류된 트리 형식으로 제공될 수 있다. 만약 인물에 대한 검색어를 제공하는 경우에는 미디어 기기에 저장된 주소록으로부터 상기 드랍 메뉴가 구성될 수 있다.
한편, 제어부(1010)는, 입력된 배치 검색 정보와 각각의 이미지에 결합된 배치 정보를 기반으로 한 이미지 검색 시에, 입력된 검색어에 대응하는 대상물이 해당 이미지 상에서 위치하는 대상물 영역과 해당 검색어에 대응하는 검색 영역이 설정 값 이상 겹치는 이미지만을 검색할 수도 있다.
또한, 제어부(1010)는, 이미지 검색 시에, 터치스크린(1030)의 디스플레이 영역의 해상도와 검색 대상이 되는 각 이미지들의 해상도가 다른 경우, 이를 일치시키는 작업을 더 수행할 수 있다. 예를 들어, 제어부(1010)는, 디스플레이 영역의 해상도와 각 이미지의 해상도의 비율을 계산하고, 상기 계산된 비율에 따라 대상물 영역을 조절한 후, 상기 조절된 대상물 영역과 상기 검색 영역을 비교할 수 있다.
메모리부(1020)는, 다수의 이미지들을 저장한다.
카메라부(1040)는, 촬영된 이미지를 제어부(1010)로 전달한다.
통신부(1050)는, 각 종 통신 방식으로 타 미디어 기기 또는 서버와 통신하며, 특정 서버에 저장된 이미지들에 대한 정보를 제어부(1010)로 전달한다.
이상에서 설명된 본 발명의 실시 예들은 임의의 다양한 방법으로 구현될 수 있다. 예를 들어, 본 발명의 실시 예들은 하드웨어, 소프트웨어 또는 그 조합을 이용하여 구현될 수 있다. 소프트웨어로 구현되는 경우에, 다양한 운영 체제 또는 플랫폼을 이용하는 하나 이상의 프로세서 상에서 실행되는 소프트웨어로서 구현될 수 있다. 추가적으로, 그러한 소프트웨어는 다수의 적합한 프로그래밍 언어들 중에서 임의의 것을 사용하여 작성될 수 있고, 또한 프레임워크 또는 가상 머신에서 실행되는 실행가능 기계어 코드 또는 중간 코드로 컴파일 될 수 있다.
또한, 본 발명의 실시 예들이 하나 이상의 프로세서 상에서 실행되는 경우 이상에서 논의된 본 발명의 다양한 실시 예들을 구현하는 방법을 수행하기 위한 하나 이상의 프로그램이 기록된 프로세서 판독 가능 매체(예를 들어, 메모리, 플로피 디스크, 하드 디스크, 콤팩트 디스크, 광학 디스크 또는 자기 테이프 등)로 구현될 수 있다.

Claims (20)

  1. 태그 정보 저장 방법에 있어서,
    이미지에 포함된 적어도 하나의 대상물을 인식하는 단계;
    상기 인식된 적어도 하나의 대상물의 명칭 및 상기 이미지 상에서 해당 대상물이 위치하는 영역인 대상물 영역을 규정하는 배치 정보를 생성하는 단계; 및
    상기 생성된 배치 정보를 태그 정보로서 상기 이미지에 결합하는 단계
    를 포함하는 태그 정보 저장 방법.
  2. 제 1 항에 있어서, 상기 대상물 영역은,
    두 개의 좌표 정보로서 규정되는
    태그 정보 저장 방법.
  3. 태그 정보를 이용한 이미지 검색 방법에 있어서,
    각각에 포함된 적어도 하나의 대상물의 배치에 관한 배치 정보를 태그 정보로서 포함하는 이미지들 중에 특정 배치를 갖는 대상물을 포함하는 이미지의 검색을 위한 배치 검색 정보를 입력받는 단계; 및
    상기 이미지들 각각의 태그 정보를 분석하여, 상기 배치 검색 정보를 만족하는 배치 정보를 갖는 이미지를 검색하는 단계
    를 포함하는 이미지 검색 방법.
  4. 제 3 항에 있어서, 상기 배치 정보는,
    해당 이미지에 포함되는 적어도 하나의 대상물의 명칭과 해당 대상물이 해당 이미지 상에서 위치하는 영역인 대상물 영역을 규정하는
    이미지 검색 방법.
  5. 제 4 항에 있어서, 상기 대상물 영역은,
    두 개의 좌표 정보로서 규정되는
    이미지 검색 방법.
  6. 제 3 항에 있어서, 상기 배치 검색 정보는,
    적어도 하나의 검색 영역 및 각각의 검색 영역에서 검색을 수행할 적어도 하나의 대상물에 대한 검색어를 포함하는
    이미지 검색 방법.
  7. 제 6 항에 있어서, 상기 검색 영역은,
    디스플레이 상의 설정된 다수의 분할 영역 중 선택되는 적어도 하나의 분할 영역인
    이미지 검색 방법.
  8. 제 6 항에 있어서, 상기 검색어의 입력은,
    필기 입력, 키보드를 이용한 입력 또는 설정된 메뉴의 선택으로 이루어지는
    이미지 검색 방법.
  9. 제 6 항에 있어서, 상기 이미지를 검색하는 단계는,
    상기 입력된 검색어에 대응하는 대상물이 해당 이미지 상에서 위치하는 대상물 영역과 해당 검색어에 대응하는 검색 영역이 설정 값 이상 겹치는 이미지를 검색하는 단계를 포함하는
    이미지 검색 방법.
  10. 제 9 항에 있어서, 상기 이미지를 검색하는 단계는,
    디스플레이 영역의 해상도와 각 이미지의 해상도의 비율을 계산하는 단계;
    상기 계산된 비율에 따라 대상물 영역을 조절하는 단계; 및
    상기 조절된 대상물 영역과 상기 검색 영역을 비교하는 단계
    를 포함하는 이미지 검색 방법.
  11. 태그 정보를 저장하기 위한 장치에 있어서,
    적어도 하나의 이미지를 저장하는 메모리부; 및
    각각의 이미지에 포함된 적어도 하나의 대상물을 인식하고, 인식된 적어도 하나의 대상물의 명칭 및 해당 이미지 상에서 해당 대상물이 위치하는 영역인 대상물 영역을 규정하는 배치 정보를 생성하며, 상기 생성된 배치 정보를 태그 정보로서 상기 이미지에 결합하는 제어부
    를 포함하는 태그 정보 저장 장치.
  12. 제 11 항에 있어서, 상기 대상물 영역은,
    두 개의 좌표 정보로서 규정되는
    태그 정보 저장 장치.
  13. 태그 정보를 이용한 이미지 검색 장치에 있어서,
    각각에 포함된 적어도 하나의 대상물의 배치에 관한 정보를 태그 정보로서 포함하는 이미지들 중에 특정 배치를 갖는 대상물을 포함하는 이미지의 검색을 위한 배치 검색 정보를 입력받는 입력부; 및
    상기 이미지들 각각의 태그 정보를 분석하여, 상기 배치 검색 정보를 만족하는 배치 정보를 갖는 이미지를 검색하는 제어부
    를 포함하는 이미지 검색 장치.
  14. 제 13 항에 있어서, 상기 배치 정보는,
    해당 이미지에 포함되는 적어도 하나의 대상물의 명칭과 해당 대상물이 해당 이미지 상에서 위치하는 영역인 대상물 영역을 규정하는
    이미지 검색 장치.
  15. 제 14 항에 있어서, 상기 대상물 영역은,
    두 개의 좌표 정보로서 규정되는
    이미지 검색 장치.
  16. 제 13 항에 있어서, 상기 배치 검색 정보는,
    적어도 하나의 검색 영역 및 각각의 검색 영역에서 검색을 수행할 적어도 하나의 대상물에 대한 검색어를 포함하는
    이미지 검색 장치.
  17. 제 16 항에 있어서, 상기 검색 영역은,
    디스플레이 상의 설정된 다수의 분할 영역 중 선택되는 적어도 하나의 분할 영역인
    이미지 검색 장치.
  18. 제 16 항에 있어서, 상기 검색어의 입력은,
    필기 입력, 키보드를 이용한 입력 또는 설정된 메뉴의 선택으로 이루어지는
    이미지 검색 장치.
  19. 제 16 항에 있어서, 상기 제어부는,
    상기 입력된 검색어에 대응하는 대상물이 해당 이미지 상에서 위치하는 대상물 영역과 해당 검색어에 대응하는 검색 영역이 설정 값 이상 겹치는 이미지를 검색하는
    이미지 검색 장치.
  20. 제 19 항에 있어서, 상기 제어부는,
    디스플레이 영역의 해상도와 각 이미지의 해상도의 비율을 계산하고, 상기 계산된 비율에 따라 대상물 영역을 조절하며, 상기 조절된 대상물 영역과 상기 검색 영역을 비교하는
    이미지 검색 장치.
KR1020120131539A 2012-11-20 2012-11-20 태그 정보 저장 방법 및 장치와 태그 정보를 이용한 이미지 검색 방법 및 장치 KR102059913B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020120131539A KR102059913B1 (ko) 2012-11-20 2012-11-20 태그 정보 저장 방법 및 장치와 태그 정보를 이용한 이미지 검색 방법 및 장치
US14/083,773 US9563818B2 (en) 2012-11-20 2013-11-19 System for associating tag information with images supporting image feature search
EP13193428.3A EP2733629B1 (en) 2012-11-20 2013-11-19 System for associating tag information with images supporting image feature search
CN201310581238.3A CN103838810B (zh) 2012-11-20 2013-11-19 使用标签信息进行图像搜索的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120131539A KR102059913B1 (ko) 2012-11-20 2012-11-20 태그 정보 저장 방법 및 장치와 태그 정보를 이용한 이미지 검색 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20140064326A true KR20140064326A (ko) 2014-05-28
KR102059913B1 KR102059913B1 (ko) 2019-12-30

Family

ID=49726455

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120131539A KR102059913B1 (ko) 2012-11-20 2012-11-20 태그 정보 저장 방법 및 장치와 태그 정보를 이용한 이미지 검색 방법 및 장치

Country Status (4)

Country Link
US (1) US9563818B2 (ko)
EP (1) EP2733629B1 (ko)
KR (1) KR102059913B1 (ko)
CN (1) CN103838810B (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019083275A1 (ko) * 2017-10-27 2019-05-02 삼성전자주식회사 관련 이미지를 검색하기 위한 전자 장치 및 이의 제어 방법

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150011651A (ko) * 2013-07-23 2015-02-02 주식회사 케이티 스토리텔링 컨텐츠를 제작하는 장치 및 방법
US9508133B2 (en) 2014-11-18 2016-11-29 Duelight Llc System and method for generating an image result based on availability of a network resource
US9218662B1 (en) 2014-11-06 2015-12-22 Duelight Llc System, method, and computer program product for exchanging images
US9460125B2 (en) 2013-09-30 2016-10-04 Duelight Llc Systems, methods, and computer program products for digital photography
US9460118B2 (en) 2014-09-30 2016-10-04 Duelight Llc System, method, and computer program product for exchanging images
US9448771B2 (en) 2014-10-17 2016-09-20 Duelight Llc System, computer program product, and method for generating a lightweight source code for implementing an image processing pipeline
JP2016031721A (ja) * 2014-07-30 2016-03-07 株式会社東芝 検索装置、方法及びプログラム
CN105447022A (zh) * 2014-08-25 2016-03-30 英业达科技有限公司 快速搜寻目标对象方法
KR102402511B1 (ko) * 2015-02-03 2022-05-27 삼성전자주식회사 영상 검색 방법 및 이를 위한 장치
JP2017004252A (ja) * 2015-06-10 2017-01-05 株式会社ウイル・コーポレーション 画像情報処理システム
US10410096B2 (en) * 2015-07-09 2019-09-10 Qualcomm Incorporated Context-based priors for object detection in images
CN106599010B (zh) * 2015-10-14 2021-12-07 魏立江 图码搜索法
JP6776532B2 (ja) * 2015-12-24 2020-10-28 株式会社ニコン 画像処理装置、撮像装置、電子機器及び画像処理プログラム
WO2017139151A1 (en) 2016-02-11 2017-08-17 Carrier Corporation Video searching using multiple query terms
DE102017008030A1 (de) * 2016-10-28 2018-05-03 Adobe Systems Incorporated Nutzung einer digitalen leinwand zur durchführung einer räumlich-semantischen suche nach digitalen visuellen medien
US10346727B2 (en) 2016-10-28 2019-07-09 Adobe Inc. Utilizing a digital canvas to conduct a spatial-semantic search for digital visual media
KR102469717B1 (ko) * 2017-08-01 2022-11-22 삼성전자주식회사 오브젝트에 대한 검색 결과를 제공하기 위한 전자 장치 및 이의 제어 방법
CN108009583A (zh) * 2017-11-30 2018-05-08 速感科技（北京）有限公司 一种可寻物的智能可移动设备及智能寻物方法
CN109508769B (zh) * 2018-11-21 2022-06-28 广州万物信息科技股份有限公司 目标对象监测方法、装置、计算机设备和存储介质
CN110532415B (zh) * 2019-08-30 2022-08-30 百度在线网络技术（北京）有限公司 图像搜索处理方法、装置、设备及存储介质
US11321409B2 (en) 2020-01-21 2022-05-03 International Business Machines Corporation Performing a search based on position information

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004030122A (ja) * 2002-06-25 2004-01-29 Fujitsu Ltd 図面検索支援装置および図面検索方法
JP2007041987A (ja) 2005-08-05 2007-02-15 Sony Corp 画像処理装置および方法、並びにプログラム
US7716157B1 (en) * 2006-01-26 2010-05-11 Adobe Systems Incorporated Searching images with extracted objects
US8024343B2 (en) * 2006-04-07 2011-09-20 Eastman Kodak Company Identifying unique objects in multiple image collections
KR101477182B1 (ko) 2007-06-01 2014-12-29 삼성전자주식회사 단말 및 그의 이미지 촬영 방법
US8788493B2 (en) 2008-06-30 2014-07-22 Verizon Patent And Licensing Inc. Digital image tagging apparatuses, systems, and methods
US8867779B2 (en) * 2008-08-28 2014-10-21 Microsoft Corporation Image tagging user interface
US8154644B2 (en) 2008-10-08 2012-04-10 Sony Ericsson Mobile Communications Ab System and method for manipulation of a digital image
US20100115036A1 (en) * 2008-10-31 2010-05-06 Nokia Coporation Method, apparatus and computer program product for generating a composite media file
US20110044512A1 (en) 2009-03-31 2011-02-24 Myspace Inc. Automatic Image Tagging
US8542950B2 (en) * 2009-06-02 2013-09-24 Yahoo! Inc. Finding iconic images
KR101329882B1 (ko) * 2010-08-12 2013-11-15 주식회사 팬택 Ａｒ 정보창 표시를 위한 사용자 장치 및 그 방법
US20120110453A1 (en) * 2010-10-29 2012-05-03 Microsoft Corporation Display of Image Search Results
JP5716464B2 (ja) * 2011-03-07 2015-05-13 富士通株式会社 画像処理プログラムおよび画像処理方法並びに画像処理装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019083275A1 (ko) * 2017-10-27 2019-05-02 삼성전자주식회사 관련 이미지를 검색하기 위한 전자 장치 및 이의 제어 방법
KR20190047214A (ko) * 2017-10-27 2019-05-08 삼성전자주식회사 관련 이미지를 검색하기 위한 전자 장치 및 이의 제어 방법
US11853108B2 (en) 2017-10-27 2023-12-26 Samsung Electronics Co., Ltd. Electronic apparatus for searching related image and control method therefor

Also Published As

Publication number Publication date
US20140140630A1 (en) 2014-05-22
KR102059913B1 (ko) 2019-12-30
EP2733629A1 (en) 2014-05-21
CN103838810B (zh) 2018-12-07
US9563818B2 (en) 2017-02-07
CN103838810A (zh) 2014-06-04
EP2733629B1 (en) 2019-04-17

Similar Documents

Publication Publication Date Title
KR102059913B1 (ko) 태그 정보 저장 방법 및 장치와 태그 정보를 이용한 이미지 검색 방법 및 장치
US11334169B2 (en) Systems and methods for content-aware selection
KR102201658B1 (ko) 상호작용적 디지털 디스플레이
US10599311B2 (en) Layout constraint manipulation via user gesture recognition
JP5248696B1 (ja) 電子機器、手書き文書作成方法、及び手書き文書作成プログラム
US11087563B2 (en) Object creation with physical manipulation
US20130125069A1 (en) System and Method for Interactive Labeling of a Collection of Images
US10402470B2 (en) Effecting multi-step operations in an application in response to direct manipulation of a selected object
JP5395927B2 (ja) 電子機器および手書き文書検索方法
US9299170B1 (en) Information environment map
JP5869179B2 (ja) 電子機器および手書き文書処理方法
US11663398B2 (en) Mapping annotations to ranges of text across documents
CN111602129B (zh) 针对注释和墨迹的智能搜索
US20150138077A1 (en) Display system and display controll device
US9965457B2 (en) Methods and systems of applying a confidence map to a fillable form
KR20150097250A (ko) 태그 정보를 이용한 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체
JP6151005B2 (ja) システムおよび情報提供方法並びに電子機器
KR20150100332A (ko) 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체
KR20150093045A (ko) 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체
JP5666011B1 (ja) 方法及び電子機器
US10007653B2 (en) Methods and systems of creating a confidence map for fillable forms
JP2013101456A (ja) 電子書籍装置、電子書籍処理方法、およびプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right