KR20150101109A - 맞춤형 필터링 기능이 구비된 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체 - Google Patents

맞춤형 필터링 기능이 구비된 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체 Download PDF

Info

Publication number
KR20150101109A
KR20150101109A KR1020140022368A KR20140022368A KR20150101109A KR 20150101109 A KR20150101109 A KR 20150101109A KR 1020140022368 A KR1020140022368 A KR 1020140022368A KR 20140022368 A KR20140022368 A KR 20140022368A KR 20150101109 A KR20150101109 A KR 20150101109A
Authority
KR
South Korea
Prior art keywords
sketch
information
stroke
candidate
user
Prior art date
Application number
KR1020140022368A
Other languages
English (en)
Other versions
KR102207514B1 (ko
Inventor
전혁준
신형철
전병기
Original Assignee
에스케이플래닛 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이플래닛 주식회사 filed Critical 에스케이플래닛 주식회사
Priority to KR1020140022368A priority Critical patent/KR102207514B1/ko
Publication of KR20150101109A publication Critical patent/KR20150101109A/ko
Application granted granted Critical
Publication of KR102207514B1 publication Critical patent/KR102207514B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23—Updating
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2457—Query processing with adaptation to user needs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/248—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

본 발명은 스케치 작업 중 생성되는 스케치 진행 상태로부터 알 수 있는 다양한 정보를 수집하고, 미리 수집된 사용자의 프로필 정보 및 카테고리 정보를 이용하여 사용자별로 각기 다른 검색 결과가 제공되도록 하는 맞춤형 필터링 기능이 구비된 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체에 관한 것으로, 스트로크 인식 정보에 따라 후보 밑그림 영상들이 제공되고 후보 밑그림 영상을 가이드로 하여 스케치 작업이 이루어지는 도중 생성되는 다양한 정보들을 수집하고 분석하고, 분석 결과를 이용하여 생성한 필터링 조건으로 후보 밑그림 영상들을 검색하여 제공함으로써, 사용자별로 서로 다른 후보 밑그림 영상을 제공하는 효과가 있다. 또한, 사용자의 스케치 작업에 가이드로 이용되는 후보 밑그림 영상을 제공하는데 있어, 라인 형성 상태(라인의 떨림 상태), 반복 실수(지우기 회수) 등 스트로크의 상태나 스케치의 품질을 검토하여 카테고리의 가중치를 적용하고, 가중치에 따라 같은 곡선이라 하더라도 서로 다른 카테고리에 속해 있는 후보 밑그림 영상들이 제공되도록 함으로써, 사용자별로 맞춤형 검색이 가능하도록 하는 효과가 있다.

Description

맞춤형 필터링 기능이 구비된 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체{Sketch retrieval system with filtering function, user equipment, service equipment, service method and computer readable medium having computer program recorded therefor}
본 발명은 맞춤형 필터링 기능이 구비된 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체에 관한 것으로, 특히 스케치 작업 중 생성되는 스케치 진행 상태로부터 알 수 있는 다양한 정보를 수집하고, 미리 수집된 사용자의 프로필 정보 및 카테고리 정보를 이용하여 사용자별로 각기 다른 검색 결과가 제공되도록 하는 맞춤형 필터링 기능이 구비된 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체에 관한 것이다.
최근 컴퓨터와 통신 기술의 발달과 더불어 멀티미디어 정보 서비스에 대한 요구가 증가하고 있으며, 인터넷상의 정지 화상 및 동영상 검색, 방송 제작에 사용될 VOD(Video On Demand) 서비스, 전자 도서관, 의료 분야(예를 들어, 원격 진료, 의료 영상 검색) 등 응용될 수 있는 멀티미디어 검색 기술에 대한 연구의 필요성이 증가되고 있다.
연구 초기에는 검색의 대상이 되는 모든 멀티미디어 데이터에 사람이 직접 색인을 첨가하고, 사용자 또한 주제어를 이용하여 원하는 정보를 검색하는 텍스트 기반 검색이 사용되어 왔다.
그러나, 이 방법은 시간 및 내용이 많이 소요되고, 색인을 첨가하는 사람과 검색하는 사용자의 관점이 불일치하는 경우 검색의 효율성이 크게 떨어지는 문제점이 있다. 또한, 멀티미디어 데이터가 가지는 복잡한 속성을 텍스트만으로는 정확하게 표현할 수 없다는 단점이 있다. 이를 보완하기 위하여 멀티미디어 데이터의 내용을 대표할 수 있는 특징을 추출하여 이를 기반으로 색인과 검출을 수행하는 내용 기반 검색 방법이 필요하게 되었다.
이런 영상 검색 방식은 사용자들이 터치패드를 터치하면서 그리는 그림을 인식하고, 인식된 결과를 이용하여 검색이 이루어지도록 하는 방식이므로, 사용자들이 스케치한 그림만을 검색조건으로 설정할 뿐 다른 검색조건을 추가하지 않기 때문에 유사한 그림을 스케치한 사용자들에게 모두 동일한 내용이 제공되어 사용자의 개별적인 특성이 반영되지 못하고 있는 실정이다. 특히, 별도의 필터링 조건을 수동적으로 추가하여 검색에 대한 질의를 구성하는 방식을 추가할 수 있으나 스케치와 같이 사용자의 노력이 필요한 검색 방식에서 필터링 조건을 추가하는 수동 작업이 더 부가될 경우 사용자의 불편함이 커지며 서비스 만족도가 낮아질 수 있다.
한국등록특허 제1005407480000호 [명칭: 내용 기반 검색을 위한 개선된 질의 방법 및 그 방법을 구현하기 위한 프로그램을 저장한 기록매체]
이와 같은 사용자의 불편함을 최소화하기 위해 본 발명은 스트로크 인식 정보에 따라 후보 밑그림 영상들이 제공되고 후보 밑그림 영상을 가이드로 하여 스케치 작업이 이루어지게 되는 경우 스케치 작업 중 스케치 상태로부터 파생되는 다양한 정보들을 수집 및 분석하여 후보 밑그림 영상 필터링 조건을 결정한 후 필터링 조건에 따라 추출된 후보 밑그림 영상들을 제공하는 것을 목적으로 한다.
또한 본 발명은 사용자의 스케치 작업에 가이드로 이용되는 후보 밑그림 영상을 제공하는데 있어, 라인 형성 상태(라인의 떨림 상태), 반복 실수(지우기 회수) 등 스트로크의 상태나 스케치의 품질을 검토하여 카테고리의 가중치를 적용하고, 가중치에 따라 같은 스케치라 하더라도 서로 다른 카테고리에 속해 있는 후보 밑그림 영상들을 제공하는 것을 목적으로 한다.
또한, 본 발명은 사용자의 개인정보, 카테고리 등과 같이 사용자에 의해 선택된 검색 선택 정보를 추가로 반영하여 사용자가 만족할 수 있는 후보 밑그림 영상들을 검색하여 제공하는 것을 목적으로 한다.
본 발명의 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 사용자 장치는 스케치 입력에 대한 가이드를 제공할 중첩된 밑그림이 표시되는 스케치 영역과 스케치 검색결과 나열되는 검색결과 출력영역을 구비하는 스케치 검색 인터페이스부, 스케치 검색 인터페이스부의 스케치 영역을 통한 사용자 입력을 스트로크 정보로 검출하여 출력하는 스트로크 인식부, 스트로크 인식부로부터 스트로크 정보를 입력받아 스케치 영역의 스케치 작업 중 얻어지는 스트로크 상태와 스케치 품질에 관한 스케치 상태 정보를 수집하여 출력하는 스케치 상태 정보 생성부 및 스케치 영역으로부터 스케치 작업이 이루어지는 경우 스트로크 인식부의 스트로크 정보를 입력받아 스트로크 인식정보를 생성시키고, 스케치 상태 정보 생성부의 스케치 상태 정보와 스트로크 인식정보를 이용하여 제 1 필터링 조건 정보를 생성시켜 서비스 제공 장치에 전송하는 제어부를 포함할 수 있다.
본 발명과 관련된 일 예로서, 제 1 필터링 조건정보는 스트로크 상태정보, 스케치 품질정보 중 적어도 하나 또는 그 이상으로 이루어진 것을 특징으로 할 수 있다.
본 발명의 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 제공 장치는 복수의 밑그림 영상과 그에 대응되는 원본 영상이 카테고리 정보와 함께 저장된 밑그림 영상 데이터베이스부, 사용자 장치로부터 스케치 작업 중 얻어지는 스트로크 상태 및 스케치 품질에 관한 스케치 상태 정보와 스트로크 정보를 포함하는 제 1 필터링 조건정보를 수신하여 수신된 제 1 필터링 조건정보를 기반으로 밑그림 영상 데이터베이스부로부터 후보 밑그림 영상을 선별하는 밑그림 영상 제공부 및 밑그림 영상 제공부에서 선별된 후보 밑그림 영상과 그에 대응하는 원본 영상을 사용자 장치에 제공하는 스케치 검색정보 제공부를 포함할 수 있다.
본 발명과 관련된 일 예로서, 밑그림 영상 제공부는 사용자의 개인정보 및 사용자에 의해 선택된 검색정보에 따라 제 2 필터링 조건정보를 생성하고, 제 2 필터링 조건정보에 의해 검색된 밑그림 영상을 사용자 장치에 제공하는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 밑그림 영상 제공부는 제 1 필터링 조건 정보를 분석하여 후보 밑그림 영상의 카테고리에 가중치를 부여하는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 스트로크 상태는 스트로크가 떨리거나 반복하여 지운 정도에 관한 정보를 포함하고, 스케치 품질은 밑그림과의 일치도나 학습을 통한 스케치 품질 분류에 의한 품질 수준에 대한 정보를 포함하는 것을 특징으로 할 수 있다.
본 발명과 관련된 일 예로서, 밑그림 영상 제공부는 제공된 후보 밑그림 영상이 속한 카테고리가 스케치 작업이 진행되는 동안 변화되는 상태를 분석하여 카테고리의 가중치 정보 및 제 1 필터링 조건 정보를 변경시키는 것을 특징으로 할 수 있다.
본 발명의 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 방법은 사용자 장치가 스케치 검색 인터페이스를 통해 사용자의 스트로크를 수신하여 스케치 작업을 수행하는 단계, 사용자 장치가 스케치 검색 인터페이스를 통해 이루어지는 스케치 작업 중에 얻어지는 스트로크 상태 및 스케치 품질에 관한 정보를 포함하는 스케치 상태 정보들과 이 때의 스트로크 정보를 수집하는 단계, 사용자 장치가 스트로크 정보 및 스케치 상태 정보를 제 1 필터링 조건정보로 하여 서비스 제공 장치로 전송하는 단계 및 사용자 장치가 제 1 필터링 조건정보에 따라 서비스 제공 장치에서 추출된 후보 밑그림 영상들을 제공받는 단계를 포함할 수 있다.
본 발명의 다른 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 방법은 서비스 제공 장치가 사용자 장치로부터 스케치 검색 실행 요청신호를 수신하는 단계, 서비스 제공 장치가 사용자 장치로부터 스케치 작업 중 얻어지는 스트로크 상태 및 스케치 품질에 관한 스케치 상태 정보와 스트로크 정보를 포함하는 제 1 필터링 조건정보를 수신하는 단계, 서비스 제공 장치가 제 1 필터링 조건 정보에 따른 후보 밑그림 영상들을 선별한 후 사용자 장치에 전송하는 단계 및 서비스 제공 장치가 후보 밑그림 영상들을 가이드로 하여 스케치 작업이 수행되는 동안 수집된 스케치 상태 정보를 수신받아 분석한 후 분석 결과에 따라 카테고리를 선별하고, 선별된 카테고리에 포함되어 있는 후보 밑그림 영상들을 사용자 장치로 전송하는 단계를 포함할 수 있다.
본 발명의 실시예에 따른 기록매체에는 상술한 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 방법을 수행하는 컴퓨터 프로그램이 저장될 수 있다.
본 발명의 실시예에 따른 스케치 검색 시스템은 스케치 검색 인터페이스의 스케치 영역을 통해 생성된 스트로크 인식 정보를 기반으로 후보 밑그림 영상들을 제공받아 스케치 작업이 이루어지도록 하고, 스케치 작업 진행에 따라 발생되는 스케치 상태 정보와 스트로크 정보를 제 1 필터링 조건정보로 전송하고, 제 1 필터링 조건정보에 따라 추출된 후보 밑그림 영상들을 제공받아 후보 밑그림 출력영역에 노출시키는 사용자 장치 및 사용자 장치로부터 제 1 필터링 조건 정보를 전송받아 사용자의 스트로크 상태나 스케치의 품질 상태를 분석한 후 후보 밑그림 영상의 카테고리를 결정하고, 결정된 카테고리에 포함되어 있는 후보 밑그림 영상들을 추출하여 사용자 장치로 전송하는 서비스 제공 장치를 포함할 수 있다.
본 발명은 스트로크 인식 정보에 따라 후보 밑그림 영상들이 제공되고 후보 밑그림 영상을 가이드로 하여 스케치 작업이 이루어지는 도중 스케치 상태에 따라 얻어지는 다양한 정보들을 수집 및 분석하고, 분석 결과를 이용하여 생성한 필터링 조건으로 후보 밑그림 영상들을 검색하여 제공함으로써, 사용자별로 서로 다른 후보 밑그림 영상을 제공하여 맞춤형 검색이 가능한 효과가 있다.
또한, 본 발명은 사용자의 스케치 작업에 가이드로 이용되는 후보 밑그림 영상을 제공하는 데 있어, 라인 형성 상태(라인의 떨림 상태), 반복 실수(지우기 회수) 등 스트로크의 상태나 스케치의 품질을 검토하여 카테고리의 가중치를 적용하고, 가중치에 따라 같은 곡선이라 하더라도 서로 다른 카테고리에 속해 있는 후보 밑그림 영상들이 제공되도록 함으로써, 사용자별로 맞춤형 검색 결과가 제공되도록 하여 개인별 검색 만족도를 높일 수 있는 효과가 있다.
또한, 본 발명은 사용자의 개인정보, 카테고리 등과 같이 사용자에 의해 선택된 검색 선택 정보를 추가로 반영하여 사용자가 만족할 수 있는 후보 밑그림 영상들을 제공할 수 있도록 하는 효과가 있다.
도 1은 본 발명의 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 시스템의 구성을 나타낸 블록도이다.
도 2는 본 발명의 실시예에 따른 사용자 장치의 구성을 나타낸 블록도이다.
도 3은 본 발명의 실시예에 따른 서비스 제공 장치의 구성을 나타낸 블록도이다.
도 4는 본 발명의 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 시스템에서의 제 1 필터링 조건 정보 생성 과정을 보인 흐름도이다.
도 5는 본 발명의 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 방법을 보인 흐름도이다.
도 6은 본 발명의 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 시스템의 스케치 검색 화면의 예를 설명하기 위한 예시도이다.
본 발명에서 사용되는 기술적 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 발명에서 사용되는 기술적 용어는 본 발명에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 발명에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는, 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.
또한, 본 발명에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함한다. 본 발명에서, "구성된다" 또는 "포함한다" 등의 용어는 발명에 기재된 여러 구성 요소들, 또는 여러 단계를 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.
또한, 본 발명에서 사용되는 제 1, 제 2 등과 같이 서수를 포함하는 용어는 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성 요소는 제 2 구성 요소로 명명될 수 있고, 유사하게 제 2 구성 요소도 제 1 구성 요소로 명명될 수 있다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다.
도 1은 본 발명의 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 시스템의 구성을 나타낸 블록도이다.
도 1에 도시된 바와 같이 맞춤형 필터링 기능이 구비된 스케치 검색 시스템은 사용자 장치(100), 그리고 사용자 장치(100)와 통신망(300)을 통해 연결되는 서비스 제공 장치(200)로 이루어진다.
사용자 장치(100)는 스케치 영역 및 검색결과 출력영역으로 이루어진 스케치 검색 인터페이스를 사용자에게 제공하여 사용자가 스케치 영역을 통해 스케치를 실시하면서 가하는 스트로크에 대한 스트로크 인식 정보를 서비스 제공 장치(200)에 전송하고 그에 따른 후보 밑그림 영상을 제공받아 스케치 영역 및 검색결과 출력영역에 표시한다. 만일 밑그림 영상에 대응되는 원본영상을 더 수신할 경우 후보 밑그림 영상은 스케치 영역에 밑그림으로 표시하고 후보 밑그림 영상에 대응되는 원본영상은 검색결과 출력영역에 다양한 방식으로 표시한다.
사용자 장치(100)는 스케치 영역을 통해 수신된 후보 밑그림 영상을 중첩시켜 사용자의 스케치 작업시 가이드로 제공한다(개별 후보 밑그림 영상을 수신하여 이를 중첩하여 제공할 수도 있고, 애초에 중첩된 영상을 수신할 수도 있음).
사용자 장치(100)는 이러한 밑그림 영상을 가이드로 하여 사용자가 스케치를 실시하는 과정에서 얻어지는 스트로크 정보와 스케치 상태 정보를 수집하여 제 1 필터링 조건정보를 생성시키고, 제 1 필터링 조건정보를 서비스 제공 장치(200)에 전송한다. 여기서 스케치 상태 정보란 떨리거나(스트로크 라인의 평탄도나 대응 밑그림과의 차이로 확인), 반복 실수로 인해 자주 지운 회수(동일 라인을 복수 횟수로 그리는 경우) 등을 포함하는 스트로크 상태 정보를 비롯하여 밑그림과의 일치도, 학습을 통한 스케치 품질 분류에 의한 품질 수준 등을 포함하는 스케치 도중에 검출될 수 있는 다양한 정보이다.
서비스 제공 장치(200)는 제 1 필터링 조건정보를 분석한 후 사용자 장치(100)로 전송될 후보 밑그림 영상들로 이루어진 카테고리를 선별하고, 선별된 카테고리에 포함되어 있는 후보 밑그림 영상들을 사용자 장치(100)로 전송한다.
한편 서비스 제공 장치(200)는 제 1 필터링 조건 정보 이외에 사용자의 개인정보나 사용자에 의해 미리 선택된 카테고리를 추가로 반영하여 제 2 필터링 조건정보를 선택적으로 생성시키고 그에 따른 후보 밑그림 영상들을 제공하도록 구현할 수도 있고, 사용자 장치(100)로부터 스트로크 정보만 수신하여 제 1 필터링 조건 정보를 서비스 제공 장치(200)가 생성할 수도 있다.
도 2는 본 발명의 실시예에 따른 사용자 장치의 구성을 나타낸 블록도이다.
도 2에 도시된 바와 같이 맞춤형 필터링 기능이 부가된 스케치 검색 서비스 기능을 제공하는 사용자 장치(100)는 스케치 검색 인터페이스부(110), 스트로크 인식부(120), 스케치 상태 정보 생성부(130), 제어부(140)로 이루어진다.
도 2에 도시된 사용자 장치(100)의 구성 요소 모두가 필수 구성 요소인 것은 아니며, 도 2에 도시된 구성 요소보다 많은 구성 요소에 의해 스케치 검색 시스템을 구현할 수 있는 사용자 장치(100)가 구현될 수도 있고, 그보다 적은 구성 요소에 의해서도 사용자 장치(100)가 구현될 수도 있다.
사용자 장치(100)는 사용자의 키 조작에 따라 통신망을 경유하여 각종 데이터를 송수신할 수 있는 단말기를 말하는 것이며, 태블릿 PC(Tablet PC), 랩톱(Laptop), 스마트폰(Smart Phone), 개인휴대용 정보단말기(PDA: Personal Digital Assistant) 및 이동통신 단말기(Mobile Communication Terminal) 등 중 어느 하나일 수 있다.
또한, 사용자 장치(100)는 통신망(300)을 경유하여 서비스 제공 장치(200)와 통신하기 위한 브라우저, 프로그램 및 프로토콜을 저장하는 메모리, 각종 프로그램을 실행하여 연산 및 제어하기 위한 마이크로프로세서 등을 구비하고 있는 단말장치를 의미한다. 즉, 사용자 장치(100)는 서비스 제공 장치(200)와 서버-클라이언트 통신이 가능하고, 스케치 검색 서비스를 실행할 수 있다면 그 어떠한 단말기도 가능하며, 이동통신 단말기, PDA 등의 통신 컴퓨팅 장치를 모두 포함하는 넓은 개념이다. 한편, 사용자 장치(100)는 터치 스크린을 구비한 형태로 제작되는 것이 바람직하나 반드시 이에 한정되는 것은 아니다.
특히, 본 발명의 실시예에 따른 사용자 장치(100)는 스케치 검색 인터페이스의 스케치 영역을 통해 생성된 스트로크 인식 정보를 기반으로 후보 밑그림 영상들을 제공받아 스케치 작업이 이루어지도록 하고, 스케치 작업 진행에 따라 발생되는 스케치 상태 정보를 제 1 필터링 조건정보로 서비스 제공 장치(200)로 전송하고, 제 1 필터링 조건정보에 대응되어 서비스 제공 장치(200)로부터 후보 밑그림 영상을 포함하는 스케치 검색 정보를 입력받아 스케치 검색 인터페이스(110)의 스케치 영역과 검색결과 출력영역에 노출시킨다.
스케치 검색 인터페이스부(110)는 스케치 입력에 대한 가이드를 제공할 중첩된 밑그림이 표시되는 스케치 영역과 스케치 검색결과 나열되는 검색결과 출력영역을 제공한다. 여기서 스케치 영역 및 검색결과 출력영역에는 밑그림 영상을 포함하는 스케치 검색 정보가 제공된다. 스케치 검색 정보는 서비스 제공 장치(200)로부 터 수신되는 검색 정보로, 후보 밑그림 영상, 후보 밑그림 영상에 대응되는 원본 영상, 해당 원본 영상과 연결되는 링크 정보 등이 포함될 수 있다. 이러한 스케치 검색 정보에 포함되는 후보 밑그림 영상이나 그에 대응되는 원본 영상은 검색 결과로서 사용자 장치(100)에 제공된다. 사용자 장치(100)는 후보 밑그림 영상을 스케치 영역에 표시하고, 검색결과 출력영역에 후보 밑그림 영상이나 그에 대응되는 원본 영상을 한 화면에 나열하거나 스크롤 방식으로 제공할 수 있다. 한편 검색결과 출력영역에 나타나는 개별 영상(후보 밑그림 영상이나 그에 대응되는 원본 영상)이 선택될 경우 연결된 링크 정보에 따른 웹페이지를 제공할 수도 있다.
스트로크 인식부(120)는 스케치 검색 인터페이스부(110)의 스케치 영역을 통한 사용자 입력을 스트로크 정보로 검출하여 스케치 상태 정보 생성부(130) 및 제어부(140)로 출력한다. 이때, 스트로크 인식부(120)는 소형 키보드, 펜마우스, 조이스틱, 터치 스크린, 터치 패드 등과 같은 일반적인 입력 장치를 포함할 수 있다.
스케치 상태 정보 생성부(130)는 스트로크 인식부(120)로부터 스트로크 정보를 입력받아 스케치 영역의 스케치 작업 중 발생되는 스케치 상태 정보를 수집하여 제어부(140)로 출력한다.
제어부(140)는 스케치 영역으로부터 스케치 작업이 이루어지는 경우 스트로크 인식부(120)의 스트로크 정보를 입력받고, 스케치 상태 정보 생성부(130)의 스케치 상태 정보를 입력받아 스트로크 인식정보와 함께 제 1 필터링 조건 정보를 생성시켜 서비스 제공 장치(200)에 전송한다. 여기서, 제 1 필터링 조건정보에 포함되는 스케치 상태 정보는 스트로크 상태정보, 스케치 품질정보 등으로 이루어진다. 스트로크 상태정보는 떨리거나 반복 실수가 있어 자주 지우는 스트로크 비율 등이 포함되며, 스케치 품질정보는 유사도, 밀그림과의 일치도, 학습을 통한 품질 분류 등이 포함된다. 서비스 제공 장치(200)는 제어부(140)에 의해 생성된 제 1 필터링 조건정보를 통해 노약자인지 또는 능숙자인지의 여부 등을 파악하게 되고 노약자로 파악되는 경우 노약자와 관련된 카테고리에 포함되어 있는 밑그림 정보(즉, 검색 결과)를 제공하게 되고, 능숙자로 파악되는 경우 현재 유행중인 카테고리 또는 고가 제품 등을 제공하는 카테고리에 포함되어 있는 밑그림 정보(즉, 검색 결과)를 제공하도록 시스템을 구현할 수 있게 된다.
제어부(140)는 제 1 필터링 조건 정보에 대응하여 서비스 제공 장치(200)로부터 수신된 스케치 검색 정보(중첩된 후보 밑그림 정보, 개별 후보 밑그림 정보나 그에 대응되는 영상)를 스케치 검색 인터페이스부(110)를 통해 출력하도록 하며, 스케치 검색 인터페이스부(110)를 통해 스케치를 통한 상품 검색이 이루어지도록 사용자 장치(100) 및 서비스 제공 장치(200) 상호 간에 통신 환경을 제공한다. 여기서 서비스 제공 장치(200)는 제어부(140)의 제 1 필터링 조건 정보 이외에 사용자의 프로필 정보 및 사용자에 의해 미리 선택된 카테고리 정보로 이루어진 제 2 필터링 조건 정보를 이용하여 스케치 검색 정보를 선별할 수 있다.
한편, 제어부(140)는 제 1 필터링 조건 정보에 포함되어 있는 스트로크 인식 정보를 생성할 때 스케치의 특징을 추출한 후 추출된 스케치의 특징 정보만으로 이루어지도록 할 수 있으므로 사용자 장치(100)와 서비스 제공 장치(200) 상호 간의 부하를 감소시켜 서비스 속도가 떨어지는 문제점을 미연에 방지할 수 있도록 한다.
도 3은 본 발명의 실시예에 따른 서비스 제공 장치의 구성을 나타낸 블록도이다.
도 3에 도시된 바와 같이 서비스 제공 장치(200)는 밑그림 영상 데이터베이스부(210), 밑그림 영상 제공부(220), 스케치 검색정보 제공부(230)를 포함하여 이루어질 수 있다.
서비스 제공 장치(200)는 사용자 장치(100)로부터 제 1 필터링 조건 정보를 전송받아 사용자의 스트로크 상태나 스케치의 품질 상태를 분석한 후 후보 밑그림 영상의 카테고리를 선별하고, 선별된 카테고리에 포함되어 있는 후보 밑그림 영상들을 추출하여 사용자 장치(100)로 전송한다.
밑그림 영상 데이터베이스부(210)는 복수의 밑그림 영상과 그에 대응하는 원본 영상들을 저장하고 있다. 복수의 밑그림 영상들은 카테고리별로 분류되어 저장, 관리될 수도 있다.
밑그림 영상 제공부(220)는 사용자 장치(100)로부터 수신한 제 1 필터링 조건정보를 기반으로 하는 유사도 범위에 따라 밑그림 영상 데이터베이스부(210)로부터 후보 밑그림 영상을 선별한다. 여기서 밑그림 영상 제공부(220)는 제 1 필터링 조건정보 이외에 사용자의 프로필 정보 및 미리 선택된 카테고리 정보로 이루어진 제 2 필터링 조건 정보를 이용하여 사용자에게 맞춤형 밑그림 영상을 선별할 수 있도록 한다.
밀그림 영상 제공부(220)는 사용자가 검색결과 출력영역에서 선택한 후보 밑그림 영상을 스케치 영역 상의 가이드용 밑그림 영상에 중첩시켜 노출되도록 할 수 있다.
밑그림 영상 제공부(220)는 사용자 장치(100)로부터 수신되는 스트로크 인식정보 및 미리 등록된 사용자의 개인정보를 1차 필터링 조건으로 하여 밑그림 영상들을 추출하고 추출된 밑그림 영상들을 사용자 장치(100)에 제공하고, 사용자 장치(100)로부터 제 1 필터링 조건 정보를 수신받아 제 1 필터링 조건에 따라 사용자 장치(100)로 제공할 후보 밑그림 영상을 추출한다.
밑그림 영상 제공부(220)는 제 1 필터링 조건 정보를 분석하여 후보 밑그림 영상의 카테고리에 가중치를 부여할 수 있다.
밑그림 영상 제공부(220)는 사용자에 의해 후보 밑그림 영상에 대응되는 부여된 카테고리를 선택할 수 있도록 하고, 선택된 카테고리를 이용하여 제 1 필터링 조건 정보를 변경시키고, 변경된 제 1 필터링 조건 정보를 이용하여 후보 밑그림 영상들을 추출하여 사용자 장치(100)로 제공할 수 있다.
밑그림 영상 제공부(220)는 후보 밑그림 영상이 속한 카테고리가 스케치 작업이 진행되는 동안 변화되는 상태를 분석하여 카테고리의 가중치 정보 및 제 1 필터링 조건 정보를 변경시킬 수 있다.
스케치 검색정보 제공부(230)는 사용자 장치(100)로부터 스케치 검색실행 요청신호가 수신되면 밑그림 영상 제공부(220)에서 추출한 후보 밑그림 영상 및 그에 대응되는 원본영상(및 링크 정보)을 사용자 장치(100)의 스케치 검색 인터페이스부(110)에 대응되는 스케치 검색 정보(후보 밑그림 및 그에 대응되는 원본영상)로 사용자 장치(100)에 제공한다. 사용자 장치(100)로 제공되는 스케치 검색 정보는 스케치 영역 및 검색결과 출력영역에 표시될 후보 밑그림 영상, 후보 밑그림 영상에 대응되는 원본 영상, 해당 원본 영상과 연결되는 링크 정보 등을 포함할 수 있다. 이러한 스케치 검색 정보에 포함되는 후보 밑그림 영상이나 그에 대응되는 원본 영상은 검색 결과로서 사용자 장치(100)에 제공되며, 사용자 장치(100)는 스케치 검색 인터페이스부(110)의 검색 결과 출력영역에 검색 결과를 한 화면에 나열하거나 스크롤 방식으로 제공할 수 있다.
스케치 검색정보 제공부(230)는 스케치 라인과 드래그 라인의 간격을 설정하기 위한 간격설정 메뉴항목을 사용자 장치(100)로 제공하고, 간격설정 메뉴항목에 따라 선택된 간격설정방식에 의해 사용자에 의해 그려지는 드래그 라인과 드래그 라인에 따라 밑그림에 그려지는 스케치 라인의 간격을 설정하고, 설정된 간격 내에서 스트로크 정보가 입력되면 드래그 라인을 따라 밑그림 상에 스케치 라인을 노출시킬 수 있다.
즉, 사용자가 스케치 영역의 밑그림 영상을 따라서 스케치를 하게 되는 경우 스케치 되는 도구에 밑그림 영상의 에지 라인이 가려져서 스케치를 하는 불편함을 줄 수 있게 된다. 예를 들어 얇은 펜의 경우 이러한 현상이 적을 수 있으나 사용자의 손과 같이 스케치 도구가 두꺼운 경우 스케치 도구에 밑그림 영상이 가려지게 되어 밑그림 영상을 기반으로 스케치하기 어렵게 된다. 이에 밑그림 영상의 에지라인으로부터 일정간격 이격된 위치에서 밑그림 영상의 에지라인을 따라서 스케치하는 경우 스케치 라인에 맞추어서 밑그림 영상의 에지라인을 따라 드래그 라인이 표출되도록 구현할 수 있는데, 이러한 실시예를 구현하기 위해서 서비스 제공 장치(200)의 스케치 검색 정보 제공부(230)는 간격설정 메뉴항목을 제공하고, 스케치 작업 초기시 또는 원하는 시점에 간격설정 메뉴항목을 선택하여 드래그 라인과 스케치 라인의 관계를 세팅할 수 있다.
간격설정 메뉴항목은 더블 터치로 드래그 영역과 드로우 영역을 동시에 클릭하여 스케치 라인과 드래그 라인의 간격을 설정하는 제 1 간격설정 메뉴항목과, 드래그 영역과 드로우 영역을 순차적으로 클릭하여 스케치 라인과 드래그 라인의 간격을 설정하는 제 2 간격설정 메뉴항목과, 드래그 영역과 드로우 영역이 만나는 양 끝점을 선택하여 에지 길이를 설정하여 스케치 라인과 드래그 라인의 간격을 설정하고, 설정된 간격 사이에 에지를 노출시키는 제 3 간격설정 메뉴항목과, 에지 설정에 따라 드래그 영역과 드로우 영역을 설정하여 스케치 라인과 드래그 라인의 간격을 설정하는 제 4 간격설정 메뉴항목 등으로 이루어진다.
스케치 검색 정보 제공부(230)는 제 3 간격설정 메뉴항목 또는 제 4 간격설정 메뉴항목이 선택된 경우 에지를 선택하여 드래그 영역과 드로우 영역의 위치를 변경시킬 수 있도록 한다.
앞서 실시예에서는 서비스 제공 장치(200)의 스케치 검색정보 제공부(230)가 스케치 인터페이스를 통해 사용자가 스트로크를 입력할 경우 밑그림을 확인하면서 스케치를 실시하기 어려운 상황을 해소하기 위한 입력 방식과 스케치 방식 중 다른 사진을 부가하는 등의 추가적인 사용자 인터페이스 지원 기능을 제공할 수 있음을 보였으나 이러한 기능은 사용자 장치(100)의 스케치 검색 인터페이스부(110)에서 서비스 제공 장치(200)와 독립적으로 수행되거나 연동하면서 수행될 수도 있다. 이는 앞서 설명한 내용을 통해 당해 기술분야에서 통상의 지식을 가진자에게 명백하므로 별도의 설명은 생략한다.
이하, 상술한 구성을 바탕으로 하는 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 방법에 대해 첨부된 도면들을 참조하여 구체적으로 설명하기로 한다.
도 4는 상술한 구성을 바탕으로 하는 본 발명의 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 방법 중 제 1 필터링 조건 정보 생성 과정을 보인 흐름도이다.
먼저 사용자 장치(100)는 서비스 제공 장치(200)로부터 제공되는 스케치 검색 인터페이스를 통해 스케치 작업을 수행하고(S110), 스케치 검색 인터페이스를 통해 스케치 작업이 이루어지는 경우 스케치 작업 중 발생하는 스케치 상태 정보들을 수집한다(S120).
사용자 장치(100)는 스트로크 인식 정보 및 스케치 상태 정보를 제 1 필터링 조건정보로 하여 서비스 제공 장치(200)에 전송하고(S130), 서비스 제공 장치(200)는 제 1 필터링 조건정보에 따른 후보 밑그림 영상을 선별하여 사용자 장치(100)에 제공한다(S140).
도 5는 본 발명의 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 방법 중 스케치 검색 과정을 보인 흐름도이다.
도 5에 도시된 바와 같이 서비스 제공 장치(200)는 사용자 장치(100)로부터 스케치 검색 실행 요청신호가 수신되는지의 여부를 판단한다(S210). 판단 결과 스케치 검색 실행 요청신호가 수신되는 경우 사용자 장치(100)는 스케치 검색 인터페이스부(110)를 통해 스케치 영역 및 검색결과 출력영역으로 이루어진 스케치 검색 인터페이스를 사용자에게 제공하며, 스케치 영역을 통해 얻어진 사용자의 스트로크에 따른 스트로크 인식정보와 스케치 영역의 밑그림으로 설정한 영상에 대응되는 태그 정보를 필터링 조건으로 서비스 제공 장치(200)에 전달한다(S220).
서비스 제공 장치(200)는 사용자 장치(100)로부터 제 1 필터링 조건 정보가 수신되는지의 여부를 판단하고(S230), 판단 결과 제 1 필터링 조건 정보가 수신되는 경우 제 1 필터링 조건 정보에 따른 후보 밑그림 영상을 선별한다(S240).
서비스 제공 장치(200)는 후보 밑그림 영상들을 가이드로 하여 스케치 작업이 수행되는 동안 수집된 스케치 상태 정보를 사용자 장치(100)로부터 수신받아 분석한 후 분석 결과에 따라 카테고리를 결정한다(S250). 그리고, 결정된 카테고리에 포함되어 있는 후보 밑그림 영상들을 사용자 장치(100)로 전송한다(S260). 여기서 서비스 제공 장치(200)는 제 1 필터링 조건 정보 이외에 제 2 필터링 조건 정보를 부가시켜 후보 밑그림 영상들을 선별하고, 선별된 후보 밑그림 영상을 사용자 장치(100)로 제공함으로써, 복수의 사용자들이 서로 유사한 스케치를 수행한 경우에도 사용자마다 서로 다른 후보 밑그림 영상이 제공되도록 할 수도 있고, 단계 S250과 단계 S240의 순서를 바꿀 수도 있다.
도 6은 본 발명의 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 시스템의 스케치 검색 화면을 설명하기 위한 화면 예시도이다. 도시된 화면은 가급적 스케치 영역의 비중을 높이기 위해 검색결과 출력영역의 크기가 줄어들게 된다. 이 경우 검색결과 출력영역은 좌우 화살표를 이용하여 스크롤 될 수 있으며 사용자의 제스처에 의해 스크롤 될 수도 있다.
한편, 스케치 검색에 있어 사용자의 손가락이나 펜 등의 스케치 도구에 의해 밑그림이 가려지는 상황이 발생할 수 있는데, 이러한 문제는 실제 스트로크가 표현되는 영역과 실제 사용자가 터치하는 영역을 이격시키는 다양한 방식을 통해 일부 해소할 수 있다. 예를 들어 실제 스트로크를 제공할 위치를 선택한 후 그와 이격된 영역을 터치하여 선을 그리면 먼저 선택한 위치에서 선이 그려지는 방식을 취할 수 있다. 물론 그 이격 거리나 스트로크 제공 위치 선택 방식 등은 다양한 방식에 따라 가변될 수도 있다.
본 발명의 실시예에 따른 컴퓨터 프로그램이 기록된 기록매체에는 상술한 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 방법을 수행하는 컴퓨터 프로그램이 저장될 수 있다.
본 발명의 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 방법은 컴퓨터 프로그램으로 작성 가능하며, 컴퓨터 프로그램을 구성하는 코드들 및 코드 세그먼트들은 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 또한, 해당 컴퓨터 프로그램은 컴퓨터가 읽을 수 있는 정보저장매체(computer readable media)에 저장되고, 컴퓨터나 본 발명의 실시예에 따른 사용자 장치, 서비스 제공 장치 등에 의하여 읽혀지고 실행됨으로써 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 방법을 구현할 수 있다.
정보저장매체는 자기 기록매체, 광 기록매체 및 캐리어 웨이브 매체를 포함한다. 본 발명의 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 방법을 구현하는 컴퓨터 프로그램은 사용자 장치, 서비스 제공 장치 등의 내장 메모리에 저장 및 설치될 수 있다. 또는, 본 발명의 실시예에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 방법을 구현하는 컴퓨터 프로그램을 저장 및 설치한 스마트 카드 등의 외장 메모리가 인터페이스를 통해 사용자 장치, 서비스 제공 장치 등에 장착될 수도 있다.
전술한 내용은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
본 발명은 스트로크 인식 정보에 따라 후보 밑그림 영상들이 제공되고 후보 밑그림 영상을 가이드로 하여 스케치 작업이 이루어지게 되는 경우 스케치 작업 중 생성되는 다양한 정보들을 수집하고 분석하여 후보 밑그림 영상 필터링 조건을 결정한 후 필터링 조건에 따라 추출된 후보 밑그림 영상들이 제공하여 사용자가 원하는 스케치를 이룰 수 있도록 함으로써, 사용자의 입력에 따라 상품, 제품, 영상 등을 반복적으로 노출시켜 광고를 극대화시키고자 하는 서비스에 적용 가능하다.
100: 사용자 장치 110: 스케치 검색 인터페이스부
120: 스트로크 인식부 130: 스케치 상태정보 생성부
140: 제어부 200: 서비스 제공 장치
210: 밑그림 영상 데이터베이스부 220: 밑그림 영상 제공부
230: 스케치 검색정보 제공부 300: 통신망

Claims (11)

  1. 스케치 입력에 대한 가이드를 제공할 중첩된 밑그림이 표시되는 스케치 영역과 스케치 검색결과 나열되는 검색결과 출력영역을 구비하는 스케치 검색 인터페이스부;
    상기 스케치 검색 인터페이스부의 스케치 영역을 통한 사용자 입력을 스트로크 정보로 검출하여 출력하는 스트로크 인식부;
    스트로크 인식부로부터 스트로크 정보를 입력받아 상기 스케치 영역의 스케치 작업 중 얻어지는 스트로크 상태와 스케치 품질에 관한 스케치 상태 정보를 수집하여 출력하는 스케치 상태 정보 생성부; 및
    상기 스케치 영역으로부터 스케치 작업이 이루어지는 경우 스트로크 인식부의 스트로크 정보를 입력받아 스트로크 인식정보를 생성시키고, 스케치 상태 정보 생성부의 스케치 상태 정보와 스트로크 인식정보를 이용하여 제 1 필터링 조건 정보를 생성시켜 서비스 제공 장치에 전송하는 제어부를 포함하는 맞춤형 필터링 기능이 구비된 스케치 검색 사용자 장치.
  2. 제 1 항에 있어서,
    상기 제 1 필터링 조건정보는 스트로크 상태정보, 스케치 품질정보 중 적어도 하나 또는 그 이상으로 이루어진 것을 특징으로 하는 맞춤형 필터링 기능이 구비된 스케치 검색 사용자 장치.
  3. 복수의 밑그림 영상과 그에 대응되는 원본 영상이 카테고리 정보와 함께 저장된 밑그림 영상 데이터베이스부;
    상기 사용자 장치로부터 스케치 작업 중 얻어지는 스트로크 상태 및 스케치 품질에 관한 스케치 상태 정보와 스트로크 정보를 포함하는 제 1 필터링 조건정보를 수신하여 수신된 제 1 필터링 조건정보를 기반으로 상기 밑그림 영상 데이터베이스부로부터 후보 밑그림 영상을 선별하는 밑그림 영상 제공부; 및
    상기 밑그림 영상 제공부에서 선별된 후보 밑그림 영상과 그에 대응하는 원본 영상을 사용자 장치에 제공하는 스케치 검색정보 제공부를 포함하는 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 제공 장치.
  4. 제 3 항에 있어서,
    상기 밑그림 영상 제공부는 상기 사용자의 개인정보 및 상기 사용자에 의해 선택된 검색정보에 따라 제 2 필터링 조건정보를 생성하고, 상기 제 2 필터링 조건정보에 의해 검색된 밑그림 영상을 사용자 장치에 제공하는 것을 특징으로 하는 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 제공 장치.
  5. 제 3 항에 있어서,
    상기 밑그림 영상 제공부는 상기 제 1 필터링 조건 정보를 분석하여 후보 밑그림 영상의 카테고리에 가중치를 부여하는 것을 특징으로 하는 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 제공 장치.
  6. 제 1 항에 있어서,
    상기 스트로크 상태는 스트로크가 떨리거나 반복하여 지운 정도에 관한 정보를 포함하고, 상기 스케치 품질은 밑그림과의 일치도나 학습을 통한 스케치 품질 분류에 의한 품질 수준에 대한 정보를 포함하는 것을 특징으로 하는 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 제공 장치.
  7. 제 3 항에 있어서,
    상기 밑그림 영상 제공부는 제공된 후보 밑그림 영상이 속한 카테고리가 스케치 작업이 진행되는 동안 변화되는 상태를 분석하여 카테고리의 가중치 정보 및 제 1 필터링 조건 정보를 변경시키는 것을 특징으로 하는 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 제공 장치.
  8. 사용자 장치가 스케치 검색 인터페이스를 통해 사용자의 스트로크를 수신하여 스케치 작업을 수행하는 단계;
    상기 사용자 장치가 상기 스케치 검색 인터페이스를 통해 이루어지는 스케치 작업 중에 얻어지는 스트로크 상태 및 스케치 품질에 관한 정보를 포함하는 스케치 상태 정보들과 이 때의 스트로크 정보를 수집하는 단계;
    상기 사용자 장치가 상기 스트로크 정보 및 스케치 상태 정보를 제 1 필터링 조건정보로 하여 서비스 제공 장치로 전송하는 단계; 및
    상기 사용자 장치가 상기 제 1 필터링 조건정보에 따라 서비스 제공 장치에서 추출된 후보 밑그림 영상들을 제공받는 단계를 포함하는 사용자 장치에서의 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 방법.
  9. 서비스 제공 장치가 사용자 장치로부터 스케치 검색 실행 요청신호를 수신하는 단계;
    상기 서비스 제공 장치가 상기 사용자 장치로부터 스케치 작업 중 얻어지는 스트로크 상태 및 스케치 품질에 관한 스케치 상태 정보와 스트로크 정보를 포함하는 제 1 필터링 조건정보를 수신하는 단계;
    상기 서비스 제공 장치가 제 1 필터링 조건 정보에 따른 후보 밑그림 영상들을 선별한 후 사용자 장치에 전송하는 단계; 및
    상기 서비스 제공 장치가 상기 후보 밑그림 영상들을 가이드로 하여 스케치 작업이 수행되는 동안 수집된 스케치 상태 정보를 수신받아 분석한 후 분석 결과에 따라 카테고리를 선별하고, 선별된 카테고리에 포함되어 있는 후보 밑그림 영상들을 상기 사용자 장치로 전송하는 단계를 포함하는 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 방법.
  10. 제 8 항 또는 제 9 항에 따른 맞춤형 필터링 기능이 구비된 스케치 검색 서비스 방법을 수행하는 컴퓨터 프로그램이 기록된 기록매체.
  11. 스케치 검색 인터페이스의 스케치 영역을 통해 생성된 스트로크 인식 정보를 기반으로 후보 밑그림 영상들을 제공받아 스케치 작업이 이루어지도록 하고, 상기 스케치 작업 진행에 따라 발생되는 스케치 상태 정보와 스트로크 정보를 제 1 필터링 조건정보로 전송하고, 상기 제 1 필터링 조건정보에 따라 추출된 후보 밑그림 영상들을 제공받아 후보 밑그림 출력영역에 노출시키는 사용자 장치; 및
    상기 사용자 장치로부터 제 1 필터링 조건 정보를 전송받아 사용자의 스트로크 상태나 스케치의 품질 상태를 분석한 후 후보 밑그림 영상의 카테고리를 결정하고, 결정된 카테고리에 포함되어 있는 후보 밑그림 영상들을 추출하여 사용자 장치로 전송하는 서비스 제공 장치를 포함하는 맞춤형 필터링 기능이 구비된 스케치 검색 시스템.
KR1020140022368A 2014-02-26 2014-02-26 맞춤형 필터링 기능이 구비된 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체 KR102207514B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140022368A KR102207514B1 (ko) 2014-02-26 2014-02-26 맞춤형 필터링 기능이 구비된 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140022368A KR102207514B1 (ko) 2014-02-26 2014-02-26 맞춤형 필터링 기능이 구비된 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체

Publications (2)

Publication Number Publication Date
KR20150101109A true KR20150101109A (ko) 2015-09-03
KR102207514B1 KR102207514B1 (ko) 2021-01-26

Family

ID=54242341

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140022368A KR102207514B1 (ko) 2014-02-26 2014-02-26 맞춤형 필터링 기능이 구비된 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체

Country Status (1)

Country Link
KR (1) KR102207514B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102463638B1 (ko) * 2021-05-27 2022-11-09 주식회사 엔씨소프트 페인팅 스타일에 기초하여 컨텐츠를 추천하는 서버 및 이의 동작 방법

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000148795A (ja) * 1998-08-31 2000-05-30 Canon Inc 画像検索装置及びその方法、コンピュ―タ可読メモリ
KR100451649B1 (ko) * 2001-03-26 2004-10-08 엘지전자 주식회사 이미지 검색방법과 장치
KR100540748B1 (ko) 2003-09-08 2006-01-10 학교법인 한양학원 내용 기반 검색을 위한 개선된 질의 방법 및 그 방법을구현하기 위한 프로그램을 저장한 기록매체
JP4449183B2 (ja) * 2000-07-11 2010-04-14 ソニー株式会社 画像編集システム及び画像編集方法、並びに記憶媒体
US20100135597A1 (en) * 2005-05-09 2010-06-03 Salih Burak Gokturk System and method for enabling image searching using manual enrichment, classification, and/or segmentation
KR20120007045A (ko) * 2009-04-14 2012-01-19 퀄컴 인코포레이티드 모바일 디바이스들을 이용한 이미지 인식을 위한 시스템 및 방법
KR20120036649A (ko) * 2010-10-08 2012-04-18 엘지전자 주식회사 단말기의 드로잉을 이용한 검색 방법 및 그 단말기
KR20120108496A (ko) * 2011-03-24 2012-10-05 에스케이플래닛 주식회사 이미지 인식을 이용한 제품 정보 비교 서비스 제공 시스템, 이를 위한 장치, 이를 위한 단말 및 이를 위한 방법
KR20130059058A (ko) * 2011-11-28 2013-06-05 건국대학교 산학협력단 스케치 질의를 사용하는 콘텐츠 기반 이미지 검색기에서의 질의 이미지 및 검색 대상 영상의 전처리 장치 및 그 방법
KR20130059033A (ko) * 2011-11-28 2013-06-05 연세대학교 산학협력단 스케치를 이용한 멀티미디어 검색 시스템 및 방법

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000148795A (ja) * 1998-08-31 2000-05-30 Canon Inc 画像検索装置及びその方法、コンピュ―タ可読メモリ
JP4449183B2 (ja) * 2000-07-11 2010-04-14 ソニー株式会社 画像編集システム及び画像編集方法、並びに記憶媒体
KR100451649B1 (ko) * 2001-03-26 2004-10-08 엘지전자 주식회사 이미지 검색방법과 장치
KR100540748B1 (ko) 2003-09-08 2006-01-10 학교법인 한양학원 내용 기반 검색을 위한 개선된 질의 방법 및 그 방법을구현하기 위한 프로그램을 저장한 기록매체
US20100135597A1 (en) * 2005-05-09 2010-06-03 Salih Burak Gokturk System and method for enabling image searching using manual enrichment, classification, and/or segmentation
KR20120007045A (ko) * 2009-04-14 2012-01-19 퀄컴 인코포레이티드 모바일 디바이스들을 이용한 이미지 인식을 위한 시스템 및 방법
KR20120036649A (ko) * 2010-10-08 2012-04-18 엘지전자 주식회사 단말기의 드로잉을 이용한 검색 방법 및 그 단말기
KR20120108496A (ko) * 2011-03-24 2012-10-05 에스케이플래닛 주식회사 이미지 인식을 이용한 제품 정보 비교 서비스 제공 시스템, 이를 위한 장치, 이를 위한 단말 및 이를 위한 방법
KR20130059058A (ko) * 2011-11-28 2013-06-05 건국대학교 산학협력단 스케치 질의를 사용하는 콘텐츠 기반 이미지 검색기에서의 질의 이미지 및 검색 대상 영상의 전처리 장치 및 그 방법
KR20130059033A (ko) * 2011-11-28 2013-06-05 연세대학교 산학협력단 스케치를 이용한 멀티미디어 검색 시스템 및 방법
KR101326083B1 (ko) * 2011-11-28 2013-11-07 건국대학교 산학협력단 스케치 질의를 사용하는 콘텐츠 기반 이미지 검색기에서의 질의 이미지 및 검색 대상 영상의 전처리 장치 및 그 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102463638B1 (ko) * 2021-05-27 2022-11-09 주식회사 엔씨소프트 페인팅 스타일에 기초하여 컨텐츠를 추천하는 서버 및 이의 동작 방법

Also Published As

Publication number Publication date
KR102207514B1 (ko) 2021-01-26

Similar Documents

Publication Publication Date Title
US11157577B2 (en) Method for searching and device thereof
EP3469477B1 (en) Intelligent virtual keyboards
US8949109B2 (en) Device, method, and program to display, obtain, and control electronic data based on user input
US20150339348A1 (en) Search method and device
US20120023447A1 (en) Information processing device, information processing method, and information processing program
CN103838566A (zh) 信息处理装置和信息处理方法
WO2017218244A1 (en) Virtual keyboard with intent-based, dynamically generated task icons
KR20180112031A (ko) 컨텐츠 선택을 제공하는 시스템들 및 방법들
US9569420B2 (en) Image processing device, information processing method, and information processing program
US20130300675A1 (en) Electronic device and handwritten document processing method
EP2758860A1 (en) Collaborative gesture-based input language
CN103218160A (zh) 人机交互方法及终端
US11734370B2 (en) Method for searching and device thereof
KR20150027885A (ko) 전자 필기 운용 방법 및 이를 지원하는 전자 장치
US20150134641A1 (en) Electronic device and method for processing clip of electronic document
EP2947584A1 (en) Multimodal search method and device
US9183276B2 (en) Electronic device and method for searching handwritten document
EP3660635A1 (en) Integration of smart tags into handwriting input
KR20150097250A (ko) 태그 정보를 이용한 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체
KR102213861B1 (ko) 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체
KR20150101843A (ko) 드로잉 상황에 반응하는 가이드가 구비된 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체
KR102207514B1 (ko) 맞춤형 필터링 기능이 구비된 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체
KR20150093045A (ko) 스케치 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체
KR102213856B1 (ko) 스케치를 통한 상품 검색 시스템, 사용자 장치, 서비스 제공 장치, 그 서비스 방법 및 컴퓨터 프로그램이 기록된 기록매체
US9411885B2 (en) Electronic apparatus and method for processing documents

Legal Events

Date Code Title Description
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant