KR101604241B1 - Scrap service system for printed media and Method for providing printed media scrap service using pen type digital scanner scaning document printed on printed media - Google Patents

Scrap service system for printed media and Method for providing printed media scrap service using pen type digital scanner scaning document printed on printed media Download PDF

Info

Publication number
KR101604241B1
KR101604241B1 KR1020140056623A KR20140056623A KR101604241B1 KR 101604241 B1 KR101604241 B1 KR 101604241B1 KR 1020140056623 A KR1020140056623 A KR 1020140056623A KR 20140056623 A KR20140056623 A KR 20140056623A KR 101604241 B1 KR101604241 B1 KR 101604241B1
Authority
KR
South Korea
Prior art keywords
document
scrap
image
pen
user
Prior art date
Application number
KR1020140056623A
Other languages
Korean (ko)
Other versions
KR20140082946A (en
Inventor
황태욱
Original Assignee
(주)다하미 커뮤니케이션즈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)다하미 커뮤니케이션즈 filed Critical (주)다하미 커뮤니케이션즈
Priority to KR1020140056623A priority Critical patent/KR101604241B1/en
Publication of KR20140082946A publication Critical patent/KR20140082946A/en
Application granted granted Critical
Publication of KR101604241B1 publication Critical patent/KR101604241B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services

Landscapes

  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Facsimiles In General (AREA)

Abstract

본 발명은 사용자가 스크랩하기를 원하는 인쇄매체의 인쇄된 일부 영역인 스크랩 문서의 일부 이미지를 스캔하여 스캔 이미지를 전송하는 펜형 디지털 스캐너를 이용하는 인쇄매체 스크랩 서비스 제공 시스템으로, 스크랩 문서에 할당된 스크랩 문서의 문서 식별자에 대하여 스크랩 문서의 내용정보 및 스크랩 문서의 문서 이미지의 위치정보를 포함하는 문서검색정보를 저장하는 문서검색정보 데이터베이스 및 스크랩 문서의 문서 이미지를 저장하는 문서 이미지 데이터베이스를 포함하고, 사용자가 스크랩하기를 원하는 스크랩 문서에 대하여 펜형 디지털 스캐너에서 스캔된 스캔 이미지를 통신 네트워크를 통하여 수신하는 영상 수신 모듈(101); 상기 수신된 스캔 이미지를 문자 인식하여, 문자열로 변환하는 문자 인식 모듈(102); 문서검색정보 데이터베이스를 검색하여 상기 변환된 문자열이 내용정보에 포함된 스크랩 문서의 문서 식별자를 추출하고 추출된 문서 식별자를 특정 사용자의 사용자 식별자를 기준으로 정렬하여 특정 사용자에 대한 스크랩 정보를 생성하여 저장하는 문서 매칭 검색 모듈(103); 통신 네트워크를 통한 특정 사용자의 요청에 따라, 상기 특정 사용자의 스크랩 정보로부터 스크랩 문서의 문서 식별자 목록을 추출하여 전송하고, 문서 이미지 데이터베이스로부터 스크랩 문서의 문서 이미지를 검색하여 사용자 단말에 전송하는 스크랩 문서 서비스 모듈(104)를 포함하여 이루어지는 것을 특징으로 한다.The present invention relates to a printing medium scrap service providing system using a pen-type digital scanner for scanning a partial image of a scrap document, which is a printed partial area of a print medium desired by a user, and transmitting the scanned image, And a document image database storing a document image of a scrap document, wherein the document image database stores document search information including document information of a scrap document and position information of a document image of a scrap document with respect to a document identifier of a scrap document, An image receiving module (101) for receiving a scanned image scanned by a pen-type digital scanner through a communication network with respect to a scrap document desired to be scrapped; A character recognition module (102) for recognizing the received scan image and converting the received scan image into a character string; Extracts a document identifier of a scrap document included in the content information by searching the document search information database, generates scrap information for a specific user by sorting the extracted document identifier based on a user identifier of the specific user, A document matching search module 103; Extracting a document identifier list of the scrap document from the scrap information of the specific user according to a request of a specific user through the communication network, searching the document image of the scrap document from the document image database, And a module (104).

Description

인쇄매체에 인쇄된 문서를 스캔하는 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스 시스템 및 인쇄매체 스크랩 서비스 제공방법.{Scrap service system for printed media and Method for providing printed media scrap service using pen type digital scanner scaning document printed on printed media}Technical Field [0001] The present invention relates to a scrap service system for a print medium using a pen-type digital scanner that scans a document printed on a print medium, and a method for providing a scrap service for a print medium. on printed media}

본 발명은 인쇄매체 스크랩 서비스 제공 시스템 및 인쇄매체 스크랩 서비스 제공방법에 관한 것으로, 상세하게는, 신문 기사나 잡지와 같은 인쇄매체 또는 인쇄문서의 일부를 카메라 또는 이미지 센서가 내장된 펜형 디지털 스캐너를 이용하여 스캔하여 스캔 이미지를 기초로 사용자 단말에서 전자적 이미지의 형태로 스크랩할 수 있는 인쇄매체 스크랩 서비스 시스템과 인쇄매체 스크랩 서비스 제공방법에 관한 것이다.The present invention relates to a printing medium scrap service providing system and a printing medium scrap service providing method. More particularly, the present invention relates to a printing medium such as a newspaper article and a magazine or a part of a printed document by using a pen-type digital scanner The present invention relates to a print medium scrap service system and a print medium scrap service method capable of scrapping in the form of an electronic image at a user terminal based on a scan image.

종래에는 종이 스크랩 방식으로, 인쇄매체, 예를 들어 인쇄된 잡지나 신문 기사 같은 문서를 스크랩하려고 할 경우 문서의 일부를 가위나 칼과 자 등을 이용하여 원본에서 분리하여 스크랩 용지에 풀이나 접착제를 이용하여 붙이는 방법을 이용하였으며 이 방법은 원본 손상이 심해서 원본을 유지할 수 없고, 양면의 문서인 경우 스크랩하는 페이지가 아닌 반대편 페이지까지 손상이 되는 문제가 있었다. 또한, 사용자는 원본에서 일부를 분리하는 과정과 스크랩 용지에 분리된 문서를 부착하는 과정에서 불편함을 겪었다.Conventionally, when scrapping a document such as a printed magazine or a newspaper article with a paper scrap method, a part of the document is separated from the original by using scissors, a knife, or the like, and paste or glue This method has a problem that the original can not be maintained because the original damage is severe, and in the case of the document on both sides, the page on the opposite side is damaged rather than the page to be scrapped. In addition, the user has suffered in the process of separating a part from the original and attaching the separated document to the scrap paper.

종이 스크랩 방식에서 원본 문서의 손상을 방지하기 위한 방법으로 원본 문서를 복사용지에 복사하고 복사된 용지를 칼 등으로 잘라서 스크랩 용지에 붙이는 방법이 이용되기도 하였으나 이 경우 복사본은 원본보다 화질이 떨어지는 문제가 발생하였다.In order to prevent damage to the original document in the paper scrap method, a method of copying the original document to the copy paper, cutting the copied paper with a knife or the like, and attaching it to the scrap paper was used. However, in this case, Respectively.

상기의 문제를 해결하기 위하여, 디지털 스크랩방식이 제공되어, 전체문서의 이미지를 전자적으로 처리하여 디지털 상태로 사용자에게 제공하고 사용자는 컴퓨터 모니터 등 화면상에서 전체문서의 이미지의 일부를 스크랩함으로써 상술한 종이 스크랩 방식에서 인쇄문서의 스크랩시 발생하는 원본 문서 손상과 화질 저하 문제를 해결할 수 있었다. In order to solve the above problem, a digital scrap method is provided to electronically process an image of an entire document to provide the digital image to a user, and a user scraps a part of an image of an entire document on a screen such as a computer monitor, It is possible to solve the problem of the damage of the original document and the deterioration of the image quality caused by scrapping of the printed document in the scrap method.

그러나, 종래 디지털 스크랩방식은 스크랩시 화면상에서 문서의 이미지를 볼 때 화면의 해상도 또는 화면 크기 등의 문제로 특히, 신문과 같은 인쇄매체 경우 지면 전체의 구성을 파악하기 위해서는 이미지를 축소해야 하고, 내용을 읽기 위해서는 화면의 이미지를 확대하는 등 사용상의 불편함이 있었다. 또한, 스크랩을 위해서 컴퓨터와 같은 사용자 단말을 이용해야 함으로써 고정된 장소에서만 스크랩을 할 수 있는 불편함이 있었다.However, in the conventional digital scrapping method, when the image of the document is viewed on the screen at the time of scrap, there is a problem such as the resolution of the screen or the size of the screen. Especially in the case of a print medium such as a newspaper, There is an inconvenience in use such as enlarging the image of the screen. In addition, since a user terminal such as a computer must be used for scrapping, scrapping can be performed only at a fixed place.

종래 디지털 스크랩 방식의 고정된 장소에서만 이용할 수 있는 문제를 해결하기 위하여 스마트폰이나 이동식 태블릿 컴퓨터 등 스마트 기기를 이용하여 스크랩할 수 있는 솔루션이 개발되었으나, 신문 등 원본 인쇄 문서의 크기가 큰 경우에는 작은 화면 크기로 인하여 스크랩을 위하여 화면상에서 확대와 축소를 반복하는 불편함은 개선되지 못하였다. 또한, 종래 디지털 스크랩 방식은 컴퓨터나 스마트폰 태블릿 등 스마트 기기를 이용하는 경우 스크랩시 본인 확인을 위하여 사용자 식별자(Identifier, ID)와 암호(PASSWORD)를 별도로 입력하여 번거로운 과정을 거쳐야만 하는 문제도 있었다.In order to solve the problem that can be used only in a fixed place of the digital scrap system, a solution capable of scrapping using a smart device such as a smart phone or a portable tablet computer has been developed. However, The inconvenience of repeating the enlargement and reduction on the screen for scrapping due to the screen size has not been improved. In addition, in the conventional digital scrap method, when a smart device such as a computer or a smartphone tablet is used, a user identifier (ID) and a password (PASSWORD) must be input separately for scrambling.

더욱이, 종래 디지털 스크랩 방식은 신문 또는 잡지의 구독에 대하여, 종이 등의 전통적인 인쇄매체에 익숙하거나 이를 선호하는 구독자에 대하여는 널리 보급될 수 없는 근본적인 문제가 있으며, 종이 신문, 잡지와 같은 인쇄매체의 발행 서비스와 단절되어 제공되므로, 종이 신문, 잡지와 같은 인쇄매체의 발행 및 구독과 연관된 서비스의 제공이 불가능하였다. Furthermore, the conventional digital scrap method has a fundamental problem that it can not be widely used for subscribers who are familiar with or prefer to use traditional print media such as paper for the subscription of newspapers or magazines, and the issue of print media such as paper newspapers and magazines Service, it is impossible to provide services related to the issuance and subscription of print media such as paper newspapers and magazines.

위와 같은 문제를 해결하기 위하여, 신문 또는 잡지 등 인쇄매체의 개별 기사마다 QR코드 등을 인쇄하여 특정 기사 코드를 특정하여 인식할 수 있게 하는 방법과 지면에 대하여 특정 좌표 정보를 작은 점으로 코드화하여 인식할 수 있게 하는 방법이 개발되었으나, 인쇄매체의 인쇄 또는 편집 과정에서 관련 코드를 별도로 인쇄하는 작업이 추가되어야 하는 문제점으로 널리 보급되지 못하였다. In order to solve the above problems, there is a method of printing a QR code or the like for each individual article of a print medium such as a newspaper or a magazine to identify and recognize a specific article code, and a method of encoding However, this method has not been popularized because it is required to print a related code separately in the process of printing or editing a print medium.

대한민국 공개특허공보 10-2006-0101372호(에스엠에스를 이용한 신문, 잡지 기사 스크랩 방법, 주식회사 정보와 미래)Korean Patent Laid-Open Publication No. 10-2006-0101372 (newspaper, magazine article scrap method using SM, information and future of corporation)

본 발명은 상술한 종래의 종이 스크랩 방식과 디지털 스크랩방식의 문제점을 개선하여, 상술한 신문, 잡지 등 인쇄매체를 기반으로 사용자가 스크랩하면서도 스크랩하는 스크랩 문서를 디지털화된 이미지 방식으로 처리하여, 사용자가 신문, 잡지 등 인쇄매체를 직접 이용하여 스크랩하고, 스크랩 문서를 디지털화된 방식으로 활용할 수 있도록 하는 인쇄매체 스크랩 서비스 시스템 및 인쇄매체 스크랩 서비스 제공 방법을 제공하는 것을 목적으로 한다.The present invention improves the problems of the conventional paper scrap system and the digital scrap system described above and processes the scrap document scrapped by the user based on the print medium such as the newspaper and the magazine in the digitalized image system, It is another object of the present invention to provide a printing medium scrap service system and a printing medium scrap service providing method which enable scrap documents to be utilized in a digitized manner by directly using print media such as newspapers and magazines.

또한, 본 발명의 목적은 상술한 신문, 잡지 등 인쇄매체를 기반으로 하면서도 인쇄매체의 인쇄 또는 편집 과정에서 특별히 다른 정보를 인쇄하는 작업이 추가되지 않고 인쇄매체를 그대로 적용할 수 있는 인쇄매체 스크랩 서비스 시스템 및 인쇄매체 스크랩 서비스 제공 방법을 제공하는 것이다.It is another object of the present invention to provide a printing medium scrap service capable of applying a printing medium as it is without adding a job of printing other information especially during printing or editing of a printing medium, System and a print medium scrap service.

나아가, 본 발명의 목적은 사용자가 편리하게 스크랩하고 인증 등 번거로운 과정없이 스크랩한 스크랩 문서의 전송하여 관리 및 활용할 수 있는 스크랩 서비스 시스템 및 인쇄매체 스크랩 서비스 제공 방법을 제공하는 것이다.Further, it is an object of the present invention to provide a scrap service system and a method of providing a scrap service for a print medium in which a user can conveniently transmit and manage scrap documents scrapped without troublesome processes such as scrap and authentication.

상기의 본 발명의 목적을 달성하기 위하여, 일 측면에 있어서, 본 발명은 사용자가 스크랩하기를 원하는 인쇄매체의 인쇄된 일부 영역인 스크랩 문서의 일부 이미지를 스캔하여 스캔 이미지를 전송하는 펜형 디지털 스캐너를 이용하는 인쇄매체 스크랩 서비스 시스템으로, 스크랩 문서에 할당된 스크랩 문서의 문서 식별자에 대하여 스크랩 문서의 내용정보 및 스크랩 문서의 문서 이미지의 위치정보를 포함하는 문서검색정보를 저장하는 문서검색정보 데이터베이스 및 스크랩 문서의 문서 이미지를 저장하는 문서 이미지 데이터베이스를 포함하고, 사용자가 스크랩하기를 원하는 스크랩 문서에 대하여 펜형 디지털 스캐너에서 스캔된 스캔 이미지를 통신 네트워크를 통하여 수신하는 영상 수신 모듈(101); 상기 수신된 스캔 이미지를 문자 인식하여, 문자열로 변환하는 문자 인식 모듈(102); 문서검색정보 데이터베이스를 검색하여 상기 변환된 문자열이 내용정보에 포함된 스크랩 문서의 문서 식별자를 추출하고 추출된 문서 식별자를 특정 사용자의 사용자 식별자를 기준으로 정렬하여 특정 사용자에 대한 스크랩 정보를 생성하여 저장하는 문서 매칭 검색 모듈(103); 통신 네트워크를 통한 특정 사용자의 요청에 따라, 상기 특정 사용자의 스크랩 정보로부터 스크랩 문서의 문서 식별자 목록을 추출하여 전송하고, 문서 이미지 데이터베이스로부터 스크랩 문서의 문서 이미지를 검색하여 사용자 단말에 전송하는 스크랩 문서 서비스 모듈(104)를 포함하여 이루어지는 것을 특징으로 한다.According to an aspect of the present invention, there is provided a pen-type digital scanner for scanning a partial image of a scrap document, which is a printed partial area of a print medium desired to be scrapped by a user, A document search information database storing document search information including content information of a scrap document and location information of a document image of a scrap document with respect to a document identifier of a scrap document allocated to a scrap document, An image receiving module 101 that receives a scanned image scanned by a pen-type digital scanner through a communication network with respect to a scrap document that the user desires to scrap, and a document image database that stores a document image of the scanned document; A character recognition module (102) for recognizing the received scan image and converting the received scan image into a character string; Extracts a document identifier of a scrap document included in the content information by searching the document search information database, generates scrap information for a specific user by sorting the extracted document identifier based on a user identifier of the specific user, A document matching search module 103; Extracting a document identifier list of the scrap document from the scrap information of the specific user according to a request of a specific user through the communication network, searching the document image of the scrap document from the document image database, And a module (104).

바람직하게는, 상기 펜형 디지털 스캐너는 펜 고유번호를 가지고 상기 펜 고유번호가 서비스 사용자의 사용자 식별자 별로 할당되어 등록되며, 사용자 식별자에 대하여 할당되어 등록된 펜 고유번호를 저장하는 사용자/펜 정보 데이터베이스(106)를 더 포함하여 구성된다. Preferably, the pen-type digital scanner includes a user / pen information database (hereinafter, referred to as " user ID ") that has a pen unique number and is allocated and registered for each user identifier of the service user, 106).

여기서, 상기 펜형 디지털 스캐너는 스캔 이미지 전송시 상기 펜 고유번호를 전송하며, 상기 영상 수신 모듈(101)은 스캔 이미지의 수신시 상기 펜 고유번호를 스캔 이미지와 연관하여 수신하고, 상기 문서 매칭 검색 모듈(103)은 펜 고유번호를 기초로 상기 특정 사용자의 사용자 식별자를 검색하는 것이 바람직하다.The pen-type digital scanner transmits the pen-specific number when transmitting a scan image. The image-receiving module 101 receives the pen-specific number in association with a scan image when receiving a scan image, (103) searches the user identifier of the specific user based on the pen unique number.

또한, 바람직하게는, 상기 특정 사용자에 대한 스크랩 정보를 저장하는 스크랩정보 데이터베이스(107)를 포함하여, 스크랩정보 데이터베이스(107)에는 서비스 사용자별로 할당된 사용자 식별자에 대하여 정렬된 스크랩 문서의 문서 식별자와 수신된 스캔 이미지부터 인식된 문자열의 디지털 코드, 스크랩 시간 정보, 스크랩 장소 정보, 펜형 디지털 스캐너에 할당된 펜 고유번호 중 선택된 하나 이상의 스크랩 관련 정보를 포함하도록 구성된다. The scrap information database 107 may include a scrap information database 107 for storing scrap information for the specific user. The scrap information database 107 stores document identifiers of scrap documents sorted for user identifiers assigned to service users, Related information selected from among a received digital image of the scanned image, a digital code of a recognized character string, scrap time information, scrap location information, and a pen unique number assigned to the pen-type digital scanner.

나아가, 바람직하게는 인쇄매체의 전체문서가 스크랩 문서단위로 분리되어 처리된 스크랩 문서의 문서 이미지 및 관련 문자 정보를 수신하고 각 스크랩 문서의 문서검색정보를 생성하여 스크랩 문서의 문서 이미지 및 문서검색정보를 각각 데이터베이스에 저장하는 스크랩 문서 중계모듈(109)을 더 포함한다.Further, preferably, the entire document of the print medium is divided into scrap document units, and the document image and the related character information of the processed scrap document are received, and the document search information of each scrap document is generated and the document image of the scrap document and the document search information And a scrap document relay module 109 for storing the scrap document in the database.

여기서, 스크랩 문서 중계모듈(109)은 인쇄매체의 전체문서 또는 일부 문서를 수신하여 스크랩 문서단위로 분리하여 처리할 수도 있다. Here, the scrap document relay module 109 may receive the entire document or a part of the document of the print medium and divide it into a scrap document unit.

또한, 상기 펜형 디지털 스캐너는 스캔 이미지를 무선 전송하는 무선 전송 모듈을 포함하여, 상기 무선 전송 모듈은 근거리 무선통신 방식으로 통신 네트워크에 접속하여 스캔 이미지를 영상 수신 모듈(101)로 전송하거나, 상기 펜형 디지털 스캐너는 스캔 이미지를 무선 전송하는 무선 전송 모듈을 포함하여, 상기 무선 전송 모듈은 근거리 무선 통신방식으로 통신 네트워크에 접속기능을 가진 통신 기기와 무선으로 접속하여 스캔 이미지를 전송하고, 상기 통신 기기가 통신 네트워크에 접속하여 스캔 이미지를 영상 수신 모듈(101)로 전송할 수도 있다.The pen-type digital scanner includes a wireless transmission module for wirelessly transmitting a scan image. The wireless transmission module is connected to the communication network by a short-range wireless communication method and transmits a scan image to the image reception module 101, The digital scanner includes a wireless transmission module for wirelessly transmitting a scan image, wherein the wireless transmission module wirelessly connects with a communication device having a connection function to a communication network in a short-range wireless communication manner to transmit a scanned image, And transmits the scanned image to the image receiving module 101 by connecting to the communication network.

다른 측면에서, 본 발명은 인쇄매체에 인쇄된 문서를 스캔하는 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스 제공방법으로, 사용자가 스크랩하기를 원하는 스크랩 문서와 관련하여 펜형 디지털 스캐너에서 스캔된 스캔 이미지를 통신 네트워크를 통하여 수신하는 스크랩 이미지 수신단계(S100); 상기 수신된 스캔 이미지를 문자 인식하여, 문자열로 변환하는 문자열 변환단계(S110); 상기 변환된 문자열이 포함된 스크랩 문서를 검색하여 해당 문서의 문서 식별자를 추출하는 문서 식별자 검색단계(S120); 상기 검색된 스크랩 문서의 문서 식별자를 특정 사용자의 식별자를 기준으로 정렬하여 상기 특정 사용자에 대한 스크랩 정보를 생성하여 저장하는 스크랩 정보 생성/저장단계(S130); 통신 네트워크를 통하여 특정 사용자의 스크랩 문서의 문서 식별자 목록 요청을 수신하여, 상기 특정 사용자에 대한 스크랩 정보로부터 스크랩 문서의 문서 식별자 목록을 추출하여 전송하는 문서 식별자 목록 추출 단계(S140)를 포함하여, 상기 문서 식별자 목록에 기초하여 사용자에 의하여 선택된 스크랩 문서의 문서 이미지를 사용자에게 전송하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided a printing medium scrap service providing method using a pen-type digital scanner that scans a document printed on a print medium, the method comprising: communicating a scanned image scanned by a pen-type digital scanner with a scrap document, Receiving scrap images through a network (S100); A character string conversion step (S110) of recognizing the received scan image and converting the received scan image into a character string; A document identifier searching step (S120) of searching a scrap document including the converted character string and extracting a document identifier of the document; A step (S 130) of creating and storing scrap information for the specific user by sorting the retrieved document ID of the scrap document based on the identifier of the specific user and storing the scrap information for the specific user; Extracting a document identifier list of a scrap document from the scrap information for the specific user by receiving a request for a document identifier list of a scrap document of a specific user via a communication network, And transmits the document image of the scrap document selected by the user to the user based on the document identifier list.

바람직하게는, 특정 사용자로부터 문서 식별자 목록에서 선택된 스크랩 문서의 문서 이미지 요청을 해당 스크랩 문서의 문서 식별자를 포함하여 수신하며, 수신된 문서 식별자에 해당하는 스크랩 문서의 문서 이미지 파일의 파일명을 추출하는 문서 이미지 파일명 추출 단계(S150); 및 상기 추출된 문서 이미지 파일명의 문서 이미지 파일을 사용자에게 전송하는 문서 이미지 파일 송신단계(S160)를 포함하여 수행된다.Preferably, a document image request of a scrap document selected from a list of document identifiers is received from a specific user including a document identifier of the scrap document, and a document extracting file name of a document image file of a scrap document corresponding to the received document identifier An image file name extracting step (S150); And a document image file transmission step (S160) of transmitting the document image file of the extracted document image file name to the user.

바람직하게는, 상기 펜형 디지털 스캐너는 펜 고유번호를 가지고, 상기 펜 고유번호를 서비스 사용자의 사용자 식별자별로 할당하여 등록하는 단계(S200)를 포함하며, 상기 펜형 디지털 스캐너는 스캔 이미지 전송시 상기 펜 고유번호를 전송하여, 상기 스크랩 이미지 수신단계(S100)는 스캔 이미지의 수신시 상기 펜 고유번호를 스캔 이미지와 연관하여 수신하도록 수행된다. Preferably, the pen-type digital scanner includes a step S200 of assigning and registering the pen-specific number for each user identifier of a service user with a pen-specific number (S200). The pen- The scrap image receiving step S100 is performed to receive the pen unique number in association with the scan image upon reception of the scan image.

이 경우, 스크랩 정보 생성/저장단계(S130)는 상기 펜 고유번호를 기초로 상기 특정 사용자의 식별자를 검색하여 상기 특정 사용자에 대한 스크랩 정보를 생성하도록 수행된다. In this case, the scrap information generating / storing step (S130) is performed to search the identifier of the specific user based on the pen unique number to generate scrap information for the specific user.

스크랩 정보 생성/저장단계(S130)는, 상기 사용자 식별자에 대하여 정렬된 스크랩 문서의 문서 식별자와 연관하여 수신된 스캔 이미지부터 인식된 문자열의 디지털 코드, 스크랩 시간 정보, 스크랩 장소 정보, 펜형 디지털 스캐너에 할당된 펜 고유번호 중 선택된 하나 이상을 저장하도록 수행되는 것이 바람직하다. The scrap information generation / storage step (S130) includes a step of, in association with the document identifier of the scrap document sorted for the user identifier, the digital code of the recognized string, the scrap time information, the scrap location information, And to store at least one selected one of the assigned pen unique numbers.

나아가, 바람직하게는 인쇄매체의 전체문서가 스크랩 문서단위로 분리되어 처리된 스크랩 문서의 문서 이미지 및 관련 문자 정보를 수신하거나 인쇄매체의 전체 문서 또는 일부 문서를 수신하여 스크랩 문서로 분리하여 스크랩 문서의 문서 이미지 및 관련 문자 정보를 생성하고, 각 스크랩 문서의 문서검색정보를 생성하여 스크랩 문서의 문서 이미지 및 문서검색정보로서 저장하는 사전처리 단계를 포함하여 수행된다. Further, preferably, the entire document of the print medium is divided into scrap document units, and a document image and related character information of the processed scrap document are received, or an entire document or a part of documents of the print medium is received and separated into scrap documents, A preprocessing step of generating a document image and related character information, generating document search information of each scrap document, and storing the document image and the document search information of the scrap document.

또한, 특정 사용자에게 전송된 문서 식별자 목록과 전송된 문서 이미지에 대한 문서 식별자 목록을 기록하여 저장하는 전송 목록 기록 단계(S170)을 더 포함하여 수행되는 것이 바람직하다.In addition, the method may further include a transmission list recording step (S170) of recording a document identifier list transmitted to a specific user and a document identifier list corresponding to the transmitted document image.

본 발명에 의하면, 상술한 종래의 종이 스크랩 방식과 디지털 스크랩방식의 문제점을 개선하여, 상술한 신문, 잡지 등 인쇄매체를 기반으로 사용자가 스크랩하면서도 스크랩하는 스크랩 문서를 디지털화된 이미지 방식으로 처리하여, 사용자가 신문, 잡지 등 인쇄매체를 직접 이용하여 스크랩하고, 스크랩 문서를 디지털화된 방식으로 활용할 수 있도록 하는 인쇄매체 스크랩 서비스를 제공할 수 있게 된다. According to the present invention, the problems of the conventional paper scrap system and digital scrap system described above are improved and the scrap document scrapped by the user based on the above-mentioned print medium such as newspaper, magazine or the like is processed by the digitized image system, It is possible to provide a print media scrap service that enables a user to directly use print media such as newspapers and magazines to scrap and utilize scrap documents in a digitized manner.

또한, 신문, 잡지 등 인쇄매체를 기반으로 하면서도 인쇄매체의 인쇄 또는 편집 과정에서 특별히 다른 정보를 인쇄하는 작업이 추가되지 않고 인쇄매체를 그대로 적용할 수 있는 효율적인 인쇄매체 스크랩 서비스를 제공할 수 있게 된다.In addition, it is possible to provide an efficient printing medium scrap service which can apply the printing medium as it is without adding a job of printing other information especially in printing or editing of printing medium based on printing medium such as newspaper or magazine .

나아가, 펜형 디지털 스캐너에 할당된 고유 식별번호를 사용하여 사용자가 편리하게 스크랩하고 인증 등 번거로운 과정 없이 스크랩한 스크랩 문서의 전송하여 관리 및 활용할 수 있는 스크랩 서비스를 제공할 수 있게 된다.Further, it is possible to provide a scrap service that can be conveniently managed and transmitted without scrambling and authenticating the scrap document scraped by the user conveniently using the unique identification number assigned to the pen-type digital scanner.

도1은 본 발명의 인쇄매체에 인쇄된 문서를 스캔하는 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스 제공 시스템의 네트워크 구성도.
도2는 본 발명의 일실시예에 따른 스크랩 서비스 시스템의 구성도.
도3a는 본 발명의 일실시예에 따른 펜형 디지털 스캐너의 구성 및 연결 구성을 설명하는 도면.
도3b는 본 발명의 일실시예에 따른 펜형 디지털 스캐너의 외관 구성도.
도4a 및 도4b는 본 발명의 일실시예에 따른 인쇄매체에 인쇄된 문서를 스캔하는 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스 제공방법의 흐름도.
도5는 본 발명의 일실시예에 따라, 스캔되는 인쇄매체에 인쇄된 문서를 설명하기 위한 신문 기사 사진.
도6은 본 발명의 일실시예에 따른 사용자 단말에서의 스크랩 서비스 제공 예시화면.
1 is a network configuration diagram of a printing medium scrap service providing system using a pen-type digital scanner for scanning a document printed on a print medium of the present invention.
2 is a configuration diagram of a scrap service system according to an embodiment of the present invention;
FIG. 3A is a diagram illustrating a configuration and a connection configuration of a pen-type digital scanner according to an embodiment of the present invention; FIG.
3B is an external configuration diagram of a pen-type digital scanner according to an embodiment of the present invention.
4A and 4B are flowcharts of a method of providing a print media scrap service using a pen-type digital scanner for scanning a document printed on a print medium according to an embodiment of the present invention.
5 is a photograph of a newspaper article for explaining a document printed on a print medium to be scanned, according to an embodiment of the present invention;
FIG. 6 is an exemplary screen for providing a scrap service in a user terminal according to an embodiment of the present invention; FIG.

이하, 도면을 참조하여 본 발명을 실시하기 위한 구체적인 내용을 실시예에 기초하여 설명한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는 적절하게 설명된다면 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.Hereinafter, the present invention will be described in detail with reference to the accompanying drawings. These embodiments are described in sufficient detail to enable those skilled in the art to practice the invention. It should be understood that the various embodiments of the present invention are different, but need not be mutually exclusive. For example, certain features, structures, and characteristics described herein may be implemented in other embodiments without departing from the spirit and scope of the invention in connection with an embodiment. It is also to be understood that the position or arrangement of the individual components within each disclosed embodiment may be varied without departing from the spirit and scope of the invention. The following detailed description is, therefore, not to be taken in a limiting sense, and the scope of the present invention is to be limited only by the appended claims, along with the full scope of equivalents to which the claims are entitled, if properly explained. In the drawings, like reference numerals refer to the same or similar functions throughout the several views.

또한, 본 명세서에 있어서는 어느 하나의 구성요소가 다른 구성요소로부터 정보나 데이터를 '수신'하는 경우에는 상기 구성요소는 상기 다른 구성요소로부터 직접 상기 정보나 데이터를 수신할 수도 있고, 적어도 하나의 또 다른 구성요소를 경유하여 상기 정보나 데이터를 상기 다른 구성요소로부터 수신할 수도 있는 것을 의미한다. 반대로 어느 하나의 구성요소가 다른 구성요소로부터 정보나 데이터를 '직접 수신'하는 경우에는 다른 구성요소를 통하지 않고 상기 다른 구성요소로부터 상기 정보나 데이터가 수신되는 것을 의미한다. 또한, '송신' 및 '전송'과 '직접 송신' 및 '직접 전송'의 경우도 마찬가지 의미로 사용된다. Also, in the present specification, when one component 'receives' information or data from another component, the component may receive the information or data directly from the other component, and at least one Quot; means that the information or data may be received from the other component via another component. On the contrary, when one component 'directly receives' information or data from another component, it means that the information or data is received from the other component without going through another component. Also, the terms 'transmission' and 'transmission', 'direct transmission', and 'direct transmission' are used in the same sense.

또한, 본 명세서에 있어서 인쇄매체는 신문, 잡지 등과 같이 종이와 같은 매체에 종래의 방식으로 인쇄하여 정보를 전달하는 매체를 의미하며, 스크랩 문서는 인쇄매체의 지면에서 기사단, 광고단 등과 같이 사전 구획된 인쇄매체의 일부분 또는 임의 구획된 일부분과 이들 각각에 대응하여 스크랩 서비스 시스템에 저장된 스크랩 문서의 이미지 및 관련 정보를 포함하는 데이터를 의미한다. 또한, 스캔 이미지는 사용자가 스크랩하고자 하는 인쇄매체의 스크랩 문서의 일부분이 카메라 또는 스캐너와 같은 촬상 도구로 촬영 또는 스캔되는 이미지의 데이터를 의미한다. In this specification, a print medium refers to a medium that prints information in a conventional manner on a medium such as a paper, such as a newspaper or a magazine, and transmits the information. The scrap document is, for example, Quot; means data including a part or an arbitrary segmented part of the print medium, and images and related information of scrap documents stored in the scrap service system corresponding to each of them. In addition, the scanned image refers to data of an image in which a part of the scrap document of the print medium to be scrapped by the user is shot or scanned by an imaging tool such as a camera or a scanner.

도1은 본 발명의 인쇄매체에 인쇄된 문서를 스캔하는 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스 제공 시스템의 네트워크 구성도이다.1 is a network configuration diagram of a printing medium scrap service providing system using a pen-type digital scanner for scanning a document printed on a printing medium of the present invention.

도1에서와 같이, 발명의 인쇄매체에 인쇄된 문서를 스캔하는 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스 제공 시스템의 네트워크는 인쇄매체 스크랩 서비스를 제공하는 스크랩 서비스 시스템(100), 사용자 단말(120), 사용자가 스크랩하기를 원하는 인쇄매체의 인쇄된 일부 영역인 스크랩 문서의 일부 이미지를 스캔하여 스캔 이미지를 전송하는 복수의 펜형 디지털 스캐너(130), 및 인쇄매체의 지면 전체 이미지나, 기사 등 개별 컨텐츠로 구획되어 분리처리된 스크랩 이미지 및 관련 문자 정보를 제공하는 인쇄매체 출판자(140)가 통신 네트워크(110)를 통하여 연결되어 구성될 수 있다.1, a network of a print media scrap service providing system using a pen-type digital scanner that scans a document printed on a print medium of the present invention includes a scrap service system 100 for providing print media scrap service, a user terminal 120, A plurality of pen-type digital scanners 130 for scanning a partial image of a scrap document, which is a printed partial area of a print medium desired to be scrapped by a user, and transmitting a scanned image, and a plurality of pen- And a print media publisher 140 that provides separated scrap images and related character information may be connected through the communication network 110. [

상기 통신 네트워크(110)는 유선 및 무선 등과 같은 그 통신 양태를 가리지 않고 구성될 수 있으며, PAN(Personal Area Network), LAN(Local Area Network), MAN(Metropolitan Area Network), WAN(Wide Area Network), 인터넷 통신망(Internet Network), 와이브로(wibro) 및 LTE 등 이동통신 망 등 다양한 통신망으로 구성될 수 있다. 또한, 적외선(Infrared Data Association; IrDA), 블루투스(Bluetooth), 지그비(ZigBee), 와이파이(Wifi)와 같은 근거리 무선 통신 방식 및 기술이 결합되어 적용될 수 있다. The communication network 110 may be configured without discriminating the communication modes such as wired and wireless and may be a personal area network (PAN), a local area network (LAN), a metropolitan area network (MAN), a wide area network (WAN) , An Internet network, a wibro, and a mobile communication network such as LTE. In addition, a short range wireless communication method and technology such as Infrared Data Association (IrDA), Bluetooth, ZigBee, and WiFi may be combined and applied.

스크랩 서비스 시스템(100)은, 스크랩 서비스 제공자가 운영하는 단일 서비스 서버로서 구성될 수 있으며, 대안적으로, 펜형 디지털 스캐너와 근거리 통신이 가능하고 통신 네트워크 접속이 가능한 스마트 기기 또는 사용자 단말에 내장된 형태의 어플리케이션과 이와 통신 네트워크로 연결되는 서비스 서버로 기능적으로 분리되어 구성될 수 있다. 또한, 스크랩 서비스 시스템의 일부 기능은 펜형 디지털 스캐너에 의하여 수행되도록 구성될 수도 있다. The scrap service system 100 may be configured as a single service server operated by a scrap service provider, or alternatively may be a smart device capable of short-range communication with a pen-type digital scanner and capable of connecting to a communication network, And a service server connected to the communication network. In addition, some functions of the scrap service system may be configured to be performed by a pen-type digital scanner.

스크랩 서비스 시스템(100)이 스마트 기기 또는 사용자 단말에 내장된 형태의 어플리케이션과 이와 통신 네트워크로 연결되는 서비스 서버로 기능적으로 분리되어 구성되는 경우, 어플리케이션에 후술하는 영상 수신 모듈(101) 및 문자 인식 모듈(102)를 탑재하여, 변환된 문자열을 서비스 서버로 전송하는 방식으로 구성될 수 있다. In a case where the scrap service system 100 is configured to be functionally separated into an application form embedded in a smart device or a user terminal and a service server connected thereto via a communication network, (102), and transmits the converted character string to the service server.

도2는 본 발명의 일실시예에 따른 스크랩 서비스 시스템(100)의 구성도로서, 도2를 참조하면, 본 발명의 일실시예에 따른 인쇄매체 스크랩 서비스를 제공하는 스크랩 서비스 시스템(100)은, 영상 수신 모듈(101), 문자 인식 모듈(102), 문서 매칭 검색 모듈(103), 및 스크랩 문서 서비스 모듈(104)과 스크랩 서비스 제공에 필요한 정보와 데이터를 저장하는 데이터베이스로 구성되며, 스크랩 문서의 문서 이미지와 문서의 문자 정보를 제공하는 스크랩 문서 중계 모듈(109)를 포함하여 구성될 수 있다. FIG. 2 is a block diagram of a scrap service system 100 according to an exemplary embodiment of the present invention. Referring to FIG. 2, a scrap service system 100 for providing a print media scrap service according to an embodiment of the present invention includes: A document retrieval module 103 and a scrap document service module 104 and a database for storing information and data necessary for providing a scrap service, And a scrap document relay module 109 for providing character information of the document image and the document.

영상 수신 모듈(101)은 사용자가 스크랩하기를 원하는 스크랩 문서에 대하여 펜형 디지털 스캐너에서 스캔된 스캔 이미지를 통신 네트워크를 통하여 수신하는 기능을 수행한다.The image receiving module 101 performs a function of receiving a scanned image scanned by a pen-type digital scanner through a communication network with respect to a scrap document that the user wants to scrap.

문자 인식 모듈(102)은 상기 수신된 스캔 이미지를 문자 인식하여, 문자열로 변환하는 기능을 수행하며, 다양한 문자인식 프로그램 형태로 구성된다. The character recognition module 102 performs a function of recognizing the received scan image and converting it into a character string, and is configured in various character recognition program types.

문서 매칭 검색 모듈(103)은 후술하는 문서검색정보 데이터베이스(105)를 검색하여 상기 변환된 문자열이 내용정보에 포함된 스크랩 문서의 문서 식별자를 추출하고 추출된 문서 식별자를 특정 사용자의 사용자 식별자를 기준으로 정렬하여 특정 사용자에 대한 스크랩 정보를 생성하여 저장한다. 후술하는 스크랩정보 데이터베이스(107)를 포함하여, 상기 특정 사용자에 대한 스크랩 정보를 저장한다.The document matching search module 103 searches the document search information database 105 described later to extract a document identifier of the scrap document included in the content information and extracts the extracted document identifier as a user identifier of a specific user And generates and stores scrap information for a specific user. And scrap information for the specific user, including the scrap information database 107 described later.

실시예에 따라서는, 스크랩정보 데이터베이스(107)는 서비스 사용자별로 할당된 사용자 식별자에 대하여 정렬된 스크랩 문서의 문서 식별자와 수신된 스캔 이미지부터 인식된 문자열의 디지털 코드, 스크랩 시간 정보, 스크랩 장소 정보, 펜형 디지털 스캐너에 할당된 펜 고유번호 중 선택된 하나 이상의 스크랩 관련 정보를 포함하도록 구성된다.  According to an embodiment, the scrap information database 107 stores a document identifier of a scrap document sorted for a user identifier allocated for each service user, a digital code of a recognized string from the received scan image, scrap time information, And one or more scrap-related information selected from pen-specific numbers assigned to the pen-type digital scanner.

스크랩 문서 서비스 모듈(104)은 통신 네트워크를 통한 특정 사용자의 요청에 따라, 상기 특정 사용자의 스크랩 정보로부터 스크랩 문서의 문서 식별자 목록을 추출하여 전송하고, 문서 이미지 데이터베이스(108)로부터 스크랩 문서의 문서 이미지를 검색하여 사용자 단말로 전송하는 기능을 수행한다.The scrap document service module 104 extracts and transmits a document identifier list of the scrap document from the scrap information of the specific user according to a request of a specific user through the communication network, And transmits the search result to the user terminal.

상기 펜형 디지털 스캐너(130)는 각각 펜 고유번호를 가지고 상기 펜 고유번호가 서비스 사용자의 사용자 식별자별로 할당되어 사전 등록되며, 사용자 식별자에 대하여 할당되어 등록된 펜 고유번호를 저장하는 사용자/펜 정보 데이터베이스(106)를 더 포함하여 구성된다. The pen-type digital scanner 130 has a pen-specific number, and the pen-specific number is assigned and registered in advance for each user identifier of the service user. The pen-type digital scanner 130 includes a user / pen information database (106).

이 경우, 상기 펜형 디지털 스캐너(130)는 스캔 이미지 전송시 상기 펜 고유번호를 전송하며, 상기 영상 수신 모듈(101)은 스캔 이미지의 수신시 상기 펜 고유번호를 스캔 이미지와 연관하여 수신하고, 상기 문서 매칭 검색 모듈(103)은 펜 고유번호를 기초로 상기 특정 사용자의 사용자 식별자를 검색한다.In this case, the pen-type digital scanner 130 transmits the pen-specific number when transmitting a scan image. The image-receiving module 101 receives the pen-specific number in association with a scan image when receiving a scan image, The document matching search module 103 searches the user identifier of the specific user based on the pen unique number.

본 발명의 실시예에 있어서, 스크랩 서비스 제공에 필요한 정보와 데이터를 저장하는 데이터베이스는 스크랩 문서의 이미지 및 관련 정보를 저장하며, 도2에서와 같이, 스크랩 문서별로 할당된 문서 식별자에 대하여 문서의 내용의 디지털 코드 및 문서 이미지의 위치정보를 저장하는 문서검색정보 데이터베이스(105), 서비스 사용자별로 할당된 사용자 식별자에 대하여 등록된 펜 고유번호를 저장하는 사용자/펜 정보 데이터베이스(106), 사용자 식별자에 대하여 스크랩 된 스크랩 문서의 문서 식별자, 스크랩 된 이미지로부터 인식된 문자열의 디지털 코드 및 기타 스크랩 정보를 저장하는 스크랩정보 데이터베이스(107) 및 인쇄매체의 전체문서 내지 전체 이미지가 스크랩 문서단위로 분리 처리된 스크랩 문서의 문서 이미지를 저장하는 문서이미지 데이터베이스(108)로 구분되어 구현될 수 있다. In the embodiment of the present invention, a database storing information and data necessary for providing scrap service stores images and related information of scrap documents. As shown in FIG. 2, A document search information database 105 for storing the location information of the digital code and the document image of the user, a user / pen information database 106 for storing the pen unique number registered for the user identifier allocated for each service user, A scrap information database 107 for storing a document identifier of the scrapped scrap document, a digital code of a string recognized from the scrapped image, and other scrap information, and a scrap information database 107 for dividing the entire document or whole image of the print medium into scrap documents Document image to save the document image of And separated by a base 108 it can be implemented.

문서검색정보 데이터베이스(105)는 본 발명에 기본적으로 포함되며, 하기의 표1과 같이, 스크랩 문서 고유의 문서 식별자를 기준으로 문서내용 및 문서이미지 필드가 정렬되며, 문서 식별자는 각 스크랩 문서에 대하여 중복되지 않는 유일한 값으로 할당되며, 문서 식별자를 기준으로 스크랩 문서의 문서내용인 문자정보가 컴퓨터가 이해할 수 있는 디지털 코드로 변환되어 저장되고, 스크랩 문서의 문서 이미지 필드는 문서이미지의 파일이름/파일 위치를 나타내는 데이터로서 저장된다. 스크랩 문서의 문서내용인 문자 정보는 인쇄매체 출판자로부터 스크랩 문서단위로 분리 처리된 문서 이미지와 함께 제공될 수도 있고, 스크랩 서비스 제공자에 의하여 가공되어 저장될 수도 있다. 상기 문자 정보와 스캔 이미지로부터 인식된 문자열이 비교 검색됨으로써, 스캔 이미지에 대응하는 스크랩 문서를 식별하게 된다.The document search information database 105 is basically included in the present invention. As shown in Table 1 below, document contents and document image fields are arranged based on a document identifier unique to a scrap document, and a document identifier is assigned to each scrap document The text information field of the scrap document is converted into a digital code that can be understood by the computer, and the document image field of the scrap document is stored in the file name / file of the document image And stored as data indicating the position. The character information, which is the document content of the scrap document, may be provided together with the document image separated from the print media publisher into the scrap document unit, or may be processed and stored by the scrap service provider. The character information is compared with a recognized character string from the scanned image, thereby identifying a scrap document corresponding to the scanned image.

Field 이름Field name 문서식별자Document identifier 문서내용(Text)Document content (Text) 문서 이미지Document image 내용1Contents 1 doc20071206000001doc20071206000001 장관한테 달려온 학생, 동생에 대한 글 읽으며 눈물 ...Students who ran to the minister, tears reading about his brother ... doc20071206000001.jpgdoc20071206000001.jpg 내용 2Content 2 doc20071206000002doc20071206000002 국군포로의 딸 등 탈북자 6명도 왔다. 국군포로의 딸과 손녀가 ...Six defectors, including daughters of prisoners of war, also came. Daughter and granddaughter of ROK prisoners ... doc20071206000002.jpgdoc20071206000002.jpg 내용3Content 3 ... ... ... ... ...  ...

사용자/펜 정보 데이터베이스(106)는, 하기의 표2와 같이, 펜형 디지털 스캐너를 사용하는 사용자의 식별자와 펜에 할당되어 내장된 펜 내장 고유번호 필드가 정렬되며, 특정 사용자가 다수의 펜형 디지털 스캐너를 사용하는 경우 사용자 식별자 하나에 여러 개의 펜 고유번호가 연계된다. 표2의 경우 user0001 사용자는 한 명이 p0000011111~3까지 펜형 디지털 스캐너 세 개를 이용하고 있으며, user0002 사용자는 한 명이 p0000011114 와 같이 펜형 디지털 스캐너 하나만을 쓰는 예를 보여준다. 펜 고유번호는 사용되는 펜형 디지털 스캐너의 고유번호로서 중복되지 않는 유일한 값으로 할당된다. 상기 펜 고유번호를 통하여 스캔 이미지를 전송한 펜형 디지털 스캐너와 상기 펜형 디지털 스캐너를 부여받은 스크랩 서비스 사용자를 식별하게 된다. As shown in Table 2 below, the user / pen information database 106 is arranged such that the identifier of the user using the pen-type digital scanner and the built-in pen number field allocated to the pen are aligned, , Multiple user ID numbers are associated with one user identifier. In Table 2, the user0001 user uses one of three pen-type digital scanners p0000011111 ~ 3, and the user0002 user shows an example of using only one pen-type digital scanner such as p0000011114. The pen-specific number is a unique number of the pen-type digital scanner to be used and is assigned as a unique value that is not duplicated. The pen type digital scanner that has transmitted the scanned image through the pen unique number and the scrap service user who is given the pen type digital scanner are identified.

Field 이름Field name 사용자 식별자User identifier 펜 고유번호Pen number 내용 1Contents 1 user0001user0001 p0000011111p0000011111 내용 2Content 2 user0001user0001 p0000011112p0000011112 내용 3Content 3 user0001user0001 p0000011113p0000011113 내용 4Content 4 user0002user0002 p0000011114p0000011114 ...... ...... ......

스크랩정보 데이터베이스(107)는 본 발명에 기본적으로 포함되며, 하기의 표3과 같이, 서비스 사용자별로 할당된 사용자 식별자에 대하여 정렬된 스크랩 문서의 문서 식별자를 기본적으로 포함하며, 스크랩 시간, 입력 문자열을 포함한다. 여기서, 사용자 식별자는 펜형 디지털 스캐너를 이용하여 문서를 스크랩한 사용자의 식별자이며, 문서 식별자는 사용자가 스크랩한 문서에 해당하는 스크랩 문서의 문서 식별자이로, 한 사용자가 여러 문서를 스크랩하여, 한 사용자의 식별자에 대하여 다수의 문서 식별자가 저장된다. 이를 통하여 스크랩 서비스 사용자가 스크랩한 다수의 스크랩 문서를 식별할 수 있게 된다. The scrap information database 107 is basically included in the present invention and basically includes a document identifier of a scrap document sorted with respect to a user identifier allocated to each service user as shown in Table 3 below, . Here, the user identifier is an identifier of a user who scrapes a document using the pen-type digital scanner. The document identifier is a document identifier of a scrap document corresponding to a document scraped by a user. A user scraps a plurality of documents, A plurality of document identifiers are stored for the identifiers. Through this, a plurality of scrap documents scrapped by the scrap service user can be identified.

입력 문자열은 수신된 스캔 이미지부터 문자 인식된 문자열로서, 문자 정보가 컴퓨터가 인식할 문자열의 디지털 코드 형태로 저장된다. 하나의 입력 문자열에 대하여 여러 개의 문서 식별자가 있을 수 있다. The input character string is a character recognized character string from the received scan image, and the character information is stored in a digital code form of a character string recognized by the computer. There can be multiple document identifiers for an input string.

아울러, 스크랩 장소, 펜형 디지털 스캐너에 할당된 펜 고유번호 등의 스크랩 관련 정보를 더 포함할 수 있으며, 이를 활용하여, 예를 들어, 스크랩 장소에 따른 스크랩 이미지의 분류나, 하나의 사용자 식별자를 기준으로 다수의 사용자가 스크랩하는 경우 각 사용자에게 부여된 펜형 디지털 스캐너의 고유번호를 이용하여 스크랩 문서를 관리하는 등의 스크랩 서비스의 제공이 가능해진다.Further, it may further include scrap-related information such as a scrap location and a pen-specific number assigned to the pen-type digital scanner. By using this information, for example, classification of a scrap image according to a scrap site, It is possible to provide a scrap service such as managing a scrap document by using the unique number of the pen-type digital scanner assigned to each user.

Field 이름Field name 사용자 식별자User identifier 스크랩 시간Scrap time 문서식별자Document identifier 입력문자열Input string 내용 1Contents 1 user0001user0001 2012120513050720121205130507 doc20071206000001doc20071206000001 장관한테 달려온 학생A student who ran to the minister 내용 2Content 2 user0002user0002 2012121523050720121215230507 doc20071206000002doc20071206000002 국군포로의 딸과 손녀가Daughter and granddaughter of ROK prisoners 내용 3Content 3 ...... ...... ...... ......

나아가, 바람직하게는 인쇄매체의 전체문서가 스크랩 문서단위로 분리되어 처리된 스크랩 문서의 문서 이미지 및 관련 문자 정보를 수신하고 각 스크랩 문서의 문서검색정보를 생성하여 스크랩 문서의 문서 이미지 및 문서검색정보를 각각 데이터베이스에 저장하는 스크랩 문서 중계모듈(문서 이미지/정보 중계 모듈)(109)을 더 포함할 수 있으며, 스크랩 문서 중계모듈(109)은 인쇄매체의 전체 문서 또는 일부 문서를 수신하여 스크랩 문서 단위로 이미지를 분리하고, 스크랩 문서 내용 즉, 문자 정보를 자동 인식하거나 입력받아 스크랩 문서로 처리할 수도 있다. 스크랩 문서 중계모듈(109)은 스크랩 문서 즉, 문서 이미지 및 관련 문자 정보를 인쇄매체의 전체문서를 인쇄매체 출판자(140)로부터 직접 수신할 수도 있으며, 스크랩 서비스 운영자가 인쇄매체 전체문서 또는 일부문서를 수신하여 이를 스크랩 문서로 가공하거나 재 가공처리하여 스크랩 문서 중계모듈(109)로 전송할 수도 있다. 특히, 스크랩 문서 중계모듈(109)이 직접 수신하는 경우 인쇄매체의 전체문서 또는 일부 문서를 수신하여 스크랩 문서단위로 분리하여 처리하는 과정은 스크랩 문서 중계모듈(109)에서 자동으로 수행될 수 있다. Further, preferably, the entire document of the print medium is divided into scrap document units, and the document image and the related character information of the processed scrap document are received, and the document search information of each scrap document is generated and the document image of the scrap document and the document search information (Document image / information relay module) 109 that stores the scrap document in the database, and the scrap document relay module 109 receives the entire document or the partial document of the print medium, And the contents of the scrap document, that is, the character information, may be automatically recognized or input and processed as a scrap document. The scrap document relay module 109 may directly receive the scrap document, that is, the document image and the related character information, from the print media publisher 140 directly, and the scrap service operator may print the entire document or some document Processing it into a scrap document or re-processing it and transmitting it to the scrap document relay module 109. Particularly, when the scrap document relay module 109 directly receives the document, a process of receiving the entire document or a part of the document on the print medium and separating and processing the document in units of scrap document can be automatically performed in the scrap document relay module 109.

도3a는 본 발명의 일실시예에 따른 펜형 디지털 스캐너의 구성 및 연결 구성을 설명하는 도면이며, 도3b는 본 발명의 일실시예에 따른 펜형 디지털 스캐너의 외관 구성도이다.FIG. 3A is a diagram illustrating a configuration and a connection configuration of a pen-type digital scanner according to an embodiment of the present invention, and FIG. 3B is an external configuration diagram of a pen-type digital scanner according to an embodiment of the present invention.

도3a 및 도3b를 참조하면, 상기 펜형 디지털 스캐너(130)은 무선 전송 모듈(131), 제어부(132), 촬영부(133), 저장부(134), 전원부(135)를 포함하여 구성될 수 있다. 카메라 또는 스캐너로 구성되는 촬영부(133)는 스크랩 문서의 일부 이미지를 스캔하여 이를 전기적 신호로 변환하며, 제어부(132)는 이를 규격에 맞는 데이터로 변환하여 무선 전송 모듈(131)을 통하여 영상 수신 모듈(101)로 전송한다. 저장부(메모리부)(134)에는 처리과정에서 요구되는 데이터가 임시 저장되며, 펜형 디지털 스캐너의 펜 고유정보가 펜 고유번호의 형태로 영구 저장되어, 스캔 이미지의 전송시 함께 전송되도록 한다. 3A and 3B, the pen-type digital scanner 130 includes a wireless transmission module 131, a control unit 132, a photographing unit 133, a storage unit 134, and a power unit 135 . The control unit 132 converts the scanned image into an electrical signal. The control unit 132 converts the scanned image into an electrical signal, and transmits the electrical signal through the wireless transmission module 131 To the module (101). In the storage unit (memory unit) 134, the data required during the process is temporarily stored, and the pen unique information of the pen type digital scanner is permanently stored in the form of the pen unique number, and is transmitted together with the scan image.

무선 전송 모듈(131)은 근거리 무선통신 방식으로 통신 네트워크에 접속하여 스캔 이미지를 영상 수신 모듈(101)로 직접 전송하는 구성으로 구현될 수 있으며, 이 경우 펜형 디지털 스캐너(130)은 통신 네트워크에 직접 접속하여 데이터를 전송할 수 있는 기능을 가지도록 구현된다. The wireless transmission module 131 may be implemented by a configuration in which a scan image is directly transmitted to the image receiving module 101 by connecting to a communication network using a short-range wireless communication method. In this case, the pen- And has a function of connecting and transmitting data.

또한, 상기 무선 전송 모듈(131)은 근거리 무선 통신방식으로 사용자가 보유한 스마트 기기 등 통신 네트워크에 접속기능을 가진 통신 기기와 무선으로 접속하여 스캔 이미지를 전송하고, 상기 통신 기기가 통신 네트워크에 접속하여 스캔 이미지를 영상 수신 모듈(101)로 전송하도록 구성될 수도 있으며, 이 경우 무선 전송 모듈(131)은 상기 통신 기기와 근거리 무선 통신을 수행할 수 있는 기능 예를 들어, 적외선(Infrared Data Association; IrDA), 블루투스(Bluetooth), 지그비(ZigBee), 와이파이(Wifi) 기능을 가지도록 구현된다. In addition, the wireless transmission module 131 wirelessly connects with a communication device having a connection function to a communication network such as a smart device possessed by a user in a short-range wireless communication scheme and transmits a scan image, and the communication device connects to a communication network The wireless transmission module 131 may be configured to transmit a scan image to the image receiving module 101. In this case, the wireless transmission module 131 may perform a short-range wireless communication with the communication device, for example, an Infrared Data Association (IrDA ), Bluetooth (Bluetooth), ZigBee, and WiFi.

실시예에 따라서는, 펜형 디지털 스캐너(130)은 무선 전송 모듈(131)과는 별도의 유선통신 포트가 설치되어, 무선 전송 모듈(131) 또는 별도의 유선통신 포트를 선택적으로 사용하여 통신 네트워크에 접속기능을 가진 통신 기기와 유선 또는 무선으로 접속하여 상기 통신 기기를 통하여 영상 수신 모듈(101)로 스캔 이미지를 전송하도록 구성될 수도 있다. 또한, 실시예에 따라서는 사용자 단말(120)이 상기 통신 기기의 역할을 수행할 수도 있다.The pen-type digital scanner 130 may be provided with a wired communication port separate from the wireless transmission module 131 so that the wired communication port 131 may be connected to the communication network by selectively using the wireless transmission module 131 or a separate wired communication port. May be connected to a communication device having a connection function by wire or wirelessly and transmit the scanned image to the video receiving module 101 through the communication device. Also, in some embodiments, the user terminal 120 may serve as the communication device.

한편, 도3b에서와 같이, 펜형 디지털 스캐너(130)의 외부에는 상기 저장부(134)에 영구 저장된 펜 고유정보의 펜 고유번호와 동일한 펜 고유번호가 인쇄되어 사용자가 펜 고유정보 등록시 사용할 수 있도록 하는 것이 바람직하며, 별도의 필기부가 설치되어 도5에서와 같이, 펜형 디지털 스캐너(130)를 이용하여 신문 등 인쇄매체의 스크랩 문서의 스캔시 해당 부분에 밑줄을 표시하도록 하여 스크랩시 사용자에게 종이문서 작업과 같은 친숙함을 제공하고, 스크랩 작업의 편리성과 정확성을 도모할 수 있다.3B, a pen unique number identical to the pen unique number of the pen unique information permanently stored in the storage unit 134 is printed outside the pen-type digital scanner 130 so that the user can use the pen unique information 5, a pen-type digital scanner 130 is used to display an underline in a corresponding part of a scrap document on a print medium such as a newspaper, It is possible to provide the familiarity with the operation and to achieve the convenience and accuracy of the scrap operation.

다른 측면에서, 본 발명은 인쇄매체에 인쇄된 문서를 스캔하는 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스 제공방법으로, 이하 상술한 바와 중복되지 않는 범위에서 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스 제공방법의 실시예를 도면을 참조하여 설명한다.According to another aspect of the present invention, there is provided a method of providing a print medium scrap service using a pen-type digital scanner that scans a document printed on a print medium, and a method of providing a print medium scrap service using a pen-type digital scanner in a range not overlapping with the above- Embodiments will be described with reference to the drawings.

도4a 및 도4b는 본 발명의 실시예에 따른 인쇄매체에 인쇄된 문서를 스캔하는 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스 제공방법의 흐름도이다. 도6은 본 발명의 일실시예에 따른 사용자 단말에서의 스크랩 서비스 제공 예시화면이다. 4A and 4B are flowcharts illustrating a method of providing a scrap service for a print medium using a pen-type digital scanner that scans a document printed on a print medium according to an exemplary embodiment of the present invention. 6 is an exemplary screen for providing a scrap service in a user terminal according to an embodiment of the present invention.

본 발명의 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스는 사용자 단말에서 구동가능한 어플리케이션 형태의 전용소프트웨어를 기반으로 제공될 수 있으며, 경우에 따라서는 웹 브라우저를 통하여 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스 제공 웹에 접속하여 웹상에서 서비스를 제공받는 방식의 웹 기반으로 제공될 수도 있다. 또한, 전용소프트웨어와 웹상에서의 기능이 연동되어 서비스가 제공될 수도 있다. The print scrap service using the pen-type digital scanner of the present invention can be provided on the basis of dedicated software in the form of an application executable on a user terminal. In some cases, a print scrap service using a pen- And may be provided on a web-based basis in which services are provided on the web. In addition, services may be provided by linking dedicated software with functions on the Web.

도4a 및 도4b를 참조하면, 본 실시예의 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스를 이용하고자 하는 사용자는 사전 단계로서, 스크랩 서비스 시스템으로부터 필요한 어플리케이션을 다운로드 받아 자신의 사용자 단말에 설치하고, 스크랩 서비스 시스템에 접속하여 서비스에 가입하여 사용자 아이디를 발급받고, 스크랩 서비스에 사용될 사용자 식별자를 발급 또는 등록하게 된다. 실시예에 따라서는 상기 사용자 아이디를 사용자 식별자로 사용하도록 실시될 수 있으며, 바람직하게는 서비스 접속을 위한 사용자 아이디와 상기 사용자 식별자를 구분하여, 하나의 사용자 아이디를 가지는 사용자가 다수의 사용자 식별자를 등록하여 사용하도록 함으로써 사용자가 다양한 방식으로 스크랩 또는 스크랩 문서를 관리 및 활용할 수 있도록 한다.4A and 4B, a user who wishes to use a print media scrap service using the pen-type digital scanner of the present embodiment is a preliminary step, downloads necessary applications from the scrap service system and installs them in his / her user terminal, Accesses the system, subscribes to the service, issues a user ID, and issues or registers a user identifier to be used in the scrap service. According to an embodiment of the present invention, the user ID may be used as a user identifier. Preferably, the user ID for service connection and the user ID are distinguished, and a user having one user ID registers a plurality of user identifiers So that the user can manage and utilize the scrap or scrap document in various ways.

또한, 펜형 디지털 스캐너가 펜 고유번호를 가지고 이를 사용하는 실시예의 경우 사용자는 자신에게 부여된 펜형 디지털 스캐너의 펜 고유정보 즉, 펜 고유번호를 등록하는 과정을 수행하여, 등록된 펜 고유번호는 사용자의 식별자 별로 저장되어 관리된다. 실시예에 따라서는 스크랩 서비스의 가입과 함께 펜형 디지털 스캐너가 사용자에게 부여되고 부여된 펜형 디지털 스캐너의 고유번호를 스크랩 서비스 운영자측에서 등록하여 관리할 수도 있다. 이 경우 사용자는 별도로 펜 고유번호를 등록할 필요가 없다. In the embodiment in which the pen-type digital scanner uses the pen-specific number, the user performs the process of registering the pen-specific information of the pen-type digital scanner assigned to the user, that is, the pen-specific number, And the like. In some embodiments, the scrap service operator may register and manage the unique number of the pen-type digital scanner to which the pen-type digital scanner is assigned and assigned to the user upon subscribing to the scrap service. In this case, the user need not separately register the pen number.

스크랩 서비스의 사용자가 부여된 펜형 디지털 스캐너를 이용하여 스크랩을 원하는 인쇄매체의 스크랩 문서의 일부 영역을 스캔하면, 펜형 디지털 스캐너는 사용자가 스크랩하기를 원하는 스크랩 문서와 관련하여 스캔 이미지를 전송한다. 펜형 디지털 스캐너가 펜 고유번호를 가지고 이를 사용하는 실시예의 경우 펜형 디지털 스캐너는 자신의 펜 고유번호를 스캔 이미지와 연관하여 전송한다.When a user of a scrap service scans a part of a scrap document of a print medium desired to be scrapped using a pen-type digital scanner, the pen-type digital scanner transmits a scan image in association with a scrap document the user wants to scrap. In embodiments where the pen-type digital scanner has a pen number and uses it, the pen-type digital scanner transmits its own pen number in association with the scanned image.

펜형 디지털 스캐너에서 스캔 이미지를 전송함에 따라, 스크랩 서비스 시스템은, 펜형 디지털 스캐너에서 스캔 이미지를 통신 네트워크를 통하여 수신하는 스크랩 이미지 수신단계(S100), 상기 수신된 스캔 이미지를 문자인식하여, 문자열로 변환하는 문자열 변환단계(S110), 상기 변환된 문자열이 포함된 스크랩 문서를 검색하여 해당 문서의 문서 식별자를 추출하는 문서 식별자 검색단계(S120)를 수행하여, 전송된 스캔이미지에 대응하는 스크랩 문서의 문서 식별자를 데이터베이스로부터 검색함으로써, 스캔 이미지에 대응하는 스크랩 문서를 식별하게 된다.  As the scanned image is transmitted from the pen-type digital scanner, the scrap service system includes a scrap image receiving step (S100) of receiving the scanned image from the pen type digital scanner through the communication network, character recognition of the received scanned image, A document identifier searching step (S120) of searching a scrap document including the converted character string and extracting a document identifier of the corresponding document, thereby obtaining a document of a scrap document corresponding to the transmitted scanned image By retrieving the identifier from the database, the scrap document corresponding to the scanned image is identified.

이어, 상기 검색된 스크랩 문서의 문서 식별자를 특정 사용자의 식별자를 기준으로 정렬하여 상기 특정 사용자에 대한 스크랩 정보를 생성하여 저장하는 스크랩 정보 생성/저장단계(S130)가 수행됨으로써, 특정 사용자에 대한 스크랩 정보를 저장 관리하며, 사용자의 펜형 디지털 스캐너를 이용한 다수의 문서의 스크랩에 따라, 상기 스크랩 이미지 수신단계(S100) 내지 스크랩 정보 생성/저장단계(S130)가 반복적으로 수행되어, 후술하는 특정 사용자에게 스크랩 문서 목록 제공 및 스크랩 문서의 이미지 제공 등의 스크랩 서비스를 제공할 수 있게 된다. Thereafter, a scrap information generating / storing step (S130) for generating and storing scrap information for the specific user by sorting the retrieved document identifiers of the scrap document with reference to an identifier of a specific user is performed, The scrap image receiving step (S100) and the scrap information generating / storing step (S130) are repeatedly performed according to the scrapping of a plurality of documents using the pen-type digital scanner of the user, A scrap service such as providing a document list and providing an image of a scrap document can be provided.

상기 스크랩 정보 생성/저장단계(S130)는 상기 사용자 식별자에 대하여 정렬된 스크랩 문서의 문서 식별자와 연관하여 수신된 스캔 이미지부터 인식된 문자열의 디지털 코드, 스크랩 시간 정보, 스크랩 장소 정보, 펜형 디지털 스캐너에 할당된 펜 고유번호 중 선택된 하나 이상을 저장하도록 수행되는 것이 바람직하다. The scrap information generation / storage step (S130) may include a digital code of the recognized character string, scrap time information, scrap location information, and the like from the scanned image received in association with the document identifier of the scrap document sorted for the user identifier And to store at least one selected one of the assigned pen unique numbers.

상기 펜형 디지털 스캐너가 펜 고유번호를 가지고, 상기 펜 고유번호를 서비스 사용자의 사용자 식별자 별로 할당하여 등록한 경우, 상기 스크랩 이미지 수신단계(S100)에서 수신된 상기 펜 고유번호를 기초로 상기 펜형 디지털 스캐너를 부여받은 특정 사용자를 식별하여, 해당 사용자의 식별자를 추출하게 된다. When the pen-type digital scanner has a pen-specific number and the pen-specific number is assigned and registered for each user identifier of the service user, the pen-type digital scanner is operated based on the pen- The specific user is identified and the identifier of the user is extracted.

펜 고유 번호를 이용하지 않는 경우에는 상술한 바와 같이, 근거리 무선 통신방식으로 펜형 디지털 스캐너와 연결되어 스캔 이미지를 수신하여 영상 수신 모듈(101)로 전송하는 사용자 보유한 스마트 기기 등 통신 네트워크에 접속기능을 가진 통신 기기의 IP, 맥 주소, 전화번호 등이 식별자로서 사용되거나, 통신 기기를 통하여 사용자가 자신의 사용자 아이디 또는 사용자 식별자를 직접 입력하고 이를 스캔 이미지와 함께 전송하여 특정 사용자를 식별하게 하도록 수행될 수 있다.In the case where the pen unique number is not used, as described above, a connection function to a communication network such as a smart device possessed by a user connected to a pen-type digital scanner by a short-range wireless communication method and receiving a scan image and transmitting the scanned image to the image receiving module 101 The IP address, the MAC address, the telephone number, etc. of the communication device having the communication device may be used as an identifier, or a user may input his or her own user ID or user identifier through the communication device and transmit it together with the scan image to identify a specific user .

본 실시예의 스크랩 문서 서비스를 이용하는 사용자는, 자신의 스크랩 문서관련 스크랩 서비스를 제공받기 위하여 사용자 인증(S200)을 수행하며, 이는 도6의 화면에서와 같이, 웹상에서 스크랩 문서 서비스에 사용자 아이디를 이용한 로그인을 통하여 이루어진다.  A user using the scrap document service of the present embodiment performs user authentication (S200) in order to receive a scrap service related to his / her scrap document. As shown in the screen of Fig. 6, the user uses the user ID It is done through login.

도6의 화면에서, 사용자는 상단의 "스크랩 List" 메뉴를 선택하여 클릭 또는 터치하면, 스크랩 문서 목록 제공 요청을 문서 식별자 목록 요청으로서 수신하여, 사용자 단말(200)은 사용자의 사용자 식별자를 스크랩 서비스 시스템으로 전송하여 해당 사용자의 사용자 식별자에 대하여 문서 식별자로서 저장되어 관리되는 스크랩 문서 목록을 요청한다. 6, when the user selects or touches the "Scrap List" menu at the top, the user terminal 200 receives the scrap document list request as a document identifier list request, and the user terminal 200 transmits the user identifier of the user to the scrap service System and requests a scrap document list stored and managed as a document identifier for the user identifier of the user.

사용자 단말로부터의 사용자 식별자의 전송에 따라 스크랩 서비스 시스템(100) 즉, 스크랩 문서 서비스 모듈(104)은 특정 사용자의 스크랩 문서의 문서 식별자 목록 요청을 수신하여, 상기 특정 사용자에 대한 스크랩 정보로부터 스크랩 문서의 문서 식별자 목록을 추출하여 전송하는 문서 식별자 목록 추출 단계(S140)를 수행하며, 상기 문서 식별자 목록을 수신한 사용자 단말에서는 미리 설정된 방식으로 화면상에 스크랩 List로서 디스플레이하여 사용자가 원하는 스크랩 문서를 선택하도록 한다. In accordance with the transmission of the user identifier from the user terminal, the scrap service system 100, that is, the scrap document service module 104, receives a document identifier list request of the scrap document of the specific user, (S140) of extracting and transmitting a document identifier list of the document ID list of the user terminal, and the user terminal receiving the document identifier list displays the scrap document as a scrap list on the screen in a preset manner, .

이어, 사용자가 스크랩 문서를 선택하면, 사용자가 선택한 스크랩 문서의 개별 문서 식별자를 추출(S220)하고, 문서 이미지 요청(S230)으로서, 선택된 스크랩 문서의 문서 식별자를 스크랩 문서 서비스 모듈(104)로 전송하며(S231), 스크랩 문서 서비스 모듈(104)은 스크랩 문서의 문서 이미지 요청으로 스크랩 문서의 문서 식별자를 수신하여, 수신된 문서 식별자에 해당하는 스크랩 문서의 문서 이미지 파일의 파일명을 추출하는 문서 이미지 파일명 추출 단계(S150); 및 상기 추출된 문서 이미지 파일명의 문서 이미지 파일을 사용자에게 전송하는 문서 이미지 파일 송신단계(S160)를 수행하여, 요청된 스크랩 문서의 문서 이미지 파일을 사용자 단말로 전송한다.Then, when the user selects a scrap document, an individual document identifier of the scrap document selected by the user is extracted (S220), and as a document image request (S230), the document identifier of the selected scrap document is transmitted to the scrap document service module 104 (Step S231). The scrap document service module 104 receives the document identifier of the scrap document in response to the document image request of the scrap document, extracts the document image file name for extracting the file name of the document image file of the scrap document corresponding to the received document identifier Extraction step S150; And a document image file transmission step (S160) of transmitting the document image file of the extracted document image file name to the user, and transmitting the document image file of the requested scrap document to the user terminal.

사용자 단말은 문서 이미지 파일을 수신(S240)하며, 도6과 같이 기 설정된 방식으로 스크랩 문서 목록과 해당 스크랩 문서의 문서 이미지를 디스플레이하며, 사용자에 의하여 요청되는 문서가 더 있을 경우 과정이 반복 수행된다. The user terminal receives the document image file (S240), displays the scrap document list and the document image of the corresponding scrap document in a predetermined manner as shown in FIG. 6, and repeats the process when there are more documents requested by the user .

나아가, 인쇄매체의 전체문서가 스크랩 문서단위로 분리되어 처리된 스크랩 문서의 문서 이미지 및 관련 문자 정보를 수신하거나 인쇄매체의 전체문서 또는 일부문서를 수신하여 스크랩 문서로 분리하여 스크랩 문서의 문서 이미지 및 관련 문자 정보를 생성하고, 각 스크랩 문서의 문서검색정보를 생성하여 스크랩 문서의 문서 이미지 및 문서검색정보로서 저장하는 사전처리 단계를 포함하여 수행될 수도 있으며, 또한, 특정 사용자에게 전송된 문서 식별자 목록과 전송된 문서 이미지에 대한 문서 식별자 목록을 기록하여 저장하는 전송 목록 기록 단계(S170)을 더 포함하여 수행함으로써, 전송 목록 기록을 이용하여 사용자는 사용자 단말에 저장된 스크랩 문서관련 자료와 관계없이 스크랩 서비스 시스템상에서, 스크랩 문서 목록 및 문서 이미지를 관리 활용할 수 있게 된다. Furthermore, the entire document of the print medium is divided into scrap document units, and the document image and the related character information of the processed scrap document are received, or the entire document or a part of the document is received and separated into scrap documents, And a preprocessing step of generating related document information, generating document retrieval information of each scrap document, and storing the document image as document image and document retrieval information of the scrap document, And a transmission list recording step (S170) of recording and storing a list of document identifiers of the transmitted document images. By using the transmission list recording, the user can record the scrap document On the system, a list of scrap documents and a document image Lee is able to take advantage.

이상에서와 같이, 본 발명의 구성 또는 단계의 특별한 조합들이 상기 실시예를 통하여 상세히 설명되었으나 이러한 구성 및 단계의 다른 조합들이 마찬가지로 가능하다. 본 발명은 여기에 개시된 특정한 실시예에 제한되지 않으며, 이러한 다른 조합들을 본 발명의 권리범위에 통합된다. 따라서, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.As has been described above, specific combinations of configurations or steps of the present invention have been described in detail by way of the above embodiments, but other combinations of such configurations and steps are likewise possible. The present invention is not limited to the specific embodiments disclosed herein, and such other combinations are incorporated into the scope of the present invention. Therefore, the present invention is not limited to the above-described embodiments, and various modifications and changes may be made thereto by those skilled in the art to which the present invention belongs.

100: 스크랩 서비스 서버 110: 통신 네트워크
120: 사용자 단말 130: 펜형 디지털 스캐너
140: 인쇄매체 출판자
100: scrap service server 110: communication network
120: user terminal 130: pen-type digital scanner
140: Print Media Publisher

Claims (10)

사용자가 스크랩하기를 원하는 인쇄매체의 인쇄된 일부 영역인 스크랩 문서의 일부 이미지를 스캔하여 스캔 이미지를 전송하는 펜형 디지털 스캐너를 이용하는 인쇄매체 스크랩 서비스 시스템에 있어서,
스크랩 문서에 할당된 스크랩 문서의 문서 식별자에 대하여 스크랩 문서의 내용정보 및 스크랩 문서의 문서 이미지의 위치정보를 포함하는 문서검색정보를 저장하는 문서검색정보 데이터베이스(105), 사용자 식별자에 대하여 할당되어 등록된 펜 고유번호를 저장하는 사용자/펜 정보 데이터베이스(106), 특정 사용자에 대한 스크랩 정보를 저장하는 스크랩정보 데이터베이스(107), 및 스크랩 문서의 문서 이미지를 저장하는 문서 이미지 데이터베이스(108)를 포함하고,
사용자가 스크랩하기를 원하는 스크랩 문서에 대하여 펜형 디지털 스캐너에서 스캔 된 스캔 이미지를 통신 네트워크를 통하여 수신하는 영상 수신 모듈(101);
상기 수신된 스캔 이미지를 문자 인식하여, 문자열로 변환하는 문자 인식 모듈(102);
상기 문서검색정보 데이터베이스(105)를 검색하여 상기 변환된 문자열이 내용정보에 포함된 스크랩 문서의 문서 식별자를 추출하고, 그 스크랩 문서를 스크랩한 사용자의 식별자와 상기 문서 식별자를 매칭시킨 후, 상기 사용자 식별자를 기준으로 상기 문서 식별자를 정렬하여 스크랩 정보를 생성하여 저장하는 문서 매칭 검색 모듈(103); 및
통신 네트워크를 통한 특정 사용자의 요청에 따라, 상기 특정 사용자의 스크랩 정보로부터 스크랩 문서의 문서 식별자 목록을 추출하여 전송하고, 문서 이미지 데이터베이스(108)로부터 스크랩 문서의 문서 이미지를 검색하여 사용자 단말에 전송하는 스크랩 문서 서비스 모듈(104)을 포함하여 이루어지며,
상기 펜형 디지털 스캐너는
펜 고유번호를 가지고 상기 펜 고유번호가 서비스 사용자의 사용자 식별자 별로 할당되어 등록되며, 스캔 이미지 전송시 상기 펜 고유번호를 전송하고,
상기 영상 수신 모듈(101)은
스캔 이미지의 수신시 상기 펜 고유번호를 스캔 이미지와 연관하여 수신하고,
상기 문서 매칭 검색 모듈(103)은
상기 펜 고유번호를 기초로 스크랩 문서를 스크랩한 특정 사용자의 사용자 식별자를 검색하고, 상기 검색된 특정 사용자의 식별자와 상기 추출된 스크랩 문서의 문서 식별자를 매칭시킨 후, 상기 특정 사용자 식별자를 기준으로 상기 문서 식별자를 정렬하여 상기 특정 사용자에 대한 스크랩 정보를 생성하고 상기 생성된 스크랩정보를 스크랩정보 데이터베이스(107)에 저장하는 것을 특징으로 하는 펜형 디지털 스캐너를 이용하는 인쇄매체 스크랩 서비스 시스템.
A printing medium scrap service system using a pen-type digital scanner for scanning a partial image of a scrap document, which is a printed partial area of a printing medium desired to be scrapped by a user, and transmitting the scanned image,
A document search information database 105 for storing document search information including content information of a scrap document and location information of a document image of a scrap document with respect to a document identifier of a scrap document assigned to the scrap document, Pen information database 106 for storing pen numbers unique to the user, a scrap information database 107 for storing scrap information for a specific user, and a document image database 108 for storing document images of scrap documents ,
An image receiving module 101 for receiving a scanned image scanned by a pen-type digital scanner through a communication network with respect to a scrap document desired to be scrapped by a user;
A character recognition module (102) for recognizing the received scan image and converting the received scan image into a character string;
Searches the document search information database 105 for extracting a document identifier of a scrap document included in the content information of the converted character string, and after matching the document identifier with an identifier of a scrapped user of the scrap document, A document matching search module 103 for generating and storing scrap information by sorting the document identifiers based on identifiers; And
Extracts a document identifier list of the scrap document from the scrap information of the specific user according to a request of a specific user through the communication network, retrieves the document image of the scrap document from the document image database 108, and transmits the document image to the user terminal A scrap document service module 104,
The pen-type digital scanner
The pen unique number is assigned and registered for each user identifier of the service user with the pen unique number, the pen unique number is transmitted when the scan image is transmitted,
The image receiving module 101
Upon receipt of the scanned image, receiving the pen unique number in association with the scanned image,
The document matching search module 103
Searching for a user identifier of a specific user scrapped from the scrap document based on the pen unique number, matching the retrieved identity of the specific user with the document identifier of the extracted scrap document, And the scrap information is stored in the scrap information database (107). The scrap information service system according to claim 1, wherein the scrap information is stored in the scrap information database (107).
제1항에 있어서,
상기 스크랩정보 데이터베이스(107)에는 서비스 사용자별로 할당된 사용자 식별자에 대하여 정렬된 스크랩 문서의 문서 식별자와 수신된 스캔 이미지부터 인식된 문자열의 디지털 코드, 스크랩 시간 정보, 스크랩 장소 정보, 펜형 디지털 스캐너에 할당된 펜 고유번호 중 선택된 하나 이상의 스크랩 관련 정보를 포함하는 것을 특징으로 하는 펜형 디지털 스캐너를 이용하는 인쇄매체 스크랩 서비스 시스템.
The method according to claim 1,
In the scrap information database 107, a document identifier of a scrap document sorted for a user identifier allocated to each service user, a digital code of a recognized string from the received scan image, scrap time information, scrap location information, And a pen-specific number of the pen-type digital-scanner.
제1항에 있어서,
인쇄매체의 전체문서가 스크랩 문서단위로 분리되어 처리된 스크랩 문서의 문서 이미지 및 관련 문자 정보를 수신하고 각 스크랩 문서의 문서검색정보를 생성하여 스크랩 문서의 문서 이미지 및 문서검색정보를 각각 데이터베이스에 저장하는 스크랩 문서 중계모듈(109)을 더 포함하는 것을 특징으로 하는 펜형 디지털 스캐너를 이용하는 인쇄매체 스크랩 서비스 시스템.
The method according to claim 1,
A document image of the scrap document and related character information of the scrap document processed by dividing the whole document of the print medium by the scrap document unit are received and the document search information of each scrap document is generated to store the document image and the document search information of the scrap document in the database And a scrap document relaying module (109) for scrapping the scrap document.
제3항에 있어서,
스크랩 문서 중계모듈(109)은 인쇄매체의 전체문서 또는 일부문서를 수신하여 스크랩 문서단위로 분리하여 처리하는 것을 특징으로 하는 펜형 디지털 스캐너를 이용하는 인쇄매체 스크랩 서비스 시스템.
The method of claim 3,
The scrap document relay module (109) receives an entire document or a part of a document on a print medium, and separates and processes the document in units of scrap document, and processes the print medium scrap service system using the pen-type digital scanner.
제1항에 있어서,
상기 펜형 디지털 스캐너는 스캔 이미지를 무선 전송하는 무선 전송 모듈을 포함하여, 상기 무선 전송 모듈은 근거리 무선통신 방식으로 통신 네트워크에 접속하여 스캔 이미지를 영상 수신 모듈(101)로 전송하는 것을 특징으로 하는 펜형 디지털 스캐너를 이용하는 인쇄매체 스크랩 서비스 시스템.
The method according to claim 1,
Wherein the pen-type digital scanner includes a wireless transmission module for wirelessly transmitting a scan image, wherein the wireless transmission module is connected to a communication network by a short-range wireless communication method and transmits a scanned image to the image receiving module (101) Printed scrap service system using digital scanner.
제1항에 있어서,
상기 펜형 디지털 스캐너는 스캔 이미지를 무선 전송하는 무선 전송 모듈을 포함하여, 상기 무선 전송 모듈은 근거리 무선 통신방식으로 스마트 기기에 스캔 이미지를 전송하고, 상기 스마트 기기가 통신 네트워크에 접속하여 스캔 이미지를 영상 수신 모듈(101)로 전송하는 것을 특징으로 하는 펜형 디지털 스캐너를 이용하는 인쇄매체 스크랩 서비스 시스템.
The method according to claim 1,
Wherein the pen-type digital scanner includes a wireless transmission module for wirelessly transmitting a scan image, the wireless transmission module transmits a scan image to a smart device in a short-range wireless communication manner, and the smart device connects to a communication network, To the receiving module (101). ≪ RTI ID = 0.0 > 11. < / RTI >
인쇄매체에 인쇄된 문서를 스캔하는 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스 제공방법에 있어서,
사용자가 스크랩하기를 원하는 스크랩 문서와 관련하여 펜형 디지털 스캐너에서 스캔 된 스캔 이미지를 통신 네트워크를 통하여 수신하는 스크랩 이미지 수신단계(S100);
상기 수신된 스캔 이미지를 문자 인식하여, 문자열로 변환하는 문자열 변환단계(S110);
상기 변환된 문자열이 포함된 스크랩 문서를 검색하여 해당 문서의 문서 식별자를 추출하는 문서 식별자 검색단계(S120) ;
상기 검색된 스크랩 문서의 문서 식별자를 특정 사용자의 식별자를 기준으로 정렬하여 상기 특정 사용자에 대한 스크랩 정보를 생성하여 저장하는 스크랩 정보 생성/저장단계(S130);
통신 네트워크를 통하여 특정 사용자의 스크랩 문서의 문서 식별자 목록 요청을 수신하여, 상기 특정 사용자에 대한 스크랩 정보로부터 스크랩 문서의 문서 식별자 목록을 추출하여 전송하는 문서 식별자 목록 추출 단계(S140)을 포함하여,
문서 식별자 목록에 기초하여 사용자에 의하여 선택된 스크랩 문서의 문서 이미지를 사용자에게 전송하며,
상기 펜형 디지털 스캐너는
펜 고유번호를 가지고, 상기 펜 고유번호를 서비스 사용자의 사용자 식별자 별로 할당하여 등록하는 단계를 포함하고, 스캔 이미지 전송시 상기 펜 고유번호를 전송하고,
상기 스크랩 이미지 수신단계(S100)는
스캔 이미지의 수신시 상기 펜 고유번호를 스캔이미지와 연관하여 수신하고,
스크랩 정보 생성/저장단계(S130)는
상기 펜 고유번호를 기초로 스크랩 문서를 스크랩한 특정 사용자의 사용자 식별자를 검색하고, 상기 특정 사용자의 식별자와 상기 추출된 스크랩 문서의 문서 식별자를 매칭시킨 후, 상기 특정 사용자 식별자를 기준으로 상기 문서 식별자를 정렬하여 상기 특정 사용자에 대한 스크랩 정보를 생성하여 저장하는 것을 특징으로 하는 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스 제공방법.
A method of providing a scrap service for a print medium using a pen-type digital scanner that scans a document printed on a print medium,
A scrap image receiving step (S100) of receiving a scanned image scanned by a pen-type digital scanner through a communication network with respect to a scrap document desired to be scrapped by a user;
A character string conversion step (S110) of recognizing the received scan image and converting the received scan image into a character string;
A document identifier searching step (S120) of searching a scrap document including the converted character string and extracting a document identifier of the document;
A step (S 130) of creating and storing scrap information for the specific user by sorting the retrieved document ID of the scrap document based on the identifier of the specific user and storing the scrap information for the specific user;
Extracting a document identifier list of a scrap document from the scrap information for the specific user by receiving a request for a document identifier list of a scrap document of a specific user through a communication network,
Sends a document image of the scrap document selected by the user to the user based on the document identifier list,
The pen-type digital scanner
And registering and registering the pen identification number for each user identifier of the service user with the pen identification number, transmitting the pen identification number when transmitting the scan image,
The scrap image receiving step (SlOO)
Upon receipt of the scanned image, receiving the pen unique number in association with the scanned image,
The scrap information generation / storage step (S130)
Searching for a user identifier of a specific user scrapped from the scrap document based on the pen unique number, matching the identifier of the specific user with the document identifier of the extracted scrap document, Wherein the scrap information for the specific user is generated and stored by sorting the scrap information for the specific user.
제7항에 있어서,
특정 사용자로부터 문서 식별자 목록에서 선택된 스크랩 문서의 문서 이미지 요청을 해당 스크랩 문서의 문서 식별자를 포함하여 수신하여, 수신된 문서 식별자에 해당하는 스크랩 문서의 문서 이미지 파일의 파일명을 추출하는 문서 이미지 파일명 추출 단계(S150); 및 상기 추출된 문서 이미지 파일명의 문서 이미지 파일을 사용자에게 전송하는 문서 이미지 파일 송신단계(S160)를 포함하는 것을 특징으로 하는 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스 제공방법.
8. The method of claim 7,
A document image file name extracting step of receiving a document image request of a scrap document selected from a document identifier list by a specific user including a document identifier of the scrap document and extracting a file name of the document image file of the scrap document corresponding to the received document identifier (S150); And a document image file transmission step (S160) of sending a document image file of the extracted document image file name to a user.
제7항에 있어서,
스크랩 정보 생성/저장단계(S130)는, 상기 사용자 식별자에 대하여 정렬된 스크랩 문서의 문서 식별자와 연관하여 수신된 스캔 이미지부터 인식된 문자열의 디지털 코드, 스크랩 시간 정보, 스크랩 장소 정보, 펜형 디지털 스캐너에 할당된 펜 고유번호 중 선택된 하나 이상을 저장하는 것을 특징으로 하는 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스 제공방법.
8. The method of claim 7,
The scrap information generation / storage step (S130) includes a step of, in association with the document identifier of the scrap document sorted for the user identifier, the digital code of the recognized string, the scrap time information, the scrap location information, And the selected one of the pen-specific numbers is stored in the pen-type digital scanner.
제7항에 있어서,
인쇄매체의 전체문서가 스크랩 문서단위로 분리되어 처리된 스크랩 문서의 문서 이미지 및 관련 문자 정보를 수신하거나 인쇄매체의 전체문서 또는 일부문서를 수신하여 스크랩 문서로 분리하여 스크랩 문서의 문서 이미지 및 관련 문자 정보를 생성하고, 각 스크랩 문서의 문서검색정보를 생성하여 스크랩 문서의 문서 이미지 및 문서검색정보로서 저장하는 사전처리 단계를 포함하는 것을 특징으로 하는 펜형 디지털 스캐너를 이용한 인쇄매체 스크랩 서비스 제공방법.
8. The method of claim 7,
The entire document of the print medium is divided into scrap document units, and the document image and related character information of the processed scrap document are received, or an entire document or a part of the document of the print medium is received and separated into scrap documents, And a preprocessing step of generating document search information of each scrap document and storing the document search information as a document image and document search information of the scrap document.
KR1020140056623A 2014-05-12 2014-05-12 Scrap service system for printed media and Method for providing printed media scrap service using pen type digital scanner scaning document printed on printed media KR101604241B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140056623A KR101604241B1 (en) 2014-05-12 2014-05-12 Scrap service system for printed media and Method for providing printed media scrap service using pen type digital scanner scaning document printed on printed media

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140056623A KR101604241B1 (en) 2014-05-12 2014-05-12 Scrap service system for printed media and Method for providing printed media scrap service using pen type digital scanner scaning document printed on printed media

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020120063704A Division KR101516595B1 (en) 2012-06-14 2012-06-14 Scrap service system for printed media and Method for providing printed media scrap service using pen type digital scanner scaning document printed on printed media

Publications (2)

Publication Number Publication Date
KR20140082946A KR20140082946A (en) 2014-07-03
KR101604241B1 true KR101604241B1 (en) 2016-03-18

Family

ID=51733543

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140056623A KR101604241B1 (en) 2014-05-12 2014-05-12 Scrap service system for printed media and Method for providing printed media scrap service using pen type digital scanner scaning document printed on printed media

Country Status (1)

Country Link
KR (1) KR101604241B1 (en)

Also Published As

Publication number Publication date
KR20140082946A (en) 2014-07-03

Similar Documents

Publication Publication Date Title
US10070002B2 (en) Systems and methods for printing a document using a graphical code image
US8253972B2 (en) Image processing system, image processing apparatus, authorized person information management apparatus, image processing method, and computer readable medium
US10375267B2 (en) Mediation server
CN103226451A (en) Printing an electronic document using a printer and a mobile device
US9591169B2 (en) Image processing apparatus and program
US10423825B2 (en) Retrieval device, retrieval method, and computer-readable storage medium for computer program
US10148849B2 (en) Systems and methods for printing a document using a graphical code image
JP2020102166A (en) Image processing system, image processing method, program, image processing device, information processing device
KR101560449B1 (en) System and method for automatically classifying photograph
CN103324447A (en) Image processing apparatus and image processing method
US9898236B2 (en) Image processing apparatus and program for printing template images using keyword data
US9413841B2 (en) Image processing system, image processing method, and medium
US20160021264A1 (en) Information processing system, information processing device, portable terminal, and non-transitory computer readable medium
JP2007058621A (en) Document management device and document management method
KR101604241B1 (en) Scrap service system for printed media and Method for providing printed media scrap service using pen type digital scanner scaning document printed on printed media
KR101516595B1 (en) Scrap service system for printed media and Method for providing printed media scrap service using pen type digital scanner scaning document printed on printed media
JP2018015912A (en) Image processing device, image processing system and image processing program
JP2017021654A (en) Document management server and system
JP6946897B2 (en) Information processing equipment, information processing programs, and information processing systems
JP2009088876A (en) Information processing system
JP6357871B2 (en) Information collection method, information collection system, and computer program
JP6150643B2 (en) Image processing apparatus, authentication method thereof, and program
JP2008187596A (en) Print system, printing method, and program
JP2019105905A (en) Name card information registration device, name card information registration method, and program
US10187551B2 (en) Multifunction peripheral system and control method of multifunction peripheral system for providing printing information based on printing verification information

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190311

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20200310

Year of fee payment: 5