KR20190110873A

KR20190110873A - 비정형 텍스트 이미지에서 텍스트 데이터를 추출하는 방법 및 장치

Info

Publication number: KR20190110873A
Application number: KR1020180032867A
Authority: KR
Inventors: 강경림; 진창숙
Original assignee: 주식회사 피앤피소프트
Priority date: 2018-03-21
Filing date: 2018-03-21
Publication date: 2019-10-01
Also published as: KR102039989B1

Abstract

본 발명의 일 실시예에 따른, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 방법에 있어서, (a) 제 1 사용자 단말로부터 업무요청을 수신하고, 업무요청의 수신자에 대응하는 제 2 사용자 단말로 업무요청을 전달하는 단계; (b) 제 1 사용자 단말로부터 업무요청에 대응하는 비정형의 문서 이미지를 수신하고, 수신한 문서 이미지로부터 텍스트들을 추출하며, 각 텍스트에 대응하는 카테고리값과 검증값을 인식하는 단계; (c) 서버의 검증 데이터베이스에 기 저장된 카테고리값과 검증값 쌍에 대한 목록과 추출된 카테고리값과 검증값의 대응여부를 확인하는 단계; 및 (d) 대응여부에 따라, 기 저장된 복수의 정형 템플릿 중 어느 하나의 정형 템플릿을 검출하고, 텍스트들을 정형 템플릿에 입력한 정형의 문서 이미지를 상기 제 1 사용자 단말로 제공하는 단계;를 포함하고, 카테고리값은 인식된 텍스트의 의미를 참고하여 분류되는 카테고리에 대한 속성 정보이며, 검증값은 상기 카테고리값에 대응되는 텍스트 별로 정의되는 텍스트 표현 형식에 대한 속성 정보이다.

Description

비정형 텍스트 이미지에서 텍스트 데이터를 추출하는 방법 및 장치 {METHOD AND APPARATUS FOR EXTRACITING TEXT DATA FROM NONLINEAR TEXT IMAGE}

본 발명은 다양한 형식을 가지는 비정형 텍스트 이미지에서 텍스트를 추출하고, 이를 정형화된 형식의 문서가 되도록 통일시키는 발명에 관한 것이다.

이를 자세하게 설명하면, 다양한 비정형 문서들에서 텍스트를 추출하고, 이를 동일한 문서양식을 가질 수 있도록 하나의 정형화된 템플릿에 적용하여 사용자에게 제공하는 발명에 관한 것이다.

최근 기업의 수가 증가함에 따라 각 업체마다의 고유의 문서양식을 가지는 경우가 늘게 되었다. 이런 업체들 간의 상호 협업 시, 각자가 보유한 문서 양식을 사용하여 상대에게 제공하는 경우가 많았다. 따라서 타 업체에서 제공하는 문서를 분류하거나 보관하기 위해서는 다양한 업체에서 수신하게 되는 문서를 수작업으로 분류하거나, 자사의 양식으로 새롭게 작성해야 하는 번거로움이 있다.

최근 디지털 저장 매체의 발전에 따라 기존의 종이 문서를 디지털화 하여 저장하는 경우가 늘고 있다. 과거에는 종이 문서를 단순히 스캔이나 촬영 기술을 통해 이미지 파일로 저장하거나 문서 작성프로그램을 사용하여 자사의 양식에 맞게 작성하는 경우가 대부분이었다. 하지만 최근에는 자동으로 문자를 인식하는 광학 문자 인식 기술(optical character recognition)의 발전에 따라 이미지에서 문자를 자동으로 인식하고 이를 데이터화하는 기술이 발전하였으나, 종래의 기술은 단순하게 문자만을 인식하고 다양한 문서에 대응하여 분류하기엔 한계가 존재한다.

본 발명은 전술한 문제점을 해결하기 위하여, 본 발명의 일 실시예에 따라, 다양한 양식으로 제작된 비정형 문서의 이미지에서 데이터 값을 추출하고, 이를 하나의 정형화된 문서 양식으로 통합 관리하는 것을 목적으로 한다.

상기한 기술적 과제를 달성하기 위한 기술적 수단으로서 본 발명의 일 실시예에 따른, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 방법에 있어서, (a) 제 1 사용자 단말로부터 업무요청을 수신하고, 업무요청의 수신자에 대응하는 제 2 사용자 단말로 업무요청을 전달하는 단계; (b) 제 1 사용자 단말로부터 업무요청에 대응하는 비정형의 문서 이미지를 수신하고, 수신한 문서 이미지로부터 텍스트들을 추출하며, 각 텍스트에 대응하는 카테고리값과 검증값을 인식하는 단계; (c) 서버의 검증 데이터베이스에 기 저장된 카테고리값과 검증값 쌍에 대한 목록과 추출된 카테고리값과 검증값의 대응여부를 확인하는 단계; 및 (d) 대응여부에 따라, 기 저장된 복수의 정형 템플릿 중 어느 하나의 정형 템플릿을 검출하고, 텍스트들을 정형 템플릿에 입력한 정형의 문서 이미지를 상기 제 1 사용자 단말로 제공하는 단계;를 포함하고, 카테고리값은 인식된 텍스트의 의미를 참고하여 분류되는 카테고리에 대한 속성 정보이며, 검증값은 상기 카테고리값에 대응되는 텍스트 별로 정의되는 텍스트 표현 형식에 대한 속성 정보일 수 있다.

또한, 다른 일 실시예로 비정형 데이터의 인식 및 저장 서비스를 제공하는 장치에 있어서, 비정형 데이터의 인식 및 저장 서비스를 제공하기 위한 프로그램이 기록된 메모리; 및 프로그램을 실행하기 위한 프로세서;를 포함하며, 프로세서는, 프로그램의 실행에 의해, 제 1 사용자 단말로부터 업무요청을 수신하고, 업무요청의 수신자에 대응하는 제 2 사용자 단말로 업무요청을 전달하고, 제 1 사용자 단말로부터 업무요청에 대응하는 비정형의 문서 이미지를 수신하고, 수신한 문서 이미지로부터 텍스트들을 추출하며, 각 텍스트에 대응하는 카테고리값과 검증값을 인식하고, 서버의 검증 데이터베이스에 기 저장된 카테고리값과 검증값 쌍에 대한 목록과 추출된 카테고리값과 검증값의 대응여부를 확인하고, 대응여부에 따라, 기 저장된 복수의 정형 템플릿 중 어느 하나의 정형 템플릿을 검출하고, 텍스트들을 상기 정형 템플릿에 입력한 정형의 문서 이미지를 제 1 사용자 단말로 제공하는 장치일 수 있다.

전술한 본 발명의 과제 해결 수단에 의하면, 다양한 형식으로 작성된 비정형 문서 이미지에서, 카테고리값과 그에 매핑하는 데이터를 추출하여 서버가 제공하는 정형 문서양식에 적용하고, 상대방에게 전달하는 플랫폼을 제공할 수 있다.

도 1은 본 발명의 일 실시예에 따른, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 시스템의 구성을 나타낸 도면이다.
도 2는 본 발명의 일 실시예에 따른, 사용자 간의 서비스 이용 방법을 나타낸 동작 흐름도이다.
도 3은 본 발명의 일 실시예에 따른, 카테고리값과 밸류값을 설명하기 위한 예시 문서를 나타낸 도면이다.
도 4는 본 발명의 일 실시예에 따른, 비정형 문서 이미지에서 카테고리값과 밸류값을 인식하는 방법을 나타낸 동작 흐름도이다.
도 5는 본 발명의 일 실시예에 따른, 서버가 비정형 문서 이미지를 정형 문서 이미지로 변환하는 과정을 나타낸 동작 흐름도이다.

아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.

명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미하며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.

명세서 전체에서, 서버(100)는 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 장치를 의미할 수 있다.

이하의 실시예는 본 발명의 이해를 돕기 위한 상세한 설명이며, 본 발명의 권리 범위를 제한하는 것이 아니다. 따라서 본 발명과 동일한 기능을 수행하는 동일 범위의 발명 역시 본 발명의 권리 범위에 속할 것이다.

도 1은 본 발명의 일 실시예에 따른, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 시스템의 구성을 나타낸 도면이다.

도 1을 참조하면, 본 발명의 일 실시예에 따라 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 시스템은 서버(100), 사용자 단말(200)을 포함할 수 있고, 이를 통신망(300)이 상호 연결하게 된다.

서버(100)는 사용자 단말(200)에 탑재된 단말 어플리케이션을 통해 비정형의 문서 이미지를 정형의 문서 이미지로 변환하는 서비스는 사용자 단말(200)의 요청에 기인하여 비정형의 문서 이미지를 제공 받고, 사용자 단말(200)은 서버(100)로부터 제공받은 어플리케이션 인터페이스에 기초하여 비정형의 문서 이미지에서 추출한 정형의 문서 이미지를 제공받는 것을 특징으로 한다.

이때, 서버(100)는 비정형의 문서 이미지에서 추출한 텍스트 데이터를 인식하고, 검증 데이터베이스에 기 저장되어 있는 데이터와 비교하여 해당 검색결과에 대응하는 정형 템플릿에 적용 후 사용자 단말(200)로 제공하게 된다.

본 발명은 기업 혹은 단체간의 원활하고 손쉬운 업무를 돕기 위한 것일 수 있다. 본 발명에서 사용자 단말(200)은 서로 다른 기업 혹은 소속이 사용하는 제 1 사용자 단말(201)과 제 2 사용자 단말(202)을 포함할 수 있다.

예를 들어 두 기업간의 서류 교환을 위해 제 1 사용자 단말(201)이 서버(100)로 업무요청을 수행하고, 서버(100)는 제 2 사용자 단말(202)로부터 수신한 문서 이미지를 바탕으로 본 발명을 진행하게 되는 것이다.

또한, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 어플리케이션은 사용자 단말(200)에 내장된 어플리케이션이거나, 어플리케이션 배포 서버로부터 다운로드되어 사용자 단말(200)에 설치된 어플리케이션일 수 있다.

복수 개의 사용자 단말(201, 202)들은 유무선 통신 환경에서 단말 어플리케이션을 이용할 수 있는 통신 단말기를 의미한다. 여기서 사용자 단말(200)은 비정형 텍스트 이미지를 수신 후 이를 서버(100)로 제공하고, 그에 대한 결과 정보를 수신할 수 있는 디바이스일 수 있다. 도 1에서는 사용자 단말(200)이 휴대용 단말기의 일종인 스마트폰(smart phone)으로 도시되었지만, 본 발명의 사상은 이에 제한되지 아니하며, 상술한 바와 같이 단말 어플리케이션을 탑재할 수 있는 단말에 대해서 제한 없이 차용될 수 있다.

이를 더욱 상세히 설명하면, 사용자 단말(200)은 핸드헬드 컴퓨팅 디바이스(예를 들면, PDA, 이메일 클라이언트 등), 퍼스널 컴퓨터(Personal computer), 또는 다른 종류의 컴퓨팅 또는 커뮤니케이션 플랫폼의 임의의 형태를 포함할 수 있으나, 본 발명이 이에 한정되는 것은 아니다.

한편, 통신망(300)은 서버(100)와 사용자 단말(200)들을 연결하는 역할을 수행한다. 즉, 통신망(300)은 사용자 단말(200)들이 서버(100)에 접속한 후 데이터를 송수신할 수 있도록 접속 경로를 제공하는 통신망을 의미한다. 통신망(300)은 예컨대 LANs(Local Area Networks), WANs(Wide Area Networks), MANs(Metropolitan Area Networks), ISDNs(Integrated Service Digital Networks) 등의 유선 네트워크나, 무선 LANs, CDMA, 블루투스, 위성 통신 등의 무선 네트워크를 망라할 수 있으나, 본 발명의 범위가 이에 한정되는 것은 아니다.

도 2는 본 발명의 일 실시예에 따른, 사용자 간의 서비스 이용 방법을 나타낸 동작 흐름도이다.

도 2를 참조하면, 본 발명의 서비스를 이용하기 위해서 서버(100)는 제 1 사용자 단말(201)로부터 업무요청을 수신하고, 업무요청의 수신자에 대응하는 제 2 사용자 단말(202)로 업무요청을 전달한다(S210).

여기서 업무요청이란 제 1 사용자 단말(201)의 사용자와 제 2 사용자 단말(202)의 사용자가 협업을 위해 필요한 문서를 주고 받기 위한 작업요청을 뜻할 수 있다.

예를 들어 제 1 사용자 단말(201)이 소속된 기업이 제 2 사용자 단말(202)이 소속된 기업과 거래를 위해 견적서를 요청하면, 서버(100)가 먼저 제 1 사용자 단말(201)이 소속의 기업의 견적서 요청을 수신하고, 이 요청을 제 2 사용자 단말(202)이 소속된 기업으로 전달하게 되는 것이다.

이때, 서로가 주고 받게 되는 문서의 양식은 각자의 기업이나 단체가 단독으로 사용하는 양식으로 구성될 수 있다.

그 후 서버(100)는 업무요청에 기초하여 제 2 사용자 단말(202)로부터 업무요청에 대응하는 비정형 데이터를 수신하고, 이를 변환하여 제 1 사용자 단말로 전달한다(S220).

선택적 실시예로 업무요청을 전달받는 대상인 제 2 사용자 단말(202)이 하나 이상의 복수로 구성되어 하나의 제 1 사용자 단말(201)이 많은 사용자(혹은 기업)로부터 수신하는 복수의 비정형 문서 이미지를 통일된 정형 문서 이미지로 변환 받아 수신할 수 있고, 반대의 경우도 구현될 수 있다.

이때, 비정형 데이터를 정형 데이터로 전환하는 방법은 후술할 도 3 내지 도 5를 참조하여 설명하도록 한다.

도 3은 본 발명의 일 실시예에 따른, 카테고리값(410)과 밸류값(420)을 설명하기 위한 예시 문서를 나타낸 도면이다.

도 3을 살펴보면, 본 발명의 서비스를 통해 스캔되거나 촬영으로 생성된 문서 이미지(이는 비정형 문서 이미지를 뜻할 수 있다.)로부터 텍스트가 독출될 수 있고, 독출된 텍스트마다 카테고리값(410)과 밸류값(420)이 연관되어 정의될 수 있다.

도 3은 가상의 견적서를 예시로 도시한 것으로 서버(100)는 문서에서 카테고리값(410)과 밸류값(420)을 추출하여 인식할 수 있다.

먼저 카테고리값(410)은 특정 단어의 상위 카테고리에 대한 의미를 가지는 텍스트를 뜻할 수 있다. 예를 들어 도 3의 가상 견적서에서 서버(100)는 "업체 담당자", "업태", "운송 방법", "운송 조건" 등을 카테고리값(410)으로 지정할 수 있다.

또한, 밸류값(420)은 특정 카테고리에 속하는 여러 하위 개념들 중 하나에 해당하는 텍스트를 뜻할 수 있다. 예를 들면 "업체 담당자"라는 특정 카테고리에 속하는 하위 개념인 "피앤피소프트"나 "업태"의 하위 개념인 "서비스"가 밸류값(420)에 해당할 수 있다.

이때, 서버(100)가 비정형 문서 이미지에서 카테고리값(410)과 밸류값(420)을 추출하여 인식하는 상세한 방법은 후술할 도 4를 통해 진행하도록 한다.

도 4는 본 발명의 일 실시예에 따른, 비정형 문서 이미지에서 카테고리값(410)과 밸류값(420)을 인식하는 방법을 나타낸 동작 흐름도이다.

도 4를 참조하면, 먼저 사용자 단말(200)로부터 수신한 비정형 문서 이미지를 텍스트 영역과 그 외 영역으로 분리한다(S410).

해당 과정은 보편적으로 사용되고 있는 이미지에서 텍스트를 인식하는 알고리즘을 적용하거나, 그 외 자체적으로 개발한 영역 구분 알고리즘을 적용할 수 있다.

분리된 텍스트 영역에서 텍스트를 추출하고(S420), 추출된 텍스트를 비정형 문서 이미지의 텍스트 배치정보에 기초하여 카테고리값(410)과 밸류값(420)으로 분류한다(S430). 예를 들면, 카테고리값(410)의 아래에 배치된 텍스트를 밸류값(420)으로 간주할 수 있다. 또는, 카테고리값(410)들의 정렬순서가 횡방향인 경우, 카테고리값(410)의 위나 아래에 배치되되 횡방향으로 배치된 텍스트들을 밸류값(420)으로 간주할 수 있을 것이다.

여기서 텍스트 배치정보란 비정형 문서 이미지에서 카테고리값(410)과 그에 쌍을 이루는 밸류값(420)이 문서에서 배치되는 방식을 나타낸 것이다. 일반적으로 카테고리값(410)과 밸류값(420)을 동시에 가지는 문서라면, 사용자가 이를 인식하기 쉽도록 인접하게 배치하게 된다.

예를 들어 도 2의 가상의 견적서에서 "영업 담당자", "업태" 등의 복수의 카테고리값(410)은 가로로 나열되어 있고, 카테고리값(410)과 쌍을 이루는 "피앤피소프트", "서비스" 등의 밸류값(420)은 카테고리값(410)의 바로 하단에 위치 시킨 것을 확인할 수 있다.

서버(100)는 기 저장된 텍스트 배치정보나 카테고리값(410)과 밸류값(420)을 구분하는 알고리즘을 통해 추출한 텍스트에서 카테고리값(410)과 밸류값(420)을 구분하게 된다.

도 5는 본 발명의 일 실시예에 따른, 서버(100)가 비정형 문서 이미지를 정형 문서 이미지로 변환하는 과정을 나타낸 동작 흐름도이다.

도 5를 참조하면, 본 발명의 일 실시예에 따른 제 2 사용자 단말(202)로부터 수신한 비정형 문서 이미지로부터 카테고리값(410)과 밸류값(420)을 인식한다(S510).

이때, 비정형 문서 이미지로부터 카테고리값(410)과 밸류값(420)을 인식하는 방법은 앞서 서술한 도 4의 설명과 일치하기에 추가적인 설명은 생략한다.

단계(S510)에서 인식된 카테고리값(410)과 밸류값(420)을 서버(100)의 검증 데이터베이스에 기 저장된 카테고리값(410)과 밸류값 범위 쌍에 대한 목록과의 매칭여부를 판단한다(S520).

이를 자세하게 설명하면, 서버(100)의 검증 데이터베이스에는 다양한 종류의 정형 템플릿(예를 들면, 견적서 템플릿, 세금계산서 템플릿, 제안서 템플릿 등등)이 저장되어 있다. 그리고 각 정형 템플릿마다 복수의 카테고리값(410)과 그에 각각 매핑되는 밸류값(420) 범위가 설정되어 있다. 카테고리값(410)과 그에 매핑되는 밸류값(420)이 검증 데이터베이스에 목록화되어 기 저장될 수 있다.

이후, 인식된 카테고리값(410)과 밸류값(420)을 검증 데이터베이스에 저장된 값들의 목록과 비교할 수 있다. 이때, 각 정형 템플릿 별 매칭비율을 산출하고 최대의 매칭비율을 갖는 정형 템플릿을 검색한다.

한편, 추가 실시예로서, 인식된 카테고리값(410)과 밸류값(420)이 기 설정된 비율을 초과하면 단계(S530)를 진행하고, 단계(S530)를 통해 최대 매칭비율을 갖는 정형 템플릿을 검색할 수도 있다.

단계(S530)에서, 서버(100)는 기 저장된 복수의 정형 템플릿이 가지는 카테고리값(410)과 밸류값(420)의 범위에 비정형 문서 이미지에서 인식한 값(카테고리값(410), 밸류값(420))을 매칭 후 최대 매칭비율을 가지는 정형 템플릿을 검색한다(S530).

이때 매칭비율이 기 설정된 비율을 넘기지 못하면, 서버(100)는 최대 매칭비율을 가지는 정형 템플릿을 제 2 사용자 단말(202)에 추천하고(S531) 사용자의 선택에 기반하여 다음 단계(S540)를 진행하게 된다.

이를 자세하게 설명하면, 서버(100)에는 사전에 다양한 형식의 정형 템플릿을 저장하고 있으며, 각각의 템플릿은 용도에 따라 구성되는 카테고리값(410)과 밸류값(420)의 범위가 다르다. 예를 들어 "견적서"라는 템플릿에는 "판매자", "판매물품", "물품의 개수", "물품의 가격" 등을 카테고리값(410)의 범위를 가질 수 있다면, "계약서"라는 템플릿은 계약을 수행하는 "업체명", "계약명", "계약 날자" 등의 범위를 가지게 된다. 또한, 밸류값(420)도 카테고리값(410)과 마찬가지로 템플릿마다 구성되는 범위가 달라지게 되는 것이다.

따라서 비정형 문서 이미지에서 인식한 카테고리값(410)과 밸류값(420)을 각각의 정형 템플릿이 가지는 카테고리값(410)과 밸류값(420)의 범위와 매칭하게 된다. 이때, 서버(100)는 매칭비율이 기 설정된 비율을 넘기면서 최대 매칭비율을 가지는 템플릿을 검색하게 된다.

이때 매칭비율에 기 설정치를 가지는 이유는 매칭비율이 적정선 이하라면 비정형 문서 이미지의 문서종류와 정형 템플릿의 문서종류가 서로 달라질 수 있기 때문이다.

만약 매칭비율이 기 설정된 수치를 넘지 못하면 서버(100)는 기 설정된 수치를 넘지는 못하지만, 최대 매칭비율을 가지는 정형 템플릿을 제 2 사용자 단말(202)에게 추천하여 정형 템플릿의 사용 여부가 적합한지를 확인하는 작업을 수행한다.

선택적 실시예로 서버(100)가 적합한 정형 템플릿을 추천하지 못한다면, 제 2 사용자가 직접 정형 템플릿을 서버(100)에 요청하고, 선택하여 적용할 수도 있다.

마지막으로 최대 매칭비율을 가지는 정형 템플릿에 인식된 카테고리값(410)과 밸류값(420)을 적용한다.

만약, 이때 인식한 밸류값(420)이 검증 데이터베이스에 등록된 밸류값(420) 범위(즉, 인식한 밸류값(420)과 대응하는 카테고리값(410)과 연관되어 규정된 밸류값(420) 범위)에 만족하지 못한다면, 검증 데이터베이스의 밸류값(420) 범위에 만족하도록 밸류값(420)이 변형되어 제 2 사용자 단말(202)로 추천될 수 있다.

자세히 설명하면, 밸류값(420) 범위는 해당 카테고리값(410) 내에서 밸류값(420)이 가질 수 있는 범위 및 형식에 대한 속성 정보를 나타낸다. 예를 들어서, 카테고리값(410)이 "업태"이면, 밸류값(420) 범위는 "한글"로 규정될 수 있고, 카테고리값(410)이 "금액"이면, 밸류값(420) 범위는 "숫자", "최저1자리수 내지 최대 15자리수"로 규정될 수 있다. 이때, 인식된 밸류값(420)이 검증 데이터베이스 목록 상의 밸류값(420) 범위와 매칭하기 위해 인식된 밸류값(420)을 구성하는 음절들 중 하나를 변형하거나 생략하거나, 새로운 음절을 추가하여 변형시켜 사용자에게 추천하게 되는 것이다.

또한, 매핑하는 카테고리값(410)이 금액, 날짜 및 전화번호와 같은 값을 가진다면, 밸류값(420)으로 구성되는 숫자의 최저 자릿수 및 최대 자릿수, 배열 형식 등이 변형될 수도 있다.

변형된 값은 비정형 문서 이미지를 제공한 제 2 사용자 단말(202)의 사용자에게 추천되어, 제2사용자는 변형된 값이 원래의 값과 의미가 같은 것인지 여부를 확인할 수 있다. 추가 실시예로서, 제2사용자가 원하는 바에 따라, 의미가 다르면 반복 변형하여 다른 추천단어를 제공할 수도 있다.

또한, 선택적 실시예로, 변형된 밸류값(420)을 추천함과 동시에 문서이미지에서 독출된 밸류값(420)이 밸류값(420) 범위에 맞지 않더라도, 이미지 독출이 잘못된 것이거나 밸류값(420) 범위가 잘못된 것일 수도 있으므로, 문서이미지에서 독출된 밸류값(420) 그대로를 사용자에게 함께 추천할 수도 있다.

이러한 과정을 거쳐, 정형 템플릿 검색을 완료하고, 인식된 밸류값(420과 카테고리값(410)이 정형 템플릿에 입력완료 된 경우, 제 2 사용자 단말(202)의 확인을 받고, 입력완료 된 카테고리값(410)과 밸류값(420)을 저장한 후, 그에 기초하여 제 1 사용자 단말(201)에 상기 정형 템플릿에 대응하는 정형 문서 이미지를 제공한다(S540).

단계(S530)에서 선택된 정형 문서 이미지는 최종적으로 제 2 사용자 단말(202)의 확인을 받아 올바르게 문서가 변형되었는지 유무를 판단하고, 제 1 사용자 단말(201)로 제공하게 된다.

이때 선택적 실시예로 정형 문서 이미지는 사용자의 선택에 따라 다양한 확장자로 제공되어 사용자의 편의를 높일 수 있다. 예를 들어 이미지 확장자인 pdf나 MS워드의 확장자인 docx, 한컴 오피스 한글의 확장자인 hwp 등으로 제공되어, 정형 문서 이미지를 수신하는 제 1 사용자 단말(201)이 손쉽게 파일을 열고 수정할 수 있게 된다.

전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.

본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

100: 서버 200: 사용자 단말
300: 통신망
410: 카테고리값 420: 검증값

Claims

서버에 의해 수행되는, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 방법에 있어서,
(a) 제 1 사용자 단말로부터 업무요청을 수신하고, 상기 업무요청의 수신자에 대응하는 제 2 사용자 단말로 상기 업무요청을 전달하는 단계;
(b) 제 2 사용자 단말로부터 상기 업무요청에 대응하는 비정형의 문서 이미지를 수신하고, 상기 수신한 문서 이미지로부터 텍스트들을 추출하며, 상기 텍스트들을 카테고리값과 밸류값 쌍으로 분류하는 단계;
(c) 상기 서버의 검증 데이터베이스에 기 저장된 카테고리값과 밸류값 범위 쌍에 대한 목록을 참고하여 상기 추출된 밸류값이 상기 밸류값 범위에 만족하는지 여부를 확인하는 단계; 및
(d) 상기 확인에 따라, 기 저장된 복수의 정형 템플릿 중 어느 하나의 정형 템플릿을 검출하고, 상기 텍스트들을 상기 정형 템플릿에 입력한 정형의 문서 이미지를 상기 제 1 사용자 단말로 제공하는 단계;
를 포함하고,
상기 카테고리값은 특정 단어의 상위 카테고리에 대한 의미를 갖는 텍스트이며,
상기 밸류값은 특정 카테고리에 속하는 여러 가지 하위 개념들 중 하나에 해당하는 텍스트이며,
상기 밸류값 범위는 상기 밸류값의 범위 및 형식에 대한 속성 정보인 것인, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 방법.
제 1 항에 있어서,
상기 (b)단계는,
(b1) 상기 문서 이미지에서 텍스트 영역과 그 외 영역을 분리하는 단계;
(b2) 상기 텍스트 영역에서 텍스트를 추출하는 단계; 및
(b3) 상기 추출된 텍스트들의 배치정보를 참고하여, 상기 카테고리값과 상기 밸류값으로분리하는 단계;
를 포함하는 것인, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 방법.
제 1 항에 있어서,
상기 (d) 단계는,
(d1) 상기 검증 데이터베이스의 목록과 상기 추출된 카테고리값과 밸류값 범위와의 매칭 비율이 기 설정된 비율을 초과할 경우, 기 저장된 복수의 정형 템플릿 중 어느 하나의 정형 템플릿을 검출하는 단계; 및
(d2) 상기 텍스트들을 상기 정형 템플릿에 입력하는 단계;
를 포함하는, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 방법.
제 4 항에 있어서,
상기 (d1) 단계는
상기 각 정형 템플릿 별로 카테고리값과 밸류값 범위가 규정되며,
상기 추출된 텍스트들에 대한 카테고리값과 밸류값을 상기 검증 데이터베이스에 기 등록된 정형 템플릿 별 카테고리값과 밸류값 범위와 비교하였을 때, 매칭비율이 최대가 되는 정형 템플릿을 검색하고, 검색 결과에 기초하여 상기 카테고리값과 밸류값을 저장하는 것인, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 방법.
제 4 항에 있어서,
상기 (d1) 단계는
상기 각 정형 템플릿 별로 카테고리값과 밸류값 범위가 규정되며,
상기 추출된 텍스트들에 대한 카테고리값과 밸류값을 상기 검증 데이터베이스에 기 등록된 정형 템플릿 별 카테고리값과 밸류값 범위와 비교하였을 때, 매칭비율이 기 설정된 비율을 초과하는 정형 템플릿을 추출하되, 상기 기 설정된 비율을 초과하는 정형 템플릿이 검색되지 않는 경우, 매칭비율이 최대가 되는 정형 템플릿을 상기 제 2 사용자 단말로 추천하고 상기 제 2 사용자 단말의 확인결과를 수신하며, 검색 결과에 기초하여 상기 카테고리값과 밸류값을 저장하는 것인, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 방법.
제4항에 있어서,
상기 (d2) 단계는,
(d2-1) 특정 밸류값이 상기 검증 데이터베이스에 등록된 밸류값 범위와 일치하지 않는 경우, 상기 검증 데이터베이스 내에 저장된 밸류값 중에서 상기 특정 밸류값의 카테고리값에 대응하는 밸류값 범위와 기설정된 범위 내의 차이를 갖는 밸류값을 추천하거나, 상기 특정 밸류값 자체를 상기 제 2 사용자 단말로 추천하는 단계; 및
(d2-1) 추천된 정보에 대한 상기 제 2 사용자 단말의 선택을 수신하여, 상기 정형 템플릿에 입력하는 단계;
를 포함하는, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 방법.
제4항에 있어서,
상기 (d2-1) 단계는,
특정 밸류값이 상기 검증 데이터베이스에 등록된 밸류값 범위와 일치하지 않는 경우, 상기 검증 데이터베이스의 밸류값 범위와 매칭되도록 상기 특정 밸류값을 구성하는 음절들 중 적어도 하나를 변형 또는 생략하거나 새로운 음절을 추가하여 상기 제 2 사용자 단말로 추천하는 것인, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 방법.
제 7 항에 있어서,
상기 (d2-1) 단계는,
상기 카테고리값이 금액, 날짜 및 전화번호 중 어느 하나와 대응하는 경우, 상기 밸류값 범위는 인식된 밸류값이 구성하는 숫자의 최저 및 최대 개수, 상기 숫자의 배열 형식 중 어느 하나를 포함하는 것인, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 방법.
제4항에 있어서,
상기 (d) 단계는,
(d3) 텍스트 입력이 완료된 상기 정형 템플릿을 상기 제 2 사용자 단말로 제공하고, 상기 제 2 사용자 단말의 확인 입력이 완료된 경우, 상기 제 1 사용자 단말로 상기 정형 템플릿을 전송하는 단계를 더 포함하는, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 방법.
제 8항에 있어서,
상기 (d3) 단계는,
상기 제 2 사용자 단말에서 수신한 상기 문서 이미지를 상기 정형 템플릿과 함께 전송하는 것인, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 방법.
제 1 항에 있어서,
상기 제 1 사용자 단말과 상기 제 2 사용자 단말은 서로 다른 기업 소속의 사용자가 소지하는 단말이며,
상기 제 2 사용자 단말에서 제공한 상기 문서 이미지는 상기 업무요청에 대해 상기 제 1 사용자의 기업이 단독으로 사용하는 양식으로 구성된 비정형 데이터에 관한 이미지인 것인, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 방법.
비정형 데이터의 인식 및 저장 서비스를 제공하는 장치에 있어서,
비정형 데이터의 인식 및 저장 서비스를 제공하기 위한 프로그램이 기록된 메모리; 및
상기 프로그램을 실행하기 위한 프로세서;를 포함하며,
상기 프로세서는, 상기 프로그램의 실행에 의해,
제 1 사용자 단말로부터 업무요청을 수신하고, 상기 업무요청의 수신자에 대응하는 제 2 사용자 단말로 상기 업무요청을 전달하고, 제 1 사용자 단말로부터 상기 업무요청에 대응하는 비정형의 문서 이미지를 수신하고, 상기 수신한 문서 이미지로부터 텍스트들을 추출하며, 상기 각 텍스트에 대응하는 카테고리값과 밸류값 범위를 인식하고, 상기 서버의 검증 데이터베이스 에 기 저장된 카테고리값과 밸류값 범위 쌍에 대한 목록과 상기 추출된 카테고리값과 밸류값 범위의 대응여부를 확인하고, 상기 대응여부에 따라, 기 저장된 복수의 정형 템플릿 중 어느 하나의 정형 템플릿을 검출하고, 상기 텍스트들을 상기 정형 템플릿에 입력한 정형의 문서 이미지를 상기 제 1 사용자 단말로 제공하되,
상기 카테고리값은 인식된 텍스트의 의미를 참고하여 분류되는 카테고리에 대한 속성 정보이며, 상기 밸류값 범위는 상기 카테고리값에 대응되는 텍스트 별로 정의되는 텍스트 표현 형식에 대한 속성 정보인 것인, 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 장치.
제 1 항 내지 제 11 항 중 어느 한 항에 따른 비정형 데이터의 정형 데이터 변환 기반의 업무 서비스를 제공하는 방법 를 제공하는 프로그램이 기록 된 컴퓨터 판독가능 기록 매체.