KR101932759B1 - Character recognition-based financial service surpply system and method - Google Patents

Character recognition-based financial service surpply system and method Download PDF

Info

Publication number
KR101932759B1
KR101932759B1 KR1020170112062A KR20170112062A KR101932759B1 KR 101932759 B1 KR101932759 B1 KR 101932759B1 KR 1020170112062 A KR1020170112062 A KR 1020170112062A KR 20170112062 A KR20170112062 A KR 20170112062A KR 101932759 B1 KR101932759 B1 KR 101932759B1
Authority
KR
South Korea
Prior art keywords
transaction
information
communication terminal
mobile communication
character recognition
Prior art date
Application number
KR1020170112062A
Other languages
Korean (ko)
Inventor
김태환
박재훈
김진배
최종덕
Original Assignee
주식회사 국민은행
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 국민은행 filed Critical 주식회사 국민은행
Priority to KR1020170112062A priority Critical patent/KR101932759B1/en
Application granted granted Critical
Publication of KR101932759B1 publication Critical patent/KR101932759B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/02—Banking, e.g. interest calculation or account maintenance
    • G06F17/27—
    • G06K9/00442—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/32—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices
    • G06Q20/322—Aspects of commerce using mobile devices [M-devices]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/12—Accounting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40—Document-oriented image-based pattern recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02—Terminal devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Finance (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Technology Law (AREA)
  • Development Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Operations Research (AREA)
  • Data Mining & Analysis (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Multimedia (AREA)
  • Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)
  • Character Discrimination (AREA)

Abstract

According to an embodiment of the present invention, a text recognition-based financial service providing system using a mobile communications terminal includes a mobile communications terminal having a camera unit, and a financial institution system for providing a text recognition-based financial service application downloaded through software or Internet to the mobile communications terminal. The financial institution system comprises: a financial institution unique module; a character recognition-based transaction module which extracts charge/tax payment information or transaction information from an image of a charge/tax payment slip or a transaction information print photographed by using the camera unit of the mobile communications terminal and shortens a financial transaction to proceed; and a character recognition-based financial transaction DB which stores the image of the charge/tax payment slip, received from the character recognition-based transaction module, and artificial intelligence-based information extraction information.

Description

이동통신단말기을 이용한 문자인식기반 부가가치세 납부시스템{CHARACTER RECOGNITION-BASED FINANCIAL SERVICE SURPPLY SYSTEM AND METHOD} TECHNICAL FIELD [0001] The present invention relates to a character recognition-based value-added tax payment system using a mobile communication terminal,

본 발명은 이동통신단말기을 이용한 문자인식기반 부가가치세 납부시스템에 관한 것으로, 이동통신단말기의 카메라부를 이용하여, 규격화 또는 비규격화 지로장표, 부가가치세 납부양식, 인쇄된 계좌정보를 촬영하여 생활요금, 부가가치세 납부 또는 계좌이체를 즉시 실행할 수 있는 이동통신단말기을 이용한 문자인식기반 부가가치세 납부 시스템에 관한 것이다.The present invention relates to a character recognition-based value-added tax payment system using a mobile communication terminal, and more particularly, it relates to a system and method for paying a VAT payable by using a camera unit of a mobile communication terminal by photographing standardized or non-standardized bills, VAT payment form, printed account information, The present invention relates to a character recognition-based value-added tax payment system using a mobile communication terminal capable of immediately executing a money transfer.

일반적으로 지로장표는 각종 공과금 납부, 세금 납부, 대학원서 접수 등에 많이 사용되고 있는 것으로, 전산시스템에 의해 다량을 신속하게 처리할 수 있기 때문에 매우 폭넓게 사용되고 있다. Generally, Giro is widely used for payment of various utility bills, payment of taxes, acceptance of college applications, and it is widely used because it can process a large amount quickly by computerized system.

특히, 지로장표로 공과금을 납부하는 경우에 공과금의 납부기한이 매달 10일, 말일 등 특정일로 정해져 있으며, 납부할 수 있는 장소 및 시간이 제한적이며, 공과금 납부시 확인 및 영수증을 분리하여 납부자에게 제공하여야 하므로, 특정날짜와 특정시간이 되면 은행 수납창구는 납부자들로 붐비게 되어 납부자는 납부자대로 대기하는 시간이 많이 소요되며 은행직원은 다른 업무를 제대로 할 수 없을 정도로 업무에 과부하가 걸리는 문제점이 있다. Particularly, in the case of payment of utility bills by Giro system, the payment period of utility bills is fixed to specific days such as the 10th day and the last day of every month, and the place and time that can be paid are limited. Therefore, the bank receipt window becomes crowded with the paying people at a specific date and time, and it takes a lot of time for the payer to wait for the payee, and the bank employee has a problem that the worker is overloaded so that the other work can not be performed properly .

최근 인터넷 뱅킹을 이용한 생활요금, 공과금 등의 납부가 많이 일어나고 있지만, 인터넷 뱅킹을 이용하여 지로 납부를 하기 위해서는 인터넷 뱅킹 어플리케이션을 구동하고, 지로, 생활요금 국세, 지방세 등 납부종류를 선택하고, 지로번호, 전자납부번호 등 정보를 입력한 후에야 납부완료할 수 있으며, 공인인증서나 OTP 또는 보안카드가 필요하여 많은 사람들이 여전히 창구를 이용하고 있다.Recently, a lot of payment such as living expenses and utility bills using internet banking has been taking place. However, in order to use the Internet banking, the Internet banking application is run, and the payment type such as the giro, , Electronic payment number, and so on. Also, many people still use the window because they need an official certificate or OTP or a security card.

이러한 문제점을 해결하기 위하여 지로장표를 자동으로 처리하는 무인수납기가 제안되었지만, 지로장표가 금융결제원이 정한 장표구비요건에 따라 규격화되어 있지 않아서 서로 상이하거나 훼손, 납부자 내역이 수기로 작성될 수 있는 정액 OCR, MICR 장표 등 수기작성 과정의 문제로 인해 판독이 불가능한 경우도 있다.In order to solve these problems, unmanned storage devices that automatically process the Giro system have been proposed. However, since the Giro system is not standardized according to the requirements of the system set by the KFTC, it may be different or damaged, OCR, MICR, and other documents.

특히, 부가가치세의 경우에는 대부분 팩스 등으로 전달받기 때문에 문자 인식율이 떨어져 100% 영업 창구에서 처리되고 있다.Especially, in the case of VAT, most of them are delivered by fax.

본 발명은 이러한 문제점을 해결하기 위하여 안출된 것으로, 본 발명의 목적은 이동통신단말기의 카메라부를 이용하여, 수기로 작성되거나 비규격화된 부가가치세 납부양식에도 불구하고 부가가치세를 자동으로 납부할 수 있는 이동통신단말기을 이용한 문자인식기반 부가가치세 납부 시스템을 제공하는 것이다. It is an object of the present invention to provide a mobile communication terminal capable of automatically paying a VAT without paying VAT by using a camera unit of a mobile communication terminal, And to provide a character recognition based value-added tax payment system using a terminal.

본 발명의 일 실시예에 따른, 카메라부가 설치된 이동통신단말기와, 상기 이동통신단말기에 소프트웨어 또는 인터넷을 통하여 다운로드된 문자인식기반 금융서비스 어플리케이션을 제공하는 금융기관시스템을 포함하는 이동통신단말기을 이용한 문자인식기반 부가가치세 납부시스템에 있어서,
상기 금융기관시스템은 금융기관 고유모듈과, 상기 이동통신단말기의 카메라부를 이용하여 촬영한 수기로 작성되거나 비규격화된 요금/세금 납부장표 또는 거래정보 인쇄물의 이미지로부터 수기로 작성되거나 비규격화된 요금/세금 납부정보 또는 거래정보를 추출하여 금융거래를 단축하여 진행하는 문자인식기반 거래모듈과, 상기 문자인식기반 거래모듈로부터 수신한 수기로 작성되거나 비규격화된 요금/세금 납부 장표 이미지, 및 인공지능기반 정보추출정보를 저장하는 문자인식기반 금융거래 DB를 포함하며,
상기 문자인식기반 거래모듈은 상기 이동통신단말기로부터 사용자가 촬영한 수기로 작성되거나 비규격화된 요금/세금 납부장표 또는 인쇄물 등 거래정보 이미지를 수신하기 위한 거래정보 이미지수신부와, 상기 이미지수신부로부터 수신된 거래정보 이미지로부터 1차적인 딥러닝 기계학습과 2차적인 분류학습을 진행하여 요금/세금 납부 정보 등 거래정보를 추출하기 위한 인공지능기반 정보추출부와, 상기 인공지능기반 정보추출부에서 추출한 거래정보에 따라 상기 금융기관 고유모듈과 연동하여 금융거래를 수행하기 위하여 상기 이동통신단말기가 금융서비스 어플리케이션에 대해 기기등록 및 카드 인증이 이루어졌는 지 확인하기 위한 로그인확인부와, 상기 인공지능기반 정보추출부에서 추출된 거래정보에 따라 요금/세금 납부 또는 거래이체를 자동으로 수행하는 자동거래부와, 상기 자동거래부의 거래정보를 상기 문자인식기반 거래 DB에 저장하는 정보저장부를 포함하는 것을 특징으로 한다.A mobile communication terminal equipped with a camera unit and a financial institution system for providing a character recognition based financial service application downloaded via software or the Internet to the mobile communication terminal according to an embodiment of the present invention; In an infrastructure-based VAT payment system,
The financial institution system comprises a financial institution specific module and a fee / tax payment slip or non-standardized fee / non-standardized fee or non-standardized fee / fee form from the image of the transaction information print, photographed using the camera unit of the mobile communication terminal, Based transaction module that extracts tax payment information or transaction information and shortens the financial transaction, and a handwritten or non-standardized fee / tax payment form image received from the character recognition based transaction module, and an artificial intelligence And a character recognition-based financial transaction DB for storing information extraction information,
Wherein the character recognition based transaction module includes a transaction information image receiving unit for receiving a transaction information image such as a bill or a non-standardized fee / tax payment slip or printed matter taken by a user from the mobile communication terminal, An artificial intelligence based information extracting unit for performing primary deep learning machine learning and secondary classification learning from the transaction information image to extract transaction information such as rate / tax payment information, A login confirmation unit for confirming that the mobile communication terminal has performed device registration and card authentication for the financial service application in order to perform financial transactions in cooperation with the financial institution specific module according to the information, Payment of the fee / tax or transaction according to the transaction information extracted from the department And an information storage unit for storing the transaction information of the automatic transaction unit in the character recognition based transaction DB.

상기 문자인식기반 거래모듈은 상기 문자인식기반 거래 DB에 저장된 요금/세금 납부 정보 또는 거래정보를 이용하여 자동이체 또는 자동납부할 수 있도록 처리하기 위한 자동납부신청부를 포함할 수 있다.The character recognition based transaction module may include an automatic payment application unit for processing automatic payment or automatic payment using the fee / tax payment information or transaction information stored in the character recognition based transaction DB.

본 발명의 다른 측면에 따른 이동통신단말기을 이용한 문자인식기반 금융서비스 제공시스템의 문자인식률 개선방법은, 촬영된 요금/세금 납부 정보 또는 거래정보 이미지의 뒤틀림을 보정하는 단계와, 상기 촬영된 요금/세금 납부 정보 또는 거래정보 이미지의 밝기를 일정하게 조정하는 단계와, 상기 촬영된 요금/세금 납부 정보 또는 거래정보 이미지, 각각의 문자 또는 숫자을 자르는 단계와, 필없없는 이미지 제거 및 흑백처리하는 단계와, 상기 각각의 숫자, 문자 이미지에 대하여 1차적으로 딥러닝 을 이용하여 기계학습을 실행하고, 2차적으로 분류 기계학습을 수행하는 단계를 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided a method for improving the character recognition rate of a system for providing a character recognition-based financial service using a mobile communication terminal, the method comprising the steps of: correcting distortion of a captured fee / tax payment information or a transaction information image; A step of adjusting the brightness of the payment information or the transaction information image to a constant level; cutting the photographed fee / tax payment information or the transaction information image, each letter or number; Performing machine learning using deep learning for each number and character image, and performing classification machine learning secondarily.

본 발명의 다른 측면에 따른 이동통신단말기을 이용한 문자인식기반 금융서비스 제공시스템의 요금/세금 납부방법은, 카메라부를 활성하여 요금/세금 납부양식 또는 거래정보가 기재된 인쇄물을 촬영하는 단계와, 화면출력부를 통해 세금/요금정보 또는 거래정보가 표시되는 단계와, 상기 화면출력부상에 표시된 세금/요금정보 또는 거래정보를 확인하고 비밀번호를 입력하는 단계를 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided a fee / tax payment method of a system for providing a character recognition-based financial service using a mobile communication terminal, comprising the steps of: photographing a printed matter on which a fee / tax payment form or transaction information is recorded by activating a camera section; Displaying the tax / charge information or the transaction information through the screen output unit; and checking the tax / charge information or transaction information displayed on the screen output unit and inputting the password.

본 발명의 다른 측면에 따른 이동통신단말기을 이용한 문자인식기반 금융서비스 제공시스템의 개인간 거래이체 방법은 카메라부를 활성시켜 수취인의 이름 , 은행로고 또는 은행명, 계좌번호가 기재된 인쇄물 또는 수기로 작성한 정보를 촬영하는 단계와, 화면출력부상의 송금버튼을 선택하는 단계와, 상기 수취인의 이름 및 계좌번호를 나타내는 거래이체화면이 화면출력부에 제공되는 단계와, 상기 거래이체화면상에 수정사항 유무를 확안하고 비밀번호를 입력하여 송금을 완료하는 단계를 포함할 수 있다.According to another aspect of the present invention, there is provided an inter-personal transaction transfer method of a text-based financial service providing system using a mobile communication terminal, the method comprising: activating a camera unit to capture a payee's name, a bank logo or bank name, A step of selecting a remittance button on the screen output unit, a step of providing a transaction transfer screen showing the name and the account number of the remittee on the screen output unit, confirming whether or not a correction is made on the transaction transfer screen And inputting a password to complete the remittance.

본 발명의 다른 측면에 따른 이동통신단말기을 이용한 문자인식기반 금융서비스 제공시스템의 개인간 거래이체 방법은, 카메라부를 활성시켜 수취인의 이름 , 은행로고 또는 은행명, 계좌번호가 기재된 인쇄물 또는 수기로 작성한 정보를 촬영하는 단계와, 화면출력부상의 송금/수취 버튼중 수취버튼을 선택하는 단계와, 상기 수취인의 이름 및 계좌보호를 나타내는 거래이체화면을 제공하는 단계와, 상기 거래이체화면상에 수정사항 유무를 확인하여 금액을 입력하면, 송금인의 이동통신단말기로 메시지 알림이 전달되는 단계와, 상기 송금인의 이동통신단말기에서 상기 메시지 알림을 수신하고, 상기 거래이체화면의 정보를 확인하고 송금의사를 표시하여 송금하는 단계를 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided an inter-personal transaction transfer method of a system for providing a text-based financial service using a mobile communication terminal, the method comprising the steps of: activating a camera unit to transmit information including a recipient's name, a bank logo or bank name, Selecting a receiving button among transfer / receiving buttons on a screen output part, providing a transaction transfer screen indicating the name and account protection of the recipient, and checking whether there is a correction on the transaction transfer screen Receiving a message notification from the mobile communication terminal of the remitter, confirming information on the transaction transfer screen, displaying a remittance intention and transmitting remittance information to the remitter's mobile communication terminal, The method comprising the steps of:

본 발명의 일 실시예에 따른 이동통신단말기을 이용한 문자인식기반 부가가치세 납부시스템은 이동통신단말기의 카메라부를 이용하여, 수기로 작성되거나 비규격화된 부가가치세 납부양식에도 불구하고 부가가치세를 자동으로 납부할 수 있다.The character recognition based value-added tax payment system using the mobile communication terminal according to an embodiment of the present invention can automatically pay the VAT regardless of the form of payment made by hand or the non-standardized value-added tax using the camera unit of the mobile communication terminal.

또한, 본 발명의 일 실시예에 따른 이동통신단말기을 이용한 문자인식기반 금융서비스 제공시스템 및 이를 이용한 요금/세금/부가가치세 납부 방법 및 거래이체 방법에 의하면, 이동통신단말기를 통한 인터넷 뱅킹 사용방법을 숙지하지 않아도 사진을 찍는 행위만으로 금융거래가 가능하며, 이동통신단말기에 키패드 입력방식 대비 카메라 촬영만으로 스마트 뱅킹을 사용할 수 있어서 매우 편리하며 오류입력 가능성을 감소시킬 수 있고, 키패드 터치(입력) 횟수를 감소시킬 수 있으며, 데이터가 축적됨에 따라서 타업무 예컨대 현재로서는 거의 창구에서 수행하는 부가가치세 납부에 대해서도 안심하고 적용할 수 있다.Further, according to the present invention, there is provided a text-based financial service providing system using a mobile communication terminal, a fee / tax / value-added tax payment method and a transaction transfer method using the system, and a method of using Internet banking through a mobile communication terminal It is very convenient to use smart banking only by photographing the camera compared to the keypad input method in the mobile communication terminal, and it is possible to reduce the possibility of error input and reduce the number of keypad touch (input) As the data is accumulated, it can be applied safely to the other service, for example, the VAT payment which is carried out at almost the counter at present.

또한, 본 발명의 일 실시예에 따른 이동통신단말기을 이용한 문자인식기반 금융서비스 제공시스템 및 이를 이용한 요금/세금/부가가치세 납부 방법 및 거래이체 방법에 의하면, 텍스트에서 이미지(영상) 중심으로 전환되는 모바일 환경에 맞는 새로운 입력수단 적용될 수 있으며, 기계학습을 활용하여 문자인식기술을 제공, 이를 이용한 금융 서비스 편의성 제고할 수 있다,According to an embodiment of the present invention, there is provided a text-based financial service providing system using a mobile communication terminal, a fee / tax / value added tax payment method and a transaction transfer method using the same, , It is possible to apply the new input means corresponding to the character recognition technique, and to utilize the machine learning to provide the character recognition technology,

본 발명의 일 실시예에 따른 이동통신단말기을 이용한 문자인식기반 금융서비스 제공시스템 및 이를 이용한 요금/세금/부가가치세 납부 방법 및 거래이체 방법에 의하면, 이미 널리 사용되고 있는 스마트기기의 카메라 및 문자인식기술(OCR) 등을 활용하는 서비스로 기존에 사용하고 있던 앱에 업그레이드등을 통해 추가하여 구현이 가능하며 고객의 별도 제세공과금 기존 납부를 위한 앱/장비 설치 없이 구현이 가능하여 즉시 서비스 제공가능하며, 현재 영업점 창구에서 전체 수납 중인 부가세를 비대면 채널로 전환이 가능하여 영업점의 업무처리 비용을 절감할 수 있다. According to an embodiment of the present invention, there is provided a text-based financial service providing system using a mobile communication terminal, a fee / tax / VAT payment method and a transaction transfer method using the same, ). It can be implemented by upgrading to existing apps, and it can be implemented without app / equipment installation for customer's separate tax bills. It is possible to provide instant service, If the total sales tax is excluded from the counter at the counter, it is possible to switch to the channel, thereby reducing the processing cost of the branch.

본 발명의 일 실시예에 따른 이동통신단말기을 이용한 문자인식기반 금융서비스 제공시스템 및 이를 이용한 요금/세금/부가가치세 납부 방법 및 거래이체 방법에 의하면, 개인 대 개인간 단발성 이체에 편리한 입력방식 제공할 수 있다.     According to an embodiment of the present invention, a system for providing a character recognition-based financial service using a mobile communication terminal and a method for paying a fee / tax / value-added tax and a transaction transfer method using the mobile communication terminal can provide a convenient input method for single-

도 1은 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템의 개략적인 구성도이다.
도 2는 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템의 이동통신단말기의 개략적인 구성도이다.
도 3은 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템의 문자 이미지 인식률 개선방법을 설명하는 플로우챠트이다.
도 4a 내지 도 4c는 각각 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템의 문자 이미지 인식률 개선방법을 설명하기 위한 개념도이다.
도 5는 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템의 카드인증 방법을 설명하는 플로우차트이다.
도 6a 내지 도 6c는 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템을 이용한 요금/세금 납부방법, 이를 이용한 자동 이체 등록 방법 및 이동통신단말기 화면 예시도이다.
도 7a 및 도 7b는 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템을 이용한 개인의 송금방법을 설명하는 플로우챠트 및 그 화면예시도이다.
도 8a 및 도 8b는 본 발명의 변형 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템을 이용하여 수취인 정보를 받는 개인의 송금방법을 설명하는 플로우챠트 및 그 화면예시도이다.1 is a schematic block diagram of a character recognition-based financial transaction system using a camera unit of a mobile communication terminal according to an embodiment of the present invention.
2 is a schematic block diagram of a mobile communication terminal of a text recognition-based financial transaction system using a camera unit of a mobile communication terminal according to an embodiment of the present invention.
3 is a flowchart illustrating a method for improving a character image recognition rate in a text recognition-based financial transaction system using a camera unit of a mobile communication terminal according to an exemplary embodiment of the present invention.
4A to 4C are conceptual diagrams for explaining a method of improving a character image recognition rate in a character recognition-based financial transaction system using a camera unit of a mobile communication terminal according to an embodiment of the present invention.
5 is a flowchart illustrating a card authentication method in a text recognition-based financial transaction system using a camera unit of a mobile communication terminal according to an exemplary embodiment of the present invention.
6A to 6C are diagrams illustrating a method of paying a fee / tax using a text recognition-based financial transaction system using a camera unit of a mobile communication terminal, a method of registering a direct debit transfer using the method, and a screen of a mobile communication terminal according to an embodiment of the present invention.
7A and 7B are flowcharts illustrating a method of remitting an individual using a text recognition-based financial transaction system using a camera unit of a mobile communication terminal according to an exemplary embodiment of the present invention, and a screen thereof.
8A and 8B are flowcharts illustrating a remittance method of an individual receiving remittee information using a character recognition based financial transaction system using a camera unit of a mobile communication terminal according to a modified embodiment of the present invention, and a screen thereof.

이하 첨부된 도면과 설명을 참조하여 본 발명의 바람직한 실시예에 대한 동작 원리를 상세히 설명한다. 다만, 하기에 도시되는 도면과 후술되는 설명은 본 발명의 특징을 효과적으로 설명하기 위한 여러 가지 방법 중에서 바람직한 실시 방법에 대한 것이며, 본 발명이 하기의 도면과 설명만으로 한정되는 것은 아니다. The operation principle of the preferred embodiment of the present invention will be described in detail with reference to the accompanying drawings and description. It should be understood, however, that the drawings and the following detailed description are exemplary and explanatory and are intended to provide further explanation of the invention, and are not to be construed as limiting the present invention.

도 1은 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융서비스 시스템의 개략적인 구성도이다.1 is a schematic block diagram of a character recognition based financial service system using a camera unit of a mobile communication terminal according to an embodiment of the present invention.

도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융서비스 시스템(1)은 이미지 촬영을 위하여 카메라부가 설치된 이동통신단말기(100)와, 상기 이동통신단말기(100)에 소프트웨어 또는 인터넷(200)을 통하여 다운로드된 문자인식기반 금융서비스 어플리케이션을 제공하여 상기 이동통신단말기(100)의 카메라부를 이용하여 문자인식기반 금융서비스를 제공받도록 하기 위한 금융기관시스템(300)를 포함할 수 있다.1, a text-based financial service system 1 using a camera unit of a mobile communication terminal according to an exemplary embodiment of the present invention includes a mobile communication terminal 100 having a camera unit for photographing an image, A financial institution system for providing a character recognition based financial service application downloaded through software or the Internet 200 to the communication terminal 100 to receive a character recognition based financial service using the camera unit of the mobile communication terminal 100 (300).

본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템(1)은 사용자에게 정기적인 생활요금이나, 부가가치세, 재산세, 자동차세 등의 세금을 청구하는 요금/세금 청구서버(400)를 더 구비하여, 상기 금융기관시스템(300)와 연동하여 상기 사용자의 요금/세금 납부 서비스를 보다 효율적으로 진행할 수 있다.The text recognition-based financial transaction system 1 using the camera unit of the mobile communication terminal according to an embodiment of the present invention includes a fee / tax billing server for charging a user a tax such as a regular living fee, a value added tax, a property tax, (400), so that the fee / tax payment service of the user can be more efficiently performed in cooperation with the financial institution system (300).

상기 금융기관시스템(300)는 금융기관 고유모듈(310)과, 상기 이동통신단말기(100)의 카메라부를 이용하여 촬영한 요금/세금 납부 장표 이미지로부터 요금/세금 납부 정보를 추출하여 금융거래를 단축 효율적으로 관리하기 위한 문자인식기반 거래모듈(330)과, 상기 문자인식기반 거래모듈(330)로부터 수신한 요금/세금 납부 장표 이미지(350a), 요금/세금 납부 정보(350b), 상기 금융기관 고유모듈(310)을 이용하여 요금/세금을 납부한 정보(350c), 및 텍스트에서 이미지(영상) 중심으로 전환되는 모바일 환경에 맞는 새로운 입력수단 적용될 수 있으며, 기계학습을 활용하여 문자인식기술을 제공하기 위한 인공지능기반 정보추출정보(350d)를 저장하는 문자인식기반 금융거래 DB(350)를 포함한다.The financial institution system 300 extracts the fee / tax payment information from the image of the fee / tax payment slip taken by using the financial institution specific module 310 and the camera unit of the mobile communication terminal 100 to shorten the financial transaction A fee / tax payment form image 350a, a fee / tax payment information 350b received from the character recognition based transaction module 330, and a charge / Information 350c for paying a fee / tax using the module 310, and new input means suitable for a mobile environment that is switched from text to image (image), and provides character recognition technology using machine learning Based financial transaction DB 350 for storing the artificial-intelligence-based information extraction information 350d for storing the artificial intelligence-based information.

상기 금융기관 고유모듈(310)은 적어도 하나 이상의 영업점에서 발생하는 여신, 수신, 신탁 또는 외국환과 같은 창구업무를 처리하는 계정계(301)와, 본부업무의 처리와 영업점 정보지원 및 고객정보 관리를 처리하는 정보계(303)와, 상기 금융기관시스템(300)와 가정, 기업, 판매점 및 기타 외부전산망을 접속하여 다양한 전자 금융서비스(예컨대, 인터넷 뱅킹, 폰 뱅킹, CD(Cash Dispenser)/ATM(Automatic Teller Machine), 타행환, 콜센터, 금융결제 등)를 제공하는 대외계(305), 및 상기 금융기관시스템(300) 내 구성 요소간 인터페이싱을 제공하는 미들웨어(Middleware) 플랫폼에 해당하는 인터페이스 모듈(309)과, 상기 금융 기관서버(300) 내 구성요소에서 각각의 기능수행을 위해 요구되는 소정의 정보(예컨대, 금융계정(또는 금융상품), 또는 고객 원장 정보, 또는 경영 정보 등)를 저장 및 관리하는 DBMS(DataBase Management System)(307)를 포함하여 이루어지며, 당업자의 의도 및/또는 각 금융기관의 종류(예컨대, 시중은행, 저축은행, 신탁은행, 신용카드사)와 목적 및 특징에 따라, 외국환계 모듈(도시생략), 투자금융계 모듈(도시생략), 국제계 모듈(도시생략)과 같은 적어도 하나 이상의 구성요소가 더 포함되는 것이 가능하며, 이에 의해 본 발명이 한정되지 아니한다. The financial institution specific module 310 includes an account system 301 for processing a window service such as a credit, receipt, trust, or foreign exchange occurring in at least one branch office, processing of the service of the head office, An electronic financial service (for example, Internet banking, phone banking, CD (cash dispenser) / automatic teller machine (ATM), and the like) connected to the financial institution system 300 and home, business, And an interface module 309 corresponding to a middleware platform for providing interfacing between components in the financial institution system 300. The interface module 309 corresponds to a middleware platform providing interfacing between components in the financial institution system 300 (For example, a financial account (or a financial product), a customer ledger information, or management information) required for each function in the financial institution server 300 (DBMS) 307, which stores and manages the data stored in the DBMS 307, and stores the data DBMS (Data Base Management System) Accordingly, it is possible to further include at least one component such as a foreign exchange module (not shown), an investment banking module (not shown), and an international system module (not shown), and thus the present invention is not limited thereto.

본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융서비스 제공시스템(1)에 있어서, 사용자가 이동통신단말기(100)의 카메라부(110)로 요금/세금 납부를 위한 지로 또는 인쇄물을 촬영하여 소정의 인터넷 뱅킹 및/또는 무선 뱅킹을 통해 CMS 입금을 수행하는 경우, 상기 CMS 입금이 수행되는 과정에서 상기 이동통신단말기(100)로부터 상기 요금/세금 청구서버(400)에 대응하는 CMS계좌번호와, 상기 사용자에 대응하는 CMS번호와, CMS 입금금액 및 상기 CMS 입금금액이 출금되는 상기 사용자의 금융계좌 정보가 상기 대외계(305)로 유입된다. In a system 1 for providing financial services based on a character recognition using a camera unit of a mobile communication terminal according to an exemplary embodiment of the present invention, a user inputs a fee / tax payment to the camera unit 110 of the mobile communication terminal 100, Or the printed matter is photographed and the CMS deposit is performed through the predetermined Internet banking and / or wireless banking, the CMS deposit is corresponded to the charge / tax charge server 400 from the mobile communication terminal 100 in the course of performing the CMS deposit The CMS account number corresponding to the user, the CMS deposit amount, and the financial account information of the user to which the CMS deposit amount is to be withdrawn are inputted to the large-scale system 305.

상기 정보계(303)와 DBMS(307)는 상호 연동하여 상기 금융기관시스템(300)에 소정의 금융계정이 개설된 고객에 대한 금융수단(예컨대, 금융계좌, 또는 금융계좌와 연계된 현금카드/직불카드, 신용카드 등) 정보와 상기 고객 정보를 연계하여 관리하는 것이 바람직하다. The information system 303 and the DBMS 307 interrelate with each other and provide financial means (for example, a financial account or a cash card / financial account linked to a financial account) for a customer in which a predetermined financial account is established in the financial institution system 300, Debit card, credit card, etc.) and the customer information.

도 1을 참조하면, 상기 문자인식기반 거래모듈(330)는 상기 이동통신단말기(100)로부터 사용자가 촬영한 지로장표 또는 인쇄물 등 거래정보 이미지를 수신하기 위한 거래정보 이미지수신부(331)와, 상기 이미지수신부(331)로부터 수신된 거래정보 이미지로부터 인공지능기반으로 요금/세금 납부 정보 등 거래정보를 추출하기 위한 인공지능기반 정보추출부(333)와, 상기 인공지능기반 정보추출부(333)에서 기계학습을 통하여 추출한 거래정보에 따라 상기 금융기관 고유모듈(310))과 연동하여 금융거래를 공인인증서, OTP 등의 사용없이 자동으로 수행하기 위하여 상기 이동통신단말기(100)가 금융서비스 어플리케이션에 대해 기기등록 및 카드 인증이 이루어졌는 지 확인하기 위한 로그인 확인부(335)와, 상기 인공지능기반 정보추출부(333)에서 추출된 거래정보에 따라 요금/세금 납부 등, 거래를 자동으로 수행하는 자동거래부(338)와, 상기 자동거래부(338)의 거래정보를 상기 문자인식기반 거래 DB(350)에 저장하는 정보저장부(337)와, 상기 문자인식기반 거래 DB(350)에 저장된 요금/세금 납부 정보 또는 거래정보를 이용하여 자동이체 또는 자동납부할 수 있도록 처리하기 위한 자동납부신청부(339)를 포함한다.1, the character recognition-based transaction module 330 includes a transaction information image receiving unit 331 for receiving a transaction information image such as a blanket or a printed matter taken by a user from the mobile communication terminal 100, An artificial intelligence-based information extracting unit 333 for extracting transaction information such as fee / tax payment information based on artificial intelligence from the transaction information image received from the image receiving unit 331, and an artificial intelligence- In order to automatically perform a financial transaction without using an official certificate, OTP, or the like, in cooperation with the financial institution specific module 310 in accordance with transaction information extracted through machine learning, the mobile communication terminal 100 transmits the financial service application A login confirmation unit 335 for confirming whether device registration and card authentication have been performed; An information storing unit 337 for storing the transaction information of the automatic transaction unit 338 in the character recognition based transaction DB 350, an automatic transaction unit 338 for automatically performing a transaction such as a fee / And an automatic payment application unit 339 for processing automatic payment or automatic payment using the fee / tax payment information or transaction information stored in the character recognition based transaction DB 350. [

도 2에 도시된 바와 같이, 상기 사용자의 이동통신단말기(100)는 상기 금융기관시스템(300)가 소프트웨어 또는 인터넷상에서 제공하는 문자인식기반 금융서비스 어플리케이션을 다운로드하여 실행하고 있는 제어부(110)와, 상기 제어부(110)의 지시에 따라 상기 이동통신단말기(100)의 화면상에 문자인식기반 금융서비스 어플리케이션을 활성화하는 화면출력부(120)와, 상기 화면출력부(120)상에 배치된 카메라 아이콘을 누르면 활성화되어 지로영수증과 같은 세금/요금 납부 영수증 또는 수취인의 계좌번호 등이 인쇄된 거래정보 인쇄물 등을 촬영하는 카메라부(130)와, 상기 카메라부(130)에서 촬영된 요금/세금 납부 정보 또는 거래정보 이미지를 상기 금융기관시스템(300)로 전송하고 상기 금융기관시스템(300)와 통신하는 통신부(140) 및 상기 금융기관시스템(300)의 요청에 따라 상기 화면출력부(120)상에 출력된 표시화면에 금액, 비밀번호 등을 입력하는 키입력부(150)를 포함한다.2, the user's mobile communication terminal 100 includes a controller 110 that downloads and executes a character recognition-based financial service application provided by the financial institution system 300 through software or the Internet, A screen output unit 120 for activating a text recognition-based financial service application on the screen of the mobile communication terminal 100 according to an instruction from the control unit 110, A camera unit 130 for photographing a transaction information printed on a receipt such as a receipt for paying a tax / charge or an account number of a recipient, etc., activated when the user presses the charge / tax payment information photographed by the camera unit 130, Or a transaction information image to the financial institution system 300 and communicates with the financial institution system 300 and a financial institution system 300, And a key input unit 150 for inputting an amount, a password, and the like on the display screen output on the screen output unit 120 in response to a request from the user.

상기 이동통신단말기(100)는 상기 문자인식기반 금융서비스 어플리케이션이 제공하는 금융거래가 사용자 본인에 의하여 정당하게 이루어졌는지 확인하기 위한 카드인증서(161)와 상기 카메라부(130)에서 촬영된 세금/요금 납부 정보 또는 거래정보 이미지에 대한 부인을 방지하기 위하여 촬영된 세금/요금 납부 정보 이미지(163)를 저장하는 메모리부(160)를 더 포함한다.  The mobile communication terminal 100 is provided with a card certificate 161 for confirming whether a financial transaction provided by the character recognition based financial service application is legitimately performed by the user himself / herself, and a tax / And a memory unit 160 for storing the photographed tax / charge payment information image 163 in order to prevent denial of the information or the transaction information image.

이제 도 3 내지 도 4c를 참조하여 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래 시스템의 문자 이미지 인식률 개선방법을 자세히 설명한다.3 to 4C, a method for improving a character image recognition rate in a text recognition-based financial transaction system using a camera unit of a mobile communication terminal according to an embodiment of the present invention will be described in detail.

도 3은 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템의 문자 이미지 인식률 개선방법을 설명하는 플로우챠트이고, 도 4a 내도 도 4c는 각각 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템의 문자 이미지 인식률 개선방법을 설명하기 위한 개념도이다.FIG. 3 is a flowchart illustrating a method for improving a character image recognition rate in a character recognition-based financial transaction system using a camera unit of a mobile communication terminal according to an exemplary embodiment of the present invention. FIG. FIG. 2 is a conceptual diagram for explaining a method of improving a character image recognition rate in a text recognition-based financial transaction system using a camera unit of a mobile communication terminal according to an example.

본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템의 문자 이미지 인식률 개선방법은 인공지능기반 정보추출부(333)가 문자인식기반 금융거래 DB(350)에 저장된 정보를 이용한 지속적인 기계학습에 의하여 그 인식률이 개선된 것을 특징으로 한다.The method for improving the character image recognition rate of the character recognition-based financial transaction system using the camera unit of the mobile communication terminal according to an embodiment of the present invention is characterized in that the artificial intelligence-based information extraction unit 333 extracts information And the recognition rate is improved by continuous machine learning using the same.

이를 위하여 도 3에 도시된 바와 같이, 본 발명의 일 실시예에 따른 문자 이미지 인식률 개선방법은 상기 촬영된 요금/세금 납부 정보 또는 거래정보 이미지의 뒤틀림을 보정하고(S101), 상기 촬영된 요금/세금 납부 정보 또는 거래정보 이미지의 빛반사를 제거하고(S102), 상기 촬영된 요금/세금 납부 정보 또는 거래정보 이미지의 밝기를 일정하게 조정하여(S104), 도 4a에 도시된 바와 같이, 요금/세금 납부 정보 또는 거래정보 이미지만을 자르기 한다(S104).For this, as shown in FIG. 3, the method for improving the character image recognition rate according to an embodiment of the present invention corrects distortion of the photographed fee / tax payment information or the transaction information image (S101) Tax receipt information or transaction information image (S102), and adjusts the brightness of the photographed fee / tax payment information or the transaction information image to be constant (S104). As shown in FIG. 4A, Only the tax payment information or the transaction information image is cut (S104).

상기 이미지 자르기 단계(S104)에서 첫번째 숫자 5, 두번째 숫자 4, 세번째 숫자 5, 네번째 숫자 4, 다섯번째 숫자 5, 마지막 숫자 0의 이미지를 각기 자른다.In the image trimming step S104, the images of the first number 5, the second number 4, the third number 5, the fourth number 4, the fifth number 5, and the last number 0 are cut.

이 때, 가령 출력단계에서 부가세양식의 경우 일반 프린트이기에 회사 워터마크되어 나오는 경우도 있고, 오염 등으로 주변 배경이 흐릿하게 나오는 경우도 있으므로, 이러한 불필요한 이미지를 제거하고, RGB 값으로 변경하여 문자인식을 하기에 상대적 수치가 가장 큰 흑백으로 색을 변경한다(S105)In this case, for example, in the case of the taxation form in the outputting step, since the print is a general print, a company watermark may be displayed. In some cases, the surrounding background may appear blurred due to contamination. The color is changed to black and white having the largest relative value (S105)

이와 같이 자르기된 각각의 숫자, 문자 이미지에 대하여 1차적으로 딥러닝 을 이용하여 기계학습을 실행하며(S106), 2차적으로 분류 기계학습을 수행한다(S107).The machine learning is first performed using the deep learning for each of the numbers and character images thus cut (S106), and the classification machine learning is performed secondarily (S107).

1차적으로 수행되는 딥러닝 학습은 합성곱 신경망(convolutional neural network)을 이용하는데, 예를들어, 첫번째 숫자의 이미지(*)를 2차원 벡터로 표현한다.Deep learning learning, which is performed primarily, uses a convolutional neural network. For example, the image of the first number (*) is represented by a two-dimensional vector.

딥러닝 입력값 1: 첫번째 숫자의 이미지의 가로, 세로 픽셀의 depth의 수치값Deep run input value 1: numerical value of depth of horizontal and vertical pixels of image of first digit

(4, 5): 0 (4, 6): 0.0001 (4, 7): 0.0001 (4, 8): 0.0001 (4, 9): 0.0001 ..........(18, 6): 0.0001 (18, 9): 0.4 (18, 10): 1 (18, 11): 0 (18, 12): 0...........(4, 6): 0.0001 (4, 7): 0.0001 (4, 8): 0.0001 (4, 9): 0.0001 (18, 6) : 0.0001 (18, 9): 0.4 (18,10): 1 (18,11): 0 (18,12): 0

딥러닝 입력값 2: 실제 고객이 선택한 값: 5Deep run input value 2: Actual customer selected value: 5

위의 2가지 입력값을 이용하여 합성곱 신경망의 각 결과치에 대한 최적의 파라미터 값을 찾는다(도 4c 에서 레이어수, 가로가 레이어의 가중치값)Using the above two input values, the optimal parameter value for each result of the composite neural network is found (the number of layers and the weight value of the horizontal layer in FIG. 4C)

한편, 2차적으로 수행되는 분류 기계학습방법은 고객에게 제시된 수들 중 선택이 안된 수를 이용하여 인식률 개선에 추가한다.On the other hand, the secondary classifying machine learning method adds to the recognition rate improvement by using unselected numbers among the presented numbers to the customer.

위 이미지에서 5와 8이 제시되었다면, 분류기계학습 2차에서는 If 5 and 8 are presented in the above image,

X1: 제시된 수중 선택이 안된 8X1: No proposed underwater selection 8

X2:제시된 수중 선택이 안된 8의 추정률X2: Estimated rate of 8 unselected underwater

X3:제시된 수중 선택이 된 5의 추정률X3: Estimation rate of the five selected underwater choices

X4:딥러닝 1차에서 나온 해당 이미지의 소수결과값X4: Fractional result of corresponding image from deep running primary

X5: 분류코드(제시된 이미지가 카드, 계좌번호, 부가세양식 등 각기 분류에 따라 다른 결과를 제공함)X5: Classification code (the image presented gives different results depending on the classification, such as card, account number,

Y : 제시된 수중 선택된 5Y: 5 selected underwater presented

이와 같이 1차적인 딥러닝 기계학습 이외에도 2차적인 분류 기계학습을 촬영된 카드나 세금 또는 요금 납부 지로 영수증, 일정한 형식없이 팩스로 받은 부가가치세 영수증의 이미지에 대하여 적용하여, 수기 또는 팩스로 전송되는 부가가치세 장표에 대해서 문자 인식이 가능해질 수 있다. In addition to the primary dip learning machine learning, the secondary classification machine learning can be applied to images of VAT receipts received by photographed cards, tax or payment receipts, faxes without a certain format, and VAT Character recognition can be made on the form.

문자인식율 개선과 함께 공인인증서 사용 또는 OTP 사용없이 금융거래 서비스를 처리할 수 있는 로그인 방법을 설명한다.Describes how to improve the character recognition rate and log in method that can handle financial transaction service without using authorized certificate or using OTP.

도 5는 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템의 카드인증 방법을 설명하는 플로우차트이다.5 is a flowchart illustrating a card authentication method in a text recognition-based financial transaction system using a camera unit of a mobile communication terminal according to an exemplary embodiment of the present invention.

도 5에 도시된 바와 같이, 상기 카드인증부(161)에 카드인증서가 존재하는 경우(S10), 상기 이동통신단말기(100)는 상기 키입력부(150)를 통해 로그인을 선택하며(11), 상기 통신부(140)는 상기 카드인증서를 상기 금융기관시스템(300)로 전송하고 상기 금융기관시스템(300)의 로그인확인부(335)는 상기 정보계(303)를 통해서 상기 카드인증서가 일치하면 로그인을 완료한다(S12).5, when a card certificate exists in the card authentication unit 161 (S10), the mobile communication terminal 100 selects login through the key input unit 150 (11) The communication unit 140 transmits the card certificate to the financial institution system 300 and the login confirmation unit 335 of the financial institution system 300 receives the card certificate through the information system 303 (S12).

다만, 상기 카드인증부(161)에 카드인증서가 존재하지 않으면, 상기 이동통신단말기(100)가 상기 금융기관시스템(300)이 제공하는 금융서비스어플리케이션에 등록되어 있는지 확인하고, 상기 이동통신단말기(100)가 금융서비스어플리케이션에 등록되어 있으면(S20), 상기 이동통신단말기(100) 사용자 소유의 현금, 신용, 직불카드를 상기 카메라부(130)를 통해 촬영한다(S21). If the card certificate does not exist in the card authentication unit 161, it is checked whether the mobile communication terminal 100 is registered in the financial service application provided by the financial institution system 300, 100, is registered in the financial service application (S20), the user captures the cash, credit, and debit cards owned by the user of the mobile communication terminal 100 through the camera unit 130 (S21).

상기 카메라부(130)를 통해 촬영된 카드 이미지를 이미지 수신부(331)에서 수신한 상기 금융기관시스템(300)의 인공지능기반 정보추출부(333)에서는 촬영된 카드 이미지로부터 문자, 숫자를 인식하여 카드정보를 추출하고, 상기 로그인 확인부(335)는 상기 정보계(305)를 통하여 상기 금융서비스어플리케이션에 등록된 카드인지 여부를 확인한다(S23).The artificial intelligence-based information extracting unit 333 of the financial institution system 300 that has received the card image photographed through the camera unit 130 by the image receiving unit 331 recognizes characters and numbers from the photographed card image The login confirmation unit 335 checks whether the card is registered in the financial service application through the information system 305 (S23).

상기 금융서비스어플리케이션에 등록된 카드로 확인이 되면, 상기 이동통신단말기(100)의 화면출력부(120)에 제공된 화면을 통해서 상기 카드와 연결된 현금출금계좌의 비밀번호를 입력하여 상기 이동통신단말기(100) 및 카드 등록을 완료한다(S24).When the card is confirmed by the card registered in the financial service application, the password of the cash withdrawn account connected to the card is input through the screen provided on the screen output unit 120 of the mobile communication terminal 100, ) And the card registration are completed (S24).

따라서, 이후에 상기 이동통신단말기(100)의 화면출력부(120)에 상기 비밀번호를 입력하기만 하면, 상기 로그인확인부(335)가 상기 DRM(307)에 저장된 비밀번호와 일치여부를 판단하여 상기 이동통신단말기(100)의 로그인을 완료할 수 있다(S12).The login confirmation unit 335 determines whether or not the password matches the password stored in the DRM 307 by simply inputting the password to the screen output unit 120 of the mobile communication terminal 100. Then, The login of the mobile communication terminal 100 can be completed (S12).

한편, 이동통신단말기(100)가 등록되어 있는지 확인하고, 상기 이동통신단말기(100)가 등록되어 있지 않다면, 이동통신단말기(100)를 상기 금융거래서비스어플리케이션에 등록하기 위해서 상기 이동통신단말기(100)의 등록신청을 선택한다(S31).If the mobile communication terminal 100 is not registered, the mobile communication terminal 100 is registered in the financial transaction service application, (S31).

상기 이동통신단말기(100)의 등록신청은, 상기 금융거래서비스를 소개하고, 약관에 동의를 수신하며(S32), 상기 이동통신단말기(100)의 통신사서버(200)를 통해서 상기 이동통신단말기(100)의 사용자가 상기 이동통신단말기(100)의 소유자임을 인증한다(S33).The registration request of the mobile communication terminal 100 introduces the financial transaction service and receives agreement on the terms of agreement (S32). The mobile communication terminal 100 receives the registration request from the mobile communication terminal 100 through the communication company server 200 of the mobile communication terminal 100 100 authenticates that the user of the mobile communication terminal 100 is the owner of the mobile communication terminal 100 (S33).

상기 이동통신단말기(100)의 사용자가 소유자임이 인증되는 본인인증이 완료되면, 상기 금융거래서비스어플리케이션은 상기 카메라부(140)를 활성화시켜 상기 사용자의 카드를 촬영하도록 한다(S34).When the authentication of the user authenticated as the owner of the mobile communication terminal 100 is completed, the financial transaction service application activates the camera unit 140 to photograph the user's card (S34).

상기 촬영된 카드 이미지와 함께 상기 카드와 연동하는 현금출금계좌를 등록하는데(S35), 상기 금융기관시스템(300)의 로그인확인부(335)가 상기 카드번호 및 이에 대응하는 현금출금계좌를 상기 정보계(303)를 통해서 확인한다.(S35), the login confirmation unit (335) of the financial institution system (300) registers the card number and the cash withdrawal account corresponding thereto together with the card information The system controller 303 confirms the result.

상기 금융서비스어플리케이션에 등록된 카드로 확인이 되면, 상기 이동통신단말기(100)의 화면출력부(120)를 통해 제공된 화면을 통해서 상기 카드와 연결된 현금출금계좌의 비밀번호를 입력하여(S36) 상기 이동통신단말기(300)를 등록한다.When it is confirmed with the card registered in the financial service application, the password of the cash withdrawn account connected to the card is input through the screen provided through the screen output unit 120 of the mobile communication terminal 100 (S36) The communication terminal 300 is registered.

이제 도 6a 내지 도 6c를 참조하여 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템을 이용한 요금/세금 납부방법, 이를 이용한 자동 이체 등록 방법 및 그 화면 예시도를 설명한다.6A to 6C, a method of paying a fee / tax using a text recognition-based financial transaction system using a camera unit of a mobile communication terminal, a method of registering a direct debit transfer using the same, Explain.

도 6a 내지 도 6c는 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템을 이용한 요금/세금 납부방법, 이를 이용한 자동 이체 등록 방법 및 이동통신단말기 화면 예시도이다.6A to 6C are diagrams illustrating a method of paying a fee / tax using a text recognition-based financial transaction system using a camera unit of a mobile communication terminal, a method of registering a direct debit transfer using the method, and a screen of a mobile communication terminal according to an embodiment of the present invention.

도 6a에 도시된 바와 같이, 상기 이동통신단말기(100)의 카메라기반 금융서비스 어플리케이션을 작동하고(S110), 상기 카메라기반 금융서비스어플리케이션의 카메라 아이콘을 터치하여 상기 카메라부(140) 활성하여 요금/세금 납부양식 또는 납부계좌 등 거래정보가 기재된 인쇄물을 촬영한다(S111).6A, the camera-based financial service application of the mobile communication terminal 100 is operated (S110), and the camera unit 140 of the camera-based financial service application is touched to activate the camera / A printed matter on which transaction information such as a tax payment form or a payment account is described (S111).

상기 이동통신단말기(100)는 촬영된 요금/세금 납부양식 또는 거래정보 이미지를 전송한다(S112). 상기 금융기관시스템(300)은 상기 요금/세금 납부양식 또는 거래정보 이미지 정보로부터 세금/요금 정보, 거래정보를 추출한다(S113).The mobile communication terminal 100 transmits the photographed fee / tax payment form or the transaction information image (S112). The financial institution system 300 extracts tax / charge information and transaction information from the charge / tax payment form or transaction information image information (S113).

상기 금융서비스어플리케이션의 로그인여부를 확인하고(S114), 상기 이동통신단말기(100)의 화면출력부(112)를 통해 세금/요금정보 또는 거래정보를 표시하도록 결제요청정보를 전송한다(S114). 상기 결제요청정보에 대하여 상기 이동통신단말기(100)의 키입력부를 통해서 결제정보가 전송되면(S116), 상기 통신사서버(200)에 대하여 승인요청신호를 전송하고(S116), 상기 통신사서버(200)가 본인여부를 확인하고 승인신호를 전송한다.(S114), and transmits payment request information to display tax / charge information or transaction information through the screen output unit 112 of the mobile communication terminal 100 (S114). When the payment information is transmitted through the key input unit of the mobile communication terminal 100 to the payment request information at step S116, an approval request signal is transmitted to the communication company server 200 at step S116, ) Confirms himself or herself and sends an approval signal.

상기 금융기관시스템(300)에서는 세금/요금정보 또는 거래정보를 상기 문자인식기반 금융거래 DB(350)에 저장한다(S118)The financial institution system 300 stores the tax / charge information or the transaction information in the character recognition-based financial transaction DB 350 (S118)

상기 상기 문자인식기반 금융거래 DB(350)에는 하나 이상의 지로/공과금 수납 처리에 대응하는 청구기관 번호, 납부자 번호, 납부금액 등을 적어도 하나 이상 포함하는 수납내역 정보와, 적어도 하나 이상의 상기 납부금액을 합산하여 산출된 결제금액에 대한 결제 처리를 수행한 결제수단 정보가 저장된다.The character recognition-based financial transaction DB 350 may include storage history information including at least one of a billing institution number, a payer number, and a payment amount corresponding to at least one giro / utility payment processing, and at least one payment amount And the payment means information that has performed the payment processing for the payment amount calculated by summing is stored.

상기 금융기관시스템(300)은 결제결과정보를 상기 이동통신단말기(100)와 요금/세금청구서버(400)에 전송하여 알려줄 수 있다(S119, S120).The financial institution system 300 can inform the payment result information to the mobile communication terminal 100 and the charge / tax charge server 400 (S119, S120).

한편, 상기 금융기관시스템(300)은 요금/세금청구서버(400)에 대해서 요금/세금 정산정보를 전송할 수 있으며(S121), 상기 이동통신단말기(100)에 대해서는 요금/세금에 대하여 자동 납부할 지 문의할 수 있다(S122)Meanwhile, the financial institution system 300 can transmit charge / tax settlement information to the charge / tax charge server 400 (S121) and automatically pay the fee / tax for the mobile communications terminal 100 (S122)

사용자가 미래에 발생할 요금/세금에 대하여 자동 납부여부에 대하여 동의를 하면(S123) 상기 금융기관시스템(300)은 이를 등록하고(S124) 상기 요금/세금청구서버(400)에 알림 메시지를 전송하여(S125), 상기 요금/세금청구서버(400)는 향후 요금/세금 청구 요구가 발생하면 요금/세금을 상기 금융기관시스템(400)에 고지하고(S126), 상기 금융기관시스템(300)은 이를 이동통신단말기(100)의 통신부(140)를 통해서 푸쉬 메시지로 알려줄 수 있다(S127).When the user agrees to the automatic payment of the fee / tax in the future (S123), the financial institution system 300 registers it (S124) and sends a notification message to the fee / tax billing server 400 (S125), the fee / tax billing server 400 informs the financial institution system 400 of the charge / tax when a charge / tax charge request is generated (S126), and the financial institution system 300 The mobile communication terminal 100 may notify the mobile communication terminal 100 of a push message through the communication unit 140 (S127).

다시한번, 도 5b를 참조하여 카메라기반 요금/세금납부 방법에 대해서 간단히 설명하면, 카메라기반 요금/세금 납부를 위하여 문자인식기반 금융서비스 어플리케이션을 작동한다(S210).Referring again to FIG. 5B, the camera-based rate / tax payment method will be briefly described. In operation S210, a character recognition-based financial service application is operated for camera-based fee / tax payment.

상기 문자인식기반 요금/세금 납부를 위한 카메라부(130)를 선택하여 활성화하고(S211), 상기 요금/세금 납부 지로용지를 촬영하며(S212), 상기 이동통신단말기(100)의 제어부(110)는 문자인식이 가능한지 불가능한지를 판단하여(S213) 인식오류가 없으면 로그인이 있는지 여부를 판단한다(S214).The control unit 110 of the mobile communication terminal 100 selects and activates the camera unit 130 for the text recognition based fee / tax payment at step S211 and photographs the paper at the fee / It is determined whether character recognition is possible or not (S213). If there is no recognition error, it is determined whether or not there is a login (S214).

상기 이미지 정보로부터 문자 인식을 하는데 있어서 인식오류가 발생하면 재촬영하도록 요청할 수 있다.If recognition error occurs in character recognition from the image information, the user may request to take a photograph again.

상기 문자인식기반 금융서비스 어플리케이션에 대하여 로그인이 되어 있으면, 상기 이동통신단말기(100)의 화면출력부(120)를 통해서 확인 화면을 제공한다(S150).If the user is logged in to the character recognition based financial service application, a confirmation screen is provided through the screen output unit 120 of the mobile communication terminal 100 in operation S150.

상기 문자인식기반 금융서비스 어플리케이션에 대하여 로그인이 되어 있지 않은 경우에는 전술한 로그인/인증절차를 수행하도록 할 수 있다(S220).If the character recognition-based financial service application is not logged in, the login / authentication procedure described above may be performed (S220).

상기 확인화면을 확인하고 수정사항이 없다고 판단되면(S216) 비밀번호를 입력하고(S217), 납부오류여부를 판단한 후(S218) 납부완료할 수 있다(S219).If it is determined that there is no modification (S216), the password is inputted (S217), the payment is determined (S218), and the payment is completed (S219).

금액 등이 잘못된 경우에 키입력부(140)를 통하여 금액, 계좌번호, 은행명 등을 수정한 후(S230) 비밀번호를 입력하여 납부완료할 수 있다.The amount, the account number, the bank name, and the like are corrected through the key input unit 140 (S230), and the password can be input to complete the payment.

만약 금융기관시스템(300)에서 전산망의 오류나 기타 현금결제계좌의 잔고부족, 인증카드의 분실신고 등 문제로 납부오류가 발생하는 경우(S218)에는 오류를 안내할 수 있다(S240).If a payment error occurs in the financial institution system 300 due to a fault in the computer network, a lack of balance in the cash settlement account, a loss of the authentication card, or the like (S218), the error can be notified (S240).

종래에는 인터넷 뱅킹 어플리케이션을 구동하고, 지로, 생활요금 국세, 지방세 등 납부종류를 선택하고, 지로번호, 전자잡부번호 등 정보를 입력하고, 공인인증서나 OTP 또는 보안카드를 사용한 후에야 납부완료할 수 있었으나, 도 5c에 도시된 바와 같이, 본 발명의 일 실시예에 따른 이동통신단말기의 카메라부를 이용한 문자인식기반 금융거래시스템을 이용한 요금/세금 납부방법에 의하면, 납부양식을 촬영하기만 하면, 바로 납부화면을 통해서 공인인증서나 보안매체의 사용없이도 납부완료할 수 있다.In the past, the Internet banking application was run, payment was made only after selecting the type of payment such as Giro, living expenses national tax and local tax, inputting information such as a giro number, an electronic magazine number, and using an official certificate or an OTP or a security card 5C, according to the charge / tax payment method using the character recognition-based financial transaction system using the camera unit of the mobile communication terminal according to the embodiment of the present invention, The payment can be completed without using the official certificate or the security medium through the screen.

이에 의하면 이동통신단말기(100)를 통한 뱅킹 사용방법을 숙지하지 않아도 사진을 찍는 행위만으로 금융거래가 가능하며, 이동통신단말기(100)에 키패드 입력방식 대비 카메라 촬영만으로 스마트 뱅킹을 사용할 수 있어서 매우 편리하며 오류입력 가능성을 감소시킬 수 있고, 키패드 터치(입력) 횟수를 감소시킬 수 있다. Accordingly, it is possible to conduct financial transactions only by taking a picture without knowing how to use the banking through the mobile communication terminal 100, and it is very convenient to use the smart banking only by photographing a camera as compared to the keypad input method in the mobile communication terminal 100 The possibility of error input can be reduced, and the number of times of keypad touch (input) can be reduced.

또한, 데이터가 축적됨에 따라서 타업무 예컨대 현재로서는 거의 창구에서 수행하는 부가가치세 납부에 대해서도 안심하고 적용할 수 있다.In addition, as the data is accumulated, it is possible to apply the present invention to other businesses, for example, at present, paying the VAT payable at almost the window.

이제 도 7a 내지 도 8b를 참조하여 본 발명의 일실시예에 따른 카메라기반 금융서비스 어플리케이션을 이용하여 개인간의 이체방법에 대해서 설명한다.7A to 8B, a method of transferring data between individuals using a camera-based financial service application according to an embodiment of the present invention will be described.

본 발명의 일 실시예에 따르면, 카메라기반 금융서비스 어플리케이션을 작동시키고(S310), 카메라부를 활성시키며(S311), 수취인의 이름 및 계좌번호가 기재된 인쇄물 또는 수기로 작성한 정보를 촬영한다(S312)According to one embodiment of the present invention, a camera-based financial service application is activated (S310), a camera unit is activated (S311), and a printed matter or handwritten information describing a recipient's name and account number is photographed (S312)

상기 카메라기반 금융서비스 어플리케이션상의 송금/수취 버튼중 송금버튼을 선택하면(S313) 로그인이 되어 있는 지 확인하고(S314), 로그인이 이미 되어 있는 경우에 수취인의 이름 및 계좌보호를 나타내는 거래이체화면을 제공한다(S315).If the user selects the remittance button among the remittance / receipt buttons on the camera-based financial service application (S313), it is confirmed whether the user is logged in (S314). If the user has already logged in, a transaction transfer screen (S315).

로그인이 되어 있지 않은 경우에는 로그인/인증 절차를 먼저 수행하고(S320) 수취인 정보를 확인할 수 있는 화면을 제공하도록 한다.If the login is not made, the login / authentication procedure is performed first (S320), and a screen for confirming the remittee information is provided.

상기 거래이체화면상에 수정사항 유무를 확안하고(S316), 수정사항이 없는 경우에 금액을 키입력부를 이용하여 입력하고, 단지 비밀번호를 동시에 입력함으로써(S318) 인증서의 일치여부를 확인하여 송금을 완료할 수 있다(S319)(S316). If there is no correction, the money is inputted by using the key input unit. Only the password is entered at the same time (S318) to confirm whether or not the certificate is matched. (S319)

다만 수정사항이 있는 경우에 금액이나 계좌번호를 사용자가 키입력부를 통하여 수정하여 입력할 수 있다(S330)However, if there is a modification, the user can input the amount or the account number through the key input unit (S330)

따라서, 도 7b에 도시된 바와 같이, 이동통신단말기(100)는 단지 3개의 화면, 수취인의 이름과 은행명, 계좌번호가 인쇄된 송금정보의 촬영이미지를 나타내는 화면, 문자인식되어 계좌정보를 확인하고 금액을 입력하는 확인/금액입력화면,인증에 사용된 카드와 연계된 현금계좌번호의 비밀번호를 입력하는 화면만으로 송금실행이 이루어질 수 있다.Therefore, as shown in FIG. 7B, the mobile communication terminal 100 displays only three screens, a name and a bank name of a remittee, a screen showing a photographed image of remittance information printed with an account number, A confirmation / amount input screen for inputting an amount of money, and a screen for inputting a password of a cash account number associated with a card used for authentication.

이제, 도 8a 및 도 8b를 참조하여 수취자가 자신의 계좌정보를 송금자 단말기에 보내서 송금을 받는 경우에 대해서 설명한다.Now, with reference to FIGS. 8A and 8B, a description will be given of a case where the receiver sends his or her account information to the sender terminal to receive remittance.

먼저, 수취자 이동통신단말기(101)에서 카메라기반 금융서비스 어플리케이션을 작동하면(S410), 나타나는 카메라버튼을 눌러 카메라부를 활성화한다(S411)First, when the receiver-based mobile communication terminal 101 operates the camera-based financial service application (S410), the camera unit is activated by pressing the displayed camera button (S411)

상기 카메라부를 이용하여 수취인 수취인의 이름 및 계좌번호가 기재된 인쇄물 또는 수기로 작성한 정보를 촬영한다(S412)A photographed material or a handwritten information in which the name and the account number of the addressee are addressed is photographed using the camera unit (S412)

상기 카메라기반 금융서비스 어플리케이션상의 송금/수취 버튼중 수취버튼을 선택하면(S413) 수취인의 이름 및 계좌보호를 나타내는 거래이체화면을 제공한다(S414).If the user selects an accept button among the remittance / receipt buttons on the camera-based financial service application (S413), a transaction transfer screen indicating the recipient's name and account protection is provided (S414).

상기 거래이체화면상에 수정사항 유무를 확안하고(S415), 수정사항이 없는 경우에 금액을 키입력부를 이용하여 입력하면(S416), 송금인의 이동통신단말기(102)로 메시지 알림이 전달될 수 있다(S417).If there is no correction, the money is inputted by using the key input unit (S416), and a message notification is transmitted to the remitter's mobile communication terminal 102 (S417).

상기 송금인은 메시지 알림을 수신하면(S418), 상기 송금인의 이동통신단말기(102)가 로그인이 되어 있는지 확인을 하고, 로그인이 이미 되어 있으면(S419) 수취인 정보 확인 화면을 상기 송금인의 이동통신단말기(103)를 통해서 표시한다(S420).When the remitter receives the message notification (S418), the remitter verifies whether the remitter's mobile communication terminal 102 is logged in. If the reminder has already been logged in (S419), the remitter information confirmation screen is displayed on the remitter's mobile communication terminal 103) (S420).

이 경우 송금의사를 표시하면(S412) 송금을 완료할 수 있다(S423). 다만 송금을 거부하는 경우에 송금거부 메시지를 알릴 수 있다(S440).In this case, if the sender intends to transfer money (S412), the transfer can be completed (S423). However, in the case of denying the remittance, the remittance rejection message may be notified (S440).

따라서, 도 8b에 도시된 바와 같이, 수취자 이동통신단말기(101)는 거래정보를 촬영하여 메시지알림을 통해서 송금인 이동통신단말기(103)에 sms 등 푸쉬 메시지를 통해서 전달되고, 금액이체화면이 송금인의 이동통신단말기(103)의 화면상에 표시되어 송금인은 비밀번호의 입력이라는 송금의사의 표시에 의해서 간단히 송금을 수행할 수 있다.Therefore, as shown in FIG. 8B, the recipient's mobile communication terminal 101 photographs the transaction information and is delivered to the remitter's mobile communication terminal 103 through a push message such as sms by a message notification, Is displayed on the screen of the mobile communication terminal 103 of the mobile communication terminal 103, and the remitter can perform the remittance simply by showing the remittance intention of inputting the password.

100 : 이동통신단말기 200 : 통신사 서버
300 : 금융기관시스템(서버) 331 : 이미지 수신부
333 : 인공지능기반 정보추출부 335 : 로그인확인부
337 : 정보저장부 338 : 자동거래부
339 : 자동납부신청부 350 : 문자인식기반 금융거래 DB
400 : 요금/세금 청구서버100: mobile communication terminal 200:
300: financial institution system (server) 331: image receiving unit
333 Artificial Intelligence Based Information Extraction Unit 335:
337: Information storage unit 338: Automatic transaction unit
339: automatic payment application section 350: character recognition based financial transaction DB
400: charge / tax billing server

Claims (9)

카메라부가 설치된 이동통신단말기와, 상기 이동통신단말기에 소프트웨어 또는 인터넷을 통하여 다운로드된 문자인식기반 금융서비스 어플리케이션을 제공하는 금융기관시스템을 포함하는 이동통신단말기을 이용한 문자인식기반 부가가치세 납부시스템에 있어서,
상기 금융기관시스템은 금융기관 고유모듈과, 상기 이동통신단말기의 카메라부를 이용하여 촬영한 수기로 작성되거나 비규격화된 요금/세금 납부장표 또는 거래정보 인쇄물의 이미지로부터 수기로 작성되거나 비규격화된 요금/세금 납부정보 또는 거래정보를 추출하여 금융거래를 단축하여 진행하는 문자인식기반 거래모듈과, 상기 문자인식기반 거래모듈로부터 수신한 수기로 작성되거나 비규격화된 요금/세금 납부 장표 이미지, 및 인공지능기반 정보추출정보를 저장하는 문자인식기반 금융거래 DB를 포함하며,
상기 문자인식기반 거래모듈은 상기 이동통신단말기로부터 사용자가 촬영한 수기로 작성되거나 비규격화된 요금/세금 납부장표 또는 인쇄물 등 거래정보 이미지를 수신하기 위한 거래정보 이미지수신부와, 상기 이미지수신부로부터 수신된 거래정보 이미지로부터 1차적인 딥러닝 기계학습과 2차적인 분류학습을 진행하여 요금/세금 납부 정보 등 거래정보를 추출하기 위한 인공지능기반 정보추출부와, 상기 인공지능기반 정보추출부에서 추출한 거래정보에 따라 상기 금융기관 고유모듈과 연동하여 금융거래를 수행하기 위하여 상기 이동통신단말기가 금융서비스 어플리케이션에 대해 기기등록 및 카드 인증이 이루어졌는 지 확인하기 위한 로그인확인부와, 상기 인공지능기반 정보추출부에서 추출된 거래정보에 따라 요금/세금 납부 또는 거래이체를 자동으로 수행하는 자동거래부와, 상기 자동거래부의 거래정보를 상기 문자인식기반 거래 DB에 저장하는 정보저장부를 포함하는 이동통신단말기을 이용한 문자인식기반 부가가치세 납부시스템.And a financial institution system for providing a character recognition-based financial service application downloaded through software or the Internet to the mobile communication terminal, the system comprising:
The financial institution system comprises a financial institution specific module and a fee / tax payment slip or non-standardized fee / non-standardized fee or non-standardized fee / fee form from the image of the transaction information print, photographed using the camera unit of the mobile communication terminal, Based transaction module that extracts tax payment information or transaction information and shortens the financial transaction, and a handwritten or non-standardized fee / tax payment form image received from the character recognition based transaction module, and an artificial intelligence And a character recognition-based financial transaction DB for storing information extraction information,
Wherein the character recognition based transaction module includes a transaction information image receiving unit for receiving a transaction information image such as a bill or a non-standardized fee / tax payment slip or printed matter taken by a user from the mobile communication terminal, An artificial intelligence based information extracting unit for performing primary deep learning machine learning and secondary classification learning from the transaction information image to extract transaction information such as rate / tax payment information, A login confirmation unit for confirming that the mobile communication terminal has performed device registration and card authentication for the financial service application in order to perform financial transactions in cooperation with the financial institution specific module according to the information, Payment of the fee / tax or transaction according to the transaction information extracted from the department And an information storage unit for storing the transaction information of the automatic transaction unit in the character recognition based transaction DB. 삭제delete 제 1 항에 있어서,
상기 문자인식기반 거래모듈은 상기 문자인식기반 거래 DB에 저장된 요금/세금 납부 정보 또는 거래정보를 이용하여 자동이체 또는 자동납부할 수 있도록 처리하기 위한 자동납부신청부를 포함하는 이동통신단말기을 이용한 문자인식기반 부가가치세 납부시스템.

The method according to claim 1,
The character recognition based transaction module includes a character recognition based on a character recognition based on a mobile communication terminal including an automatic payment application unit for processing automatic payment or automatic payment using charge / tax payment information or transaction information stored in the character recognition based transaction DB VAT payment system.

삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete
KR1020170112062A 2017-09-01 2017-09-01 Character recognition-based financial service surpply system and method KR101932759B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170112062A KR101932759B1 (en) 2017-09-01 2017-09-01 Character recognition-based financial service surpply system and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170112062A KR101932759B1 (en) 2017-09-01 2017-09-01 Character recognition-based financial service surpply system and method

Publications (1)

Publication Number Publication Date
KR101932759B1 true KR101932759B1 (en) 2018-12-26

Family

ID=65006557

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170112062A KR101932759B1 (en) 2017-09-01 2017-09-01 Character recognition-based financial service surpply system and method

Country Status (1)

Country Link
KR (1) KR101932759B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111914820A (en) * 2019-05-09 2020-11-10 百度在线网络技术（北京）有限公司 Qualification auditing method and device

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006268446A (en) * 2005-03-24 2006-10-05 Ntt Comware Corp Settlement intermediary system, settlement intermediary device, settlement request terminal, settlement intermediary method, settlement intermediary request method and computer program
JP2017084299A (en) * 2015-10-30 2017-05-18 株式会社シーイーシー Image processing device and image processing method

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006268446A (en) * 2005-03-24 2006-10-05 Ntt Comware Corp Settlement intermediary system, settlement intermediary device, settlement request terminal, settlement intermediary method, settlement intermediary request method and computer program
JP2017084299A (en) * 2015-10-30 2017-05-18 株式会社シーイーシー Image processing device and image processing method

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111914820A (en) * 2019-05-09 2020-11-10 百度在线网络技术（北京）有限公司 Qualification auditing method and device

Similar Documents

Publication Publication Date Title
US11681991B1 (en) System and method for mobile check deposit
US7252224B2 (en) Front counter and back counter workflow integration
JP5738559B2 (en) Insurance business processing system and insurance business processing method
US20080147561A1 (en) Image based invoice payment with digital signature verification
US20050096992A1 (en) Image-enabled item processing for point of presentment application
US20130110724A1 (en) Duplicate check settlement detection
US20120030104A1 (en) Processing images associated with the remote capture of multiple deposit items
US11107051B1 (en) Mobile cash deposit system and method
KR20070005407A (en) System and method for collecting bills using 2d code
US11868979B2 (en) System and process for electronic payments
KR101652733B1 (en) Automatic loan contract system and method using image communication
US9361608B2 (en) Transaction dispute resolution
CN108230139B (en) Method and system for deposit and account opening by using self-service equipment
US20120036069A1 (en) System and method for remotely providing financial services
KR101351545B1 (en) Method and system for advanced payment of card
KR101932759B1 (en) Character recognition-based financial service surpply system and method
KR100820356B1 (en) Settlement device using mobile and the peocedure thereof
JP2020113015A (en) Withdrawal account registration server and registration method of withdrawal account
JP5080071B2 (en) Bank transfer system
US20140058940A1 (en) Remote deposit capture internet deposit application
KR20160099514A (en) Payment ASP System and Methods using a mobile communication terminal
JP2004126910A (en) Business form acceptance device and business form acceptance processing method
KR101734156B1 (en) Electronic document system using mobile terminal control and processing method thereof
JP3662017B1 (en) Loan account withdrawal management system and withdrawal management method from a loan account
CN112771520A (en) Method for acquiring and subsequently generating data of a user of a self-service terminal

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant