KR101587501B1 - 식별 코드 이미지를 이용한 객체 진위 여부 확인 방법 및 이를 실행하는 장치 - Google Patents

식별 코드 이미지를 이용한 객체 진위 여부 확인 방법 및 이를 실행하는 장치 Download PDF

Info

Publication number
KR101587501B1
KR101587501B1 KR1020150101790A KR20150101790A KR101587501B1 KR 101587501 B1 KR101587501 B1 KR 101587501B1 KR 1020150101790 A KR1020150101790 A KR 1020150101790A KR 20150101790 A KR20150101790 A KR 20150101790A KR 101587501 B1 KR101587501 B1 KR 101587501B1
Authority
KR
South Korea
Prior art keywords
code image
identification code
authentication information
binary
pixel space
Prior art date
Application number
KR1020150101790A
Other languages
English (en)
Inventor
박행운
권오훈
이종옥
Original Assignee
주식회사 디지마크
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 디지마크 filed Critical 주식회사 디지마크
Priority to KR1020150101790A priority Critical patent/KR101587501B1/ko
Application granted granted Critical
Publication of KR101587501B1 publication Critical patent/KR101587501B1/ko
Priority to PCT/KR2016/001577 priority patent/WO2017014391A1/ko
Priority to TW105108924A priority patent/TW201705043A/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404—Methods for optical code recognition
    • G06K7/1408—Methods for optical code recognition the method being specifically adapted for the type of code
    • G06K7/1413—1D bar codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K17/00—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G06K19/06018—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking one-dimensional coding
    • G06K19/06028—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking one-dimensional coding using bar codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Electromagnetism (AREA)
  • Toxicology (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Business, Economics & Management (AREA)
  • Inspection Of Paper Currency And Valuable Securities (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Tourism & Hospitality (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Credit Cards Or The Like (AREA)

Abstract

본 발명의 일 실시예에 따른 객체 진위 여부 확인 장치에서 실행되는 식별 코드 이미지를 이용한 객체 진위 여부 확인 방법은 특정 객체에 삽입된 식별 코드 이미지를 스캔하여 상기 식별 코드 이미지에 삽입된 픽셀 공간을 추출하는 단계, 상기 픽셀 공간을 분석하여 상기 픽셀 공간이 지시하는 인증 정보를 추출하는 단계 및 상기 인증 정보를 이용하여 상기 특정 객체를 인증하는 단계를 포함한다. 따라서, 본 발명은 식별 코드 이미지의 부정 사용을 막기 위해서 식별 코드 이미지에 식별 코드 이미지가 부착될 객체의 인증 정보를 삽입함으로써 객체의 식별 코드 이미지를 스캔하는 것 만으로 해당 객체의 진위 여부를 쉽고 간편하게 확인할 수 있다는 장점이 있다.

Description

식별 코드 이미지를 이용한 객체 진위 여부 확인 방법 및 이를 실행하는 장치{METHOD OF AUTHENTICATING GOODS USING IDENTIFICATION CODE IMAGE AND APPARATUS PERFORMING THE SAME}
본 발명의 실시예들은 식별 코드 이미지를 이용한 객체 진위 여부 확인 방법 및 이를 실행하는 장치에 관한 것이다.
바코드(bar code)는 굵거나 가는 바(검은 막대)와 스페이스(흰 막대)의 조합에 의해 영 숫자 또는 특수 기호를 광학적으로 판독하기 쉽게 부호화한 것이다. 이것을 이용하여 상품 및 물류정보의 수집, 해독을 가능하게 한다.
이러한 바코드는 상품 등에 부착되어 해당 상품의 정품 여부를 인증하는데 사용되고 있다. 예를 들어, 바코드는 운동화가 정품임을 인증하는 용도로 사용되며, 운동화에 부착되어 사용자로 하여금 운동화가 정품인지 알 수 있도록 한다.
하지만, 악의적인 사용자가 이러한 바코드를 복사하여 가짜 상품에 부착하여 사용하는 경우 사용자는 상품의 진위 여부를 확인할 수 없다는 단점이 있다.
본 발명은 식별 코드 이미지의 부정 사용을 막기 위해서 식별 코드 이미지에 식별 코드 이미지가 부착될 객체의 인증 정보를 삽입함으로써 객체의 식별 코드 이미지를 스캔하는 것 만으로 해당 객체의 진위 여부를 쉽고 간편하게 확인할 수 있도록 하는 식별 코드 이미지를 이용한 객체 진위 여부 확인 방법 및 이를 실행하는 장치를 제공하는 것을 목적으로 한다.
본 발명이 해결하고자 하는 과제는 이상에서 언급한 과제(들)로 제한되지 않으며, 언급되지 않은 또 다른 과제(들)은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
실시예들 중에서, 객체 진위 여부 확인 장치에서 실행되는 식별 코드 이미지를 이용한 객체 진위 여부 확인 방법은 특정 객체에 삽입된 식별 코드 이미지를 스캔하여 상기 식별 코드 이미지에 삽입된 픽셀 공간을 추출하는 단계, 상기 픽셀 공간을 분석하여 상기 픽셀 공간이 지시하는 인증 정보를 추출하는 단계 및 상기 인증 정보를 이용하여 상기 특정 객체를 인증하는 단계를 포함한다.
실시예들 중에서, 객체 진위 여부 확인 장치는 특정 객체에 삽입된 식별 코드 이미지를 스캔하여 상기 식별 코드 이미지에 삽입된 픽셀 공간을 추출하는 픽셀 공간 추출부, 상기 픽셀 공간을 분석하여 상기 픽셀 공간이 지시하는 인증 정보를 추출하는 인증 정보 추출부 및 상기 인증 정보를 이용하여 상기 특정 객체를 인증하는 객체 인증부를 포함한다.
기타 실시예들의 구체적인 사항들은 상세한 설명 및 첨부 도면들에 포함되어 있다.
본 발명의 이점 및/또는 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성요소를 지칭한다.
본 발명에 따르면, 식별 코드 이미지의 부정 사용을 막기 위해서 식별 코드 이미지에 식별 코드 이미지가 부착될 객체의 인증 정보를 삽입함으로써 객체의 식별 코드 이미지를 스캔하는 것 만으로 해당 객체의 진위 여부를 쉽고 간편하게 확인할 수 있다는 장점이 있다.
도 1은 본 발명의 일 실시예에 따른 식별 코드 이미지 생성 시스템을 설명하기 위한 네트워크 구성도이다.
도 2는 본 발명의 일 실시예에 따른 식별 코드 이미지 생성 장치의 내부 구조를 설명하기 위한 블록도이다.
도 3은 본 발명의 일 실시예에 따른 식별 코드 이미지 생성 장치에서 생성된 식별 코드 이미지 상의 인증 정보를 인식하는 객체 진위 여부 확인 장치의 내부 구조를 설명하기 위한 블록도이다.
도 4는 본 발명에 따른 식별 코드 이미지 생성 장치에서 실행되는 인증 정보가 삽입된 식별 코드 이미지 생성 방법의 일 실시예를 설명하기 위한 흐름도이다.
도 5는 본 발명에 따른 객체 진위 여부 확인 장치에서 실행되는 식별 코드 이미지 상의 인증 정보 인식 방법의 일 실시예를 설명하기 위한 흐름도이다.
이하에서는 첨부된 도면을 참조하여 본 발명의 실시예들을 상세히 설명하기로 한다.
본 명세서에서 사용된 용어 중 "식별 코드 이미지"는 상기 식별 코드 이미지가 부착된 제품의 번호, 바코드 또는 QR 코드 등과 같은 이미지를 의미한다. 본 발명에서는 식별 코드 이미지에 인증 정보를 삽입함으로써 식별 코드 이미지가 특정 객체(예를 들어, 상품, 페이퍼 등)에 부착되는 경우 식별 코드 이미지에 삽입된 인증 정보를 활용하여 해당 식별 코드 이미자가 진짜임을 증명할 수 있도록 하였다.
본 명세서에서 사용된 용어 중 "인증 정보"는 식별 코드 이미지가 부착되는 상품의 진위 여부를 확인하기 위해 사용되는 정보로서, 상품의 코드 번호, 인증 번호 등을 포함할 수 있다.
도 1은 본 발명의 일 실시예에 따른 식별 코드 이미지 생성 시스템을 설명하기 위한 네트워크 구성도이다.
도 1을 참조하면, 식별 코드 이미지 생성 시스템은 식별 코드 이미지 생성 장치(100) 및 객체 진위 여부 확인 장치(200)를 포함한다.
식별 코드 이미지 생성 장치(100)는 식별 코드 이미지(300)에 인증 정보를 삽입하여 식별 코드 이미지(300)를 생성하는 장치이다.
예를 들어, 식별 코드 이미지 생성 장치(100)는 바코드 이미지에 인증 정보를 삽입하여 식별 코드 이미지(300)를 생성할 수 있다. 이러한 바코드 이미지는 특정 객체(상품권, 로또, 운동화 등)에 삽입될 수 있으며, 바코드 이미지에 삽입된 인증 정보는 해당 바코드 이미자가 진짜임을 증명하는데 사용될 수 있다.
이를 위해, 식별 코드 이미지 생성 장치(100)는 식별 코드 이미지(예를 들어, 바코드 이미지, QR 코드 이미지 등)(300)의 특정 영역을 인증 정보 삽입 영역으로 결정한다. 예를 들어, 식별 코드 이미지 생성 장치(100)는 식별 코드 이미지(300)의 공백 부분을 인증 정보 삽입 영역으로 결정할 수 있다.
그런 다음, 식별 코드 이미지 생성 장치(100)는 식별 코드 이미지(300)의 인증 정보 삽입 영역에 인증 정보를 삽입한다. 이때, 식별 코드 이미지 생성 장치(100)는 인증 정보에 해당하는 이진수 코드에 따라 다수의 점으로 이루어진 복수의 픽셀 공간을 생성하고, 복수의 픽셀 공간을 인증 정보 삽입 영역에 삽입할 수 있다.
예를 들어, 식별 코드 이미지(300)가 부착될 객체 인증 정보에 해당하는 이진수 코드가 1011 이고, 1에 해당하는 픽셀 공간은 4개의 점으로 이루어진다고 정의되어 있고 0에 해당하는 픽셀 공간은 8개의 점으로 이루어진다고 정의되어 있으면, 식별 코드 이미지 생성 장치(100)는 4 개의 점으로 이루어진 픽셀 공간, 8개의 점으로 이루어진 픽셀 공간, 4개의 점으로 이루어진 픽셀 공간, 4개의 점으로 이루어진 픽셀 공간을 생성하여 이미지의 인증 정보 삽입 영역에 삽입할 수 있다.
이때, 식별 코드 이미지 생성 장치(100)는 식별 코드 이미지(300)가 부착될 객체 인증 정보를 구성하는 문자 각각을 이진수화하여 이진수 코드를 생성하거나 식별 코드 이미지(300)가 부착될 객체 인증 정보에 해당하는 이진수 코드는 미리 정의되어 있을 수 있다.
이에 따라, 식별 코드 이미지 생성 장치(100)는 이진수 코드 각각의 이진수 값이 1 또는 0인지를 판별하여 각각에 대응하는 기 설정된 개수의 점으로 이루어진 픽셀 공간을 생성하여 식별 코드 이미지(300)의 인증 정보 삽입 영역에 삽입할 수 있다.
즉, 0과 1을 지시하는 픽셀 공간의 크기만을 달리하여 인증 정보에 해당하는 이진수 코드를 표현할 수 있기 때문에 인증 정보의 크기가 커서 이진수 코드가 길더라도 해당 인증 정보를 식별 코드 이미지(300)의 인증 정보 삽입 영역에 삽입할 수 있다는 장점이 있다.
이와 같이, 식별 코드 이미지 생성 장치(100)는 인증 정보에 해당하는 이진수 코드를 서로 다른 크기의 픽셀 공간으로 표현하여 식별 코드 이미지(300)의 인증 정보 삽입 영역에 삽입함으로써, 식별 코드 이미지(300)가 부착된 객체를 사용하는 사용자는 자신이 보유하고 있는 객체 진위 여부 확인 장치(예를 들어, 스마트 폰 등)를 이용하여 객체에 부착된 식별 코드 이미지(300)를 스캔함으로써 식별 코드 이미지(300)에 삽입된 인증 정보를 이용하여 식별 코드 이미지(300)가 삽입된 객체의 진위 여부를 즉시 확인할 수 있다는 장점이 있다. 이하에서는 이러한 객체 진위 여부 확인 장치(200)에 대해서 설명하기로 한다.
객체 진위 여부 확인 장치(200)는 사용자의 조작에 따라 특정 객체에 부착된 식별 코드 이미지(300)를 스캔하여 코드 이미지에 삽입된 픽셀 공간을 추출하고, 픽셀 공간을 분석하여 픽셀 공간이 지시하는 인증 정보를 추출할 수 있다.
즉, 객체 진위 여부 확인 장치(200)는 식별 코드 이미지(300)에서 서로 다른 크기의 픽셀 공간이 추출되면, 기 결정된 픽셀 공간 별 이진수 값 테이블을 참조하여 픽셀 공간이 구성된 점의 개수에 따라 이진수 값을 결정한다. 보다 구체적으로, 객체 진위 여부 확인 장치(200)는 기 결정된 픽셀 공간 별 이진수 값 테이블을 참조하여 픽셀 공간이 구성된 점의 개수에 따라 해당 픽셀 공간에 해당하는 이진수 값이 0 또는 1인지 판단할 수 있다. 그런 다음, 객체 진위 여부 확인 장치(200)는 이진수 값을 순차적으로 결합하여 이진수 코드를 결정한다.
예를 들어, 식별 코드 이미지(300)에서 4개의 점으로 이루어진 픽셀 공간 1개와 8개의 점으로 이루어진 픽셀 공간 6개를 추출한 경우, 객체 진위 여부 확인 장치(200)는 4개의 점으로 이루어진 픽셀 공간을 1로 인식하고, 8개의 점으로 이루어진 픽셀 공간을 0으로 인식하여 이진수 코드 "1000000"를 생성한다.
다른 예를 들어, 6개의 점으로 이루어진 픽셀 공간 2개와 8개의 점으로 이루어진 픽셀 공간 3개를 추출한 경우, 객체 진위 여부 확인 장치(200)는 6개의 점으로 이루어진 픽셀 공간을 1로 인식하고, 8개의 점으로 이루어진 픽셀 공간을 0으로 인식하여 이진수 코드 "11000"을 생성한다.
그 후, 객체 진위 여부 확인 장치(200)는 이진수 코드 별 인증 정보 테이블을 참조하여 이진수 코드에 해당하는 인증 정보를 추출하고, 인증 정보와 특정 객체와 연관된 정보가 동일한지 여부에 따라 특정 객체 진위 여부를 확인할 수 있다.
이와 같이, 사용자는 자신이 보유하고 있는 객체 진위 여부 확인 장치(200)를 이용하여 단순히 식별 코드 이미지(300)를 스캔하는 것만으로 식별 코드 이미지(300)에 삽입된 인증 정보를 추출하고 식별 코드 이미지(300)가 부착된 객체의 진위 여부를 확인할 수 있다.
도 2는 본 발명의 일 실시예에 따른 식별 코드 이미지 생성 장치의 내부 구조를 설명하기 위한 블록도이다.
도 2를 참조하면, 식별 코드 이미지 생성 장치(100)는 인증 정보 삽입 영역 결정부(110), 픽셀 공간 생성부(120), 이미지 생성부(130) 및 제어부(140)를 포함한다.
인증 정보 삽입 영역 결정부(110)는 식별 코드 이미지에서 인증 정보 가 삽입될 인증 정보 삽입 영역을 결정할 수 있다. 이때, 인증 정보 삽입 영역 결정부(110)는 식별 코드 이미지의 공백 부분을 인증 정보 삽입 영역으로 결정할 수 있다.
픽셀 공간 생성부(120)는 식별 코드 이미지가 부착될 객체의 인증 정보에 해당하는 이진수 코드에 기초하여 픽셀 공간을 생성한다. 이때, 픽셀 공간 생성부(120)는 인증 정보에 해당하는 이진수 코드에 기초하여 다수의 점으로 이루어진 서로 다른 크기의 픽셀 공간을 생성할 수 있다.
즉. 픽셀 공간 생성부(120)는 기 구축된 이진수 값 별 픽셀 공간 DB를 참조하여 이진수 값이 1 또는 0인지를 판별하여 각각에 대응하는 기 설정된 개수의 점으로 이루어진 픽셀 공간을 생성할 수 있는 것이다.
예를 들어, 픽셀 공간 생성부(120)는 인증 정보 "AABBCC"에 해당하는 이진수 코드가 100000일 경우, 1에 해당하는 기 결정된 개수의 점으로 구성된 픽셀 공간 1개와 0에 해당하는 기 결정된 개수의 점으로 구성된 픽셀 공간 5개를 생성할 수 있다.
이미지 생성부(130)는 픽셀 공간 생성부(120)에 의해 생성된 복수의 픽셀 공간을 인증 정보 삽입 영역에 삽입하여 인증 정보가 삽입된 식별 코드 이미지를 생성한다. 이때, 픽셀 공간 생성부(120)에 의해 생성된 복수의 픽셀 공간은 사용자의 눈에 보이지 않는 색상으로 표현되어 있지만 식별 코드 이미지를 스캔하는 객체 진위 여부 확인 장치는 이를 스캔하여 복수의 픽셀 공간을 추출할 수 있도록 하였다.
제어부(140)는 식별 코드 이미지 생성 장치(100)의 다른 구성 요소들을 제어하여 데이터가 삽입된 이미지를 생성할 수 있다.
도 3은 본 발명의 일 실시예에 따른 식별 코드 이미지 생성 장치에서 생성된 식별 코드 이미지 상의 인증 정보를 인식하는 객체 진위 여부 확인 장치의 내부 구조를 설명하기 위한 블록도이다.
도 3을 참조하면, 객체 진위 여부 확인 장치(200)는 식별 코드 이미지 스캔부(210), 디스플레이부(220), 메모리(230) 및 제어부(240)를 포함한다.
식별 코드 이미지 스캔부(210)는 사용자의 조작에 따라 식별 코드 이미지를 스캔하여 제어부(240)에 제공한다.
디스플레이부(220)는 객체 진위 여부 확인 장치(100)에서 처리되는 정보를 표시 출력한다. 예를 들어, 사용자의 조작에 따라 식별 코드 이미지 스캔부(210)를 통해 식별 코드 이미지를 스캔하는 과정을 출력할 수 있다.
디스플레이부(220)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thinfilm transistorliquid crystal display), 유기 발광 다이오드(organic lightemitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.
이들 중 일부 디스플레이는 그를 통해 외부를 볼 수 있도록 투명형 또는 광투과형으로 구성될 수 있다. 이는 투명 디스플레이라 호칭될 수 있는데, 투명 디스플레이의 대표적인 예로는 투명 LCD 등이 있다. 디스플레이부(220)의 후방 구조 또한 광 투과형 구조로 구성될 수 있다. 이러한 구조에 의하여, 사용자는 단말기 바디의 디스플레이부(220)이 차지하는 영역을 통해 단말기 바디의 후방에 위치한 사물을 볼 수 있다.
디스플레이부(220)과 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)가 상호 레이어 구조를 이루는 경우(이하, "터치 스크린"이라 약칭함)에, 디스플레이부(220)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다.
터치 센서는 디스플레이부(220)의 특정 부위에 가해진 압력 또는 디스플레이부(220)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서는 터치 되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다.
터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(240)로 전송한다. 이로써, 제어부(240)는 디스플레이부(220)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 되어, 일부분이 터치된 상태에서 특정 거리만큼 드래그되면 추천 광고 이미지에 해당하는 구매 유도 페이지를 표시할 수 있다.
메모리(230)는 제어부(240)의 동작을 위한 프로그램을 저장할 수 있고, 입/출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)을 임시 저장할 수도 있다. 메모리(230)는 터치스크린 상의 터치 입력 시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다.
메모리(230)에는 식별 코드 이미지 스캔부(210)에 의해 스캔된 식별 코드 이미지가 저장된다.
메모리(230)에는 픽셀 공간 별 이진수 값 테이블 및 이진수 코드 별 인증 정보 테이블이 저장되어 있다.
메모리(230)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(ReadOnly Memory, ROM), EEPROM(Electrically Erasable Programmable ReadOnly Memory), PROM(Programmable ReadOnly Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 사용자의 단말(100)는 인터넷(internet)상에서 메모리(230)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.
제어부(240)는 통상적으로 객체 진위 여부 확인 장치(100)의 전반적인 동작을 제어한다.
제어부(240)는 식별 코드 이미지 스캔부(210)에 의해 식별 코드 이미지가 스캔되면 식별 코드 이미지에서 인증 정보에 해당하는 복수의 픽셀 공간을 추출한다. 보다 구체적으로, 제어부(240)는 스캔부(210)에 의해 식별 코드 이미지가 스캔되면 식별 코드 이미지를 이루는 픽셀을 분석하고, 식별 코드 이미지를 이루는 각각의 픽셀에 대해서 픽셀 사이의 공간을 인식하여 복수의 픽셀 공간을 추출할 수 있다.
제어부(240)는 복수의 픽셀 공간을 이용하여 이진수 코드를 생성할 수 있다. 보다 구체적으로, 제어부(240)는 메모리(230)에 저장된 픽셀 공간 별 이진수 값 테이블을 참조하여 픽셀 공간이 구성된 점의 개수에 따라 해당 픽셀 공간에 해당하는 이진수 값이 0 또는 1인지를 판별하고, 이진수 값을 순차적으로 결합하여 이진수 코드를 결정할 수 있는 것이다.
그런 다음, 제어부(240)는 이진수 코드 별 인증 정보 테이블을 참조하여 이진수 코드에 해당하는 인증 정보를 추출하여 인증 정보와 특정 객체와 연관된 정보가 동일한지 여부에 따라 식별 코드 이미지가 부착된 객체의 진위 여부를 확인할 수 있다.
도 4는 본 발명에 따른 식별 코드 이미지 생성 장치에서 실행되는 인증 정보가 삽입된 식별 코드 이미지 생성 방법의 일 실시예를 설명하기 위한 흐름도이다.
도 4를 참조하면, 식별 코드 이미지 생성 장치(도 1, 100)는 식별 코드 이미지에서 인증 정보 삽입 영역을 결정한다(단계 S410). 예를 들어, 식별 코드 이미지 생성 장치(100)는 식별 코드 이미지의 공백 영역을 인증 정보 삽입 영역으로 결정할 수 있다.
식별 코드 이미지 생성 장치(100)는 인증 정보에 해당하는 이진수 코드에 기초하여 픽셀 공간을 생성한다(단계 S420).
단계 S420에 대한 일 실시예에서, 식별 코드 이미지 생성 장치(100)는 인증 정보에 해당하는 이진수 코드에 기초하여 다수의 점으로 이루어진 서로 다른 크기의 픽셀 공간을 생성할 수 있다. 이때, 식별 코드 이미지 생성 장치(100)는 인증 정보에 해당하는 이진수 코드 각각의 이진수 값이 1 또는 0인지를 판별하여 각각에 대응하는 기 설정된 개수의 점으로 이루어진 픽셀 공간을 생성할 수 있다.
식별 코드 이미지 생성 장치(100)는 픽셀 공간을 인증 정보 삽입 영역에 삽입하여 데이터가 삽입된 이미지를 생성한다(단계 S430).
도 5는 본 발명에 따른 객체 진위 여부 확인 장치에서 실행되는 이미지 상의 데이터 인식 방법의 일 실시예를 설명하기 위한 흐름도이다.
도 5를 참조하면, 객체 진위 여부 확인 장치(200)는 사용자의 조작에 따라 식별 코드 이미지를 스캔한다(단계 S510). 객체 진위 여부 확인 장치(200)는 식별 코드 이미지가 스캔되면 식별 코드 이미지의 픽셀을 분석하여 식별 코드 이미지에서 복수의 픽셀 공간을 추출한다(단계 S520).
단계 S520에 대한 일 실시예에서, 객체 진위 여부 확인 장치(200)는 식별 코드 이미지를 이루는 픽셀을 분석하여 각각의 픽셀 사이의 공간을 인식하여 복수의 픽셀 공간을 추출할 수 있다.
객체 진위 여부 확인 장치(200)는 복수의 픽셀 공간을 이용하여 이진수 코드를 생성한다(단계 S530). 단계 S530에 대한 일 실시예에서, 객체 진위 여부 확인 장치(200)는 기 결정된 픽셀 공간 별 이진수 값 테이블을 참조하여 픽셀 공간이 구성된 점의 개수에 따라 해당 픽셀 공간에 해당하는 이진수 값이 0 또는 1인지를 판별하고, 이진수 값을 순차적으로 결합하여 이진수 코드를 결정한다.
예를 들어, 4개의 점으로 이루어진 픽셀 공간이 "1", 6개의 점으로 이루어진 픽셀 공간이 "0"으로 정의된 상태에서 4개의 점으로 이루어진 픽셀 공간, 6개의 점으로 이루어진 픽셀 공간, 6개의 점으로 이루어진 픽셀 공간이 추출된 경우, 객체 진위 여부 확인 장치(200)는 이진수 코드 100을 생성할 수 있다.
객체 진위 여부 확인 장치(200)는 이진수 코드 별 인증 정보 테이블을 참조하여 이진수 코드에 해당하는 인증 정보를 표시한다(단계 S540).
도 6은 식별 코드 이미지가 부착된 상품권의 진위 여부를 확인하는 과정을 설명하기 위한 참조도이다.
도 6을 참조하면, 사용자는 자신이 보유하고 있는 객체 진위 여부 확인 장치(200)를 이용하여 운동화(600)에 부착된 식별 코드 이미지(610)를 스캔하는 것 만으로 운동화(600)의 진위 여부를 확인할 수 있다.
먼저, 객체 진위 여부 확인 장치(200)는 사용자의 조작에 따라 운동화(600)에 부착된 식별 코드 이미지(610)를 스캔하여 식별 코드 이미지에 삽입된 픽셀 공간을 추출한다. 이때, 객체 진위 여부 확인 장치(200)는 식별 코드 이미지에서 서로 다른 크기의 픽셀 공간이 추출할 수 있다.
객체 진위 여부 확인 장치(200)는 픽셀 공간(611, 612, 613, 614)을 분석하여 픽셀 공간(611, 612, 613, 614)이 지시하는 인증 정보를 추출한다. 보다 구체적으로, 객체 진위 여부 확인 장치(200)는 기 결정된 픽셀 공간 별 이진수 값 테이블을 참조하여 픽셀 공간(611, 612, 613, 614)이 구성된 점의 개수에 따라 해당 픽셀 공간(611, 612, 613, 614)에 해당하는 이진수 값이 0 또는 1인지를 판별하고, 상기 이진수 값을 순차적으로 결합하여 이진수 코드를 결정할 수 있다.
그런 다음, 객체 진위 여부 확인 장치(200)는 이진수 코드 별 인증 정보 테이블을 참조하여 이진수 코드에 해당하는 인증 정보를 추출한다.
객체 진위 여부 확인 장치(200)는 인증 정보와 상기 특정 객체와 연관된 정보가 동일한지 여부에 따라 특정 객체의 진위 여부를 확인할 수 있다.
지금까지 본 발명에 따른 구체적인 실시예에 관하여 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서는 여러 가지 변형이 가능함은 물론이다. 그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안 되며, 후술하는 특허 청구의 범위뿐 아니라 이 특허 청구의 범위와 균등한 것들에 의해 정해져야 한다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 이는 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명 사상은 아래에 기재된 특허청구범위에 의해서만 파악되어야 하고, 이의 균등 또는 등가적 변형 모두는 본 발명 사상의 범주에 속한다고 할 것이다.
100: 식별 코드 이미지 생성 장치
110: 인증 정보 삽입 영역 결정부
120: 픽셀 공간 생성부
130: 이미지 생성부
140: 제어부
200: 객체 진위 여부 확인 장치
210: 식별 코드 이미지 스캔부
220: 디스플레이부
230: 메모리
240: 제어부

Claims (10)

  1. 객체 진위 여부 확인 장치에서 실행되는 식별 코드 이미지를 이용한 객체 진위 여부 확인 방법에 있어서,
    특정 객체에 삽입된 식별 코드 이미지에 대한 픽셀 분석을 실행하여 상기 식별 코드 이미지에서 사용자의 눈에 보이지 않는 색상으로 표현된 서로 다른 크기의 픽셀 공간을 추출하는 단계;
    상기 픽셀 공간을 분석하여 상기 픽셀 공간이 지시하는 인증 정보를 추출하는 단계; 및
    상기 인증 정보를 이용하여 상기 특정 객체를 인증하는 단계를 포함하고,
    상기 픽셀 공간을 분석하여 상기 픽셀 공간이 지시하는 인증 정보를 추출하는 단계는
    상기 식별 코드 이미지에서 서로 다른 크기의 픽셀 공간이 추출되면, 기 결정된 픽셀 공간 별 이진수 값 테이블을 참조하여 상기 픽셀 공간이 구성된 점의 개수에 따라 이진수 값을 결정하고, 상기 이진수 값을 이용하여 이진수 코드를 결정하는 단계를 포함하는
    식별 코드 이미지를 이용한 객체 진위 여부 확인 방법.
  2. 삭제
  3. 제1항에 있어서,
    상기 픽셀 공간을 분석하여 상기 픽셀 공간이 지시하는 인증 정보를 추출하는 단계는
    상기 기 결정된 픽셀 공간 별 이진수 값 테이블을 참조하여 상기 픽셀 공간이 구성된 점의 개수에 따라 해당 픽셀 공간에 해당하는 이진수 값이 0 또는 1인지를 판별하고, 상기 이진수 값을 순차적으로 결합하여 이진수 코드를 결정하는 단계; 및
    이진수 코드 별 인증 정보 테이블을 참조하여 상기 이진수 코드에 해당하는 인증 정보를 추출하는 단계를 포함하는
    식별 코드 이미지를 이용한 객체 진위 여부 확인 방법.
  4. 제1항에 있어서,
    상기 인증 정보를 이용하여 상기 특정 객체를 인증하는 단계는
    상기 인증 정보와 상기 특정 객체와 연관된 정보가 동일한지 여부에 따라 상기 특정 객체 진위 여부를 확인하는 단계를 포함하는 것을 특징으로 하는
    식별 코드 이미지를 이용한 객체 진위 여부 확인 방법.
  5. 제1항에 있어서,
    상기 식별 코드 이미지는
    상기 식별 코드 이미지가 부착된 제품의 번호에 대한 이미지, QR 코드 이미지 또는 바코드 이미지인 것을 특징으로 하는
    식별 코드 이미지를 이용한 객체 진위 여부 확인 방법.
  6. 특정 객체에 삽입된 식별 코드 이미지에 대한 픽셀 분석을 실행하여 상기 식별 코드 이미지에서 사용자의 눈에 보이지 않는 색상으로 표현된 서로 다른 크기의 픽셀 공간을 추출하는 픽셀 공간 추출부;
    기 결정된 픽셀 공간 별 이진수 값 테이블을 참조하여 상기 서로 다른 크기의 픽셀 공간이 구성된 점의 개수에 따라 이진수 값을 결정하고, 상기 이진수 값을 이용하여 이진수 코드를 결정하고, 상기 이진수 코드에 해당하는 인증 정보를 추출하는 인증 정보 추출부; 및
    상기 인증 정보를 이용하여 상기 특정 객체를 인증하는 객체 인증부를 포함하는
    객체 진위 여부 확인 장치.
  7. 삭제
  8. 제6항에 있어서,
    상기 인증 정보 추출부는
    상기 기 결정된 픽셀 공간 별 이진수 값 테이블을 참조하여 상기 픽셀 공간이 구성된 점의 개수에 따라 이진수 값이 0 또는 1인지를 판별하고, 상기 이진수 값을 순차적으로 결합하여 이진수 코드를 결정하고, 이진수 코드 별 인증 정보 테이블을 참조하여 상기 이진수 코드에 해당하는 인증 정보를 추출하는 것을 특징으로 하는
    객체 진위 여부 확인 장치.
  9. 제6항에 있어서,
    상기 객체 인증부는
    상기 인증 정보와 상기 특정 객체와 연관된 정보가 동일한지 여부에 따라 상기 특정 객체 진위 여부를 확인하는 것을 특징으로 하는
    객체 진위 여부 확인 장치.
  10. 제6항에 있어서,
    상기 식별 코드 이미지는
    상기 식별 코드 이미지가 부착된 제품의 번호에 대한 이미지, QR 코드 이미지 또는 바코드 이미지인 것을 특징으로 하는
    객체 진위 여부 확인 장치.
KR1020150101790A 2015-07-17 2015-07-17 식별 코드 이미지를 이용한 객체 진위 여부 확인 방법 및 이를 실행하는 장치 KR101587501B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020150101790A KR101587501B1 (ko) 2015-07-17 2015-07-17 식별 코드 이미지를 이용한 객체 진위 여부 확인 방법 및 이를 실행하는 장치
PCT/KR2016/001577 WO2017014391A1 (ko) 2015-07-17 2016-02-17 식별 코드 이미지를 이용한 객체 진위 여부 확인 방법 및 이를 실행하는 장치
TW105108924A TW201705043A (zh) 2015-07-17 2016-03-23 利用識別用代碼圖形確認客體真偽與否的方法及執行該方法的裝置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150101790A KR101587501B1 (ko) 2015-07-17 2015-07-17 식별 코드 이미지를 이용한 객체 진위 여부 확인 방법 및 이를 실행하는 장치

Publications (1)

Publication Number Publication Date
KR101587501B1 true KR101587501B1 (ko) 2016-01-22

Family

ID=55309039

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150101790A KR101587501B1 (ko) 2015-07-17 2015-07-17 식별 코드 이미지를 이용한 객체 진위 여부 확인 방법 및 이를 실행하는 장치

Country Status (3)

Country Link
KR (1) KR101587501B1 (ko)
TW (1) TW201705043A (ko)
WO (1) WO2017014391A1 (ko)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101859203B1 (ko) * 2017-02-03 2018-05-17 주식회사 더코더 식별 카드의 스캔을 통한 식별 카드 정보 이용 방법 및 이를 실행하는 단말 장치
KR101861352B1 (ko) * 2017-05-16 2018-05-28 주식회사 휴먼아이디 식별 카드의 스캔을 통한 식별 카드 정보 관리 방법 및 이를 실행하는 시스템
KR102188126B1 (ko) * 2020-02-24 2020-12-07 홍주표 위조 판별 장치 및 그 방법
KR20220068847A (ko) * 2020-11-19 2022-05-26 주식회사 더코더 진위 판별 코드가 삽입된 섬유 직조 방법 및 이를 통해 생성된 섬유를 구성하는 상품의 진위 판별 시스템
KR20220088116A (ko) * 2020-12-18 2022-06-27 주식회사 더코더 진위 판별 정보가 삽입된 식별 코드 이미지 생성 시스템 및 이를 통해 생성된 식별 코드 이미지를 이용한 객체 진위 여부 판별 방법
KR20220103566A (ko) * 2021-01-15 2022-07-22 주식회사 더코더 진위 판별 코드가 삽입된 직물 생성 방법 및 이를 통해 생성된 섬유를 구성하는 상품의 진위 판별 시스템

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110005700A (ko) * 2008-04-02 2011-01-18 시크파 홀딩 에스에이 액정 재료 마킹을 이용한 식별 및 인증
KR20130005865A (ko) * 2011-07-07 2013-01-16 노틸러스효성 주식회사 자기잉크문자 영역의 영상 데이터를 이용한 수표 인식 방법

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005029390A2 (en) * 2003-12-08 2005-03-31 International Barcode Corporation Method for identifying and authenticating goods using codes, barcodes and radio frequency identification
JP4026779B2 (ja) * 2005-02-02 2007-12-26 株式会社日立製作所 簡易装着無線タグと無線タグ装着装置
US8366004B2 (en) * 2008-02-22 2013-02-05 Qualcomm Incorporated Barcode detection based on morphological operations

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110005700A (ko) * 2008-04-02 2011-01-18 시크파 홀딩 에스에이 액정 재료 마킹을 이용한 식별 및 인증
KR20130005865A (ko) * 2011-07-07 2013-01-16 노틸러스효성 주식회사 자기잉크문자 영역의 영상 데이터를 이용한 수표 인식 방법

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101859203B1 (ko) * 2017-02-03 2018-05-17 주식회사 더코더 식별 카드의 스캔을 통한 식별 카드 정보 이용 방법 및 이를 실행하는 단말 장치
KR101861352B1 (ko) * 2017-05-16 2018-05-28 주식회사 휴먼아이디 식별 카드의 스캔을 통한 식별 카드 정보 관리 방법 및 이를 실행하는 시스템
KR102188126B1 (ko) * 2020-02-24 2020-12-07 홍주표 위조 판별 장치 및 그 방법
KR20220068847A (ko) * 2020-11-19 2022-05-26 주식회사 더코더 진위 판별 코드가 삽입된 섬유 직조 방법 및 이를 통해 생성된 섬유를 구성하는 상품의 진위 판별 시스템
KR102592936B1 (ko) * 2020-11-19 2023-10-23 주식회사 더코더 진위 판별 코드가 삽입된 직물 제조 장치 및 이를 통해 생성된 섬유를 구성하는 상품의 진위 판별 시스템
KR20220088116A (ko) * 2020-12-18 2022-06-27 주식회사 더코더 진위 판별 정보가 삽입된 식별 코드 이미지 생성 시스템 및 이를 통해 생성된 식별 코드 이미지를 이용한 객체 진위 여부 판별 방법
KR102515358B1 (ko) * 2020-12-18 2023-03-29 주식회사 더코더 진위 판별 정보가 삽입된 식별 코드 이미지 생성 시스템 및 이를 통해 생성된 식별 코드 이미지를 이용한 객체 진위 여부 판별 방법
KR20220103566A (ko) * 2021-01-15 2022-07-22 주식회사 더코더 진위 판별 코드가 삽입된 직물 생성 방법 및 이를 통해 생성된 섬유를 구성하는 상품의 진위 판별 시스템
KR102515363B1 (ko) 2021-01-15 2023-03-29 주식회사 더코더 진위 판별 코드가 삽입된 직물 생성 방법 및 이를 통해 생성된 섬유를 구성하는 상품의 진위 판별 시스템

Also Published As

Publication number Publication date
TW201705043A (zh) 2017-02-01
WO2017014391A1 (ko) 2017-01-26

Similar Documents

Publication Publication Date Title
KR101587501B1 (ko) 식별 코드 이미지를 이용한 객체 진위 여부 확인 방법 및 이를 실행하는 장치
US11048936B2 (en) IC card for authentication and a method for authenticating the IC card
CN102663600B (zh) 基于数字水印和条码的防伪***及其防伪方法和应用
RU2681696C2 (ru) Двухмерный штрихкод и способ аутентификации штрихкода
KR101574302B1 (ko) 데이터가 삽입된 이미지 생성 방법 및 이를 실행하는 이미지 생성 장치
CN110263775B (zh) 图像识别方法、装置、设备和认证方法、装置、设备
TW200818030A (en) Document authentication using template matching with fast masked normalized cross-correlation
AU2016360852B2 (en) Method for authenticating and/or checking the integrity of a subject
US9864889B2 (en) Authenticity tag and methods of encoding and verification
KR20210059518A (ko) 정품 인증 콘텐츠 생성 장치 및 이를 이용하는 통합 인증 시스템
KR20140087084A (ko) 라벨을 이용한 인증 서버 및 방법, 그리고 모바일 디바이스
CN111860727A (zh) 二维码生成方法、验证方法、设备及计算机可读存储介质
CN112465517A (zh) 防伪验证方法、装置及计算机可读存储介质
KR102033621B1 (ko) Qr 코드 위변조 탐지 시스템
CN110533704B (zh) 油墨标签的识别验伪方法、装置、设备及介质
WO2023241242A1 (zh) 一种数据识别方法及移动终端
CN111670429B (zh) 以对象id为中心的工作流
KR101858964B1 (ko) 이중 구성물에 데이터 삽입 방법 및 이중 구성물 상의 데이터 인식 방법
KR102515358B1 (ko) 진위 판별 정보가 삽입된 식별 코드 이미지 생성 시스템 및 이를 통해 생성된 식별 코드 이미지를 이용한 객체 진위 여부 판별 방법
CN111766244B (zh) 防伪元件验证方法及***
KR20150044150A (ko) 문서 이미지 전송 시스템 및 방법
KR101572076B1 (ko) 정보가 삽입된 이미지 생성 방법 및 이를 실행하는 이미지 생성 장치
Mantoro et al. Real-time printed document authentication using watermarked qr code
US10225432B2 (en) Facilitating authentication of a void pantograph
KR101658491B1 (ko) 상품 매장 진위 여부 판단 방법 및 이를 실행하는 단말 장치

Legal Events

Date Code Title Description
AMND Amendment
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee