KR101415718B1 - Method for generating partial image and terminal device thereof - Google Patents

Method for generating partial image and terminal device thereof Download PDF

Info

Publication number
KR101415718B1
KR101415718B1 KR1020120140154A KR20120140154A KR101415718B1 KR 101415718 B1 KR101415718 B1 KR 101415718B1 KR 1020120140154 A KR1020120140154 A KR 1020120140154A KR 20120140154 A KR20120140154 A KR 20120140154A KR 101415718 B1 KR101415718 B1 KR 101415718B1
Authority
KR
South Korea
Prior art keywords
image
viewfinder
displaying
partial image
partial
Prior art date
Application number
KR1020120140154A
Other languages
Korean (ko)
Other versions
KR20140072530A (en
Inventor
박시몽
이주헌
Original Assignee
주식회사 내비오닉스코리아
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 내비오닉스코리아 filed Critical 주식회사 내비오닉스코리아
Priority to KR1020120140154A priority Critical patent/KR101415718B1/en
Publication of KR20140072530A publication Critical patent/KR20140072530A/en
Application granted granted Critical
Publication of KR101415718B1 publication Critical patent/KR101415718B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 부분 이미지 생성 방법 및 그 단말 장치에 관한 것으로, 이 단말 장치는 외부의 대상체를 이미지로 획득하고, 이 이미지와 뷰파인더를 함께 표시하되 뷰파인더 내부의 이미지와 뷰파인더 외부의 이미지가 서로 다르게 표시되도록 대상체 이미지와 뷰파인더를 합성하고, 뷰파인더 내부의 이미지 중 일부를 부분 이미지로 생성한다.The present invention relates to a partial image generation method and a terminal device, which acquires an external object as an image, and displays the image together with the viewfinder, wherein an image inside the viewfinder and an image outside the viewfinder Combine the object image with the viewfinder so that they are displayed differently, and generate a partial image of the image inside the viewfinder.

Description

부분 이미지 생성 방법 및 그 단말 장치 {METHOD FOR GENERATING PARTIAL IMAGE AND TERMINAL DEVICE THEREOF}[0001] METHOD FOR GENERATING PARTIAL IMAGE AND TERMINAL DEVICE THEREOF [0002]

본 발명은 부분 이미지 생성 방법 및 그 단말 장치에 관한 것으로, 보다 자세하게는 효율적인 이미지 프로세싱을 수행할 수 있도록 하는 부분 이미지 생성 방법 및 그 단말 장치에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a partial image generation method and a terminal device thereof, and more particularly, to a partial image generation method and a terminal device for performing efficient image processing.

일반적으로 단말 장치는 통신 기능 이외에 다양한 기능들이 부가되어 복합적인 기능을 수행한다. 즉 현재의 단말 장치는 다양한 멀티미디어 기능이 부가되어 복합 단말 장치 형태로 발전하고 있다. 이 때 통신 단말 장치에서 수행되는 부가 기능으로는 카메라, DMB(Digital Multimedia Broadcasting), 블루투스(bluetooth) 통신 기능 등이 있다. 그리고 단말 장치는 카메라 기능을 이용하여 이미지를 촬영하여 이미지를 획득하거나 각종 통신 기능을 이용하여 외부와 통신을 수행할 수 있다.In general, a terminal device performs various functions in addition to communication functions. That is, the present terminal device is being developed as a complex terminal device with various multimedia functions added thereto. At this time, the additional functions performed by the communication terminal apparatus include a camera, a DMB (Digital Multimedia Broadcasting), and a Bluetooth communication function. The terminal device can acquire an image by capturing an image using a camera function, or perform communication with the outside using various communication functions.

획득된 이미지 내의 사물, 예를 들면 나뭇잎이 어떠한 잎인지 이미지 인식 알고리즘을 통하여 알아낼 수 있다. 그런데 획득된 이미지에는 목적으로 하는 대상체가 다른 물체들과 혼재되어 있으므로 획득된 전체 이미지를 이미지 인식 알고리즘을 통하여 처리하는 것은 비효율적일 뿐만 아니라 이미지 인식에 실패하는 등 이미지 프로세싱에 문제를 일으킬 가능성이 높다. 따라서 목적하는 대상체에 대한 부분 이미지를 생성할 필요가 있으며, 한국특허공개 10-2008-0077830에 휴대 단말기의 부분 이미지 생성을 위한 방법이 기재되어 있다.It is possible to find out what leaves in the acquired image, for example leaves, are obtained through the image recognition algorithm. However, since the target object is mixed with other objects in the acquired image, processing the acquired whole image through the image recognition algorithm is not only inefficient, but also has a high possibility of causing image processing problems such as failure in image recognition. Therefore, it is necessary to generate a partial image of a target object, and Korean Patent Laid-Open No. 10-2008-0077830 describes a method for generating a partial image of a mobile terminal.

따라서 본 발명이 해결하고자 하는 과제는 이미지 인식을 위한 이미지 프로세싱을 효율적으로 수행할 수 있도록 하기 위하여 목적으로 하는 대상체의 부분 이미지를 손쉽게 생성할 수 있도록 하는 부분 이미지 생성 방법 및 그 단말 장치를 제공하는 것이다.Accordingly, it is an object of the present invention to provide a partial image generation method and a terminal device for easily generating a partial image of a target object in order to efficiently perform image processing for image recognition .

이러한 과제를 해결하기 위한 본 발명의 한 실시예에 따른 단말 장치는, 외부의 대상체를 이미지로 획득하는 촬영부, 상기 이미지와 뷰파인더를 표시하는 표시부, 그리고 상기 뷰파인더 내부의 이미지와 상기 뷰파인더 외부의 이미지가 서로 다르게 표시되도록 상기 이미지와 상기 뷰파인더를 합성하고, 상기 뷰파인더 내부의 이미지 중 일부를 부분 이미지로 생성하는 처리부를 포함한다.According to an aspect of the present invention, there is provided a terminal apparatus including: a photographing unit that obtains an external object as an image; a display unit that displays the image and a viewfinder; And a processing unit for synthesizing the image and the viewfinder so that the external images are different from each other, and generating a partial image of the image inside the viewfinder.

상기 표시부는 상기 대상체에 포함되어 있는 선이 기준선에 겹치게 배치될 수 있도록 상기 기준선을 표시할 수 있다.The display unit may display the reference line so that a line included in the object overlaps the reference line.

상기 표시부는 복수의 선을 표시하며, 상기 처리부는 사용자에 의하여 상기 선이 이동됨으로써 상기 뷰파인더 내부의 이미지 크기를 조정할 수 있다.The display unit displays a plurality of lines, and the processing unit can adjust the image size of the inside of the viewfinder by moving the line by the user.

상기 처리부는 사용자로부터 상기 표시부에 표시되어 있는 상기 대상체의 기준점에 대한 터치 입력을 받아 상기 대상체 기준점의 위치 정보를 생성할 수 있다.The processing unit may generate location information of the object reference point by receiving a touch input from the user with respect to the reference point of the object displayed on the display unit.

본 발명의 다른 실시예에 따른 부분 이미지 생성 방법은, 외부의 대상체를 이미지로 획득하는 단계, 상기 이미지와 뷰파인더를 표시하는 단계, 상기 뷰파인더 내부의 이미지와 상기 뷰파인더 외부의 이미지가 서로 다르게 표시되도록 상기 이미지와 상기 뷰파인더를 합성하는 단계, 그리고 상기 뷰파인더 내부의 이미지 중 일부를 부분 이미지로 생성하는 단계를 포함한다.According to another aspect of the present invention, there is provided a partial image generating method comprising the steps of acquiring an external object as an image, displaying the image and a viewfinder, displaying an image inside the viewfinder and an image outside the viewfinder differently Combining the image and the viewfinder so as to be displayed, and generating a partial image of the image inside the viewfinder.

상기 표시 단계는 상기 대상체에 포함되어 있는 선이 기준선에 겹치게 배치될 수 있도록 상기 기준선을 표시하는 단계를 포함할 수 있다.The displaying step may include displaying the reference line so that a line included in the object overlaps the reference line.

상기 부분 이미지 생성 단계는 복수의 선을 표시하는 단계, 그리고 상기 선이 이동됨에 따라 상기 뷰파인더 내부의 이미지 크기를 조정하는 단계를 포함할 수 있다.The generating of the partial image may include displaying a plurality of lines, and adjusting an image size of the inside of the viewfinder as the line is moved.

사용자로부터 상기 표시부에 표시되어 있는 상기 대상체의 기준점에 대한 터치 입력을 받아 상기 대상체 기준점의 위치 정보를 생성하는 단계를 더 포함할 수 있다.And generating location information of the object reference point by receiving a touch input from the user on the reference point of the object displayed on the display unit.

본 발명의 다른 실시예에 따른 부분 이미지를 생성하는 단말 장치의 사용자 인터페이스 제공 방법은, 외부의 대상체로부터 획득된 이미지 위에 뷰파인더를 표시하되 상기 뷰파인더 내부의 이미지와 상기 뷰파인더 외부의 이미지가 서로 다르게 표시하는 단계, 그리고 상기 대상체에 포함되어 있는 선이 기준선에 겹치게 배치될 수 있도록 상기 기준선을 표시하는 단계를 포함한다.According to another aspect of the present invention, there is provided a method of providing a user interface of a terminal device for generating a partial image, the method comprising: displaying a viewfinder on an image obtained from an external object, And displaying the reference line so that a line included in the object overlaps the reference line.

상기 뷰파인더 내부의 이미지 크기를 조정할 수 있도록 복수의 선을 표시하는 단계를 더 포함할 수 있다.The method may further include displaying a plurality of lines so as to adjust an image size of the inside of the viewfinder.

본 발명의 다른 실시예에 따른 컴퓨터로 읽을 수 있는 매체는 상기한 방법 중 어느 하나를 실행시키기 위한 프로그램을 기록한다.A computer-readable medium according to another embodiment of the present invention records a program for executing any one of the above methods.

본 발명의 실시예에 따른 부분 이미지 생성 방법 및 그 단말 장치에 의하면, 사용자가 촬영한 이미지로부터 목적으로 하는 대상체의 부분 이미지를 용이하게 생성할 수 있다. 이에 따라 이 부분 이미지를 가지고 이미지 인식 알고리즘을 통하여 보다 효율적인 이미지 프로세싱을 수행할 수 있으며, 결국 이미지 인식율도 향상될 수 있다.According to the partial image generating method and the terminal device of the embodiment of the present invention, a partial image of a target object can be easily generated from an image taken by a user. Accordingly, it is possible to perform more efficient image processing through the image recognition algorithm with the partial image, and as a result, the image recognition rate can be improved.

도 1은 본 발명의 한 실시예에 따른 이미지 인식 시스템의 블록도이다.
도 2는 도 1에 도시한 단말 장치의 블록도이다.
도 3은 본 발명의 다른 실시예에 따른 부분 이미지 생성 방법을 도시한 흐름도이다.
도 4a 내지 도 4h는 본 발명의 한 실시예에 따라 부분 이미지를 생성하는 과정을 설명하기 위한 예시도이다.1 is a block diagram of an image recognition system in accordance with an embodiment of the present invention.
2 is a block diagram of the terminal device shown in FIG.
3 is a flowchart illustrating a partial image generation method according to another embodiment of the present invention.
4A to 4H are exemplary diagrams illustrating a process of generating a partial image according to an embodiment of the present invention.

본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다.The terms and words used in the present specification and claims should not be construed as limited to ordinary or dictionary terms and the inventor may appropriately define the concept of the term in order to best describe its invention It should be construed as meaning and concept consistent with the technical idea of the present invention.

따라서 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 실시예에 불과할 뿐이고 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형 예들이 있을 수 있음을 이해하여야 한다.Therefore, the embodiments described in the present specification and the configurations shown in the drawings are merely the most preferred embodiments of the present invention and are not intended to represent all of the technical ideas of the present invention. Therefore, various equivalents And variations are possible.

그러면 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art can easily carry out the present invention.

도 1은 본 발명의 한 실시예에 따른 이미지 인식 시스템을 설명하기 위한 블록도이다.1 is a block diagram for explaining an image recognition system according to an embodiment of the present invention.

본 발명의 한 실시예에 따른 이미지 인식 시스템은 서버(300) 및 이에 연결되어 있는 데이터베이스(400)를 포함하며, 통신망(200)을 통하여 단말 장치(100)와 연결되어 있다.The image recognition system according to an embodiment of the present invention includes a server 300 and a database 400 connected to the server 300 and is connected to the terminal device 100 through a communication network 200.

단말 장치(100)는 컴퓨터 또는 휴대폰, 스마트폰, 태블릿 등의 휴대용 정보 기기일 수 있다. 단말 장치(100)는 그 내부에 카메라를 포함하고 있으며 카메라에 의하여 촬영된 이미지로부터 이미지 인식을 위한 부분 이미지를 생성한 후 통신망(200)을 통하여 서버(300)로 전송한다.The terminal device 100 may be a computer or a portable information device such as a mobile phone, a smart phone, or a tablet. The terminal device 100 includes a camera therein and generates a partial image for image recognition from the image captured by the camera and transmits the generated partial image to the server 300 through the communication network 200. [

통신망(200)은 구내 정보 통신망(local area network, LAN), 도시권 통신망(metropolitan area network, MAN), 광역 통신망(wide area network, WAN), 인터넷 등을 포함하는 데이터 통신망뿐만 아니라 전화망 등을 포함할 수 있고, 유선과 무선을 가리지 않으며, 어떠한 통신 방식을 사용하더라도 상관없다.The communication network 200 includes a data network as well as a telephone network including a local area network (LAN), a metropolitan area network (MAN), a wide area network (WAN) It does not matter whether it is wired or wireless, and it does not matter what communication method you use.

서버(300)는 단말 장치(410)의 요청에 따라 부분 이미지를 입력 받고 부분 이미지에 대하여 이미지 인식 알고리즘을 사용하여 대상체의 명칭을 탐지해 낸다. 이미지 인식 알고리즘은 예를 들면 Sobel이나 Prewitt의 윤곽선 추출법(edge detection and extraction) 등을 이용하여 이미지로부터 윤곽선을 추출해 낸 후 윤곽선의 특징(예를 들면 가로와 세로 비율 등)을 추출하여 윤곽선과 가장 유사한 모양을 가지는 물체를 찾아내는 방식으로 실행될 수 있다.The server 300 receives the partial image at the request of the terminal device 410 and detects the name of the object using the image recognition algorithm for the partial image. The image recognition algorithm extracts the contours from the image using, for example, Sobel or Prewitt edge detection and extraction, and then extracts features of the contours (for example, the aspect ratio and the like) It can be executed in such a manner as to find an object having a shape.

데이터베이스(400)는 물체의 명칭, 특징 등 이미지 인식을 위한 다양한 정보를 기억한다.The database 400 stores various information for image recognition such as an object name and a characteristic.

본 발명의 실시예에 따른 이미지 인식 시스템은 예를 들면 식물의 나뭇잎 사진 분석을 통하여 식물의 분류학상의 소속이나 명칭을 파악할 수 있는 식물 동정(同定) 시스템으로 응용될 수 있다.The image recognition system according to the embodiment of the present invention can be applied as a plant identification system capable of grasping the affiliation or name of the plant taxonomy through, for example, photograph analysis of leaves of plants.

그러면 이미지 인식 알고리즘을 좀 더 효율적으로 수행할 수 있도록 부분 이미지를 용이하게 생성할 수 있는 단말 장치(100)에 대하여 좀 더 상세하게 설명한다.Hereinafter, the terminal device 100 capable of easily generating a partial image in order to more efficiently perform the image recognition algorithm will be described in more detail.

도 2는 본 발명의 한 실시예에 따른 부분 이미지 생성을 위한 단말 장치의 블록도이다.2 is a block diagram of a terminal device for generating partial images according to an embodiment of the present invention.

단말 장치(100)는, 예를 들면 데스크톱 컴퓨터, 노트북 컴퓨터, 워크스테이션, 랩톱 컴퓨터, 팜톱(palmtop) 컴퓨터, UMPC(ultra mobile personal computer), 태블릿 PC, 개인 휴대 정보 단말기(personal digital assistant, PDA), 웹 패드, 휴대 전화, 스마트 폰, 휴대용 멀티미디어 플레이어(portable multimedia player, PMP) 등과 같이 컴퓨터나 휴대용 정보 기기에 대응할 수 있으나 이에 한정되지 않는다.The terminal device 100 may be a personal computer or a personal digital assistant (PDA) such as a desktop computer, a notebook computer, a workstation, a laptop computer, a palmtop computer, an ultra mobile personal computer (UMPC), a tablet PC, , A web pad, a mobile phone, a smart phone, a portable multimedia player (PMP), and the like.

도 2를 참고하면, 단말 장치(100)는 입력부(110), 처리부(120), 표시부(130), 기억부(140), 그리고 촬영부(150)를 포함한다.2, the terminal device 100 includes an input unit 110, a processing unit 120, a display unit 130, a storage unit 140, and a photographing unit 150.

입력부(110)는 외부로부터의 사용자 입력에 따라 단말 장치(100) 내로 데이터를 전송한다. 예를 들면, 입력부(110)는 문자 또는 숫자를 입력하는 데 사용되거나, 단말 장치(100)의 애플리케이션의 시작을 지시하는 데 사용되거나, 표시부(130) 상의 그래픽 사용자 인터페이스(GUI)와 관련된 명령을 입력하는 데 사용될 수 있다. 입력부(110)는 사용자의 터치에 따라 터치 정보를 생성하고 이 정보를 처리부(120)로 전송하는 터치 감지부(도시하지 않음)를 포함할 수 있다. 터치 감지부는 한 예로서 터치 패드 또는 터치스크린에 대응할 수 있다. 터치 감지부는 표시부(130)와 결합되어 표시부(130)와 일체로 구현될 수 있으나 이에 한정되지 않는다. 한편 입력부(110)는 터치 감지부 대신에 또는 터치 감지부와 함께 키보드 및/또는 마우스를 포함할 수도 있다.The input unit 110 transmits data to the terminal device 100 according to a user input from the outside. For example, the input unit 110 may be used for inputting characters or numbers, or may be used for instructing the start of the application of the terminal apparatus 100, or may be used for instructing a command related to the graphical user interface (GUI) Can be used to input. The input unit 110 may include a touch sensing unit (not shown) that generates touch information according to a user's touch and transmits the generated touch information to the processing unit 120. [ The touch sensing unit may correspond to a touch pad or a touch screen as an example. The touch sensing unit may be integrated with the display unit 130 in combination with the display unit 130, but is not limited thereto. On the other hand, the input unit 110 may include a keyboard and / or mouse instead of or in addition to the touch sensing unit.

처리부(120)는 명령어를 실행하고 데이터를 생성하거나 사용하는 동작을 한다. 예를 들면, 처리부(120)는 단말 장치(100)의 컴포넌트들 간의 입력 및 출력 데이터를 처리할 수 있으며, 촬영부(150)로부터 이미지 데이터를 받아 적절한 처리를 수행하여 이를 표시부(130)에 표시한다. 또한 처리부(120)는 표시부(130)에 그래픽 사용자 인터페이스를 표시하고 촬영된 이미지로부터 부분 이미지를 생성할 수 있도록 한다. 처리부(120)는 단일 칩, 다수의 칩 또는 다수의 전기 부품 상에 구현될 수 있으며, 예를 들어, 전용 또는 임베디드 프로세서, 단일 목적 프로세서, 컨트롤러, 또는 주문형 반도체(ASIC) 등으로 이루어질 수 있다.The processing unit 120 performs an operation of executing an instruction and generating or using data. For example, the processing unit 120 can process input and output data between the components of the terminal device 100, receives image data from the photographing unit 150, performs appropriate processing, and displays it on the display unit 130 do. The processing unit 120 also displays a graphical user interface on the display unit 130 and allows a partial image to be generated from the photographed image. The processing unit 120 may be implemented on a single chip, a plurality of chips or a plurality of electrical components, for example, a dedicated or embedded processor, a single purpose processor, a controller, or an application specific integrated circuit (ASIC).

기억부(140)는 단말 장치(100)에 의해 사용되는 실행 코드 및 데이터를 저장하는 장소를 제공한다. 기억부(140)는 처리부(120)로부터의 요청에 따라 데이터를 기억하고, 명령어 및/또는 데이터를 처리부(120)에 제공한다. 예를 들면, 기억부(140)는 촬영된 전체 이미지 데이터 및 부분 이미지 데이터를 기억하고 있다. 기억부(140)는 판독 전용 메모리(ROM), 랜덤 액세스 메모리(RAM), 하드 디스크 드라이브, 메모리 카드, PC 카드, CD-ROM, 플로피 디스크, 또는 자기테이프 등을 포함할 수 있다.The storage unit 140 provides a place for storing execution codes and data used by the terminal apparatus 100. [ The storage unit 140 stores data in response to a request from the processing unit 120, and provides the processing unit 120 with the command and / or data. For example, the storage unit 140 stores the entire captured image data and partial image data. The storage unit 140 may include a read-only memory (ROM), a random access memory (RAM), a hard disk drive, a memory card, a PC card, a CD-ROM, a floppy disk,

표시부(130)는 각종 정보를 출력하여 사용자에게 제공하며, 예를 들면, 액정 디스플레이(liquid crystal display), CRT(cathode-ray tube), 유기 발광 다이오드(organic light emitting diode), 플라즈마 디스플레이 모니터 등으로 이루어질 수 있다.The display unit 130 displays various information and provides the information to the user. The display unit 130 may be a liquid crystal display, a cathode-ray tube (CRT), an organic light emitting diode, a plasma display monitor Lt; / RTI >

촬영부(150)는 외부의 현실 세계를 이미지로 획득하는 카메라를 포함하며, 획득된 이미지에 대하여 적절한 처리를 수행하여 얻은 이미지 데이터를 처리부(120)에 전송한다.The photographing unit 150 includes a camera for acquiring an external real world as an image, and transmits the obtained image data to the processing unit 120 by performing appropriate processing on the obtained image.

그러면 도 3 및 도 4a 내지 도 4h를 참고하여 본 발명의 다른 실시예에 따른 부분 이미지 생성 방법에 대하여 상세하게 설명한다. 앞으로 이 부분 이미지 생성 방법은 도 2의 단말 장치(100)에서 수행되는 것으로 하여 설명한다. 그러나 이에 한정되지 않으며 이 부분 이미지 생성 방법은 도 2의 단말 장치(100)뿐만 아니라 이미지 인식이 요구되는 어떠한 장치나 시스템에도 그 명칭에 관계없이 적용될 수 있다.A partial image generating method according to another embodiment of the present invention will now be described in detail with reference to FIG. 3 and FIGS. 4A to 4H. Hereinafter, the partial image generating method will be described as being performed in the terminal device 100 of FIG. However, the present invention is not limited thereto, and the partial image generation method can be applied to any device or system that requires image recognition as well as the terminal device 100 of FIG. 2 irrespective of its name.

도 3은 본 발명의 다른 실시예에 따른 부분 이미지 생성 방법을 도시한 흐름도이고, 도 4a 내지 도 4h는 본 발명의 한 실시예에 따라 부분 이미지를 생성하는 과정을 설명하기 위한 예시도이다.FIG. 3 is a flowchart illustrating a method of generating a partial image according to another exemplary embodiment of the present invention. FIGS. 4A through 4H illustrate a process of generating a partial image according to an exemplary embodiment of the present invention.

설명의 편의를 위하여 이미지 인식을 위한 대상체가 도 4a에 도시한 것처럼 나뭇잎인 것으로 한다. 그러나 이에 한정되지 않으며 어떠한 대상이라도 본 발명의 실시예에 따른 부분 이미지 생성 방법이 적용될 수 있다.For convenience of explanation, it is assumed that the object for image recognition is a leaf as shown in FIG. 4A. However, the present invention is not limited to this, and a partial image generating method according to an embodiment of the present invention can be applied to any object.

먼저 동작이 시작되면 도 4b에 도시한 것처럼 촬영부(150)로부터 입력된 이미지를 표시부(130)에 표시하고, 원 모양(131)과 기준선(132)으로 이루어진 뷰파인더(133)를 이미지 위에 표시한다(S310). 엄격하게 말하면 촬영부(150)로부터 입력된 이미지와 뷰파인더(133) 이미지가 합성되어 한 화면에 표시되는 것이다. 기준선(132)은 원형 뷰파인더(131)의 지름을 지나며 단말 장치(100)의 한 변에 평행하도록 표시한다. 원형 뷰파인더(131)의 내부에는 외부로부터 획득된 이미지 그대로를 표시하지만 그 외부에는 블러(blur), 모자이크, 선명 효과 필터(sharpen filter) 등을 이용하여 사물이 흐리게 보이게 하거나 알아 보기 어렵게 만든다. 뷰파인더(131)는 반드시 원형일 필요는 없으며, 필요에 따라 사각형이나 삼각형, 기타 다른 모양이라도 무방하다.4B, the image input from the photographing unit 150 is displayed on the display unit 130 and the view finder 133 including the circle shape 131 and the reference line 132 is displayed on the image (S310). Strictly speaking, the image input from the photographing unit 150 and the image of the viewfinder 133 are combined and displayed on one screen. The reference line 132 passes through the diameter of the circular viewfinder 131 and is displayed parallel to one side of the terminal device 100. In the inside of the circular viewfinder 131, an image obtained from the outside is displayed as it is, but blur, mosaic, sharpen filter and the like are used outside to make the object look blurred or hard to see. The viewfinder 131 is not necessarily circular, and may be a square, a triangle, or any other shape as necessary.

이와 같이 원형 뷰파인더(131) 내부와 외부의 이미지를 서로 다르게 표시함으로써 사용자의 초점을 뷰파인더(133) 내부로 집중시킬 수 있으며, 사용자가 목적으로 하는 대상체를 뷰파인더(133) 중앙에 정치(定置)시킬 수 있도록 한다.The user can focus the focus of the user inside the viewfinder 133 by displaying different images of the inside and the outside of the circular viewfinder 131 as described above. The user can focus the target object on the center of the viewfinder 133 To be fixed).

또한 사용자는 단말 장치(100)를 조정하여, 도 4c에 도시한 것처럼, 대상체의 특징이 되는 부분의 선, 즉 본 예시에서는 나뭇잎의 주맥과 기준선(132)을 겹치게 배치하도록 한다. 이와 같이 주맥을 기준선(132)과 겹치게 배치함으로써 생성된 부분 이미지의 기준선(132)을 기초로 하여 이미지 인식 프로세싱을 수행할 수 있다. 만일 특징적인 부분이 없는 사물이거나 반드시 필요하지 않다면 뷰파인더의 기준선(132)은 생략할 수 있다.4C, the user adjusts the terminal device 100 to arrange the line of the characteristic part of the target object, that is, the center line of the leaves and the reference line 132 in the overlapping manner in this example. Thus, image recognition processing can be performed on the basis of the reference line 132 of the partial image generated by arranging the veins overlapping the reference line 132. The baseline 132 of the viewfinder may be omitted if it is an object without a characteristic feature or is not necessarily required.

사용자가 도 4c의 화면과 같이 대상체를 뷰파인더(133)에 정치시키고 이미지 획득 명령을 입력하면 단말 장치(100)는 해당 이미지를 원본 이미지로 획득하고 원본 이미지 데이터를 기억한다(S320).When the user places an object on the viewfinder 133 and inputs an image acquisition command as shown in FIG. 4C, the terminal device 100 acquires the image as an original image and stores the original image data (S320).

그런 후 단말 장치(100)는 원본 이미지와 함께 이미지의 크기를 조정하기 위한 복수의 선, 즉 좌측 세로선(134), 우측 세로선(135), 상단 가로선(136), 그리고 하단 가로선(137)으로 이루어진 그래픽 사용자 인터페이스(GUI)를 표시한다(S330). 이 경우 각 선(134~137)의 교점으로 이루어진 사각형 내부는 원본 이미지를 그대로 표시하고 외부는 뷰파인더(133) 외부와 같이 블러 등의 이미지 효과를 표시한다. 그러면 사용자는 손가락, 스타일러스 펜 등의 터치 입력 수단으로 드래그하는 등의 조작을 통하여 각 선(134~137)을 이동시켜 이미지의 크기를 조정한다.The terminal device 100 then comprises a plurality of lines for adjusting the size of the image together with the original image, namely a left vertical line 134, a right vertical line 135, an upper horizontal line 136 and a lower horizontal line 137 And displays a graphical user interface (GUI) (S330). In this case, the inside of the rectangle formed by the intersection of the lines 134 to 137 displays the original image as it is, and the outside displays the image effect such as blur, as outside the viewfinder 133. Then, the user adjusts the size of the image by moving each of the lines 134 to 137 through an operation such as dragging with a touch input means such as a finger or a stylus pen.

도 4d의 상단 가로선(136a)은 상단 가로선(136)을 아래로 이동하여 대상체(나뭇잎)의 상측 가장자리 끝부분에 위치한 것을 나타내고, 도 4e의 하단 가로선(137a)은 하단 가로선(137)을 위로 이동하여 대상체(나뭇잎)의 하측 가장자리 끝부분에 위치한 것을 나타낸다.The upper horizontal line 136a of FIG. 4D indicates that the upper horizontal line 136 is moved downward to be located at the upper edge of the target (leaf), and the lower horizontal line 137a of FIG. 4e indicates that the lower horizontal line 137 is moved upward And is located at the lower edge of the object (leaf).

그러나 도 4c에 도시한 것처럼 대상체(나뭇잎)의 장축을 원형 뷰파인더(131) 내부에 거의 꽉 차게 배치하도록 요구되므로 좌우측 세로선(134, 135)은 조정하지 않아도 무방하나 조정이 필요할 수도 있다.However, as shown in FIG. 4C, it is required to arrange the long axis of the object (leaf) in the circular viewfinder 131 almost tightly, so that the left and right vertical lines 134 and 135 need not be adjusted but may need to be adjusted.

한편 대상체의 기준점을 터치 입력 수단으로 터치함으로써 이미지 인식 프로세싱을 보다 용이하게 할 수 있다. 예를 들어 도 4f에 도시한 것처럼 나뭇잎 주맥의 양 끝단을 터치함으로써 나뭇잎의 기준점의 위치를 입력할 수 있으며, 기준점의 위치 정보를 이용하여 주맥이 기준선(132)과 적절히 겹치게 배열되었는지 여부를 판단할 수 있다. 대상체의 기준점은 미리 정의되며 이미지 인식 알고리즘과 연동되어 프로세싱 될 수 있다.Meanwhile, by touching the reference point of the object with the touch input means, the image recognition processing can be facilitated. For example, as shown in FIG. 4F, the positions of the reference points of the leaf can be input by touching both ends of the leaves, and it is determined whether or not the bevels are appropriately overlapped with the reference line 132 by using the position information of the reference points . The reference point of the object is predefined and can be processed in conjunction with the image recognition algorithm.

이러한 과정을 거쳐 사용자에 의한 원본 이미지의 조정이 완료되면(S340), 도 4g에 도시한 것처럼 각 선(134, 135, 136a, 137a)의 교점으로 이루어진 사각형 내부에 나타나는 이미지를 부분 이미지로 생성한다(S350).When the adjustment of the original image by the user is completed through this process (S340), an image appearing inside the rectangle formed by the intersection of the lines 134, 135, 136a, and 137a is generated as a partial image as shown in FIG. 4G (S350).

이와 같이 도 4h에 도시한 것처럼 본 발명의 실시예에 따라 생성된 부분 이미지는 그 내부에 대상체의 형태 전부가 나타나 있으며 대상체 이외의 불필요한 사물은 현저하게 줄어들게 된다. 또한 대상체는 부분 이미지 중심부에 위치하게 되며 대상체의 특징 선(주맥)이 부분 이미지의 기준선(132)과 겹치게 된다. 따라서 이러한 부분 이미지를 가지고 이미지 프로세싱을 수행하면 대상체가 어떠한 것인지 인식하는 데 보다 효율적이 된다.Thus, as shown in FIG. 4H, the partial image generated according to the embodiment of the present invention shows all the shapes of the object inside thereof, and unnecessary objects other than the object are significantly reduced. Also, the object is positioned at the center of the partial image, and the characteristic line (the stem) of the object overlaps the reference line 132 of the partial image. Therefore, image processing with these partial images is more efficient in recognizing what objects are.

단말 장치(100)는 생성된 부분 이미지와 기준선(132) 및 특징점의 위치 정보를 서버(300)로 전송하고, 서버(300)는 단말 장치(100)로부터 수신된 부분 이미지 정보 등을 이용하여 이미지 인식 프로세싱을 수행한다. 물론 단말 장치(100)가 서버(300)를 통하지 않고 직접 이미지 인식 프로세싱을 수행할 수도 있다.The terminal device 100 transmits the generated partial image, the reference line 132 and the location information of the minutiae to the server 300, and the server 300 transmits the image information Recognition processing is performed. Of course, the terminal apparatus 100 may directly perform image recognition processing without going through the server 300. [

본 발명의 다른 실시예는 다양한 컴퓨터로 구현되는 동작을 수행하기 위한 프로그램 명령을 포함하는 컴퓨터로 읽을 수 있는 매체를 포함한다. 이 매체는 지금까지 설명한 부분 이미지 생성 방법을 실행시키기 위한 프로그램을 기록한다. 이 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 이러한 매체의 예에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 자기 매체, CD 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(Floptical Disk)와 자기-광 매체, 롬, 램, 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 구성된 하드웨어 장치 등이 있다. 또는 이러한 매체는 프로그램 명령, 데이터 구조 등을 지정하는 신호를 전송하는 반송파를 포함하는 광 또는 금속선, 도파관 등의 전송 매체일 수 있다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.Other embodiments of the invention include a computer readable medium having program instructions for performing various computer implemented operations. This medium records a program for executing the partial image generation method described so far. The medium may include program instructions, data files, data structures, etc., alone or in combination. Examples of such media include magnetic media such as hard disks, floppy disks and magnetic tape, optical recording media such as CD and DVD, programmed instructions such as Floptical Disk and magneto-optical media, ROM, And a hardware device configured to store and execute the program. Or such medium may be a transmission medium, such as optical or metal lines, waveguides, etc., including a carrier wave that transmits a signal specifying a program command, data structure, or the like. Examples of program instructions include machine language code such as those produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like.

이상에서 본 발명의 예시적인 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, And falls within the scope of the invention.

100: 단말 장치, 110: 입력부,
120: 처리부, 130: 표시부,
140: 기억부, 150: 촬영부,
200: 통신망, 300: 서버,
400: 데이터베이스100: terminal device, 110: input part,
120: processing section, 130: display section,
140: storage unit, 150: shooting unit,
200: communication network, 300: server,
400: Database

Claims (11)

외부의 대상체를 이미지로 획득하는 촬영부,
상기 이미지와 뷰파인더를 표시하는 표시부, 그리고
상기 뷰파인더 내부의 이미지와 상기 뷰파인더 외부의 이미지가 서로 다르게 표시되도록 상기 이미지와 상기 뷰파인더를 합성하고, 상기 뷰파인더 내부의 이미지 중 일부를 부분 이미지로 생성하는 처리부
를 포함하고,
상기 표시부는 상기 대상체에 포함되어 있는 선이 상기 뷰파인더에 포함되어 있는 기준선에 겹치게 배치될 수 있도록 상기 기준선을 표시하는
단말 장치.A photographing unit for acquiring an external object by an image,
A display unit for displaying the image and the viewfinder, and
A processor for synthesizing the image and the viewfinder so that an image inside the viewfinder and an image outside the viewfinder are displayed differently, and a part of the images in the viewfinder is generated as a partial image
Lt; / RTI >
Wherein the display unit displays the reference line so that a line included in the object is superimposed on a reference line included in the viewfinder
Terminal device. 삭제delete 제1항에서,
상기 표시부는 복수의 선을 표시하며, 상기 처리부는 사용자에 의하여 상기 선이 이동됨으로써 상기 뷰파인더 내부의 이미지 크기를 조정하는 단말 장치.The method of claim 1,
Wherein the display unit displays a plurality of lines, and the processing unit adjusts the image size of the inside of the viewfinder by moving the line by a user. 외부의 대상체를 이미지로 획득하는 촬영부,
상기 이미지와 뷰파인더를 표시하는 표시부, 그리고
상기 뷰파인더 내부의 이미지와 상기 뷰파인더 외부의 이미지가 서로 다르게 표시되도록 상기 이미지와 상기 뷰파인더를 합성하고, 상기 뷰파인더 내부의 이미지 중 일부를 부분 이미지로 생성하는 처리부
를 포함하고,
상기 처리부는 사용자로부터 상기 표시부에 표시되어 있는 상기 대상체의 기준점에 대한 터치 입력을 받아 상기 대상체 기준점의 위치 정보를 생성하는 단말 장치.A photographing unit for acquiring an external object by an image,
A display unit for displaying the image and the viewfinder, and
A processor for synthesizing the image and the viewfinder so that an image inside the viewfinder and an image outside the viewfinder are displayed differently, and a part of the images in the viewfinder is generated as a partial image
Lt; / RTI >
Wherein the processing unit receives touch input of a reference point of the object displayed on the display unit by a user and generates position information of the object reference point. 외부의 대상체를 이미지로 획득하는 단계,
상기 이미지와 뷰파인더를 표시하는 단계,
상기 뷰파인더 내부의 이미지와 상기 뷰파인더 외부의 이미지가 서로 다르게 표시되도록 상기 이미지와 상기 뷰파인더를 합성하는 단계, 그리고
상기 뷰파인더 내부의 이미지 중 일부를 부분 이미지로 생성하는 단계
를 포함하고,
상기 표시 단계는 상기 대상체에 포함되어 있는 선이 상기 뷰파인더에 포함되어 있는 기준선에 겹치게 배치될 수 있도록 상기 기준선을 표시하는 단계를 포함하는
부분 이미지 생성 방법.Acquiring an external object as an image,
Displaying the image and the viewfinder,
Synthesizing the image and the viewfinder so that an image inside the viewfinder and an image outside the viewfinder are displayed differently, and
Generating a partial image of the image inside the viewfinder as a partial image
Lt; / RTI >
Wherein the displaying step includes displaying the reference line so that a line included in the object is superimposed on the reference line included in the viewfinder
How to create a partial image. 삭제delete 제5항에서,
상기 부분 이미지 생성 단계는
복수의 선을 표시하는 단계, 그리고
상기 선이 이동됨에 따라 상기 뷰파인더 내부의 이미지 크기를 조정하는 단계
를 포함하는 부분 이미지 생성 방법.The method of claim 5,
The partial image generation step
Displaying a plurality of lines, and
Adjusting an image size inside the viewfinder as the line is moved
/ RTI > 외부의 대상체를 이미지로 획득하는 단계,
상기 이미지와 뷰파인더를 표시하는 단계,
상기 뷰파인더 내부의 이미지와 상기 뷰파인더 외부의 이미지가 서로 다르게 표시되도록 상기 이미지와 상기 뷰파인더를 합성하는 단계,
상기 뷰파인더 내부의 이미지 중 일부를 부분 이미지로 생성하는 단계, 그리고
사용자로부터 표시부에 표시되어 있는 상기 대상체의 기준점에 대한 터치 입력을 받아 상기 대상체 기준점의 위치 정보를 생성하는 단계
를 포함하는 부분 이미지 생성 방법.Acquiring an external object as an image,
Displaying the image and the viewfinder,
Combining the image and the viewfinder so that an image inside the viewfinder and an image outside the viewfinder are displayed differently,
Generating a partial image of the image within the viewfinder as a partial image, and
Receiving location information of the object reference point from the user by touching the reference point of the object displayed on the display unit
/ RTI > 부분 이미지를 생성하는 단말 장치의 사용자 인터페이스 제공 방법으로서,
외부의 대상체로부터 획득된 이미지 위에 뷰파인더를 표시하되 상기 뷰파인더 내부의 이미지와 상기 뷰파인더 외부의 이미지가 서로 다르게 표시하는 단계, 그리고
상기 대상체에 포함되어 있는 선이 상기 뷰파인더에 포함되어 있는 기준선에 겹치게 배치될 수 있도록 상기 기준선을 표시하는 단계
를 포함하는 사용자 인터페이스 제공 방법.A method of providing a user interface of a terminal device for generating a partial image,
Displaying a viewfinder on an image obtained from an external object, displaying an image inside the viewfinder and an image outside the viewfinder differently from each other, and
Displaying the reference line so that a line included in the object can be overlapped with a reference line included in the viewfinder
And providing the user interface to the user interface. 제9항에서,
상기 뷰파인더 내부의 이미지 크기를 조정할 수 있도록 복수의 선을 표시하는 단계를 더 포함하는 사용자 인터페이스 제공 방법.The method of claim 9,
Further comprising displaying a plurality of lines to adjust an image size within the viewfinder. 제5항, 제7항 내지 제10항 중 어느 한 항의 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 매체.
A computer-readable medium having recorded thereon a program for carrying out the method according to any one of claims 5 to 10.
KR1020120140154A 2012-12-05 2012-12-05 Method for generating partial image and terminal device thereof KR101415718B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120140154A KR101415718B1 (en) 2012-12-05 2012-12-05 Method for generating partial image and terminal device thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120140154A KR101415718B1 (en) 2012-12-05 2012-12-05 Method for generating partial image and terminal device thereof

Publications (2)

Publication Number Publication Date
KR20140072530A KR20140072530A (en) 2014-06-13
KR101415718B1 true KR101415718B1 (en) 2014-08-06

Family

ID=51126368

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120140154A KR101415718B1 (en) 2012-12-05 2012-12-05 Method for generating partial image and terminal device thereof

Country Status (1)

Country Link
KR (1) KR101415718B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080077830A (en) * 2007-02-21 2008-08-26 삼성전자주식회사 Method for obtaining partial image of portable terminal having touch screen
KR20110054196A (en) * 2009-11-17 2011-05-25 엘지전자 주식회사 Method for editing image usign touch at mobile terminal and apparatus therefor

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080077830A (en) * 2007-02-21 2008-08-26 삼성전자주식회사 Method for obtaining partial image of portable terminal having touch screen
KR20110054196A (en) * 2009-11-17 2011-05-25 엘지전자 주식회사 Method for editing image usign touch at mobile terminal and apparatus therefor

Also Published As

Publication number Publication date
KR20140072530A (en) 2014-06-13

Similar Documents

Publication Publication Date Title
US11113523B2 (en) Method for recognizing a specific object inside an image and electronic device thereof
US11079841B2 (en) Enabling augmented reality using eye gaze tracking
US10429944B2 (en) System and method for deep learning based hand gesture recognition in first person view
CN110210571B (en) Image recognition method and device, computer equipment and computer readable storage medium
JP7118244B2 (en) Graphic code recognition method and device, terminal and program
US9746927B2 (en) User interface system and method of operation thereof
US9530232B2 (en) Augmented reality surface segmentation
US9639758B2 (en) Method and apparatus for processing image
US10620826B2 (en) Object selection based on region of interest fusion
CN103729120A (en) Method for generating thumbnail image and electronic device thereof
EP2973222A1 (en) Local image enhancement for text recognition
CN104123520A (en) Two-dimensional code scanning method and device
Sharma et al. Air-swipe gesture recognition using OpenCV in Android devices
US20140149950A1 (en) Image overlay-based user interface apparatus and method
CN109147001A (en) A kind of method and apparatus of nail virtual for rendering
CN110991445A (en) Method, device, equipment and medium for identifying vertically arranged characters
KR102303206B1 (en) Method and apparatus for recognizing object of image in electronic device
CN110222576B (en) Boxing action recognition method and device and electronic equipment
KR20160055552A (en) Method and Device for displaying memo
CN116433696A (en) Matting method, electronic equipment and computer readable storage medium
KR101415718B1 (en) Method for generating partial image and terminal device thereof
RU2817182C1 (en) Information display method, device and data medium
US20150234517A1 (en) Display apparatus and method and computer program product
CN117406897A (en) Image processing method, apparatus, device, computer readable storage medium, and product
KR20180027886A (en) Electronic device and operating method thereof

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190610

Year of fee payment: 6