KR20030078235A

KR20030078235A - Image distortion compensation method for mobile communication terminal attached camera

Info

Publication number: KR20030078235A
Application number: KR1020020017134A
Authority: KR
Inventors: 홍재범
Original assignee: 엘지전자 주식회사
Priority date: 2002-03-28
Filing date: 2002-03-28
Publication date: 2003-10-08

Abstract

PURPOSE: A method for compensating the image distortion of a mobile communication terminal mounted with a camera is provided to compensate the distortion of images photographed by the camera with preset distortion compensating values, thereby transmitting an image almost equal to real one. CONSTITUTION: A method for compensating the image distortion of a mobile communication terminal mounted with a camera includes the steps of capturing images by the camera and storing the captured images to a memory(SP1,SP2), compensating the distortion of the images(SP3-SP5), and compressing, coding and transmitting the distortion-compensated images(SP6,SP7). The captured memory is compared with a reference image stored in the memory to check any distortion is generated. If generated, the distortion is compensated by a distortion compensating value preset according to a photographing distance. The images having distortion is compensated by interpolation carrying out expansion or reduction.

Description

카메라가 장착된 이동통신단말기의 영상 왜곡 보상방법{IMAGE DISTORTION COMPENSATION METHOD FOR MOBILE COMMUNICATION TERMINAL ATTACHED CAMERA}Image distortion compensation method of mobile communication terminal equipped with camera {IMAGE DISTORTION COMPENSATION METHOD FOR MOBILE COMMUNICATION TERMINAL ATTACHED CAMERA}

본 발명은 카메라가 장착된 이동통신단말기의 영상 왜곡 보상방법에 관한 것으로, 특히 영상의 압축 코딩전에, 카메라에 의해 얻어진 영상의 왜곡을 보상하도록 한 카메라가 장착된 이동통신단말기의 영상 왜곡 보상방법에 관한 것이다.The present invention relates to a method for compensating image distortion of a mobile communication terminal equipped with a camera, and more particularly, to a method for compensating image distortion of a mobile communication terminal equipped with a camera to compensate for distortion of an image obtained by a camera before compression coding of an image. It is about.

최근 들어 정보화 사회의 급격한 발달은 단순히 음성만을 전달하는 이동통신 단말기 이외에도 다양한 기능이 추가된 복합 이동통신 단말기의 개발을 요구하고 있다.Recently, the rapid development of the information society has demanded the development of a complex mobile communication terminal with various functions in addition to a mobile communication terminal that merely delivers voice only.

따라서, 멀티미디어 시대에 맞추어 화상 송수신 등의 기능과 음성 송수신 기능이 함께 구현된 휴대용 복합 이동통신 단말기가 구현되었다.Accordingly, according to the multimedia era, a portable composite mobile communication terminal having both a function such as image transmission and reception and a voice transmission and reception function has been implemented.

이러한 복합 이동통신 단말기에는 사용자가 평소 휴대하고 다니는 휴대용 이동통신단말기(예컨대 휴대폰)에 디지털 카메라 기능을 구현해 놓은 일명 카메라폰이 개발되었다.In such a composite mobile communication terminal, a so-called camera phone having a digital camera function implemented in a portable mobile communication terminal (eg, a mobile phone) that a user usually carries has been developed.

따라서, 사용자는 갑자기 어떠한 장면이나, 업무상 필요한 피사체를 찍어 간직하고 싶을 때 이러한 카메라폰을 이용하여 원하는 장면을 찍어 내부에 저장할 수 있게 된다.Therefore, when a user suddenly wants to capture a certain scene or a subject necessary for work, the user can take a desired scene and store it therein using such a camera phone.

또한, 촬영한 화상을 무선으로 다른 이동통신 단말기로 전송하거나, 또는 PC(Personal Computer)와 연결하여, PC의 화면에 출력하거나 내부의 PC메모리에 저장한다.In addition, the captured image is wirelessly transmitted to another mobile communication terminal, or connected to a personal computer (PC), and output to the screen of the PC or stored in the internal PC memory.

이때, 상기 이동통신단말기에서 사용되는 카메라는,광각으로 대부분의 사용이 근거리에서 이루어지기 때문에 영상의 왜곡이 발생하는 문제점이 있다.In this case, the camera used in the mobile communication terminal has a problem that the distortion of the image occurs because most of the use is made in the near field at a wide angle.

즉, 도1과 같이, 화상이 카메라로부터 거리가 멀수록 작게 촬영되는데, 사람의 얼굴도 원통형에 가까우므로 가운데 부분이 크게 촬영되고 가장자리 부분이 작게 촬영되어 영상의 왜곡이 발생한다.That is, as shown in FIG. 1, the image is taken smaller as the distance from the camera is smaller. Since the face of the person is also closer to the cylinder, the center part is taken larger and the edge part is taken smaller, resulting in distortion of the image.

본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로, 실제 영상과 거의 동일한 영상을 전송하기 위하여, 카메라에 의해 얻어진 영상의 왜곡을, 촬영 거리에 따라 기설정된 왜곡 보상값으로 보상하도록 한 카메라가 장착된 이동통신단말기의 영상 왜곡 보상방법을 제공함에 그 목적이 있다.The present invention has been made to solve the above problems, and in order to transmit an image almost identical to an actual image, the camera which compensates the distortion of the image obtained by the camera with a preset distortion compensation value according to the shooting distance is provided. It is an object of the present invention to provide a method for compensating image distortion of an installed mobile communication terminal.

도1은 카메라에 의해 영상 왜곡이 발생하는 모습을 보인 개략도.1 is a schematic diagram showing how image distortion occurs by a camera;

도2는 본 발명 카메라에 장착된 이동통신단말기의 영상 왜곡 보상방법에 대한 동작 흐름도.2 is a flowchart illustrating an image distortion compensation method of a mobile communication terminal mounted to a camera of the present invention.

도3은 도2에 있어서, 사람의 얼굴 촬영시의 중심부에 대한 왜곡 보상을 보인도.FIG. 3 is a diagram showing distortion compensation for a center part at the time of photographing a human face in FIG. 2; FIG.

도4는 도2에 있어서, 영상의 왜곡을 보상하기 위하여 각 픽셀에 새로운 픽셀 위치를 할당한 모습을 보인도.4 is a diagram showing the allocation of a new pixel position to each pixel in FIG. 2 to compensate for distortion of the image; FIG.

도5는 도2에 있어서, B-Spline/MFFD기법에 의해 특정 위치를 원하는 곳으로 옮기는 모습을 보인도.FIG. 5 is a view showing a state in which a specific position is moved to a desired place by the B-Spline / MFFD technique in FIG.

상기와 같은 목적을 달성하기 위한 본 발명은, 영상을 캡쳐하여 이를 메모리에 저장하는 제1 과정과; 상기 메모리에 저장된 영상을 기준영상과 비교하여 왜곡이 발생되면, 촬영 거리에 따라 기설정된 왜곡 보상값으로 그 영상의 왜곡을 보상하는 제2 과정과; 상기 제2 과정에서 왜곡이 보상된 영상을 압축 코딩하여 전송하는 제3 과정으로 수행함을 특징으로 한다.The present invention for achieving the above object, the first process of capturing an image and storing it in a memory; A second process of compensating for the distortion of the image by using a distortion compensation value preset according to a photographing distance when a distortion is generated by comparing the image stored in the memory with a reference image; And performing a third compression compression coding operation on an image whose distortion is compensated in the second process.

상기 제2 과정은, 실험에 의해 설정된 기준영상과 캡쳐된 영상을 비교하는 제1 단계와; 상기 제1 단계의 비교결과, 영상 왜곡이 검출되면 영상을 축소 또는 확대하는 보간을 통하여 영상의 왜곡을 보상하는 제2 단계로 이루어진다.The second process may include a first step of comparing the captured image with the reference image set by the experiment; As a result of the comparison of the first step, when the image distortion is detected, a second step of compensating for the distortion of the image through interpolation of reducing or enlarging the image is performed.

이하, 본 발명에 의한 카메라가 장착된 이동통신 단말기의 영상 왜곡 보상방법에 대한 작용 및 효과를 첨부한 도면을 참조하여 상세히 설명한다.Hereinafter, operations and effects of the image distortion compensation method of the mobile communication terminal equipped with a camera according to the present invention will be described in detail with reference to the accompanying drawings.

도2는 본 발명 카메라가 장착된 이동통신 단말기의 영상 왜곡 보상방법에 대한 동작흐름도로서, 이에 도시한 바와같이 영상을 캡쳐하여 이를 메모리에 저장하는 제1 과정(SP1,SP2)과; 상기 메모리에 저장된 영상을 기준영상과 비교하여 왜곡이 발생되면, 촬영 거리에 따라 기설정된 왜곡 보상값으로 그 영상의 왜곡을 보상하는 제2 과정(SP3~SP5)과; 상기 제2 과정에서 왜곡이 보상된 영상을 압축 코딩하여 전송하는 제3 과정(SP6,SP7)으로 이루어지며, 이와같은 본 발명의 동작을 설명한다.FIG. 2 is a flowchart illustrating a method of compensating for image distortion of a mobile communication terminal equipped with a camera of the present invention. As shown in FIG. 2, a first process (SP1, SP2) of capturing an image and storing it in a memory; A second process (SP3 to SP5) compensating for the distortion of the image by using a distortion compensation value preset according to a photographing distance when the distortion is generated by comparing the image stored in the memory with the reference image; A third process (SP6, SP7) of compressing and transmitting the distortion-compensated image in the second process is transmitted, and the operation of the present invention will be described.

먼저, 이동통신 단말기에 부착된 카메라를 통해 영상을 캡쳐하여 이를 메모리에 저장한다(SP1,SP2).First, an image is captured by a camera attached to the mobile communication terminal and stored in the memory (SP1, SP2).

그 다음, 상기 메모리에 저장된 영상을 기준영상과 비교하여 왜곡이 발생되면, 촬영 거리에 따라 기설정된 왜곡 보상값으로 그 영상의 왜곡을 보상하는데 (SP3,SP4,SP5), 즉, 실험에 의해 기설정된 기준영상과 캡쳐된 영상을 비교하여, 영상 왜곡이 검출되면 영상을 축소 또는 확대하는 보간을 통하여 영상의 왜곡을 보상한다.Then, when distortion is generated by comparing the image stored in the memory with the reference image, the distortion of the image is compensated by the distortion compensation value set according to the shooting distance (SP3, SP4, SP5), that is, by experiment. When the image distortion is detected by comparing the set reference image with the captured image, the distortion of the image is compensated by interpolation to reduce or enlarge the image.

예를 들어, 이동통신 단말기의 경우, 사람의 얼굴을 촬영하게 되는 경우가 많은데, 그 사람의 얼굴 촬영시에는 중심부가 크게 되는 경향이 있으므로, 도3과 같이 중심부의 영상을 축소하고, 그 축소된 영상에 대하여 보간(Interpolation)을 수행하여 보상한다.For example, in the case of a mobile communication terminal, a face of a person is often photographed. However, since the center of the face tends to be large when the face of the person is taken, the image of the center is reduced, and the reduced Compensate by performing interpolation on the image.

이때, 카메라와 사물간의 거리를 단계별로 차별화하여, 그 각 단계별로 보상값을 실험에 의해 각기 달리 설정한후, 이를 거리별 왜곡 정도에 따라 해당 보상값을 적용한다.At this time, the distance between the camera and the object is differentiated step by step, and the compensation value is set differently by experiments for each step, and then the compensation value is applied according to the distortion degree for each distance.

즉, 도4와 같이, 영상 왜곡에 따른 보상값을 검출하여, 그 보상값을 영상데이터의 각 픽셀에 적용하여 새로운 픽셀의 위치를 할당함으로써 축소 또는 확대시키는데, 예를 들어, 픽셀상의 각 위치에 이동할 벡터를 리니어하게 할당한다.That is, as shown in FIG. 4, the compensation value according to the image distortion is detected, and the compensation value is applied to each pixel of the image data to reduce or enlarge it by allocating a new pixel position, for example, at each position on the pixel. Linearly allocate the vectors to move.

여기서, 영상의 왜곡을 보상하는 다른 방법으로, 도5와 같이, B-Spline,MFFD와 같은 기법을 적용하여 특정 위치를 원하는 곳으로 옮긴다.Here, as another method of compensating for the distortion of the image, as shown in FIG. 5, a specific position is moved to a desired place by applying a technique such as B-Spline and MFFD.

그 다음, 상기에서 보상된 영상을 압축 코딩하여 이를 전송한다(SP6,SP7).Then, the coded compensation image is compressed and transmitted (SP6, SP7).

다시 말해서, 본 발명은, 카메라에 의해 얻어진 영상을 압축 코딩하기 전에, 사용자에 의해 미리 설정된 왜곡 보상정도에 따라 영상의 왜곡을 보상함으로써, 실제의 영상과 거의 동일한 영상을 전송하도록 하는 것이다.In other words, according to the present invention, before the compression coding of the image obtained by the camera, the distortion of the image is compensated according to the distortion compensation degree preset by the user so as to transmit almost the same image as the actual image.

상기 본 발명의 상세한 설명에서 행해진 구체적인 실시 양태 또는 실시예는 어디까지나 본 발명의 기술 내용을 명확하게 하기 위한 것으로 이러한 구체적 실시예에 한정해서 협의로 해석해서는 안되며, 본 발명의 정신과 다음에 기재된 특허 청구의 범위내에서 여러가지 변경 실시가 가능한 것이다.The specific embodiments or examples made in the detailed description of the present invention are intended to clarify the technical contents of the present invention to the extent that they should not be construed as limited to these specific embodiments and should not be construed in consultation. Various changes can be made within the scope of.

이상에서 상세히 설명한 바와같이 본 발명은, 이동통신단말기에 부착된 카메라에 의하여 촬영된 영상의 왜곡을, 사용자에 의해 미리 설정된 왜곡 보상값에 따라 보상함으로써, 실제의 영상과 거의 동일한 영상을 전송하는 효과가 있다.As described in detail above, the present invention compensates the distortion of the image photographed by the camera attached to the mobile communication terminal according to the distortion compensation value preset by the user, thereby transmitting an image almost identical to the actual image. There is.

Claims

영상을 캡쳐하여 이를 메모리에 저장하는 제1 과정과;Capturing an image and storing the image in a memory;

상기 메모리에 저장된 영상을 기준영상과 비교하여 왜곡이 발생되면, 촬영 거리에 따라 기설정된 왜곡 보상값으로 그 영상의 왜곡을 보상하는 제2 과정과;A second process of compensating for the distortion of the image by using a distortion compensation value preset according to a photographing distance when a distortion is generated by comparing the image stored in the memory with a reference image;

상기 제2 과정에서 왜곡이 보상된 영상을 압축 코딩하여 전송하는 제3 과정으로 수행함을 특징으로 하는 이동통신단말기의 영상 왜곡 보상방법.And performing a third process of compressing and encoding the image whose distortion is compensated in the second process, and transmitting the image distortion compensation method of the mobile communication terminal.

제1 항에 있어서, 제2 과정은,The method of claim 1, wherein the second process comprises:

실험에 의해 설정된 기준영상과 캡쳐된 영상을 비교하는 제1 단계와;A first step of comparing the captured image with the reference image set by the experiment;

상기 제1 단계의 비교결과, 영상왜곡이 검출되면 영상을 축소 또는 확대하는 보간을 통하여 영상의 왜곡을 보상하는 제2 단계로 이루어진 것을 특징으로 하는 카메라가 장착된 이동통신단말기의 영상 왜곡 보상방법.And a second step of compensating for the distortion of the image by interpolating to reduce or enlarge the image when the image distortion is detected as a result of the comparison in the first step.

제2 항에 있어서, 카메라와 사물간의 거리를 단계별로 차별화하여, 그 각 단계별로 보상값을 설정하는 단계를 더 포함하는 것을 특징으로 하는 카메라가 장착된 이동통신단말기의 영상 왜곡 보상방법.The method of claim 2, further comprising: differentiating the distance between the camera and the object step by step and setting a compensation value at each step.

제2 항에 있어서, B-Spline,MFFD와 같은 기법을 적용하여 특정 위치를 원하는 곳으로 옮겨 영상을 보상하는 단계를 더 포함하는 것을 특징으로 하는 카메라가장착된 이동통신단말기의 영상 왜곡 보상방법.The image distortion compensation method of claim 2, further comprising compensating for an image by moving a specific position to a desired place by applying a technique such as B-Spline or MFFD.

제2 항에 있어서, 제2 단계는,The method of claim 2, wherein the second step is

영상왜곡에 따른 보상값을 검출하는 단계와;Detecting a compensation value according to the image distortion;

상기 보상값을 영상데이터의 각 픽셀에 적용하여 새로운 픽셀의 위치를 할당하여 축소 또는 확대하는 단계로 이루어진 것을 특징으로 하는 카메라가 장착된 이동통신단말기의 영상 왜곡 보상방법.And applying the compensation value to each pixel of the image data and allocating a new pixel position to reduce or enlarge the image distortion.