KR100744371B1 - Apparatus for displaying a 3-d image capable of selecting a composite frame structure, and method for processing the 3-d image - Google Patents

Apparatus for displaying a 3-d image capable of selecting a composite frame structure, and method for processing the 3-d image Download PDF

Info

Publication number
KR100744371B1
KR100744371B1 KR1020060073042A KR20060073042A KR100744371B1 KR 100744371 B1 KR100744371 B1 KR 100744371B1 KR 1020060073042 A KR1020060073042 A KR 1020060073042A KR 20060073042 A KR20060073042 A KR 20060073042A KR 100744371 B1 KR100744371 B1 KR 100744371B1
Authority
KR
South Korea
Prior art keywords
image data
image
frame
composite
stereoscopic
Prior art date
Application number
KR1020060073042A
Other languages
Korean (ko)
Inventor
최광철
한영섭
심대현
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020060073042A priority Critical patent/KR100744371B1/en
Application granted granted Critical
Publication of KR100744371B1 publication Critical patent/KR100744371B1/en

Links

Images

Classifications

    • H04N13/04

Landscapes

  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

A 3D image display device capable of selecting a synthesis frame structure and a 3D image processing method therefor are provided to output image data photographed by one of two cameras in a digital 3D image device. The first and the second camera units(107,109) are installed in the outside of a 3D image device. A 3D image processing unit(111) generates the first and the second image data by using the first and the second image signals received from the first and the second camera units(107,109), synthesizes the first and the second image data according to a certain synthesis frame structure which is set up in response to the input of a user among a plurality of previously stored synthesis frame structures corresponding to inter-different 3D image synthesis types, and generates synthesis image data.

Description

합성프레임 구조 선택 가능한 입체영상 표시 장치 및 입체영상 처리 방법{APPARATUS FOR DISPLAYING A 3-D IMAGE CAPABLE OF SELECTING A COMPOSITE FRAME STRUCTURE, AND METHOD FOR PROCESSING THE 3-D IMAGE}Selectable stereoscopic image display device and method for processing stereoscopic image {APPARATUS FOR DISPLAYING A 3-D IMAGE CAPABLE OF SELECTING A COMPOSITE FRAME STRUCTURE, AND METHOD FOR PROCESSING THE 3-D IMAGE}

도 1은 본 발명의 바람직한 실시 예에 따른 입체영상 장치의 블록구성도, 1 is a block diagram of a stereoscopic image device according to an embodiment of the present invention;

도 2는 본 발명의 바람직한 실시 예에 따른 입체영상 장치의 동작 흐름도, 2 is an operation flowchart of a stereoscopic image device according to an embodiment of the present invention;

도 3은 본 발명의 바람직한 실시 예에 따른 입체영상 처리부의 블록구성도, 3 is a block diagram of a stereoscopic image processing unit according to an embodiment of the present invention;

도 4는 본 발명의 바람직한 실시 예에 따른 입체영상 처리부의 동작 동작 흐름도, 4 is a flowchart illustrating operations of a stereoscopic image processor according to an exemplary embodiment of the present invention;

도 5는 본 발명의 바람직한 실시 예에 따른 영상합성부의 블록구성도, 5 is a block diagram of an image synthesis unit according to an embodiment of the present invention;

도 6은 본 발명의 바람직한 실시 예에 따른 영상합성부의 동작 동작 흐름도,6 is a flowchart illustrating an operation of an image synthesizer according to an exemplary embodiment of the present invention;

도 7은 본 발명의 바람직한 실시 예에 따른 제어신호 발생부의 블록구성도,7 is a block diagram of a control signal generator according to an exemplary embodiment of the present invention;

도 8은 본 발명의 바람직한 실시 예에 따른 입체영상 장치가 생성할 수 있는 프레임 구조의 예시도.8 is an exemplary diagram of a frame structure that can be generated by a stereoscopic apparatus according to an exemplary embodiment of the present invention.

본 발명은 디지털 영상의 영상 처리에 관한 것으로, 특히 입체영상을 처리하는 디지털 입체영상 장치에 관한 것이다.The present invention relates to image processing of a digital image, and more particularly, to a digital stereoscopic apparatus for processing a stereoscopic image.

일반적인 디지털 영상 장치는 CCD형 센서 또는 CMOS형 센서 중에서 하나를 구비하며, 센서에서 인식한 이미지를 영상장치에 내장된 디지털 저장매체에 저장하거나 외부 단말기와 연결하여 촬영한 영상을 전송한다. A general digital imaging device includes either a CCD sensor or a CMOS sensor, and stores the image recognized by the sensor in a digital storage medium built in the imaging device or transmits the captured image by connecting to an external terminal.

이 때, 디지털 영상 장치는 이미지 센서로부터 입력되는 영상데이터를 각종 영상 출력 장치의 입력 특성에 알맞도록 변환시켜 주는 디지털 영상 처리장치를 구비하며, 이 디지털 영상 처리장치는 일반적으로 2차원 영상만을 지원한다. In this case, the digital imaging apparatus includes a digital image processing apparatus for converting image data input from an image sensor to suit input characteristics of various image output apparatuses, and the digital image processing apparatus generally supports only two-dimensional images. .

하지만 디지털 영상 기술이 빠른 속도로 진보하고 있는 현재, 평면 영상인 2차원 영상에서 입체 영상인 3차원 영상을 지원하는 디지털 영상 장치가 점차 늘어가고 있는 추세이다. However, as digital imaging technology is rapidly advancing, digital imaging devices that support three-dimensional images, which are three-dimensional images, from two-dimensional images, which are planar images, are gradually increasing.

3차원 입체영상을 생성하는 일반적인 방법은 다음과 같다. 디지털 입체영상 장치는 두 대의 카메라, 예를 들어, 좌/우 카메라로 구분할 수 있는 두 대의 카메라를 구비하여, 같은 피사체를 촬영한다. 그리고 디지털 입체영상 장치는 좌/우 카메라의 촬영으로 생성된 각각의 2차원 영상 이미지를 입체영상 표시 방식에 따라 합성하여 3차원 입체영상을 생성한다.The general method for generating a 3D stereoscopic image is as follows. The digital stereoscopic apparatus includes two cameras that can be divided into two cameras, for example, left and right cameras, to photograph the same subject. The digital stereoscopic apparatus generates a three-dimensional stereoscopic image by synthesizing each two-dimensional image generated by photographing left and right cameras according to a stereoscopic image display method.

그런데 두 대의 카메라를 구비하는 종래의 디지털 입체영상 장치는 좌/우 카메라의 영상데이터를 합성하여 입체영상을 생성할 때, 여러 가지 입체영상 표시 방식으로 생성하지 못 하는 문제점이 있었다.However, the conventional digital stereoscopic image apparatus having two cameras has a problem in that various stereoscopic image display methods cannot generate the stereoscopic image by synthesizing the image data of the left and right cameras.

그리고 디지털 입체영상 장치는 두 대의 카메라 중에서 한 대의 카메라가 촬 영한 영상데이터만을 선택적으로 출력할 수 없는 문제점이 있었다.In addition, the digital stereoscopic apparatus has a problem in that it cannot selectively output only image data photographed by one camera from two cameras.

또한 디지털 입체영상 장치는 입체영상에 관한 영상데이터를 생성하여 다른 외부 단말기로 전송할 때, 외부 단말기의 표시부가 지원하는 입체영상 표시 방식을 지원하는 것이 바람직하다. 예를 들면, 인터레이스(interlace)방식 중에서 셔터 글레스 (shutter glass)방식을 지원하는 표시부와, 프로그레시브(progressive)방식 중에서 셔터 글레스(shutter glass)방식을 지원하는 표시부는 서로 다른 입체영상 표시 방식을 지원한다. 그러므로 디지털 입체영상 장치는 외부 단말기가 지원하는 입체영상 표시 방식으로 영상데이터를 생성하는 것이 바람직하다. In addition, the digital stereoscopic apparatus preferably supports a stereoscopic image display method supported by the display unit of the external terminal when generating and transmitting image data regarding the stereoscopic image to another external terminal. For example, a display unit supporting a shutter glass method among interlace methods and a display unit supporting a shutter glass method among progressive methods support different stereoscopic image display methods. . Therefore, the digital stereoscopic apparatus preferably generates image data in a stereoscopic image display method supported by an external terminal.

따라서 본 발명은 두 대의 카메라를 구비하는 디지털 입체영상 장치에서 각각의 카메라의 영상데이터를 합성하여 입체영상을 생성할 때, 여러 가지 입체영상 표시 방식으로 입체영상을 생성할 수 있는 방법 및 장치를 제공한다.Accordingly, the present invention provides a method and apparatus for generating a stereoscopic image using various stereoscopic image display methods when generating a stereoscopic image by synthesizing image data of each camera in a digital stereoscopic image apparatus having two cameras. do.

그리고 본 발명은 디지털 입체영상 장치에서 두 대의 카메라 중에서 한 대의 카메라가 촬영한 영상데이터를 출력할 수 있는 방법 및 장치를 제공한다.The present invention also provides a method and apparatus for outputting image data photographed by one camera from two cameras in a digital stereoscopic imaging apparatus.

또한 본 발명은 디지털 입체영상 장치가 외부 단말기가 지원하는 입체영상 표시 방식으로 영상데이터를 생성할 수 있는 방법 및 장치를 제공한다.The present invention also provides a method and apparatus for generating digital image data in a stereoscopic image display method supported by an external terminal.

상기한 문제점을 해결하기 위해 합성프레임 구조 선택이 가능한 입체영상 장 치는, 상기 입체영상 장치의 외부에 구비되는 제1, 제2카메라부와, 상기 제1, 제2카메라부로부터 수신되는 제1, 제2영상신호로 제1, 제2영상데이터를 생성하고, 미리 저장되며, 각각 서로 다른 입체영상 합성 방식에 대응하는 다수의 합성프레임 구조 중에서 사용자 입력에 대응하여 설정된 임의의 합성프레임 구조에 따라 상기 생성한 제1, 제2영상데이터를 합성하여 합성 영상데이터를 생성하는 입체영상 처리부를 포함함을 특징으로 한다. In order to solve the above problems, a stereoscopic image device capable of selecting a composite frame structure includes first and second camera units provided outside of the stereoscopic image device, and first and second camera units received from the first and second camera units. The first and second image data may be generated as the second image signal, and may be stored in advance, and may be stored according to an arbitrary synthesis frame structure set corresponding to a user input among a plurality of synthesis frame structures corresponding to different stereoscopic image synthesis methods. And a stereoscopic image processor for synthesizing the generated first and second image data to generate synthesized image data.

또한 상기한 문제점을 해결하기 위해 프레임 구조 선택이 가능한 입체영상 장치의 입체영상 처리 방법에서, 사용자 입력에 따라, 미리 저장되며, 각각 서로 다른 입체영상 합성 방식에 대응하는 다수의 합성프레임 구조 중에서 임의의 합성프레임 구조를 설정하고, 촬영 요청 시, 제1, 제2카메라부 각각에 대응되는 제1, 제2영상데이터를 상기 임의의 합성프레임 구조대로 합성한 합성 영상데이터를 생성하고, 상기 합성 영상데이터를 디스플레이 함을 특징으로 한다. In addition, in order to solve the above problems, in the stereoscopic image processing method of the stereoscopic apparatus capable of selecting a frame structure, it is stored in advance according to a user input, and any of a plurality of composite frame structures respectively corresponding to different stereoscopic image synthesizing methods. Set a composite frame structure, generate composite image data obtained by synthesizing the first and second image data corresponding to each of the first and second camera units according to the arbitrary composite frame structure when the photographing request is made, and the composite image data. It is characterized by displaying.

이하, 본 발명의 바람직한 실시 예들을 첨부한 도면을 참조하여 상세히 설명한다. 또한 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. In addition, detailed descriptions of well-known functions and configurations that may unnecessarily obscure the subject matter of the present invention will be omitted.

도 1은 본 발명의 바람직한 실시 예에 따른 입체영상 장치의 블록구성도 이다. 도 1을 참조하여 입체영상 장치가 입체영상데이터를 제공하기 위해 수행하는 동작을 설명하고자 한다.1 is a block diagram of a stereoscopic image device according to an exemplary embodiment of the present invention. An operation performed by the stereoscopic apparatus to provide stereoscopic image data will be described with reference to FIG. 1.

본 발명의 입체영상 장치는 제어부(101)와 키입력부(103)와 표시부(105)와 제1카메라부(107)와 제2카메라부(109)와 입체영상 처리부(111)와 메모리부(113)를 포함하여 구성된다. The stereoscopic image device of the present invention includes a control unit 101, a key input unit 103, a display unit 105, a first camera unit 107, a second camera unit 109, a stereoscopic image processing unit 111, and a memory unit 113. It is configured to include).

제1카메라부(107)와 제2카메라부(109)는 입체영상 장치 외부의 동일한 일면에 일정 간격을 두고 장착될 수 있으며, 본 발명에서 제1카메라부(107)와 제2카메라부(109)를 본 발명의 이해를 돕기 위해 우 카메라부(107)와 좌 카메라부 (109)로 지칭하여 설명하고자 한다. The first camera unit 107 and the second camera unit 109 may be mounted on the same surface outside the stereoscopic apparatus at a predetermined interval, and according to the present invention, the first camera unit 107 and the second camera unit 109 ) Will be referred to as a right camera unit 107 and a left camera unit 109 to help understand the present invention.

각 구성의 동작을 차례대로 살펴보면, 키입력부(103)는 입체영상 생성을 위한 기능키와 각종 기능을 위한 기능키로 구성되며, 사용자가 누르는 키에 대응하는 키신호를 발생하여 제어부(101)로 출력한다. Looking at the operation of each configuration in turn, the key input unit 103 is composed of a function key for generating a stereoscopic image and a function key for various functions, and generates a key signal corresponding to the key pressed by the user to output to the control unit 101 do.

표시부(105)는 제어부(101)의 제어에 따라 입체영상 장치의 현재상태 및 입체영상 장치의 동작상태를 표시하며, 이미지 또는 동영상을 표시한다. 그리고 표시부(105)는 일반적으로 LCD(Liquid Crystal Display)와 OLED(Organic Light Emitting Diodes)로 구성된다.The display unit 105 displays the current state of the stereoscopic image device and the operating state of the stereoscopic image device under the control of the controller 101, and displays an image or a video. The display unit 105 generally includes a liquid crystal display (LCD) and organic light emitting diodes (OLED).

제어부(101)는 입체영상 장치의 전반적인 동작을 제어하며, 특히 본 발명에서, 미리 저장되는 다수의 합성프레임 구조 중에서 사용자에 의해 선택되는 하나의 합성프레임 구조를 설정하고, 사용자에 의해 영상 촬영이 요청되면, 입체영상 처리부(111)로 영상데이터 생성을 명령하는 영상처리 제어신호를 전송한다. The controller 101 controls the overall operation of the stereoscopic image device, and in particular, in the present invention, sets one composite frame structure selected by the user from among a plurality of composite frame structures stored in advance, and the image is requested by the user. If so, the image processing control signal for commanding the generation of the image data is transmitted to the stereoscopic image processing unit 111.

합성프레임 구조는 각 카메라부(107, 109)의 영상 신호에 의해 생성되어 프레임 단위로 합성되는 합성 방식을 프레임 구조로 나타낸 것이다. The composite frame structure is a frame structure of a synthesis method generated by the video signals of the camera units 107 and 109 and synthesized in units of frames.

입체영상 처리부(111)는 각 카메라부(107, 109)의 영상 신호로 각각의 영상데이터를 생성하고, 이 영상데이터들을 합성하여 합성 영상데이터를 생성한다.The stereoscopic image processing unit 111 generates respective image data using the image signals of the camera units 107 and 109 and synthesizes the image data to generate composite image data.

입체영상 처리부(111)는 좌 카메라부(109)의 영상데이터와 우 카메라부 (107)의 영상데이터를 합성할 때, 제어부(101)에 설정된 임의의 합성프레임 구조대로 영상데이터를 합성한다. When the stereoscopic image processing unit 111 synthesizes the image data of the left camera unit 109 and the image data of the right camera unit 107, the stereoscopic image processing unit 111 synthesizes the image data according to an arbitrary synthesis frame structure set in the control unit 101.

본 발명의 일 실시 예에 따라, 입체영상 처리부(111)가 지원하는 다수의 합성프레임 구조를 도 8에서 도시하고 있다. 도 8을 참조하여 다수의 프레임 구조를 살펴보면, 동시에 촬영된 좌/우 카메라부(107, 109)의 영상프레임 중에서 한 카메라의 영상프레임을 선택하여 그대로 출력하는 805프레임, 807프레임과, 동시에 촬영된 좌 카메라부(109)의 영상프레임과 우 카메라부(107)의 영상프레임을 수평 또는 수직 방향으로 이등분하여 합성하는 809프레임, 811프레임, 813프레임, 815프레임과, 좌 카메라부(109)의 영상 프레임과 우 카메라부(107)의 영상프레임을 수직 또는 수직방향으로 여러 라인들로 등분하고, 그 등분한 라인들을 한 라인씩 번갈아가며 순차적으로 합성하는 817프레임, 819프레임이 있다. According to an embodiment of the present invention, a plurality of composite frame structures supported by the stereoscopic image processor 111 are illustrated in FIG. 8. Referring to FIG. 8, a plurality of frame structures are selected, and image frames of one camera are selected and output as they are and are simultaneously captured from the image frames of the left and right camera units 107 and 109 simultaneously photographed. 809 frames, 811 frames, 813 frames, 815 frames, and the left camera unit 109, which is composed by dividing the video frame of the left camera unit 109 and the video frame of the right camera unit 107 in two horizontal or vertical directions There are 817 frames and 819 frames that divide the frame and the image frame of the right camera unit 107 into several lines in the vertical or vertical direction, and sequentially synthesize the divided lines one by one.

앞에서 언급한 809프레임 구조는 수평 이등분한 좌 영상프레임의 윗부분과 수평 이등분한 우 영상프레임의 아랫부분을 합성하고, 811프레임 구조는 수평 이등분한 좌 영상프레임의 아랫부분과 수평 이등분한 우 영상프레임의 윗부분을 합성하는 합성프레임 구조이다. 그리고 813프레임 구조는 수직 이등분한 좌 영상프레임의 왼쪽부분과 수직 이등분한 우 영상프레임의 오른쪽부분을 합성하고, 815프레임 구조는 수직 이등분한 좌 영상프레임의 오른쪽부분과 수직 이등분한 우 영상프레임의 왼쪽부분을 합성하는 합성프레임 구조이다.The above-mentioned 809 frame structure is composed of the upper part of the horizontal bisected left video frame and the lower part of the horizontal bisected right video frame, and the 811 frame structure is composed of the lower part of the horizontal bisected left video frame and the horizontal bisected right video frame. This is a composite frame structure that combines the top part. And the 813 frame structure is composed of the left part of the vertical bisected left video frame and the right part of the vertical bisected right video frame, and the 815 frame structure is composed of the right part of the vertical bisected left video frame and the left of the vertical bisected right video frame. A composite frame structure for synthesizing parts.

그러나 도 8에서 도시한 다수의 프레임 구조는 본 입체영상 처리부(111)에서 미리 지정되는 다수의 합성프레임 구조의 예들이며, 도시한 합성프레임 구조 이외의 다른 합성프레임 구조도 미리 지정될 수 있다. However, the plurality of frame structures shown in FIG. 8 are examples of a plurality of composite frame structures previously designated by the stereoscopic image processing unit 111, and other composite frame structures other than the illustrated composite frame structure may be specified in advance.

제어부(101)가 입체영상 처리부(111)로 영상처리 제어신호를 전송할 때, 제어부(101)는 다수의 합성프레임 구조 중에서 사용자에 의해 설정된 임의의 합성프레임 구조에 대한 데이터를 함께 전송할 수 있다.When the control unit 101 transmits an image processing control signal to the stereoscopic image processing unit 111, the control unit 101 may transmit data for an arbitrary composite frame structure set by a user among a plurality of composite frame structures.

합성프레임 구조 데이터는 입체영상 장치에서 지원하는 다수의 합성프레임 구조 중에서 사용자에 의해 설정된 임의의 합성프레임 구조에 대한 데이터로, 입체영상 처리부(111)는 이 합성프레임 구조 데이터대로 각 카메라부(107, 109)의 영상데이터를 합성한다. The composite frame structure data is data about an arbitrary composite frame structure set by a user among a plurality of composite frame structures supported by the stereoscopic image apparatus. The stereoscopic image processing unit 111 uses the camera unit 107 as the composite frame structure data. The video data of 109 is synthesized.

그리고 제어부(101)는 사용자에 의해 설정된 합성프레임 구조대로 생성한 합성 영상데이터를 입체영상 처리부(111)로부터 입력받아 표시부(105)로 출력하거나, 사용자에 의해 영상 저장이 요청될 경우, 합성 영상데이터를 입력받아 메모리부(113)에 저장한다. The controller 101 receives the composite image data generated according to the composite frame structure set by the user from the stereoscopic image processor 111 and outputs the synthesized image data to the display unit 105 or when the image storage is requested by the user. Receives and stores in the memory 113.

그리고 제어부(101)와 입체영상 처리부(111)간의 통신을 위한 인터페이스 방식은 두 개의 선만을 이용하여 통신을 하는 I2C표준으로 구성될 수 있다.The interface method for communication between the control unit 101 and the stereoscopic image processing unit 111 may be configured as an I2C standard for communicating using only two lines.

우 카메라부(107)는 입체영상 처리부(111)의 제어에 따라 촬영한 영상을 디지털화 하여 우 영상에 해당하는 전기적 신호를 생성하고, 입체영상 처리부(111)로 우 영상신호를 전송한다. 그리고 좌 카메라부(109)도 입체영상 처리부(111)의 제어에 따라 촬영한 영상을 디지털화 하여 좌 영상에 해당하는 전기적 신호를 생성하고, 입체영상 처리부(111)로 좌 영상신호를 전송한다. The right camera unit 107 digitizes the image taken under the control of the stereoscopic image processing unit 111 to generate an electrical signal corresponding to the right image, and transmits the right image signal to the stereoscopic image processing unit 111. The left camera unit 109 also digitizes the captured image under the control of the stereoscopic image processor 111 to generate an electrical signal corresponding to the left image, and transmits the left image signal to the stereoscopic image processor 111.

좌/우 카메라부(107, 109)는 렌즈와 CCD형 또는 CMOS형의 이미지 센서를 포함하며, 렌즈를 통해 인입된 빛이 이미지 센서에 닿으면, 아날로그 신호인 광 신호를 디지털 신호인 전기신호로 변환한다.The left and right camera units 107 and 109 include a lens and an image sensor of a CCD or CMOS type. When light introduced through the lens reaches the image sensor, an optical signal that is an analog signal is converted into an electrical signal that is a digital signal. Convert.

입체영상 처리부(111)는 제어부(101)로부터 입력되는 영상처리 제어신호에 따라, 좌/우 카메라부(107, 109)를 동작하여 미리 정해지는 규격(예를 들면 CCIR601,CCIR656)대로 생성되는 좌/우 카메라부(107, 109)의 영상신호를 수신한다.The stereoscopic image processing unit 111 operates the left / right camera units 107 and 109 according to an image processing control signal input from the control unit 101 to generate a left side according to a predetermined standard (for example, CCIR601 and CCIR656). Receives video signals from right camera units 107 and 109.

그리고 입체영상 처리부(111)는 수신한 좌/우 카메라부(107, 109)의 영상신호로 각각의 영상데이터를 프레임 단위로 생성한다. 이 때, 입체영상 처리부(111)는 영상신호로 RGB 방식이나 YUV 방식으로 한 프레임의 영상데이터를 생성할 수 있다. The stereoscopic image processing unit 111 generates each image data in units of frames using the received image signals of the left and right camera units 107 and 109. In this case, the stereoscopic image processing unit 111 may generate image data of one frame using the RGB method or the YUV method as the image signal.

그리고 입체영상 처리부(111)는 제어부(101)로부터 입력된 합성프레임 구조 데이터에 따라 좌/우 카메라부(107, 109)의 영상데이터를 합성하여 합성 영상데이터를 생성한다. 그리고 입체영상 처리부(111)는 합성 영상데이터의 저장여부에 따라, 생성한 합성 영상데이터를 실시간으로 제어부(101)로 출력하거나 생성한 합성 영상데이터를 이미지 형식이나 비디오 형식으로 변환하여 제어부(101)로 출력할 수 있다.The stereoscopic image processor 111 synthesizes the image data of the left and right camera units 107 and 109 according to the composite frame structure data input from the controller 101 to generate the synthesized image data. The stereoscopic image processing unit 111 outputs the generated composite image data to the control unit 101 in real time or converts the generated composite image data into an image format or a video format according to whether or not the composite image data is stored. Can be printed as

그리고 본 발명에서 입체영상 장치의 각 구성요소들은 서로 간의 통신을 위한 인터페이스 방식으로 I2C표준을 따를 수 있다.In the present invention, each component of the 3D image device may follow the I2C standard as an interface method for communication with each other.

지금까지 입체영상 장치의 각 구성요소들의 동작을 설명하였고, 이제부터 도 2를 참조하여 본 발명의 대략적인 흐름을 설명하고자 한다. The operation of each component of the stereoscopic image device has been described so far, and a general flow of the present invention will now be described with reference to FIG. 2.

도 2는 본 발명의 바람직한 실시 예에 따른 입체영상 장치의 동작 흐름도 이다. 2 is a flowchart illustrating an operation of a stereoscopic image device according to an exemplary embodiment of the present invention.

도 1 내지 도 2를 참조하여 입체영상 장치의 동작 흐름을 설명하고자 한다.An operation flow of the stereoscopic apparatus will be described with reference to FIGS. 1 and 2.

201단계에서 제어부(101)는 사용자에 의해 영상 촬영이 요청되면 입체영상 처리부(111)로 입체영상 생성에 관한 영상처리 제어신호를 출력한다. 제어신호를 전송할 때, 제어부(101)는 합성프레임 구조 데이터를 포함하여 출력할 수 있다.In step 201, when the image capturing is requested by the user, the controller 101 outputs an image processing control signal for generating a stereoscopic image to the stereoscopic image processor 111. When transmitting the control signal, the controller 101 may output the composite frame structure data.

203단계에서 제어부(101)는 출력한 합성프레임 구조 데이터대로 생성된 합성 영상데이터를 입체영상 처리부(111)로부터 입력받는다. In step 203, the controller 101 receives the composite image data generated according to the output composite frame structure data from the stereoscopic image processor 111.

입체영상 처리부(111)는 201단계에서 제어부(101)로부터 입력된 영상처리 제어신호에 따라 좌/우 카메라부(107, 109)를 동작한다. 그리고 입체영상 처리부(111)는 좌/우 카메라부(107, 109)의 동작으로 생성되는 좌/우 영상 신호를 수신하여 프레임 단위로 영상데이터를 생성한다. 그리고 입체영상 처리부(111)는 입력된 합성프레임 구조 데이터에 따라 좌/우 카메라부(107, 109)의 영상데이터를 한 프레임씩 합성하여 합성 영상데이터를 생성한다. 그리고 사용자에 의해 영상저장이 요청되지 않으면 입체영상 처리부(111)는 생성한 합성 영상데이터를 실시간으로 제어부(101)로 출력하고, 사용자에 의해 영상저장이 요청되면 입체영상 처리부(111)는 합성 영상데이터를 비디오 또는 이미지 형식으로 변환하여 제어부(101)로 출력한다. The stereoscopic image processing unit 111 operates the left / right camera units 107 and 109 according to the image processing control signal input from the control unit 101 in step 201. The stereoscopic image processor 111 receives the left and right image signals generated by the operations of the left and right camera units 107 and 109 and generates image data in units of frames. The stereoscopic image processor 111 synthesizes the image data of the left and right camera units 107 and 109 by one frame according to the input composite frame structure data to generate composite image data. When the image storage is not requested by the user, the stereoscopic image processing unit 111 outputs the generated composite image data to the controller 101 in real time. When the image storage is requested by the user, the stereoscopic image processing unit 111 displays the composite image. The data is converted into a video or image format and output to the controller 101.

205단계에서 제어부(101)는 203단계에서 입력되는 합성 영상데이터를 표시부 (105)로 출력하거나 메모리부(113)에 저장한다. 205단계에서 제어부(101)는 사용자 에 의해 영상저장이 요청되면, 비디오 또는 이미지 형식으로 변환된 합성 영상데이터를 메모리부(113)에 저장한다. 그러나 제어부(101)는 사용자에 의해 영상저장이 요청되지 않으면, 입체영상 처리부(111)로부터 실시간으로 입력되는 합성 영상데이터를 표시부(105)로 출력한다. In step 205, the controller 101 outputs the composite image data input in step 203 to the display unit 105 or stores it in the memory unit 113. In step 205, when the user requests an image to be stored by the user, the controller 101 stores the synthesized image data converted into a video or image format in the memory unit 113. However, if the image storage is not requested by the user, the controller 101 outputs the composite image data input in real time from the stereoscopic image processor 111 to the display unit 105.

도 1 내지 도 2에서 입체영상 장치의 대략적인 동작을 설명하였다. 이제부터 입체영상 장치의 구성요소 중에서 입체영상 처리부(111)의 구성과 동작을 설명하고자 한다. 1 to 2 illustrate the approximate operation of the stereoscopic apparatus. Now, the configuration and operation of the stereoscopic image processor 111 among the components of the stereoscopic apparatus will be described.

도 3은 본 발명의 바람직한 실시 예에 따른 입체영상 처리부(111)의 블록구성도 이다. 도 1 내지 도 3을 참조하여 입체영상 처리부(111)가 합성 영상데이터를 생성하는 동작과정을 설명하고자 한다.3 is a block diagram of a stereoscopic image processing unit 111 according to a preferred embodiment of the present invention. Referring to FIGS. 1 to 3, an operation process of the stereoscopic image processor 111 generating synthetic image data will be described.

도 3을 참조하면, 입체영상 처리부(111)는 캠이프(CamIF)부(301)와 영상변환부(303)와 영상합성부(305)와 영상 메모리부(307)와 신호처리부(309)와 명령해석부(311)와 레지스터 파일부(313)를 포함하여 구성된다. Referring to FIG. 3, the stereoscopic image processor 111 includes a camIF unit 301, an image converter 303, an image synthesizer 305, an image memory unit 307, a signal processor 309, The instruction interpreter 311 and the register file unit 313 are configured.

입체영상 처리부(111)의 구성요소들 중에서 캠이프부(301)는 좌/우 카메라 부(107, 109)로부터 입력되는 영상신호로 프레임 단위의 영상데이터와 동기신호를 생성한다. Among the components of the stereoscopic image processing unit 111, the camping unit 301 generates the image data and the synchronization signal in units of frames as the image signals input from the left and right camera units 107 and 109.

이 동기신호는 좌/우 카메라의 영상데이터를 합성하기 위한 프레임 제어신호를 생성할 때 이용하는 신호이며, 수직동기(V_Sync)와 수평동기(H_Sync)와 픽셀클럭 (P_Clk:Pixel Clock)을 포함한다.This synchronization signal is used to generate a frame control signal for synthesizing image data of the left and right cameras, and includes a vertical synchronization (V_Sync), a horizontal synchronization (H_Sync), and a pixel clock (P_Clk: Pixel Clock).

그리고 영상변환부(303)는 캠이프부(301)로부터 입력되는 영상데이터를 사용 자가 요구하는 크기 등으로 변환한다. 예를 들면, 영상변환부(303)는 사용자에 의해 요구되는 프레임 사이즈에 따라 좌/우 카메라 영상데이터의 프레임 사이즈를 변경하고, 또한 사용자에 의해 요구되는 영상의 해상도 또는 영상의 밝기로 영상데이터를 변경할 수 있다. The image conversion unit 303 converts the image data input from the camping unit 301 into a size required by the user. For example, the image conversion unit 303 changes the frame size of the left and right camera image data according to the frame size required by the user, and also converts the image data at the resolution or brightness of the image required by the user. You can change it.

영상 메모리부(307)는 영상합성부(305)로부터 입력되는 합성 영상데이터를 프레임 단위로 저장하며, 신호처리부(304)에서 신호처리를 할 수 있도록 잠시 동안 합성 영상데이터를 저장하고, 신호처리부(304)로 합성 영상데이터를 출력한다. The image memory unit 307 stores the synthesized image data input from the image synthesizer 305 in units of frames, stores the synthesized image data for a while so that the signal processor 304 can process the signal, 304) to output the composite image data.

신호처리부(309)는 영상 메모리부(307)로부터 입력되는 합성 영상데이터를 사용자가 원하는 비디오 형식 또는 이미지 형식으로 코딩하고, 제어부(101)로 코딩한 합성 영상데이터를 출력한다. 예를 들면, 사용자에 의해 요구되는 비디오 형식이 Avi형식일 경우, 신호처리부(309)는 영상 메모리부(307)로부터 합성 영상데이터를 입력받아 Avi형식의 비디오 파일을 생성할 수 있다. The signal processor 309 codes the composite image data input from the image memory unit 307 into a video format or an image format desired by the user, and outputs the composite image data coded to the controller 101. For example, if the video format required by the user is in Avi format, the signal processor 309 may receive the composite image data from the image memory unit 307 and generate an Avi format video file.

그리고 신호처리부(309)는 생성한 Avi형식의 비디오 파일을 제어부(101)로 출력하여 메모리부(113)에 저장하도록 한다.The signal processor 309 outputs the generated Avi-type video file to the controller 101 and stores the video file in the memory 113.

명령해석부(311)는 제어부(101)로부터 입력되는 영상처리 제어신호를 분석하고, 그 분석 결과에 따라 입체영상 처리부(111)의 구성요소들을 동작하기 위한 명령신호를 생성하며, 각 입체영상 처리부(111)의 구성요소로 출력한다.The command interpreter 311 analyzes an image processing control signal input from the controller 101 and generates a command signal for operating the components of the stereoscopic image processor 111 according to the analysis result, and each stereoscopic image processor Output to the component of 111.

그리고 명령해석부(311)는 좌/우 카메라부(107, 109)를 제어하기 위한 카메라 제어신호를 생성하고, 좌/우 카메라부(107, 109)로 출력한다. 그리고 명령해석부(311)는 영상처리에 관한 정보가 수신되면, 레지스터 파일(313)에 미리 할당되어 있는 레지스터 영역에 그 정보를 저장한다. 예를 들면, 레지스터 영역에는 수평 해상도, 수직 해상도, 합성프레임 구조 데이터를 저장하는 영역이 각각 미리 지정되어 있다.The command interpreter 311 generates camera control signals for controlling the left and right camera units 107 and 109 and outputs them to the left and right camera units 107 and 109. When the information on the image processing is received, the command interpreter 311 stores the information in a register area allocated in advance in the register file 313. For example, in the register area, areas for storing horizontal resolution, vertical resolution, and composite frame structure data are respectively designated in advance.

특히, 합성프레임 구조 데이터가 수신되면, 명령해석부(311)는 레지스터 파일부(313)내의 레지스터 영역 중에서 합성프레임 구조 데이터를 저장하는 레지스터 영역(315)에 합성프레임 구조 데이터를 저장한다.  In particular, when the composite frame structure data is received, the instruction analysis unit 311 stores the composite frame structure data in the register area 315 which stores the composite frame structure data among the register areas in the register file unit 313.

레지스터 파일부(313)는 영상처리에 관한 정보를 수신하여 미리 지정되는 각각의 레지스터 영역에 저장하는 역할을 한다.The register file unit 313 serves to receive information related to image processing and store it in each register area designated in advance.

영상합성부(305)는 레지스터 파일부(313)의 합성프레임 구조 레지스터 영역 (315)에 저장되어 있는 합성프레임 구조에 따라 영상변환부(303)로부터 입력되는 좌/우 카메라부(107, 109)의 영상데이터를 프레임 제어신호를 이용하여 합성 영상데이터를 생성한다. 그리고 영상합성부(305)는 사용자가 영상저장을 요청하면, 생성한 합성 영상데이터를 영상 메모리부(307)로 출력하고, 사용자가 영상저장을 요청하지 않으면, 합성 영상데이터를 제어부(101)로 출력한다. The image synthesizing unit 305 is a left / right camera unit 107 or 109 input from the image converting unit 303 according to the composite frame structure stored in the composite frame structure register area 315 of the register file unit 313. Video data is generated using the frame control signal. The image synthesizing unit 305 outputs the generated synthetic image data to the image memory unit 307 when the user requests the image storage, and sends the synthesized image data to the control unit 101 when the user does not request the image storage. Output

이 영상합성부(305)를 구성하는 구성요소들을 도 5를 참조하여 살펴보고자 한다. The components constituting the image synthesizer 305 will be described with reference to FIG. 5.

도 5는 본 발명의 바람직한 실시 예에 따른 영상합성부(305)의 블록구성도 이다. 도 1 내지 도 5를 참조하여 영상합성부(305)의 구성요소를 설명하고자 한다. 5 is a block diagram of an image synthesizer 305 according to an exemplary embodiment of the present invention. 1 to 5, the components of the image synthesizing unit 305 will be described.

도 5를 참조하면 영상합성부(305)는 제어신호 발생부(501)와 제어신호 선택부(503)와 영상선택부(505)를 포함하여 구성된다.Referring to FIG. 5, the image synthesizer 305 includes a control signal generator 501, a control signal selector 503, and an image selector 505.

영상합성부(305)의 구성요소 중에서 제어신호 발생부(501)는 캠이프(CamIF)부(301)로부터 입력되는 수직동기(V_sync)(511)와 수평동기(H_sync) (513)와 픽셀클럭(P_clk)(515)을 참조하여 미리 저장되는 다수의 합성프레임 구조 각각에 대응되는 프레임 제어신호들을 생성한다. 그리고 제어신호 발생부(501)는 생성한 프레임 제어신호들을 제어신호 선택부(503)로 전송한다.The control signal generator 501 of the components of the image synthesizer 305 is the vertical sync (V_sync) 511 and the horizontal sync (H_sync) 513 and the pixel clock input from the camIF unit 301. Referring to (P_clk) 515, frame control signals corresponding to each of a plurality of pre-stored composite frame structures are generated. The control signal generator 501 transmits the generated frame control signals to the control signal selector 503.

이제부터 제어신호 발생부(501)가 프레임 제어신호들을 생성하는 과정을 도 7을 참조하여 설명하고자 한다.Now, a process in which the control signal generator 501 generates the frame control signals will be described with reference to FIG. 7.

도 7은 본 발명의 실시 예에 따른 제어신호 발생부(501)의 블록구성도 및 제어신호 발생부(501)가 생성하는 프레임 제어신호의 예를 도시하고 있다.7 is a block diagram of a control signal generator 501 and an example of a frame control signal generated by the control signal generator 501 according to an embodiment of the present invention.

도 7의 실시 예에서 제어신호 발생부(501)는 수직동기(V_sync)(511)와 수평동기(H_sync)(513)와 픽셀클럭(P_clk)(515)과 픽셀클럭(P_clk)(515)을 계수하는 픽셀 카운터(Pixel Counter)(747)를 참조하여 미리 저장된 다수의 합성프레임 구조(701, 703, 705, 707, 709, 711, 713, 715)에 대응되는 프레임 제어신호들(721, 723, 725, 727, 729, 731, 733, 735)을 생성한다. In the exemplary embodiment of FIG. 7, the control signal generator 501 performs vertical sync (V_sync) 511, horizontal sync (H_sync) 513, pixel clock (P_clk) 515, and pixel clock (P_clk) 515. Frame control signals 721, 723, and 405 corresponding to a plurality of composite frame structures 701, 703, 705, 707, 709, 711, 713, and 715 stored in advance with reference to a counting pixel counter 747. 725, 727, 729, 731, 733, and 735).

이 과정은 단순한 회로적 구성방법 또는 소프트웨어적인 방법으로 구현할 수 있으므로 본 발명에서 언급하지 않는다.This process is not mentioned in the present invention because it can be implemented by a simple circuit configuration method or a software method.

본 발명에서 좌/우 영상데이터는 좌/우 카메라부(107, 109)로부터 실시간으로 입력되는 영상신호를 근거로 하여 캠이프(CamIF)부(301)에서 생성된다. 그러므로 영상합성부(305)는 실시간으로 좌/우 영상데이터를 입력받는다.In the present invention, the left / right image data is generated by the camIF unit 301 based on the image signal input in real time from the left / right camera units 107 and 109. Therefore, the image synthesis unit 305 receives the left / right image data in real time.

캠이프(CamIF)부(301)는 영상데이터를 출력할 때, 한 프레임을 구성하는 좌 측 맨 위의 픽셀에서 우측 맨 아래의 픽셀까지 좌에서 우 방향으로 한 픽셀씩 진행하며 한 픽셀에 대응되는 픽셀 데이터를 출력한다.When the cam tape unit 301 outputs the image data, the cam IF unit 301 progresses one pixel in a left to right direction from the top left pixel to the bottom right pixel constituting one frame and corresponds to one pixel. Output pixel data.

따라서 좌/우 카메라부(107, 109)의 영상데이터를 합성하기 위한 프레임 제어신호는 수직동기(V_sync)(511)와 수평동기(H_sync)(513)와 픽셀클럭(P_clk) (515)을 참조한다.Therefore, the frame control signal for synthesizing the image data of the left and right camera units 107 and 109 refers to the vertical sync (V_sync) 511, the horizontal sync (H_sync) 513, and the pixel clock (P_clk) 515. do.

수직동기(V-sync)는 프레임의 시작시점과 끝시점을 나타낸다. 수직동기 (V-sync)의 파형(741)을 살펴보면, 펄스와 펄스 사이의 간격(751)은 한 프레임의 좌/우 영상데이터가 입력되는 시간을 나타낸다. V-sync indicates the start and end points of the frame. Looking at the waveform 741 of the vertical synchronization (V-sync), the interval 751 between the pulses represents the time at which left / right image data of one frame is input.

그리고 수평동기(H_sync)는 좌/우 영상데이터 한 라인의 시작시점과 끝시점을 나타낸다. 수평동기(H_sync)의 파형(743)을 살펴보면, 펄스와 펄스 사이의 간격(753)은 한 프레임의 한 라인의 좌/우 영상데이터가 입력되는 시간을 나타낸다. Horizontal sync (H_sync) indicates the start point and the end point of a line of left and right image data. Looking at the waveform 743 of the horizontal synchronization (H_sync), the interval 753 between pulses represents the time when left and right image data of one line of one frame is input.

또한 픽셀클럭(P_clk)은 한 펄스가 반복되는 파형으로 나타나며, 이 파형은 프레임을 구성하는 픽셀 하나의 좌/우 영상데이터가 입력되는 시간을 나타내다. In addition, the pixel clock P_clk is represented by a waveform in which one pulse is repeated, and this waveform indicates the time at which left / right image data of one pixel constituting the frame is input.

이 동기신호들을 이용하여 다수의 합성프레임 구조에 해당하는 각각의 프레임 제어신호를 생성할 수 있다. By using these sync signals, each frame control signal corresponding to a plurality of composite frame structures can be generated.

제어신호를 생성할 때, 좌 영상데이터를 선택하는 제어신호를 디지털 신호 '1'이라고 하고, 우 영상데이터를 선택하는 제어신호를 디지털 신호 '0'이라고 가정하면 701프레임 구조는 우 영상데이터만으로 구성되므로, 701프레임 구조에 대응되는 프레임 제어신호는 721파형과 같다.When generating a control signal, assuming that the control signal for selecting the left image data is called a digital signal '1' and the control signal for selecting the right image data is a digital signal '0', the 701 frame structure is composed of only the right image data. Therefore, the frame control signal corresponding to the 701 frame structure is equal to the 721 waveform.

그리고 703프레임 구조는 좌 영상데이터만으로 구성되므로, 701프레임 구조 에 대응되는 프레임 제어신호는 723파형과 같다.Since the 703 frame structure includes only the left image data, the frame control signal corresponding to the 701 frame structure is the same as the 723 waveform.

705프레임 구조는 한 프레임을 수평이등분하고 위 프레임은 좌 영상데이터로, 아래 프레임은 우 영상데이터로 구성되므로, 705프레임 구조에 대응되는 프레임 제어신호는 한 프레임을 입력하는 시간(751)의 반은 파형이 '1'이며, 그리고 프레임 시간(751)의 나머지 반은 파형이 '0'인 725파형이 생성된다.Since the 705 frame structure divides one frame horizontally, the upper frame consists of left image data, and the lower frame consists of right image data, the frame control signal corresponding to the 705 frame structure is half of the time 751 of inputting one frame. The waveform is '1' and the other half of frame time 751 produces a 725 waveform with waveform '0'.

707프레임 구조는 705프레임 구조에서 위 프레임이 우 영상데이터로, 아래 프레임은 좌 영상데이터로 구성되는 것으로, 707프레임 구조에 대응되는 프레임 제어신호 725파형의 반전인 727파형이 생성된다. In the 707 frame structure, in the 705 frame structure, the upper frame consists of right image data and the lower frame consists of left image data. An 727 waveform, which is an inversion of the frame control signal 725 waveform corresponding to the 707 frame structure, is generated.

709프레임 구조는 한 프레임을 수직이등분하고 좌 프레임은 좌 영상데이터로, 우 프레임은 우 영상데이터로 구성되므로, 709프레임 구조에 대응되는 프레임 제어신호는 프레임의 한 라인을 입력하는 시간(753)의 반은 파형이 '1'이며, 그 나머지 반은 '0'인 파형이 한 프레임 시간(751)동안 반복되는 729파형이 생성된다. Since the 709 frame structure divides one frame vertically, the left frame consists of the left image data, and the right frame consists of the right image data, the frame control signal corresponding to the 709 frame structure has a time of inputting one line of the frame (753). Half of the waveform has a waveform of '1', and the other half has a waveform of 729, in which a waveform with a '0' is repeated for one frame time 751.

711프레임 구조는 709프레임 구조와 같이 수직이등분하고, 좌 프레임은 우 영상데이터로, 우 프레임은 좌 영상데이터로 구성된다. 그러므로 711프레임 구조에 대응되는 프레임 제어신호는 729형의 반전인 731파형이 생성된다.The 711 frame structure is vertically bisected like the 709 frame structure, and the left frame is composed of right image data and the right frame is composed of left image data. Therefore, the frame control signal corresponding to the 711 frame structure generates a 731 waveform which is an inversion of the 729 type.

713프레임 구조는 한 프레임을 수평라인의 픽셀 수만큼 수직등분 한 프레임에서 좌 영상데이터와 우 영상데이터가 반복되는 구조이다. 그러므로 713프레임 구조에 대응되는 프레임 제어신호는 픽셀주기(755)만큼 파형이 '1'이며, 픽셀주기(755)만큼 파형이 '0'인 파형이 프레임주기(751)동안 반복되는 733파형이 생성된다.The 713 frame structure is a structure in which the left image data and the right image data are repeated in one frame by dividing one frame vertically by the number of pixels in a horizontal line. Therefore, the frame control signal corresponding to the frame structure 713 has a waveform of '1' as long as the pixel period 755 and a waveform having a waveform '0' as long as the pixel period 755 is repeated during the frame period 751. do.

715프레임 구조는 한 프레임을 수직라인의 픽셀 수만큼 수평등분 한 프레임에서 좌 영상데이터 라인과 우 영상데이터 라인이 반복되는 구조이다. 그러므로 715프레임 구조에 대응되는 프레임 제어신호는 한 라인주기(753)에서 파형이 '1'이며, 그 다음 라인주기(753)에서 '0'인 파형이 프레임주기(735)동안 반복되는 735파형이 생성된다.The 715 frame structure is a structure in which a left image data line and a right image data line are repeated in one frame horizontally equal to the number of pixels of the vertical line. Therefore, the frame control signal corresponding to the 715 frame structure has a waveform of '1' in one line period 753, and a 735 waveform in which a waveform having '0' in the next line period 753 is repeated during the frame period 735. Is generated.

도 7에서 보인 프레임 구조들(701, 703, 705, 707, 709, 711, 713, 715)에 대응되는 프레임 제어신호들의 파형(721, 723, 725, 727, 729, 731, 733, 735)은 본 발명의 실시 예이다. 그러므로 도 7에서 도시한 프레임 제어신호들의 파형은 고정되는 것이 아니라 제어신호 발생부(305)에 따라 다른 파형을 생성할 수 있다.Waveforms 721, 723, 725, 727, 729, 731, 733, and 735 of the frame control signals corresponding to the frame structures 701, 703, 705, 707, 709, 711, 713, and 715 shown in FIG. An embodiment of the present invention. Therefore, the waveforms of the frame control signals shown in FIG. 7 are not fixed but may generate different waveforms according to the control signal generator 305.

다시 도 5로 돌아가서, 영상합성부(305)의 제어신호 선택부(503)는 레지스터 파일부(313)의 합성프레임 구조 레지스터(315)에 저장되어 있는 합성프레임 구조 데이터를 파악한다. 그리고 제어신호 선택부(503)는 제어신호 발생부(501)로부터 입력되는 프레임 제어신호들 중에서, 합성프레임 구조 레지스터(315)에 저장되어 있는 합성프레임 구조에 해당하는 프레임 제어신호를 선택하여 영상선택부(505)로 전송한다. 5 again, the control signal selector 503 of the image synthesizer 305 grasps the composite frame structure data stored in the composite frame structure register 315 of the register file unit 313. The control signal selector 503 selects an image by selecting a frame control signal corresponding to the synthesized frame structure stored in the synthesized frame structure register 315 among the frame control signals input from the control signal generator 501. Transfer to the unit 505.

그리고 영상선택부(505)는 영상변환부(303)로부터 프레임 단위의 좌/우 영상데이터를 수신하고, 제어신호 선택부(503)로부터 입력되는 프레임 제어신호에 따라 픽셀단위로 좌 영상데이터를 선택하여 출력하거나 우 영상데이터를 선택하여 출력함으로 합성 영상데이터(521)를 생성한다. The image selector 505 receives left / right image data in frame units from the image converter 303 and selects left image data in pixel units according to a frame control signal input from the control signal selector 503. The composite image data 521 is generated by outputting the image data or by selecting and outputting the right image data.

예를 들면, 프레임 제어신호가 '0'과 '1'의 디지털 신호로 구성될 경우, 좌/ 우 영상선택부(505)는 한 프레임의 좌측 맨 위의 픽셀에서 우측 맨 아래의 픽셀까지 좌에서 우 방향으로 한 픽셀씩 진행하는 좌/우 영상데이터를 동시에 수신한다. 그리고 영상선택부(505)는 프레임 제어신호가 '1'일 때 좌 영상데이터가 입력되는 버퍼(507)를 선택하여 좌 영상데이터를 출력하고, 프레임 제어신호가 '0'일 때 우 영상데이터가 입력되는 버터(509)를 선택하여 우 영상데이터를 출력한다. 그러므로 영상선택부(505)는 좌/우 영상데이터를 합성하여 프레임 단위의 합성 영상데이터를 생성할 수 있다.For example, when the frame control signal is composed of digital signals of '0' and '1', the left / right image selector 505 is left to right from the top left pixel to the bottom right pixel of one frame. Simultaneously receives left / right image data which advances by one pixel in the right direction. When the frame control signal is '1', the image selector 505 selects a buffer 507 to which the left image data is input and outputs the left image data. When the frame control signal is '0', the image selection unit 505 outputs the right image data. Select the input butter 509 to output the right image data. Therefore, the image selector 505 may synthesize left / right image data to generate composite image data in units of frames.

지금까지 도 3과 도 5와 도 7을 참조하여 입체영상 처리부(111) 각각의 구성요소들의 동작을 설명하였다. 이제부터 도 4를 참조하여 입체영상 처리부(111)의 동작 흐름을 설명하고자 한다.So far, the operation of each component of the stereoscopic image processor 111 has been described with reference to FIGS. 3, 5, and 7. Now, an operation flow of the stereoscopic image processing unit 111 will be described with reference to FIG. 4.

도 4는 본 발명의 바람직한 실시 예에 따른 입체영상 처리부(111)의 동작 흐름도 이다. 도 1 내지 도 4를 참조하여 입체영상 처리부(111)의 동작 흐름을 설명한다.4 is a flowchart illustrating an operation of the stereoscopic image processor 111 according to an exemplary embodiment of the present invention. An operation flow of the stereoscopic image processing unit 111 will be described with reference to FIGS. 1 to 4.

401단계에서 명령해석부(311)는 제어부(101)로부터 영상처리에 관한 영상처리 제어신호가 입력되면, 그 제어신호를 분석하여 좌/우 카메라부(107, 109)를 동작하기 위한 카메라 제어신호와, 입체영상 처리부(111)의 구성요소들을 동작하기 위한 제어신호를 생성하고, 해당하는 구성요소들로 출력한다. In operation 401, when the command processing unit 311 receives an image processing control signal for image processing from the control unit 101, the command analysis unit 311 analyzes the control signal and operates a camera control signal for operating the left and right camera units 107 and 109. Then, a control signal for operating the components of the stereoscopic image processing unit 111 is generated and output to the corresponding components.

403단계에서 캠이프(CamIF)부(301)는 명령해석부(311)의 카메라 제어신호에 따라 좌/우 카메라부(107, 109)로부터 좌/우 영상신호를 입력받는다.In step 403, the cam cap unit 301 receives a left / right image signal from the left / right camera units 107 and 109 according to the camera control signal of the command interpreter 311.

405단계에서 캠이프부(CamIF)(301)는 403단계에서 입력된 좌/우 카메라 부(107, 109)의 영상신호로 영상데이터를 생성하고, 수직동기와 수평동기와 픽셀클럭으로 구성되는 동기신호를 생성한다.In step 405, the cam cap unit 301 generates image data from the image signals of the left and right camera units 107 and 109 input in step 403. The synchronization unit includes a vertical synchronization unit, a horizontal synchronization unit, and a pixel clock. Generate a signal.

407단계에서 영상변환부(303)는 405단계에서 생성한 좌/우 영상데이터를 레지스터 파일부(131)에 저장되어 있는 프레임 크기, 수직/수평 행상도, 영상밝기 등의 기타조건을 충족하도록 변환한다.In step 407, the image converter 303 converts the left / right image data generated in step 405 to satisfy other conditions such as frame size, vertical / horizontal resolution, and image brightness stored in the register file unit 131. do.

409단계에서 영상합성부(305)는 405단계에서 생성한 동기신호를 참조하여 각각의 합성프레임 구조에 대응되는 프레임 제어신호들을 생성한다. 그리고 영상합성부(305)는 레지스터 파일(313)의 합성프레임 구조 레지스터(315)에 저장되어 있는 합성프레임 구조에 대응되는 프레임 제어신호를 선택한다. 그리고 영상합성부(305)는 선택한 프레임 제어신호에 따라 좌/우 영상데이터를 합성하여 합성 영상데이터를 생성한다. In operation 409, the image synthesizer 305 generates frame control signals corresponding to the respective synthesized frame structures with reference to the synchronization signal generated in operation 405. The image synthesizer 305 selects a frame control signal corresponding to the composite frame structure stored in the composite frame structure register 315 of the register file 313. The image synthesizing unit 305 synthesizes left and right image data according to the selected frame control signal to generate synthesized image data.

이제부터 409단계에서의 영상합성부(305)의 동작 흐름을 도 6을 참조하여 좀 더 살펴보고자 한다.The operation flow of the image synthesizer 305 in step 409 will now be described with reference to FIG. 6.

601단계에서 제어신호 발생부(501)는 캠이프부(301)로부터 입력되는 수직동기 (V_sync)와 수평동기(H_sync)와 픽셀클럭(P_clk)으로 구성되는 동기신호를 이용하여 미리 저장되는 다수의 합성프레임 구조 각각의 프레임 제어신호들을 생성한다. In step 601, the control signal generator 501 is pre-stored using a synchronization signal composed of vertical sync V_sync, horizontal sync H_sync, and pixel clock P_clk input from the cam cap 301. The frame control signals of the composite frame structure are generated.

603단계에서 제어신호 선택부(503)는 601단계에서 생성한 프레임 제어신호들을 입력받는다. 그리고 제어신호 선택부(503)는 레지스터 파일부(313)의 합성프레임 구조 레지스터(315)에 저장되어 있는 합성프레임 구조를 파악하고, 그 파악한 합성프레임 구조에 대응되는 프레임 제어신호를 입력되는 다수의 프레임 제어신호들 중에서 선택하여 영상선택부(505)로 출력한다.In step 603, the control signal selector 503 receives the frame control signals generated in step 601. The control signal selector 503 grasps a composite frame structure stored in the composite frame structure register 315 of the register file unit 313 and inputs a plurality of frame control signals corresponding to the determined composite frame structure. The image is selected from the frame control signals and output to the image selector 505.

605단계에서 영상선택부(505)는 제어신호 선택부(503)로부터 입력되는 프레임 제어신호의 파형에 따라 좌/우 영상데이터 중에서 한 영상데이터를 선택하고, 그 선택한 영상데이터를 출력하여 합성 영상데이터를 생성한다. In operation 605, the image selector 505 selects one image data from the left and right image data according to the waveform of the frame control signal input from the control signal selector 503, and outputs the selected image data to synthesize the synthesized image data. Create

다시 도 4로 돌아가서, 411단계에서 영상합성부(305)는 사용자에 의해 영상저장이 요구되면 413단계로 진행하고, 사용자에 의해 영상저장이 요구되지 않으면 415단계로 진행한다.4 again, in step 411, the image synthesizing unit 305 proceeds to step 413 if the image storage is requested by the user, and proceeds to step 415 if the image storage is not requested by the user.

413단계에서 영상합성부(305)는 409단계에서 생성한 합성 영상데이터를 영상 메모리부(307)로 전송하고, 영상 메모리부(307)는 합성 영상데이터를 프레임 단위로 저장하며, 신호처리부(309)의 처리속도에 맞게 합성 영상데이터를 신호처리부(309)로 전송한다. In step 413, the image synthesizer 305 transmits the synthesized image data generated in step 409 to the image memory unit 307, and the image memory unit 307 stores the synthesized image data in units of frames, and the signal processor 309. The synthesized image data is transmitted to the signal processor 309 according to the processing speed of.

그리고 신호처리부(309)는 합성 영상데이터를 사용자에 의해 요청되는 비디오 파일형식 또는 이미지 파일형식의 영상데이터로 코딩하여 제어부(101)로 전송한다. 그리고 제어부(101)는 수신한 비디오 파일형식 또는 이미지 파일형식의 영상데이터를 메모리부(113)에 저장한다. The signal processor 309 encodes the synthesized image data into image data in a video file format or an image file format requested by the user, and transmits the synthesized image data to the controller 101. The control unit 101 stores the received video file format or image data in image file format in the memory unit 113.

그러므로 413단계에서 합성 영상데이터는 비디오 파일형식의 영상데이터로 변환되어 메모리부(113)에 저장된다.Therefore, in operation 413, the synthesized image data is converted into image data in a video file format and stored in the memory unit 113.

415단계에서 영상합성부(305)는 409단계에서 생성한 합성 영상데이터를 실시간으로 제어부(101)로 전송한다. 그리고 제어부(101)는 수신한 합성 영상데이터를 표시부(105)로 출력한다. In operation 415, the image synthesizer 305 transmits the synthesized image data generated in operation 409 to the controller 101 in real time. The controller 101 outputs the received composite image data to the display unit 105.

도 1 내지 도 8을 참조하여 본 발명의 실시 예에 따라 각 합성프레임 구조에 대응하여 영상선택부(505)가 합성 영상데이터를 생성하는 과정을 설명하면 다음과 같다. Referring to FIGS. 1 to 8, the process of generating the composite image data by the image selecting unit 505 according to each composite frame structure according to an embodiment of the present invention will be described below.

영상선택부(505)는 제어신호 선택부(503)에서 선택되는 프레임 제어신호에 따라 영상변환부(303)로부터 입력되는 좌/우 영상데이터를 합성하거나 좌/우 영상데이터 중 한 영상만을 출력한다. The image selector 505 synthesizes the left / right image data input from the image converter 303 or outputs only one image of the left / right image data according to the frame control signal selected by the control signal selector 503. .

801프레임과 803프레임은 영상변환부(303)로부터 입력되는 좌/우 영상데이터를 프레임 단위로 표시한 것이다. Frames 801 and 803 represent left / right image data input from the image converter 303 in units of frames.

좌/우 영상선택부(505)는 제어신호 선택부(503)로부터 721파형의 프레임 제어신호가 입력되면 805프레임과 같이 우 영상데이터만을 출력하며, 723파형의 프레임 제어신호가 입력되면 807프레임과 같이 좌 영상데이터만을 출력한다.The left / right image selector 505 outputs only the right image data, such as 805 frames, when the frame control signal of 721 waveforms is input from the control signal selector 503. Similarly, only the left image data is output.

그리고 좌/우 영상선택부(505)는 제어신호 선택부(503)로부터 725파형, 727파형, 729파형, 731파형, 733파형, 735파형의 프레임 제어신호가 입력되면 각각 809프레임, 811프레임, 813프레임, 815프레임, 817프레임, 819프레임을 출력할 수 있게 좌/우 영상데이터를 합성하여 합성 영상데이터를 생성한다. The left / right image selector 505 receives 725, 727, 729, 731, 733, and 735 waveforms from the control signal selector 503, respectively. Synthesized image data is generated by synthesizing the left and right image data to output 813 frames, 815 frames, 817 frames, and 819 frames.

그러므로 입체영상 처리부(111)는 영상합성부(305)를 구비하여 좌/우 카메라장치(107, 109)의 영상데이터를 합성하여 앞에서 언급한 다수의 프레임 구조 (803프레임 내지 819프레임)로 영상을 출력할 수 있으며, 특히 외부 단말로 입체영상을 출력할 때, 그 단말이 지원하는 입체영상 표시방법으로 합성 영상데이터를 출력할 수 있다.Therefore, the stereoscopic image processing unit 111 includes an image synthesizing unit 305 to synthesize the image data of the left and right camera apparatuses 107 and 109 and to display the image using the aforementioned plurality of frame structures (803 frames to 819 frames). In particular, when outputting a stereoscopic image to an external terminal, the composite image data can be output by a stereoscopic image display method supported by the terminal.

예를 들면, 인터레이스(interlace) 방식 중에서 셔터글래스(shutter glass) 방식으로 입체영상을 구현하는 입체영상 장치에서는 819프레임 구조로 입체영상을 출력하며, 배리어(barrier) LCD를 구비하는 입체영상 장치에서는 817프레임 구조로 입체영상을 출력한다.For example, a stereoscopic image device that implements a stereoscopic image by using a shutter glass method among interlace methods outputs a stereoscopic image in an 819 frame structure, and 817 in a stereoscopic image device having a barrier LCD. Output stereoscopic images in frame structure.

또한 프로그래시브(Progressive) 방식 중에서 셔터글래스 방식으로 입체영상을 구현하는 입체영상 장치에서는 807프레임과 805프레임을 반복하여 출력하므로 입체영상을 구현한다.In addition, the stereoscopic image device which implements the stereoscopic image by the shutter glass method among the progressive method implements the stereoscopic image by repeatedly outputting 807 frames and 805 frames.

그리고 본 발명의 입체영상 장치는 휴대단말기에 구비되어 이동 중에도 사용자의 요청에 의해 입체영상을 생성할 수 있다.In addition, the stereoscopic apparatus of the present invention may be provided in a mobile terminal to generate a stereoscopic image at the request of a user while moving.

상술한 본 발명의 설명에서는 구체적인 실시 예에 관해 설명하였으나, 여러 가지 변형이 본 발명의 범위에서 벗어나지 않고 실시될 수 있다. 예를 들어, 상기한 본 발명의 실시 예에서 제어신호 발생부(501)와 제어신호 선택부(503)를 따로 두어 미리 지정되는 프레임 구조에 대응되는 프레임 제어신호를 수신하는 동기신호를 이용하여 모두 생성하고, 제어신호 선택부(503)는 프레임 제어신호들 중에서 사용자에 의해 요청되는 하나의 프레임 제어신호를 선택하여 좌/우 영상 선택부(505)로 전송하도록 구성하였다. In the above description of the present invention, specific embodiments have been described, but various modifications may be made without departing from the scope of the present invention. For example, in the above-described embodiment of the present invention, both the control signal generator 501 and the control signal selector 503 are separately used to use a synchronization signal for receiving a frame control signal corresponding to a predetermined frame structure. The control signal selector 503 is configured to select one frame control signal requested by the user among the frame control signals and transmit the selected frame control signal to the left / right image selector 505.

그러나 본 발명의 다른 실시예에 따라 제어신호 발생부(501)와 제어신호 선택부(503)의 기능을 함께 수행하는 장치를 구비하여 동기신호로 사용자에 의해 요청되는 프레임 구조에 해당하는 제어신호만을 생성하여 영상선택부(505)로 전송하 도록 구성할 수 있다.However, according to another embodiment of the present invention, the control signal generator 501 and the control signal selector 503 are provided with a device that performs the functions together, only the control signal corresponding to the frame structure requested by the user as a synchronization signal It can be configured to generate and transmit to the image selection unit 505.

따라서 본 발명의 범위는 설명된 실시 예에 의하여 정할 것이 아니고 특허청구범위 뿐만 아니라 특허청구범위와 균등한 것에 의해 정해져야 한다.Therefore, the scope of the present invention should not be defined by the described embodiments, but should be determined not only by the claims but also by the equivalents of the claims.

상술한 바와 같이 본 발명에 따르면 좌/우 카메라의 영상데이터를 다수의 프레임 구조로 합성할 수 있으며, 두 대의 카메라 중에서 한 대의 카메라가 촬영한 영상에 해당하는 영상데이터를 생성할 수 있고, 외부 단말기로 입체영상데이터를 출력할 때 외부 단말기가 지원하는 입체영상의 프레임 구조로 입체영상데이터를 생성할 수 있는 장치를 제공한다. As described above, according to the present invention, image data of a left / right camera may be synthesized into a plurality of frame structures, and image data corresponding to an image captured by one of the two cameras may be generated, and an external terminal may be generated. The present invention provides a device capable of generating stereoscopic image data in a frame structure of a stereoscopic image supported by an external terminal when outputting stereoscopic image data.

Claims (14)

합성프레임 구조 선택이 가능한 입체영상 표시 장치에 있어서,In the stereoscopic image display device capable of selecting a composite frame structure, 상기 입체영상 장치의 외부에 구비되는 제1, 제2카메라부와, First and second camera units provided outside the stereoscopic imaging apparatus; 상기 제1, 제2카메라부로부터 수신되는 제1, 제2영상신호로 제1, 제2영상데이터를 생성하고, 미리 저장되며, 각각 서로 다른 입체영상 합성 방식에 대응하는 다수의 합성프레임 구조 중에서 사용자 입력에 대응하여 설정된 임의의 합성프레임 구조에 따라 상기 생성한 제1, 제2영상데이터를 합성하여 합성 영상데이터를 생성하는 입체영상 처리부를 포함함을 특징으로 하는 입체영상 표시 장치.First and second image data are generated from the first and second image signals received from the first and second camera units, and are stored in advance, and among a plurality of composite frame structures corresponding to different stereoscopic image synthesis methods. And a stereoscopic image processor for synthesizing the generated first and second image data according to an arbitrary composite frame structure set according to a user input to generate composite image data. 제1항에 있어서,The method of claim 1, 상기 제1, 제2카메라부는 상기 입체영상 장치 외부의 동일한 면에 일정 간격 떨어져 구비됨을 특징으로 하는 입체영상 표시 장치.And the first and second camera units are spaced apart from each other on the same surface outside the stereoscopic apparatus by a predetermined distance. 제1항에 있어서, The method of claim 1, 상기 다수의 합성프레임 구조는 상기 제1, 제2영상데이터를 프레임 단위로 합성할 때 합성하는 방식을 프레임 구조로 나타낸 것임을 특징으로 하는 입체 영상 표시 장치.The plurality of composite frame structures may include a frame structure indicating a method of synthesizing the first and second image data on a frame-by-frame basis. 제3항에 있어서,The method of claim 3, 사용자 입력에 따라 상기 다수의 합성프레임 구조 중에서 상기 임의의 합성프레임 구조를 선택하여 상기 입체 영상 처리부에 설정하고, 상기 사용자에 의해 영상 촬영이 요청되면, 상기 입체영상 처리부로 영상처리 제어신호를 출력하고, 그 응답으로 상기 합성 영상데이터를 입력받아 디스플레이 하는 제어부를 더 포함함을 특징으로 하는 입체영상 표시 장치.According to a user input, the arbitrary composite frame structure is selected from the plurality of composite frame structures and is set in the stereoscopic image processing unit. When image capturing is requested by the user, an image processing control signal is output to the stereoscopic image processing unit. And a controller configured to receive and display the composite image data in response. 제4항에 있어서,The method of claim 4, wherein 상기 사용자에 의해 영상저장 요청 시, 상기 제어부로 입력되는 상기 합성 영상데이터를 저장하는 메모리부를 더 포함함을 특징으로 하는 입체영상 표시 장치And a memory unit for storing the composite image data input to the controller when the image storage request is made by the user. 제5항에 있어서, 상기 입체영상 처리부는, The method of claim 5, wherein the stereoscopic image processing unit, 상기 제1, 제2카메라 영상신호에 따라 제1, 제2영상데이터를 생성하고 수직동기(V_sync), 수평동기(H_sync), 픽셀클럭(Pixel Clock:P_clk)을 포함하는 동기신호를 생성하는 캠이프(CamIF)부와, A cam for generating first and second image data according to the first and second camera image signals and for generating a synchronization signal including vertical synchronization (V_sync), horizontal synchronization (H_sync), and pixel clock (P_clk). CamIF part, 상기 동기신호를 참조하여 상기 다수의 합성프레임 구조에 대응되게 프레임 제어신호들을 생성하고, 상기 프레임 제어신호들 중에서 상기 제어부에 의해 설정된 임의의 합성프레임 구조에 해당하는 프레임 제어신호를 검출하고, 상기 검출한 프레임 제어신호의 파형에 따라 제1, 제2영상데이터를 합성하여 합성 영상데이터를 생성하고, 상기 제어부로 출력하는 영상합성부를 포함함을 특징으로 하는 입체영상 표시 장치.Generate frame control signals corresponding to the plurality of composite frame structures with reference to the synchronization signal, detect a frame control signal corresponding to an arbitrary composite frame structure set by the controller among the frame control signals, and detect the And an image synthesizing unit for synthesizing the first and second image data according to the waveform of one frame control signal and generating the synthesized image data and outputting the synthesized image data to the controller. 제6항에 있어서, 상기 입체영상 처리부는, The method of claim 6, wherein the stereoscopic image processing unit, 상기 사용자에 의해 영상저장 요청 시, 상기 합성 영상데이터를 프레임 단위로 저장하고 출력하는 영상 메모리부와,An image memory unit for storing and outputting the synthesized image data in units of frames when an image storage request is made by the user; 상기 영상 메모리부로부터 입력되는 상기 합성 영상데이터를 상기 사용자에 의해 요청되는 비디오 형식과 이미지 형식 중에서 적어도 하나에 해당되게 코딩하여 상기 제어부로 출력하여 상기 메모리부에 저장하도록 하는 신호처리부를 더 포함함을 특징으로 하는 입체영상 표시 장치.And a signal processor configured to code the synthesized image data input from the image memory unit according to at least one of a video format and an image format requested by the user, output the encoded image data to the controller, and store the synthesized image data in the memory unit. Stereoscopic display device characterized in that. 제6항에 있어서, 상기 영상합성부는, The method of claim 6, wherein the image synthesis unit, 상기 동기신호를 참조하여 상기 다수의 합성프레임 구조에 대응되게 상기 프레임 제어신호들을 생성하는 제어신호 발생부와,A control signal generator which generates the frame control signals corresponding to the plurality of composite frame structures with reference to the synchronization signal; 상기 생성한 프레임 제어신호들 중에서 상기 제어부에 의해 설정된 상기 임 의의 합성프레임 구조에 해당하는 상기 프레임 제어신호를 검출하는 제어신호 선택부와,A control signal selection unit for detecting the frame control signal corresponding to the arbitrary composite frame structure set by the control unit among the generated frame control signals; 상기 검출한 프레임 제어신호 파형에 따라 상기 제1, 제2영상데이터 중 하나를 선택, 출력하여 합성 영상데이터를 생성하는 영상선택부를 포함함을 특징으로 하는 입체영상 표시 장치.And an image selector configured to select and output one of the first and second image data according to the detected frame control signal waveform to generate composite image data. 제8항에 있어서,The method of claim 8, 상기 다수의 합성프레임 구조는 제1, 제2영상데이터 중에서 어느 하나의 영상데이터로 이루어진 합성 영상데이터가 생성되도록 하는 프레임 구조들을 포함함을 특징으로 하는 입체영상 표시 장치. And the plurality of composite frame structures include frame structures for generating composite image data including any one of first and second image data. 프레임 구조 선택이 가능한 입체영상 표시 장치의 입체영상 처리 방법에 있어서,In the stereoscopic image processing method of the stereoscopic image display device capable of selecting a frame structure, 사용자 입력에 따라, 미리 저장되며, 각각 서로 다른 입체영상 합성 방식에 대응하는 다수의 합성프레임 구조 중에서 임의의 합성프레임 구조를 설정하는 설정단계와, A setting step of setting an arbitrary composite frame structure among a plurality of composite frame structures, which are stored in advance according to a user input and respectively correspond to different stereoscopic image synthesis methods; 촬영 요청 시, 제1, 제2카메라부 각각에 대응되는 제1, 제2영상데이터를 상기 임의의 합성프레임 구조대로 합성한 합성 영상데이터를 생성하는 생성단계와,A generation step of generating composite image data obtained by synthesizing the first and second image data corresponding to each of the first and second camera units according to the arbitrary synthesis frame structure upon photographing request; 상기 합성 영상데이터를 디스플레이 하는 디스플레이단계를 포함함을 특징으로 하는 입체영상 처리 방법.And displaying the composite image data. 제10항에 있어서,The method of claim 10, 상기 사용자의 영상저장 요청 시, 상기 합성 영상데이터를 저장하는 저장단계를 더 포함함을 특징으로 하는 입체영상 처리 방법. And a storing step of storing the synthesized image data when the user requests to store the image. 제10항에 있어서,The method of claim 10, 상기 생성단계는, 상기 제1, 제2카메라부의 영상신호에 따라 제1, 제2영상데이터를 생성하고 수직동기(V_sync), 수평동기(H_sync), 픽셀클럭(Pixel Clock:P_clk)을 포함하는 동기신호를 생성하는 제1생성단계와,The generating step may include generating first and second image data according to image signals of the first and second camera units and including vertical synchronization (V_sync), horizontal synchronization (H_sync), and pixel clock (P_clk). A first generation step of generating a synchronization signal; 상기 동기신호를 참조하여 상기 다수의 합성프레임 구조에 대응되게 프레임 제어신호들을 생성하고, 상기 프레임 제어신호들 중에서 상기 설정된 임의의 합성프레임 구조에 해당하는 프레임 제어신호를 검출하고, 상기 검출한 프레임 제어신호의 파형에 따라 제1, 제2영상데이터를 합성하여 합성 영상데이터를 생성하는 제2생성단계를 포함함을 특징으로 하는 입체영상 처리 방법.Generate frame control signals corresponding to the plurality of composite frame structures with reference to the synchronization signal, detect a frame control signal corresponding to the predetermined composite frame structure among the frame control signals, and detect the detected frame control. And a second generation step of synthesizing the first and second image data according to the waveform of the signal to generate the synthesized image data. 제12항에 있어서,The method of claim 12, 상기 제2생성단계는, 상기 동기신호를 참조하여 상기 다수의 합성프레임 구조에 대응되게 프레임 제어신호들을 생성하는 발생단계와,The second generation step may include generating frame control signals corresponding to the plurality of composite frame structures with reference to the synchronization signal; 상기 프레임 제어신호들 중에서 상기 설정된 임의의 상기 합성프레임 구조에 해당하는 프레임 제어신호를 검출하는 검출단계와,A detecting step of detecting a frame control signal corresponding to the set arbitrary composite frame structure among the frame control signals; 상기 검출한 프레임 제어신호의 파형에 따라 상기 제1, 제2영상데이터를 합성하여 합성 영상데이터를 생성하는 중 하나를 선택하고 상기 선택한 영상데이터를 출력하여 합성 영상데이터를 생성하는 생성단계를 포함함을 특징으로 하는 입체영상 처리 방법. And generating one of synthesized image data by synthesizing the first and second image data according to the waveform of the detected frame control signal, and generating the synthesized image data by outputting the selected image data. Stereoscopic image processing method characterized in that. 제13항에 있어서,The method of claim 13, 상기 다수의 합성프레임 구조는 제1, 제2영상데이터 중에서 어느 하나의 영상데이터로 이루어진 합성 영상데이터가 생성되도록 하는 프레임 구조들을 포함함을 특징으로 하는 입체영상 처리 방법.And the plurality of composite frame structures include frame structures for generating composite image data including any one of first and second image data.
KR1020060073042A 2006-08-02 2006-08-02 Apparatus for displaying a 3-d image capable of selecting a composite frame structure, and method for processing the 3-d image KR100744371B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020060073042A KR100744371B1 (en) 2006-08-02 2006-08-02 Apparatus for displaying a 3-d image capable of selecting a composite frame structure, and method for processing the 3-d image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020060073042A KR100744371B1 (en) 2006-08-02 2006-08-02 Apparatus for displaying a 3-d image capable of selecting a composite frame structure, and method for processing the 3-d image

Publications (1)

Publication Number Publication Date
KR100744371B1 true KR100744371B1 (en) 2007-07-30

Family

ID=38499906

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060073042A KR100744371B1 (en) 2006-08-02 2006-08-02 Apparatus for displaying a 3-d image capable of selecting a composite frame structure, and method for processing the 3-d image

Country Status (1)

Country Link
KR (1) KR100744371B1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101152952B1 (en) 2010-08-26 2012-06-11 에이스텔 주식회사 Real-time three dimension formating module for ultra high-definition image and system using thereof
KR101237954B1 (en) 2011-01-04 2013-02-27 한성엘컴텍 주식회사 3d-image outputting device using both eyes camera
KR101256924B1 (en) 2012-05-19 2013-04-19 (주)루쏘코리아 3d image manufacturing method
KR101362647B1 (en) 2007-09-07 2014-02-12 삼성전자주식회사 System and method for generating and palying three dimensional image file including two dimensional image

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0662436A (en) * 1992-08-04 1994-03-04 Fujita Corp Stereoscopic vision image display device
KR20010010660A (en) * 1999-07-16 2001-02-15 최해용 3d adapter &system
JP2002148561A (en) 2000-11-15 2002-05-22 Canon Inc Stereoscopic display
JP2005057801A (en) 2004-09-30 2005-03-03 View Magic:Kk Panoramic three-dimensional imaging system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0662436A (en) * 1992-08-04 1994-03-04 Fujita Corp Stereoscopic vision image display device
KR20010010660A (en) * 1999-07-16 2001-02-15 최해용 3d adapter &system
JP2002148561A (en) 2000-11-15 2002-05-22 Canon Inc Stereoscopic display
JP2005057801A (en) 2004-09-30 2005-03-03 View Magic:Kk Panoramic three-dimensional imaging system

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101362647B1 (en) 2007-09-07 2014-02-12 삼성전자주식회사 System and method for generating and palying three dimensional image file including two dimensional image
KR101152952B1 (en) 2010-08-26 2012-06-11 에이스텔 주식회사 Real-time three dimension formating module for ultra high-definition image and system using thereof
KR101237954B1 (en) 2011-01-04 2013-02-27 한성엘컴텍 주식회사 3d-image outputting device using both eyes camera
KR101256924B1 (en) 2012-05-19 2013-04-19 (주)루쏘코리아 3d image manufacturing method

Similar Documents

Publication Publication Date Title
KR102534698B1 (en) Pass-through display of captured images
US8587643B2 (en) System for displaying multivideo
CN101873431B (en) Imaging apparatus and imaging method
KR100991804B1 (en) Stereoscopic Image Generation Chip For Mobile Equipment, and Method For Generating Stereoscopic Image Using The Same
JP4424088B2 (en) Imaging device
JP2005500721A5 (en)
KR20020011276A (en) Real size display system
US20090002482A1 (en) Method for displaying three-dimensional (3d) video and video apparatus using the same
CN109120869A (en) Double light image integration methods, integration equipment and unmanned plane
KR100744371B1 (en) Apparatus for displaying a 3-d image capable of selecting a composite frame structure, and method for processing the 3-d image
US20070096011A1 (en) Imaging device driver, imaging device driving method, and image signal processor
JP2018157335A (en) Image processing system
JP2007049598A (en) Image processing controller, electronic apparatus and image processing method
KR102058860B1 (en) Apparatus and mehod for processing a image in camera device
GB2486327A (en) Superimposing Information on a Displayed Image
JP5972016B2 (en) Imaging device
KR100652705B1 (en) Apparatus and method for enhancing image quality of mobile communication terminal
JP2008270937A (en) Image processing controller, electronic equipment, and image signal processing method
KR20110097512A (en) Image generation apparatus and panoramic image generation method thereof
KR102080927B1 (en) Method and Apparatus for Generating Stereo Image
CN109792475A (en) SVM system and its image input and processing method
KR101237964B1 (en) Apparatus for converting resolution
JP2640030B2 (en) Solid-state imaging device
EP3654642B1 (en) Projection display apparatus and method for controlling the same
CN102480632B (en) Three-dimensional image processing system and photographing device as well as three-dimensional image generating device of three-dimensional image processing system

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130627

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20140627

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20150629

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20160629

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20170629

Year of fee payment: 11

LAPS Lapse due to unpaid annual fee