KR100584067B1

KR100584067B1 - 화상 처리 장치, 화상 촬상 시스템, 화상 표시 시스템,화상 촬상 표시 시스템, 및 화상 처리 프로그램을 기록한컴퓨터 판독 가능한 기록 매체

Info

Publication number: KR100584067B1
Application number: KR1020040010950A
Authority: KR
Inventors: 에자와마사유끼
Original assignee: 샤프 가부시키가이샤
Priority date: 2003-03-24
Filing date: 2004-02-19
Publication date: 2006-05-29
Also published as: US20040189795A1; US7453489B2; DE602004006657D1; JP4677175B2; JP2004289681A; EP1462996B1; EP1462996A1; CN1532588A; CN1264048C; DE602004006657T2; KR20040086528A

Abstract

상호 시차상의 관계에 있는 복수개의 화상에 대응하는 복수개의 입력 화상 데이터에 대하여, 각각의 화상을 가로 방향으로 감축하기 위한 감축 연산을 행하는 감축 연산부와, 이 감축 연산부에 의해 감축 연산이 실시된 감축 화상 데이터를 조합함으로써 입체 화상 데이터를 생성하는 입체화 처리부와, 화상 처리 장치로부터의 출력으로서, 입체화 처리부에 의해 생성되는 입체 화상 데이터를 출력하거나, 상기 복수개의 입력 화상 데이터 중 어느 하나를 이용하여 생성되는 평면 화상 데이터를 출력하거나 하는 것을 전환하는 표시 전환 제어부를, 화상 처리 장치에 구비한다. 이에 의해, 화상 처리 장치에서, 입체 화상 표시와 평면 화상 표시를 전환하여 표시할 수 있다.

입체 화상 데이터, 평면 화상 표시, 감축 연산부, 입체화 처리부

Description

화상 처리 장치, 화상 촬상 시스템, 화상 표시 시스템, 화상 촬상 표시 시스템, 및 화상 처리 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체{IMAGE PROCESSING APPARATUS, IMAGE PICKUP SYSTEM, IMAGE DISPLAY SYSTEM, IMAGE PICKUP DISPLAY SYSTEM, AND COMPUTER-READABLE RECORDING MEDIUM IN WHICH IMAGE PROCESSING PROGRAM IS RECORDED}

도 1은 본 발명의 제1 실시예에 따른 화상 촬상 표시 시스템의 구성을 도시하는 블록도.

도 2는 도 1의 화상 촬상 표시 시스템에서, 입체 화상 표시를 행하는 경우의 화상 데이터의 흐름을 설명하기 위한 블록도.

도 3은 시차 장벽(parallax barrier) 방식의 입체 화상 표시의 원리를 설명하기 위해, 화상 표시 장치와 사용자와의 관계를 도시하는 평면도.

도 4는 렌티큘러 렌즈(lenticular lens) 방식의 입체 화상 표시의 원리를 설명하기 위해, 화상 표시 장치와 사용자와의 관계를 도시하는 평면도.

도 5는 도 1의 화상 촬상 표시 시스템에 의해 입체 화상 표시를 행하는 경우에 있어서, 화상 촬상 표시 시스템의 각 블록 사이에서의 화상 데이터의 변화의 양태를 도시한 블록도.

도 6은 도 1의 화상 촬상 표시 시스템에서, 평면 화상 표시를 행하는 경우의 화상 데이터의 흐름을 설명하기 위한 블록도.

도 7은 본 발명의 제2 실시예에 관한 화상 촬상 표시 시스템의 구성을 도시하는 블록도.

도 8은 도 7의 화상 촬상 표시 시스템에서, 입체 화상 표시를 행하는 경우의 화상 데이터의 흐름을 설명하기 위한 블록도.

도 9는 도 7의 화상 촬상 표시 시스템에 의해 입체 화상 표시를 행하는 경우에 있어서, 화상 촬상 표시 시스템의 각 블록 사이에서의 화상 데이터의 변화의 양태를 도시한 블록도로서, 특히 우안용 및 좌안용 각각의 촬상 장치에 의해 입력 화상 데이터가 생성되는 것을 도시하는 블록도.

도 10은 도 7의 화상 촬상 표시 시스템에 의해 입체 화상 표시를 행하는 경우에 있어서, 화상 촬상 표시 시스템의 각 블록 사이에서의 화상 데이터의 변화의 양태를 도시한 블록도로서, 특히 우안용의 촬상 장치에 의해 생성된 입력 화상 데이터가 감축 연산부에 의해 가로 방향으로만 1/2 감축되어 송출된 것을 도시하는 블록도.

도 11은 도 7의 화상 촬상 표시 시스템에 의해 입체 화상 표시를 행하는 경우에 있어서, 화상 촬상 표시 시스템의 각 블록 사이에서의 화상 데이터의 변화의 양태를 도시한 블록도로서, 특히 감축한 후의 우안용의 감축 화상 데이터가 화상 데이터 입체화부에서 프레임 메모리에 저장되고, 그것과 동시에 좌안용의 촬상 장치에 의해 생성된 입력 화상 데이터가 감축 연산부에 의해 가로 방향으로만 1/2 감축되어 송출된 부분을 도시한 블록도.

도 12는 도 7의 화상 촬상 표시 시스템에 의해 입체 화상 표시를 행하는 경우에 있어서, 화상 촬상 표시 시스템의 각 블록 사이에서의 화상 데이터의 변화의 양태를 도시한 블록도로서, 특히 감축 후의 좌안용의 감축 화상 데이터가 화상 데이터 입체화부에서 프레임 메모리에 저장되고 완성된 입체 화상 데이터가 프레임 메모리에 들어가 있는 상태를 도시한 블록도.

도 13은 도 7의 화상 촬상 표시 시스템에 의해 입체 화상 표시를 행하는 경우에 있어서, 화상 촬상 표시 시스템의 각 블록 사이에서의 화상 데이터의 변화의 양태를 도시한 블록도로서, 특히 프레임 메모리에 보존된 입체 화상 데이터가 화상 표시 장치에 송출된 부분을 도시하는 블록도.

도 14는 도 7의 화상 촬상 표시 시스템에서, 평면 화상 표시를 행하는 경우의 화상 데이터의 흐름을 설명하기 위한 블록도.

도 15는 본 발명의 제3 실시예에 따른 화상 데이터의 처리에 대하여, 화상 촬상 표시 시스템의 각 블록 사이에서의 화상 데이터의 변화의 양태를 도시한 블록도.

도 16은 본 발명의 제4 실시예에 따른 화상 데이터의 처리에 대하여, 화상 촬상 표시 시스템의 각 블록 사이에서의 화상 데이터의 변화의 양태를 도시한 블록도.

도 17은 본 발명의 제5 실시예에 따른 화상 데이터의 처리에 대하여, 화상 촬상 표시 시스템의 각 블록 사이에서의 화상 데이터의 변화의 양태를 도시한 블록도.

도 18은 본 발명의 제6 실시예에 따른 화상 촬상 표시 시스템의 구성을 도시하는 블록도.

도 19는 종래의 시차 장벽 방식의 화상 표시 장치의 단면을 도시하는 단면도.

도 20은 입체 화상 표시의 원리를 설명하기 위해, 도 19의 화상 표시 장치와 사용자와의 관계를 도시하는 평면도.

도 21은 종래의 렌티큘러 렌즈 방식의 화상 표시 장치의 단면을 도시하는 단면도.

<도면의 주요 부분에 대한 부호의 설명>

11a, 11b, 11c : 촬상 장치

13a, 13b, 13c : 화상 데이터 감축부

16a, 16b, 16c : 감축 연산부

17a, 17b, 17c : 선택기

본 발명은 입체 화상 표시를 행하기 위한 입체 화상 데이터를 출력 가능한 화상 처리 장치, 및 이 화상 처리 장치를 구비하는 화상 촬상 시스템, 화상 표시 시스템, 및 화상 촬상 표시 시스템, 혹은 컴퓨터를 상기 화상 처리 장치로서 동작시키는 화상 처리 프로그램, 및 이 화상 처리 프로그램을 기록한 컴퓨터 판독 가능 한 기록 매체에 관한 것이다.

종래, 입체 화상을 표시하는 화상 표시 장치가 게임이나 CAD(computer aided design) 시스템, 항공기, 의료용 기기 등의 다양한 용도로 사용되고 있다.

입체 화상을 사용자에게 제시하는 원리는 사용자의 양 눈에 시차가 있는 물체상을 제시함으로써 가능하게 된다. 이러한 화상을 사용자에게 제시하는 대표적인 방법으로는, 다음의 것을 예로 들 수 있다.

첫째는 입체 사진(anaglyph) 방식이다. 이 입체 사진 방식은, 통상의 화상 표시 장치를 이용하여, 우안용으로 붉은 화상을, 좌안용으로 푸른 화상을 제시한다. 그리고, 사용자는 우안에는 붉은 화상만이 보이도록 붉은 필름을, 좌안에는 푸른 화상만이 보이도록 푸른 필름을 붙인 안경을 착용한다. 이에 의해, 사용자의 좌우의 눈에, 각각 대응하는 화상만을 보여준다.

둘째는 편광 안경 방식이다. 이 편광 안경 방식은, 우안용 화상 표시 장치와 좌안용 화상 표시 장치를 이용하여, 각 화상 표시 장치 앞에, 각각 상호 직교하는 편광판을 배치하고, 편광판을 통과한 각 화상을 하프 미러로 합성하여 사용자에게 제시한다. 그리고, 사용자는 각각의 눈에 대한 화상만이 보이도록, 각각 상호 직교한 편광판을 붙인 안경을 착용한다. 이에 의해, 사용자의 좌우의 눈에, 각각 대응하는 화상만을 보여준다.

셋째는 시분할 셔터 방식이다. 이 시분할 셔터 방식은, 통상의 화상 표시 장치에 시차가 있는 화상을, 일정 시간마다 전환하여 표시한다. 그리고, 사용자는, 상기와 동일한 일정 시간마다 좌우의 셔터가 교대로 닫히는 안경을 착용한다. 이 셔터의 전환과, 화상의 전환을 동기시킴으로써, 사용자의 좌우의 눈에 각각 대응하는 화상만을 보여준다.

넷째는 시차 장벽(parallax barrier) 방식이다. 이 시차 장벽 방식은, 예를 들면 미국 특허 제6,392,690호(2002년 5월 21일 발행)에 개시되어 있다. 이 방식의 원리를 도 19 및 도 20에 기초하여 설명한다.

이 방식은, 액정 표시 소자(151) 등의 표시 소자에서의 전후의 면에, 직선 편광판(162·163)이 각각 형성되고, 또한 액정 표시 소자(151)의 표시면 전방에는 시차 장벽(171)이 형성되어, 입체 화상 표시 장치(150)가 구성된다. 또한, 액정 표시 소자(151)에는 n개의 화소로 이루어지는 화소 그룹(164)이 복수개 형성되어 있다. 이들 화소 그룹(164)에서의 화소 배열은 다음과 같다.

(R1, G2, B3, …, Rn), (G1, B2, R3, …, Gn), (B1, R2, G3, …, Bn), … 단, 동일한 괄호 내에 기재된 화소는 동일한 화소 그룹(164)에 속해 있는 것으로 한다. 또한, 상기한 R, G, B는 각각 적, 녹, 청에 대응하는 색 신호로 구동되는 화소를 나타내고 있다. 또한, 첨부 숫자는 n개의 시차상(azimuth difference image) 중 무엇인지 나타내고 있다. 이와 같이, 액정 표시 소자(151)에는 시차상을 표시하는 각 화소가 R, G, B의 순서로 배치되어 있다.

또, n개의 시차상이란, 어떤 물체를 1, 2, …, n 방향으로부터 바라보았을 때에 얻어지는 n개의 화상을 가리킨다. 이와 같이 n개의 화상을 이용하는 방식은 일반적으로 n안식으로 불린다.

시차 장벽(171)은 도 19에 도시한 바와 같이 개구부(172)로 이루어지는 복수개의 슬릿과 차광부(173)로 구성되고, 액정 표시 소자(151)의 1개의 화소 그룹(164)이 1개의 개구부(172)에 대응하도록 배치되어 있다.

이러한 구성에 의해, 액정 표시 소자(151)의 각 화소로부터 출사되는 광은 본래 액정 표시 소자(151) 전면의 모든 방향으로 출사되지만, 동일한 화소 그룹(164) 내에 속하는 화소로부터 출사되는 광은 도 19 내의 화살표의 광로로 나타낸 바와 같이 동일한 개구부(172)를 투과하게 된다.

그러면, 도 20에 도시한 바와 같이, 입체 화상 표시 장치(150)의 전면에는, 1, 2, …, n 각각의 화상을 관찰할 수 있는 관찰 영역 E1, E2, …, En이 공간적으로 분할 형성된다. 이에 의해, 사용자의 눈을 예를 들면 관찰 영역 E1 내에 두면, 사용자는 액정 표시 소자(151)에 표시되는 모든 "1"의 화상을 관찰할 수 있다. 그렇기 때문에, 시차 장벽(171)을 사이에 두고 액정 표시 소자(151)와 반대측 위치에 있는 사용자는 관찰 영역 E1, E2, …, En 중 임의의 2 영역에 각 눈을 두는 것에 의해, 1 내지 n의 화상 중 어느 하나를 선출하여 입체 화상을 관찰할 수 있게 된다. 즉, 사용자는 관찰하는 각도에 따라 다양한 입체 화상을 관찰할 수 있게 된다.

다섯째는 렌티큘러 렌즈(lenticular lens) 방식이다. 이 렌티큘러 렌즈 방식도, 예를 들면 상기 미국 특허 제6,392,690호에 개시되어 있다. 이 방식의 원리를 도 21에 기초하여 설명한다.

이 방식으로는, 상기 시차 장벽(171) 대신에 렌티큘러 렌즈(181)가 액정 표시 소자(151)의 표시면 전방에 형성되어 입체 화상 표시 장치(150)가 구성된다.

렌티큘러 렌즈(181)는 복수개의 원통형 렌즈(182)가 기판(183) 위에 병설되어 구성되어 있음과 함께, 액정 표시 소자(151)의 1개의 화소 그룹(164)이 1개의 원통형 렌즈(182)에 대응하도록 배치되어 있다. 따라서, 사용자가 렌티큘러 렌즈(181)를 통하여 표시면을 관찰했을 때에는 원통형 렌즈(182)의 작용에 의해, 관찰하고 있는 방향에 따라 보이는 화상이 선택된다.

예를 들면, 어떤 물체를 "1" 방향으로부터 보았을 때의 화상을 표시하는 화소(이하, 화소1이라고 칭함)로부터 출사되는 광이 원통형 렌즈(182)의 주점(principal point)을 통과하는 방향(도 21에서 실선의 화살표로 나타낸 바와 같은 방향)으로 사용자가 있는 경우, 사용자는 파선으로 나타내는 영역으로 표시되는, 화소1의 화상만을 관찰할 수 있게 된다. 따라서, 액정 표시 소자(151)의 전면에 렌티큘러 렌즈(181)를 배치하는 것에 의해, 시차 장벽(171)을 배치했을 때와 마찬가지의 효과를 얻을 수 있다.

그런데, 상기 미국 특허 제6,392,690호에는 입체 화상을 표시하기 위한 기술이 개시되어 있지만, 입체 화상과 평면 화상을 전환하여 표시하는 기술에 대해서는 아무것도 검토되어 있지 않다.

본 발명의 목적은, 입체 화상 표시와 평면 화상 표시를 전환하여 표시할 수 있는 화상 처리 장치 등을 제공하는데 있다.

본 발명의 화상 처리 장치는, 상기의 목적을 달성하기 위해, 상호 시차상의 관계에 있는 복수개의 화상에 대응하는 복수개의 입력 화상 데이터에 대하여, 각각의 화상을 가로 방향으로 감축하기 위한 감축 연산을 행하는 감축 연산부와, 상기 감축 연산부에 의해 감축 연산이 실시된 감축 화상 데이터를 조합함으로써 입체 화상 데이터를 생성하는 입체화 처리부와, 해당 화상 처리 장치로부터의 출력으로서, 상기 입체화 처리부에서 생성되는 입체 화상 데이터를 출력하거나, 상기 복수개의 입력 화상 데이터 중 어느 하나를 이용하여 생성되는 평면 화상 데이터를 출력하는 것을 전환하는 표시 전환 제어부를 구비하고 있다.

상기 구성의 화상 처리 장치에서는, 예를 들면 통상의 촬상 장치를 복수개 이용하여, 상호 시차상의 관계에 있는 복수개의 화상을 촬상하고, 각각의 입력 화상 데이터를 입력함으로써, 입체 화상 표시를 위한 입체 화상 데이터와, 평면 화상 표시를 위한 평면 화상 데이터를 전환하여 화상 표시 장치에 출력할 수 있다.

즉, 입체 화상 표시를 행하는 경우에는, 입력 화상 데이터를 감축 연산부에 의해 가로 방향으로 감축하여 감축 화상 데이터를 생성하고, 그 감축 화상 데이터를 입체화 처리부에 의해 조합함으로써 입체 화상 데이터를 생성할 수 있다. 한편, 평면 화상 표시를 행하는 경우에는, 입력 화상 데이터 중 어느 하나를 이용하여 평면 화상 데이터를 생성할 수 있다. 입체 화상 데이터와 평면 화상 데이터 중 어느 하나를 출력할지는, 표시 전환 제어부에 의해 전환할 수 있다.

이에 의해, 입체 화상 표시와 평면 화상 표시를 동일한 장치 구성으로 실현 할 수 있음과 함께, 예를 들면 사용자에 의한 표시 전환의 지시에 기초하여, 입체 화상 표시와 평면 화상 표시를 간단히 전환할 수 있다.

본 발명의 화상 처리 장치는, 상기의 화상 처리 장치에서, 상기 입력 화상 데이터의 수에 대응하여 상기 감축 연산부를 복수개 구비해도 된다.

상기의 구성에서는, 복수개의 입력 화상 데이터에 대한 감축 연산을 동시 병행하여 실행할 수 있다. 이에 의해, 입체화 처리부에 의한 처리에서, 대용량을 필요로 하는 프레임 메모리 등을 이용하지 않고 입체 화상 데이터를 생성하는 것이 가능하게 된다. 따라서, 입체화 처리부의 장치 구성을 간략화할 수 있다.

본 발명의 화상 처리 장치는, 상기의 화상 처리 장치에서, 상기 감축 연산부가 상기 복수개의 입력 화상 데이터 각각에 대한 감축 연산을 시간적으로 전환하여 행함으로써, 상기 각 입력 화상 데이터에 대응하는 각 감축 화상 데이터를 시분할로 출력하는 것이어도 된다.

상기의 구성에서는, 복수개의 입력 화상 데이터에 대한 감축 연산을 1개의 감축 연산부에 의해 시간적으로 전환하여 실행할 수 있다. 이에 의해, 감축 연산부를 입력 화상 데이터의 수에 대응하여 복수개 설치할 필요가 없게 되어, 감축 연산부의 수를 삭감할 수 있다.

본 발명의 화상 처리 장치는, 상기한 화상 처리 장치에서, 상기 감축 연산부에 의한 감축 연산이, 상기 입력 화상 데이터에 대한 데이터의 솎아냄(thinning) 연산이어도 된다.

상기의 구성에서는, 감축 연산부에서의 감축 연산량을 줄일 수 있기 때문에, 회로 규모가 작고 소비 전력도 낮은 화상 처리 장치를 실현할 수 있다.

본 발명의 화상 처리 장치는, 상기한 화상 처리 장치에서, 상기 입력 화상 데이터의 수가 n(n은 2 이상의 정수)이고, 상기 입체화 처리부가, 상기 n개의 입력 화상 데이터 중 m개(m은 2 이상, 또한, n 미만의 정수)의 입력 화상 데이터에 대응하는 감축 화상 데이터를 조합함으로써 상기 입체 화상 데이터를 생성하는 것이어도 된다.

상기 구성과 같이, 입력되는 입력 화상 데이터 중에서 선택한 소정 수의 입력 화상 데이터에 대응하는 감축 화상 데이터를 이용하여 입체 화상 데이터를 생성할 수 있다.

본 발명의 화상 촬상 시스템은, 상기의 화상 처리 장치와, 상호 시차상의 관계에 있는 복수개의 화상의 촬상에 의해 얻어지는 복수개의 입력 화상 데이터를 상기 화상 처리 장치에 입력하는 촬상 장치를 구비하여 구성된다.

또한, 본 발명의 화상 표시 시스템은, 상기의 화상 처리 장치와, 상기 화상 처리 장치로부터 출력되는 입체 화상 데이터 및 평면 화상 데이터에 기초하여, 입체 화상 표시 및 평면 화상 표시가 가능한 화상 표시 장치를 구비하여 구성된다.

또한, 본 발명의 화상 촬상 표시 시스템은, 상기의 화상 처리 장치와, 상호 시차상의 관계에 있는 복수개의 화상의 촬상에 의해 얻어지는 복수개의 입력 화상 데이터를 상기 화상 처리 장치에 입력하는 촬상 장치와, 상기 화상 처리 장치로부터 출력되는 입체 화상 데이터 및 평면 화상 데이터에 기초하여, 입체 화상 표시 및 평면 화상 표시가 가능한 화상 표시 장치를 구비하여 구성된다.

본 발명의 화상 촬상 표시 시스템은, 상기의 화상 촬상 표시 시스템에서, 상 기 촬상 장치가 입력하는 입력 화상 데이터의 수는 n(n은 2 이상의 정수)이고, 상기 화상 표시 장치가 가로 w개×세로 h개(w, h는 양의 정수)의 해상도를 갖는 n안식(眼式)의 입체 화상 표시가 가능하며, 상기 촬상 장치가 가로 w/n개×세로 h개보다도 높은 해상도를 갖는 것이어도 된다.

상기의 구성에서는, 화상 표시 장치의 해상도가 가로 w개×세로 h개이고, 이 화상 표시 장치의 해상도와는 상이한 해상도를 갖는 촬상 장치를 이용하여 화상 촬상 표시 시스템을 구성하는 경우라도, 가로 w/n개×세로 h개보다도 높은 해상도를 갖는 촬상 장치를 이용함으로써, 감축 연산부에서의 감축 연산이 가능하게 된다.

본 발명의 화상 촬상 표시 시스템은, 상기의 화상 촬상 표시 시스템에서, 상기 촬상 장치가, 상기 복수개의 입력 화상 데이터마다 서로 다른 해상도를 갖고 있어도 된다.

본 발명의 화상 처리 프로그램은, 상기의 화상 처리 장치를 동작시키는 화상 처리 프로그램으로서, 컴퓨터를 상기 화상 처리 장치의 각 부로서 기능시키기 위한 것이다. 또한, 본 발명의 컴퓨터 판독 가능한 기록 매체는 상기한 화상 처리 프로그램을 기록한 것이다.

본 발명의 또 다른 목적, 특징, 및 우수한 점은, 이하의 기재 내용에 의해 충분히 알 수 있을 것이다. 또, 본 발명의 이점은 첨부 도면을 참조한 다음의 설명에서 명백하게 될 것이다.

<제1 실시예>

본 발명의 제1 실시예에 대하여 도 1 내지 도 6에 기초하여 설명하면, 이하 와 같다.

도 1에 본 실시예의 화상 촬상 표시 시스템(1)의 블록도이다. 이 화상 촬상 표시 시스템(1)은, 촬상 수단으로서의 촬상 장치(11a·11b·11c), 화상 표시 수단으로서의 화상 표시 장치(12), 및 화상 처리 수단으로서의 화상 처리 장치(1a)를 구비하고 있다. 또, 여기서는 3개의 촬상 장치(11a·11b·11c)를 이용하는 것을 상정하고 있지만, 촬상 장치는 2개 이상이면 그 수는 특별히 한정되지 않는다. 또한, 촬상 장치(11a·11b·11c)를 총칭하는 경우에, 촬상 장치(11)로 기재하는 경우도 있다.

촬상 장치(11a·11b·11c)는, 각각 CCD 카메라나 CMOS 이미지 센서 등을 구비하여 구성되어 있고, 각각 화상을 촬상하여 화상 데이터를 생성하고, 화상 처리 장치(1a)에 입력한다. 특히, 촬상 장치(11a·11b·11c)는 3개의 시차상을 촬상하여, 각각에 대응하는 화상 데이터를 화상 처리 장치(1a)에 입력할 수 있다.

화상 표시 장치(12)는, 후술하는 바와 같이 화상 처리 장치(1a)에서 생성되는 입체 화상 데이터를 입력하는 것에 의해 입체 화상을 표시할 수 있으며, 또한 촬상 장치(11a·11b·11c) 중 어느 하나에 의해 생성된 화상 데이터인 평면 화상 데이터를 입력하는 것에 의해 평면 화상을 표시할 수 있는 것이다. 이 화상 표시 장치(12)는, 입체 화상 표시 및 평면 화상 표시의 쌍방이 가능한 것이면 되며, 예를 들면 도 19 또는 도 21에 도시한 입체 화상 표시 장치(150)를 이용할 수 있다.

화상 처리 장치(1a)는, 촬상 장치(11a·11b·11c) 각각에 일대일로 대응하여 구비된 화상 데이터 감축부(13a·13b·13c)와, 화상 데이터 입체화부(14)와, 표시 전환 제어부(15)를 구비하고 있다. 또, 화상 데이터 감축부(13a·13b·13c)를 총칭하는 경우에, 화상 데이터 감축부(13)로 기재하는 경우도 있다.

화상 데이터 감축부(13a·13b·13c)는 각각 감축 연산 수단으로서의 감축 연산부(16a·16b·16c)와, 선택기(selector)(17a·17b·17c)를 구비하고 있다. 또, 감축 연산부(16a·16b·16c) 및 선택기(17a·17b·17c)를 총칭하는 경우에, 각각 감축 연산부(16) 및 선택기(17)로 기재하는 경우도 있다.

감축 연산부(16a·16b·16c)는 촬상 장치(11a·11b·11c)로부터 입력되는 화상 데이터, 즉 상호 시차상의 관계에 있는 복수개의 화상에 대응하는 복수개의 화상 데이터(입력 화상 데이터)에 대하여, 각각의 화상을 가로 방향으로 감축하기 위한 감축 연산을 행하다. 촬상 장치(11) 및 화상 데이터 감축부(13)의 수를 n으로 하면(여기서는, n= 3), 감축 연산부(16)는 입력 화상 데이터를 가로 방향으로 1/n 감축한다. 또, 「화상 데이터를 가로 방향으로 감축함」이란, 화상 데이터의 가로 방향의 데이터량을 삭감하는 것을 의미하며, 특히 행렬형의 화상 데이터에 대해서는 열 수를 삭감하는 것을 의미한다.

감축 연산부(16)에 의해 입력 화상 데이터를 가로 방향으로 1/n 감축하기 위해서는, 화상의 축소로 잘 알려진, 최근린법(nearest neighbor method)이나 바이리니어법(bi-linear method), 바이큐빅법(bi-cubic method) 등의 알고리즘을 이용하면 된다.

선택기(17a·17b·17c)는 화상 데이터 감축부(13a·13b·13c)에 입력되어, 아무 처리도 실시되어 있지 않은 입력 화상 데이터 그 자체와, 감축 연산부(16a·16b·16c)에 의해 감축 연산을 실시한 화상 데이터(감축 화상 데이터) 중 한쪽을 선택하여 출력한다. 선택기(17a·17b·17c)에서 무엇을 선택할지는 표시 전환 제어부(15)의 제어에 기초한다.

화상 데이터 입체화부(14)는, 입체화 처리 수단으로서의 입체화 처리부(18)와, 선택기(19)를 구비하여 구성된다. 이 입체화 처리부(18) 및 선택기(19)에는 화상 데이터 감축부(13a·13b·13c)의 선택기(17a·17b·17c)로부터 송출되는 화상 데이터가 입력된다.

입체화 처리부(18)는, 감축 연산부(16a·16b·16c)에 의해 감축 연산이 실시된 감축 화상 데이터를 조합함으로써 입체 화상 데이터를 생성한다.

선택기(19)는 입체화 처리부(18)에 의해 생성되는 입체 화상 데이터와, 화상 데이터 감축부(13a·13b·13c)의 선택기(17a·17b·17c)로부터 송출되는 3개의 화상 데이터 중 미리 정한 1개의 화상 데이터(대표 화상 데이터) 중 한쪽을 선택하여, 화상 표시 장치(12)에 출력한다. 선택기(19)에서 무엇을 선택할지는, 표시 전환 제어부(15)의 제어에 기초한다.

또, 선택기(19)에 의한 선택과 선택기(17a·17b·17c)에 의한 선택은, 표시 전환 제어부(15)의 제어에 기초하여 제휴하고 있어서, 선택기(19)가 입체 화상 데이터를 선택할 때에는 선택기(17a·17b·17c)는 감축 화상 데이터를 선택하도록 되어 있고, 선택기(19)가 대표 화상 데이터를 선택할 때에는 선택기(17a·17b·17c)는 감축되어 있지 않은 입력 화상 데이터를 선택하도록 되어 있다.

따라서, 선택기(19)가 대표 화상 데이터를 선택할 때에 선택기(19)로부터 출력되는 화상 데이터는, 감축되어 있지 않은 3개의 입력 화상 데이터 중 어느 하나이며, 이것은 평면 화상 데이터이다. 또, 평면 화상 데이터는, 입력 화상 데이터 그 자체일 필요는 없으며, 예를 들면 입력 화상 데이터에 대하여 통상의 화상 처리가 실시된 것이어도 된다. 즉, 평면 화상 데이터는 3개의 입력 화상 데이터 중 어느 하나를 이용하여 생성된 것이면 된다.

표시 전환 제어부(15)는 사용자로부터의 입체 화상 표시/평면 화상 표시의 전환의 지시에 기초하여, 상술된 바와 같이 선택기(17) 및 선택기(19)에서의 선택을 제어한다. 사용자로부터의 입체 화상 표시/평면 화상 표시의 전환의 지시는 도시하지 않은 표시 전환 입력 장치를 사용자가 조작함으로써, 그 전환 입력 장치로부터 표시 전환 제어부(15)로 전송된다.

따라서, 표시 전환 제어부(15)는 화상 처리 장치(1a)로부터의 출력으로서, 입체화 처리부(18)에 의해 생성되는 입체 화상 데이터를 출력하거나, 복수개의 입력 화상 데이터 중 어느 하나를 이용하여 생성되는 평면 화상 데이터를 출력하거나 하는 것을 전환하는 전환 수단으로서 기능한다.

또, 평면 화상 데이터를 출력하는 경우에 있어서, 촬상 장치(11a·11b·11c) 중 어느 하나로 촬상된 입력 화상 데이터를 이용하거나, 표시 전환 제어부(15)의 제어에 의해 선택기(19)로 전환할 수 있게 되어도 된다.

이하에서는, 일례로서 도 2에 도시한 바와 같이 화상 촬상 표시 시스템(1)이 2개의 촬상 장치(11a·11b)를 구비하는 것으로 하고, 이 2개의 촬상 장치(11a·11b)에 의해 각각 우안용 및 좌안용의 시차상을 촬상하고, 이에 의해 입체 화상 표시를 행하는 경우, 즉 2안식의 입체 화상 표시를 행하는 경우에 대해 설명한다.

우선, 2안식의 입체 화상 표시의 표시 원리에 대하여 설명한다. 화상 표시 장치(12)와 사용자와의 관계를 도 3 및 도 4에 도시한다.

도 3은 화상 표시 장치(12)가 시차 장벽 방식의 표시 장치를 이용한 경우이다. 이 화상 표시 장치(12)는 액정 표시 소자(20)의 표시면 전방에, 복수개의 개구부(21a…)를 갖는 시차 장벽(21)을 배치하고, 이 시차 장벽(21)의 전방의 특정한 영역에서, 사용자의 우안 ER 및 좌안 EL에 각각 대응한 화상만이 보이도록 한 것이다.

그 때문에, 액정 표시 소자(20)에는 우안용의 화상인 Ri, Rj, Rk, Rl, Rm과, 좌안용의 화상인 Li, Lj, Lk, Ll, Lm을 교대로 배치하고, 이것을 시차 장벽(21)을 통하여 보는 것에 의해, 사용자의 좌우 각각의 눈에 각각 대응하는 화상만을 보이게 하는 것을 실현하고 있다.

예를 들면, Ri의 화상과 사용자의 우안 ER을 연결하는 선(실선) 위에는 시차 장벽(21)의 개구부(21a)가 있기 때문에, 사용자는 우안 ER에 의해 Ri의 화상을 볼 수 있다. 한편, Ri의 화상과 사용자의 좌안 EL을 연결하는 선(파선) 위에는 개구부(21a)가 없기 때문에, 사용자의 좌안 EL에는 Ri는 보이지 않게 되어 있다. 이에 의해, 사용자에게 안경 등의 장치를 착용시키지 않아도 좌우의 눈에 각각의 화상만을 보이게 할 수 있다.

또한, 도 4는 화상 표시 장치(12)가 렌티큘러 렌즈 방식의 표시 장치를 이용한 경우이다. 이 화상 표시 장치(12)는 액정 표시 소자(20)의 표시면 전방에, 렌티큘러 렌즈(22)를 배치하고, 렌티큘러 렌즈(22)의 전방의 특정한 영역에서, 사용자의 우안 ER 및 좌안 EL에 각각 대응한 화상만이 보이도록 한 것이다.

그 때문에, 액정 표시 소자(20)에는 우안용의 화상인 Ri, Rj, Rk, Rl, Rm과, 좌안용의 화상인 Li, Lj, Lk, Ll, Lm을 교대로 배치하고, 이것을 렌티큘러 렌즈(22)를 통하여 보는 것에 의해, 사용자의 좌우 각각의 눈에 각각 대응하는 화상만을 보이게 하는 것을 실현하고 있다.

렌티큘러 렌즈(22)는 우안용의 화상 및 좌안용의 화상의 1조에 대하여, 1개의 렌즈(22a)가 할당된 단위 구성을 갖고, 이 단위 구성이 반복된 것이다. 이 렌즈(22a)에 의해, 예를 들면 Rk로부터 발하는 광은 렌즈(22a)에서 굴절되어 사용자의 우안 ER에만 입사하고, Lk로부터 발하는 광은 렌즈(22a)에서 굴절되어 사용자의 좌안 EL에만 입사된다. 이에 의해, 사용자에게 안경 등의 장치를 착용시키지 않고 좌우의 눈에 각각의 화상만을 보이게 할 수 있다.

이와 같이, 시차 장벽 방식 및 렌티큘러 렌즈 방식의 어떤 방식으로도, 우안용의 화상과 좌안용의 화상을 액정 표시 소자(20)에 일렬마다 교대로 표시한다. 또, 일반의 n안식의 입체 화상 표시의 경우에는, 종래의 기술로서 도 19 내지 도 21에 기초하여 설명한 바와 같다.

이러한 표시를 행하기 위한 입체 화상 데이터를, 화상 처리 장치(1a)에 의해 생성하는 방법에 대하여 도 2 및 도 5에 기초하여 설명한다. 입체 화상 표시시에는, 화상 데이터는 도 2의 실선 부분을 따라 처리된다. 이 때, 도 2의 파선 부분의 화상 데이터의 흐름은, 선택기에 의해 선택되지 않게 된다. 또, 도 5는 촬상 장치(11)로부터 화상 표시 장치(12)의 사이에서 화상 데이터가 변화하는 양태를 도시하고 있다.

촬상 장치(11a·11b)에 의해 촬상된 해상도가 가로 w개×세로 h개(w, h는 양의 정수)인 입력 화상 데이터는 화상 데이터 감축부(13a·13b)에 들어가면, 각각의 감축 연산부(16a·16b)에 의해 가로 방향으로만 1/2 감축되어, 해상도가 가로 v(=w/2)개×세로 h개의 감축 화상 데이터로 되며, 각각의 선택기(17a·17b)를 통하여 화상 데이터 입체화부(14)로 출력된다. 이들 감축 화상 데이터는, 화상 데이터 입체화부(14)에 들어가면, 입체화 처리부(18)에서 화상 표시 장치(12)에 맞는 포맷으로 되도록, 각각의 열이 교대로 배열하도록 조합되어, 입체 화상 데이터로 변환된다. 변환된 입체 화상 데이터는 선택기(19)를 통하여 화상 표시 장치(12)에 출력되어 입체 화상 표시된다. 여기서, 화상 표시 장치(12)의 해상도는 가로 w개×세로 h개인 것으로 하고 있으며, 입체 화상 데이터의 데이터 사이즈도 가로 w개×세로 h개로 되어 있다.

도 5에서, 「Rij」는 우안용의 촬상 장치(11a)로부터 전송되어 온 입력 화상 데이터에서의 i 행 j 열의 화소의 데이터를 나타내고, 「Lij」는 좌안용의 촬상 장치(11b)로부터 전송되어 온 입력 화상 데이터에서의 i 행 j 열의 화소의 데이터를 나타낸다. 화상 데이터 감축부(13a·13b)를 통과한 후의 감축 화상 데이터에서의 화소의 데이터를, 「R' ij」, 「L' ij」로 나타내고 있는 것은 감축 연산에 의해 각 화소의 데이터가 입력 화상 데이터와는 상이한 값으로 되어 있기 때문이다.

본 화상 처리 장치(1a)에서의 감축 연산부(16)에서의 감축 연산은, 화상의 가로 방향만의 감축이고, 세로 방향으로는 감축하지 않기 때문에, 통상의 감축 연산 회로와 비교하여 연산 회로의 규모를 작게 할 수 있다.

이어서, 평면 화상 표시를 행하는 경우의 화상 데이터의 흐름에 대하여 도 6을 이용하여 설명한다. 여기서는, 일례로서 촬상 장치(11b)에 의해 촬상된 입력 화상 데이터를 이용하여 평면 화상 표시를 행하는 경우를 상정한다.

평면 화상 표시시에는, 화상 데이터는 도 6의 실선 부분을 따라 처리된다. 이 때, 도 6의 파선 부분의 화상 데이터의 흐름은 선택기에 의해 선택되지 않게 된다. 또한, 파선으로 나타낸 블록은 사용되지 않게 된다.

촬상 장치(11b)에 의해 촬상된 해상도가 가로 w개×세로 h개인 입력 화상 데이터는 화상 데이터 감축부(13b)에 들어가면 그 상태의 해상도로 선택기(17b)를 통해 출력된다. 그리고, 화상 데이터 입체화부(14)에 들어가면, 입체화 처리부(18)에 들어가지 않고 선택기(19)를 통하여 화상 표시 장치(12)에 출력되어 평면 화상 표시된다.

이 때, 선택기(19)에 의해 촬상 장치(11a)의 입력 화상 데이터는 선택되지 않고, 촬상 장치(11b)의 입력 화상 데이터에 의해 평면 화상 표시가 행해진다. 촬상 장치(11a)가 촬상한 화상을 평면 화상 표시하는 경우에는, 선택기(19)에 의해 선택되는 화상 데이터가 화상 데이터 감축부(13a)의 출력이 되도록, 표시 전환 제어부(15)에 의해 전환하면 된다. 이에 의해, 2개의 촬상 장치(11a·11b) 중, 임의의 1개의 촬상 장치가 촬상한 화상을 평면 화상 표시하는 것이 가능하게 된다.

이와 같이, 본 실시예의 화상 촬상 표시 시스템(1)은 n개의 촬상 장치(11)와, 이 촬상 장치(11)에 의해 취득된 각각의 화상 데이터를 입체 화상 표시 시에는 가로 방향으로 1/n 감축하고, 평면 화상 표시 시에는 아무것도 처리를 행하지 않는 n개의 화상 데이터 감축부(13)와, 입체 화상 표시 시에는 각각의 화상 데이터 감축부(13)로부터의 화상 데이터를 입체화하여 후단으로 전송하고, 평면 화상 표시 시에는 1개의 화상 데이터 감축부(13)로부터의 화상 데이터만을 후단으로 전송하는 화상 데이터 입체화부(14)와, 촬상 장치(11)와 동일한 해상도를 갖고, 입체 화상 표시 및 평면 화상 표시 가능한 화상 표시 장치(12)와, 입체 화상 표시와 평면 화상 표시 중 무엇을 행할지 제어하는 표시 전환 제어부(15)를 구비한 것이다.

본 실시예의 화상 촬상 표시 시스템(1)에서는, 입력 화상 데이터의 수에 대응하여 감축 연산부(16)를 복수개 구비하고 있다. 이 구성에서는, 복수개의 입력 화상 데이터에 대한 감축 연산을 동시 병행하여 실행할 수 있다. 이에 의해, 입체화 처리부(18)에 의한 처리에 있어서, 대용량을 요하는 프레임 메모리 등을 이용하지 않고 입체 화상 데이터를 생성하는 것이 가능하게 된다. 따라서, 입체화 처리부(18)의 장치 구성을 간략화할 수 있다.

또, 화상 처리 장치(1a)에서는 반드시 n개 모든 촬상 장치(11)의 화상 데이터를 사용하여 입체 화상 표시를 행할 필요는 없으며, 임의의 m(2≤m<n)개를 선택적으로 사용하도록 해도 된다. 즉, 입력 화상 데이터의 수가 n인 경우에, 화상 데이터 입체화부(14)는 n개의 입력 화상 데이터 중 m개의 입력 화상 데이터에 대응하는 감축 화상 데이터를 조합함으로써 입체 화상 데이터를 생성하도록 해도 된다. 이에 의해, 입력되는 입력 화상 데이터 중에서 선택한 소정 수의 입력 화상 데이터에 대응하는 감축 화상 데이터를 이용하여 입체 화상 데이터를 생성할 수 있다.

<제2 실시예>

본 발명의 제2 실시예에 대하여 도 7 내지 도 14에 기초하여 설명하면, 이하와 같다.

도 7에 본 실시예의 화상 촬상 표시 시스템(2)의 블록 구성을 도시한다. 이 화상 촬상 표시 시스템(2)은, 촬상 장치(11a·11b·11c), 화상 표시 장치(12), 및 화상 처리 장치(2a)를 구비하고 있다. 또, 촬상 장치(11a·11b·11c) 및 화상 표시 장치(12)는 제1 실시예에서 설명한 동일 부호의 부재와 동일한 기능을 갖는 것이다.

본 실시예에서는 화상 처리 장치(2a)의 구성이, 제1 실시예의 화상 처리 장치(1a)와 상이하다. 화상 처리 장치(2a)는 화상 데이터 감축부(23), 화상 데이터 입체화부(24), 및 표시 전환 제어부(15)를 구비하고 있다. 또, 표시 전환 제어부(15)는, 제1 실시예에서 설명한 동일 부호의 부재와 동일한 기능을 갖는 것이다. 또한, 화상 데이터 감축부(23) 및 화상 데이터 입체화부(24)는 제1 실시예의 화상 데이터 감축부(13) 및 화상 데이터 입체화부(14)에 상당하는 것이지만, 그 구성, 기능이 다음과 같이 상이하다.

화상 데이터 감축부(23)는 촬상 장치(11a·11b·11c)마다 설치되어 있는 것은 아니며, 촬상 장치(11a·11b·11c) 전체에 대하여 1개 설치되어 있다. 따라서, 촬상 장치(11a·11b·11c) 각각으로부터 화상 처리 장치(2a)에 입력되는 입력 화상 데이터는 모두 화상 데이터 감축부(23)에 들어간다.

화상 데이터 감축부(23)는 감축 연산부(16), 선택기(17) 외에, 선택기(31)를 구비하고 있다. 또, 감축 연산부(16) 및 선택기(17)는 각각 제1 실시예의 감축 연산부(16a·16b·16c) 중 어느 하나 및 선택기(17a·17b·17c) 중 어느 하나와 동일한 기능을 갖고 있다. 선택기(31)는 촬상 장치(11a·11b·11c)로부터의 입력 화상 데이터를 순차적으로 전환하여 감축 연산부(16) 및 선택기(17)로 전송하는 기능을 갖고 있다.

이 구성에 의해, 화상 데이터 감축부(23)에서는, 촬상 장치(11a·11b·11c)로부터 송출되는 각 입력 화상 데이터에 대한 감축 연산부(16)에서의 감축 연산을, 시간적으로 전환하여 행하여, 각 입력 화상 데이터에 대응하는 감축 화상 데이터를 시분할로 출력한다. 즉, 감축 연산부(16)에서는, 예를 들면 촬상 장치(11a)로부터의 입력 화상 데이터의 감축이 완료되면 그 감축 화상 데이터를 후단으로 전송하고, 다음 촬상 장치(11b)로부터의 입력 화상 데이터의 처리를 행하는 것을 촬상 장치의 수인 n회 반복한다.

그 때문에, 선택기(31)에서는 촬상 장치(11a·11b·11c) 각각으로부터의 입력 화상 데이터 중 어느 것을 후단으로 전송할지 순차적으로 선택한다. 또한, 선택기(31)는 감축 연산을 행하지 않는 입력 화상 데이터를 전송할 때에는, 어느 입력 화상 데이터를 후단으로 전송할지 순차적으로 선택한다.

화상 데이터 입체화부(24)는 입체화 처리부(28), 선택기(19) 외에 프레임 메모리(32)를 구비하고 있다. 또, 선택기(19)는 제1 실시예의 선택기(19)와 거의 동일한 기능을 갖고 있다.

입체화 처리부(28)는 제1 실시예의 입체화 처리부(18)에 상당하는 부재이지만, 감축 연산부(16)에 의해 감축 연산이 실시된 감축 화상 데이터를 조합하여 입체 화상 데이터를 생성할 때에, 프레임 메모리(32)를 이용하는 점이 제1 실시예의 경우와 상이하다. 즉, 입체화 처리부(28)에서는, 감축 연산부(16)로부터 전송되어 오는 시분할된 감축 화상 데이터를, 순차적으로 프레임 메모리(32)에 기억시켜 복원하면서 입체 화상 데이터를 생성한다. 그 때문에, 프레임 메모리(32)는 화상 표시 장치(12)의 해상도에 대응하는 입체 화상 데이터를 기억할 수 있는 용량을 갖고 있다.

즉, 입체화 처리부(28)에 의해 감축 화상 데이터를 입체화하는 경우, 입체화 처리부(28)에는, 각 촬상 장치(11a·11b·11c)로부터의 입력 화상 데이터에 대응하는 감축 화상 데이터가 순차적으로 전송되어 오기 때문에, 입체화 처리부(28)는 이들의 감축 화상 데이터를 프레임 메모리(32)에 기억시키면서 입체 화상 데이터를 형성한다. 그리고, 화상 데이터 감축부(23)로부터 전송되어 온, 가로 방향으로 1/n 감축된 n개의 감축 화상 데이터의 전송이 완료되면, 그 시점에서 입체 화상 데이터가 완성되고, 이 입체 화상 데이터가 선택기(19)를 통해 화상 표시 장치(12)로 전송된다.

이하에서는, 일례로서, 도 8에 도시한 바와 같이 화상 촬상 표시 시스템(2)이 2개의 촬상 장치(11a·11b)를 구비하는 것으로 하고, 이 2개의 촬상 장치(11a·11b)에 의해 각각 우안용 및 좌안용의 시차상을 촬상하고, 이에 의해 입체 화상 표시를 행하는 경우, 즉 2안식의 입체 화상 표시를 행하는 경우에 대해 설명한다.

입체 화상 표시시에는, 화상 데이터는 도 8의 실선 부분을 따라 처리된다. 이 때, 도 8의 파선 부분의 화상 데이터의 흐름은, 선택기에 의해 선택되지 않게 된다. 또한, 촬상 장치(11)로부터 화상 표시 장치(12) 사이에서 화상 데이터가 변화하는 양태를, 도 9 내지 도 13에 시계열로 도시한다.

또, 도 9 내지 도 13에서, 「Rij」는 우안용의 촬상 장치(11a)로부터 전송되어 온 입력 화상 데이터에서의 i행 j열의 화소의 데이터를 나타내고, 「Lij」는 좌안용의 촬상 장치(11b)로부터 전송되어 온 입력 화상 데이터에서의 i행 j열의 화소의 데이터를 나타낸다. 화상 데이터 감축부(23)를 통과한 후의 감축 화상 데이터에서의 화소의 데이터를, 「R' ij」, 「L' ij」로 나타내고 있는 것은 감축 연산에 의해 각 화소의 데이터가 입력 화상 데이터의 것과는 상이한 값으로 되어 있기 때문이다.

촬상 장치(11a·11b)에 의해 촬상된 해상도가 가로 w개×세로 h개인 입력 화상 데이터는 최초로 선택기(31)에 의해 촬상 장치(11a)의 입력 화상 데이터가 선택되어(도 9 참조), 화상 데이터 감축부(23)에 들어가서, 감축 연산부(16)에 의해 가로 방향으로만 1/2 감축되어, 해상도가 가로 v(=w/2)개×세로 h개의 감축 화상 데이터로 되어, 선택기(17)(도 9에서는 도시하지 않음)를 통하여 화상 데이터 입체화부(24)로 출력된다(도 10 참조).

이어서, 촬상 장치(11b)의 입력 화상 데이터가 선택기(31)에 의해 선택되어 화상 데이터 감축부(23)로 들어가서, 상기한 바와 같은 처리가 이루어져 감축 화상 데이터가 출력된다(도 11 참조).

이들 감축 화상 데이터는 순차적으로 화상 데이터 입체화부(24)에 들어가서, 입체화 처리부(28)에 의해, 화상 표시 장치(12)에 맞는 포맷으로 되도록, 각각의 열이 교대로 배열되도록 조합되어, 프레임 메모리(32)에 저장된다. 이와 같이 하여 감축 화상 데이터 모두가 프레임 메모리(32)에 보존된 시점에서, 입체 화상 데이터가 완성된다(도 12 참조). 이 입체 화상 데이터는, 선택기(19)를 통하여 화상 표시 장치(12)에 출력되어 입체 화상 표시된다(도 13 참조).

본 화상 처리 장치(2a)의 감축 연산부(16)에서의 감축 연산은, 화상의 가로 방향만의 감축이고, 세로 방향으로는 감축하지 않기 때문에, 통상의 감축 연산 회로와 비교하여 연산 회로의 규모를 작게 할 수 있다.

이어서, 평면 화상 표시를 행하는 경우의 화상 데이터의 흐름에 대하여 도 14를 이용하여 설명한다. 여기서는, 일례로서 촬상 장치(11b)에 의해 촬상된 입력 화상 데이터를 이용하여 평면 화상 표시를 행하는 경우를 상정한다.

평면 화상 표시시에는, 화상 데이터는 도 14의 실선 부분을 따라 처리된다. 이 때, 도 14의 파선 부분의 화상 데이터의 흐름은, 선택기에 의해 선택되지 않게 된다. 또한, 파선으로 나타낸 블록은 사용되지 않게 된다.

촬상 장치(11b)에 의해 촬상된 해상도가 가로 w개×세로 h개인 입력 화상 데이터는 화상 데이터 감축부(23)에 들어가면 그 상태의 해상도로 선택기(31) 및 선택기(17)를 통하여 출력된다. 그리고, 화상 데이터 입체화부(24)에 들어가면, 입체화 처리부(28)에 들어가지 않고 선택기(19)를 통하여 화상 표시 장치(12)로 출력되어 평면 화상 표시된다.

이 때, 선택기(31)에 의해 촬상 장치(11a)의 입력 화상 데이터는 선택되지 않고, 촬상 장치(11b)의 입력 화상 데이터에 의해 평면 화상 표시가 행해진다. 촬상 장치(11a)가 촬상한 화상을 평면 화상 표시하는 경우에는, 선택기(31)에 의해 선택되는 입력 화상 데이터가 촬상 장치(11a)의 출력이 되도록, 표시 전환 제어부(15)에 의해 전환하면 된다. 이에 의해, 2개의 촬상 장치(11a·11b) 중 임의의 1개의 촬상 장치가 촬상한 화상을 평면 화상 표시하는 것이 가능하게 된다.

본 실시예의 화상 처리 장치(2a)에서는, 제1 실시예의 화상 처리 장치(1a)와 비교하여, 회로 규모가 큰 감축 연산부(16)를 복수개 설치할 필요가 없기 때문에, 회로 규모를 작게 할 수 있어, 화상 처리 장치(2a)의 비용 및 소비 전력을 저감시키는 것이 가능하게 된다.

이와 같이, 본 실시예의 화상 촬상 표시 시스템(2)은 n개의 촬상 장치(11)와, 이 촬상 장치(11)에서 취득된 각각의 화상 데이터를 입체 화상 표시 시에는 가로 방향으로 1/n 감축하고, 평면 화상 표시 시에는 아무것도 처리를 행하지 않는 화상 데이터 감축부(23)와, 입체 화상 표시 시에는 프레임 메모리(32)를 사용하면서 화상 데이터 감축부(23)로부터의 화상 데이터를 입체화하여 후단으로 전송하고, 평면 화상 표시 시에는 1개의 촬상 장치(11)로부터의 화상 데이터만을 후단으로 전송하는 화상 데이터 입체화부(24)와, 촬상 장치(11)와 동일한 해상도를 갖고, 입체 화상 표시 및 평면 화상 표시 가능한 화상 표시 장치(12)와, 입체 화상 표시 및 평면 화상 표시 중 무엇을 행할지 제어하는 표시 전환 제어부(15)를 구비한 것이다.

본 실시예의 화상 촬상 표시 시스템(2)에서는, 감축 연산부(16)가 복수개의 입력 화상 데이터 각각에 대한 감축 연산을 시간적으로 전환하여 행함으로써, 각 입력 화상 데이터에 대응하는 각 감축 화상 데이터를 시분할로 출력한다. 이 구성에서는, 복수개의 입력 화상 데이터에 대한 감축 연산을 1개의 감축 연산부(16)에 의해 시간적으로 전환하여 실행할 수 있다. 이에 의해, 감축 연산부(16)를 입력 화상 데이터의 수에 대응하여 복수개 설치할 필요가 없게 되어, 감축 연산부(16)의 수를 삭감할 수 있다.

<제3 실시예>

본 발명의 제3 실시예에 대하여 도 15에 기초하여 설명하면, 이하와 같다.

본 실시예에서는, 감축 연산부(16)에서의 감축 연산에 의한, 솎아냄(thinning) 연산을 이용하는 경우에 대해 설명한다. 또, 본 실시예에서 설명하는 연산을 행하기 위한 장치 구성은, 제1 실시예, 제2 실시예의 어떤 구성이어도 된다. 여기서는, 제1 실시예의 장치 구성을 전제로 하여 설명한다.

도 15는 촬상 장치(11)로부터 화상 표시 장치(12) 사이에서 화상 데이터가 변화하는 양태를 도시하고 있으며, 제1 실시예의 도 5에 대응하는 것이다.

촬상 장치(11a·11b)에 의해 촬상된 해상도가 가로 w개×세로 h개인 입력 화상 데이터는, 화상 데이터 감축부(13a·13b)에 들어가면, 각각의 감축 연산부(16a·16b)에 의해 가로 방향으로만 1/2 감축되어, 해상도가 가로 v(=w/2)개×세로 h개의 감축 화상 데이터로 되어, 각각의 선택기(17a·17b)를 통하여 화상 데이터 입체화부(14)로 출력된다.

이 감축 연산부(16a·16b)에 의한 감축 연산으로서, 단순한 데이터 솎아냄을 행하는데, 예를 들면 홀수열째의 데이터만으로 이루어지는 데이터를 감축 화상 데이터로 한다. 이 경우, 짝수열째의 데이터는 입체 화상 표시에는 사용되지 않는다.

그리고, 이들의 감축 화상 데이터는 화상 데이터 입체화부(14)에 들어가면, 입체화 처리부(18)에 의해 화상 표시 장치(12)에 맞는 포맷으로 되도록, 각각의 열이 교대로 배열되도록 조합되어, 입체 화상 데이터로 변환된다. 변환된 입체 화상 데이터는, 선택기(19)를 통하여 화상 표시 장치(12)에 출력되어 입체 화상 표시된다. 여기서, 화상 표시 장치(12)의 해상도는 가로 w개×세로 h개인 것으로 하고 있으며, 입체 화상 데이터의 데이터 사이즈도 가로 w개×세로 h개로 되어 있다.

이에 의해, 감축 연산부(16)에 의한 감축 연산량이 감소하기 때문에, 회로 규모가 작고, 소비 전력도 낮은 화상 처리 장치(1a)를 실현할 수 있다.

<제4 실시예>

본 발명의 제4 실시예에 대하여 도 16에 기초하여 설명하면, 이하와 같다.

본 실시예에서는, 감축 연산부(16)에 의한 감축 연산으로서, 세로 방향 및 가로 방향의 양방으로 임의의 감축율로 감축 가능하게 하는 점, 및 화상 표시 장치(12)의 해상도가 가로 w개×세로 h개인 경우에, 촬상 장치(11)의 해상도가 가로 w/n개×세로 h개보다도 높은 해상도를 갖는 점이 제1 실시예, 제2 실시예의 경 우와 상이하다. 여기서, n은 입체 화상 표시에 이용하는 입력 화상 데이터의 수이다.

또, 본 실시예에서 설명하는 연산을 행하기 위한 장치 구성은, 제1 실시예, 제2 실시예의 어떤 구성이어도 된다. 여기서는, 제1 실시예의 장치 구성을 전제로 하여 설명한다.

도 16은 촬상 장치(11)로부터 화상 표시 장치(12) 사이에서 화상 데이터가 변화하는 양태를 도시하고 있으며, 제1 실시예의 도 5에 대응하는 것이다. 여기서, 촬상 장치(11a·11b)의 해상도는 각각 가로 x개×세로 y개, 화상 표시 장치(12)의 해상도는 가로 w개×세로 h개로 한다.

촬상 장치(11a·11b)에 의해 촬상된 해상도가 가로 x개×세로 y개인 입력 화상 데이터는 화상 데이터 감축부(13a·13b)에 들어가면, 각각의 감축 연산부(16a·16b)에 의해 가로 방향으로 w/(2×x), 세로 방향으로 h/y 감축되어, 해상도가 가로 v(=w/2)개×세로 h개의 감축 화상 데이터로 되고, 각각의 선택기(17a·17b)를 통해 화상 데이터 입체화부(14)로 출력된다. 이들의 감축 화상 데이터는, 화상 데이터 입체화부(14)에 들어가면, 입체화 처리부(18)에 의해 화상 표시 장치(12)에 맞는 포맷이 되도록, 각각의 열이 교대로 배열되도록 조합되어, 입체 화상 데이터로 변환된다. 변환된 입체 화상 데이터는 선택기(19)를 통하여 화상 표시 장치(12)로 출력되어 입체 화상 표시된다. 이에 의해, 입체 화상 데이터의 데이터 사이즈가 가로 w개×세로 h개로 된다.

이와 같이, 본 실시예의 화상 처리 장치(1a)는 화상 처리 장치(1a)에 입력되 는 입력 화상 데이터의 수가 n이고, 화상 표시 장치(12)는 가로 w개×세로 h개의 해상도를 갖는 n안식의 입체 화상 표시가 가능하여, 촬상 장치(11)는 가로 w/n개×세로 h개보다도 높은 해상도를 갖는 것이다.

여기서, 촬상 장치(11)의 해상도가 가로 w/n개×세로 h개보다도 높을 필요가 있는 것은 촬상 장치(11)의 해상도가 감축 연산부(16)의 출력 해상도보다도 클 필요가 있기 때문이다.

본 실시예에서는, 화상 표시 장치(12)의 해상도와는 상이한 해상도를 갖는 촬상 장치(11)를 이용하여 화상 촬상 표시 시스템을 실현할 수 있다.

<제5 실시예>

본 발명의 제5 실시예에 대하여 도 17에 기초하여 설명하면, 이하와 같다.

본 실시예는, 상호 해상도가 상이한 촬상 장치(11a)와 촬상 장치(11b)를 이용하는 점에서 제4 실시예와 상이한 것 외에는, 제4 실시예와 동일하다. 본 실시예의 장치 구성도, 제1 실시예, 제2 실시예의 어떤 구성이어도 되지만, 여기서는 제1 실시예의 장치 구성을 전제로 하여 설명한다.

도 17은 촬상 장치(11)로부터 화상 표시 장치(12) 사이에서 화상 데이터가 변화하는 양태를 도시하고 있으며, 제4 실시예의 도 16에 대응하는 것이다. 여기서, 촬상 장치(11a)의 해상도는 가로 p개×세로 q개, 촬상 장치(11b)의 해상도는 가로 x개×세로 y개, 화상 표시 장치(12)의 해상도는 가로 w개×세로 h개로 한다.

촬상 장치(11a)에 의해 촬상된 해상도가 가로 p개×세로 q개의 입력 화상 데이터는, 화상 데이터 감축부(13a)에 들어가면, 감축 연산부(16a)에 의해 가로 방향으로 w/(2×p), 세로 방향으로 h/q 감축되어, 해상도가 가로 v(=w/2)개×세로 h개의 감축 화상 데이터로 되고, 선택기(17a)를 통하여 화상 데이터 입체화부(14)로 출력된다.

한편, 촬상 장치(11b)에 의해 촬상된 해상도가 가로 x개×세로 y개인 입력 화상 데이터는 화상 데이터 감축부(13b)에 들어가면, 감축 연산부(16b)에 의해 가로 방향으로 w/(2×x), 세로 방향으로 h/y로 감축되어, 해상도가 가로 v(=w/2)개×세로 h개의 감축 화상 데이터로 되고, 선택기(17b)를 통하여 화상 데이터 입체화부(14)로 출력된다.

이들의 감축 화상 데이터는, 화상 데이터 입체화부(14)에 들어가면, 입체화 처리부(18)에 의해 화상 표시 장치(12)에 맞는 포맷으로 되도록, 각각의 열이 교대로 배열되도록 조합되어, 입체 화상 데이터로 변환된다. 변환된 입체 화상 데이터는 선택기(19)를 통하여 화상 표시 장치(12)에 출력되어 입체 화상 표시된다. 이에 의해, 입체 화상 데이터의 데이터 사이즈가 가로 w개×세로 h개로 된다.

<제6 실시예>

본 발명의 제6 실시예에 대하여 도 18에 기초하여 설명하면, 이하와 같다.

제1 실시예∼제5 실시예에서의 화상 처리 장치(1a·2a)는 하드웨어로 실현해도 되며, 컴퓨터에 화상 처리 프로그램을 판독함으로써, 컴퓨터를 화상 처리 장치(1a·2a)로서 동작시킴으로써 실현해도 된다. 본 실시예에서는, 후자의 경우의 하드웨어 구성에 대하여, 도 18에 기초하여 설명한다.

본 실시예의 화상 촬상 표시 시스템(4)은, 촬상 장치(11a·11b·11c), 화상 표시 장치(12), 표시 전환 입력 장치(45), 및 화상 처리 장치(4a)를 구비하고 있다. 또, 촬상 장치(11a·11b·11c) 및 화상 표시 장치(12)는, 제1 실시예, 제2 실시예에서 설명한 동일 부호의 부재와 동일한 기능을 갖는 것이다.

본 실시예에서는 화상 처리 장치(4a)는 CPU(41)(central processing unit), 메모리(42), 입출력 장치(43), 및 버스(44)를 구비하는 컴퓨터에 의해 구성되어 있다.

이 화상 처리 장치(4a)에서는, 화상 처리 프로그램이 판독되는 것에 의해, CPU(41)에 의해 도 1의 화상 데이터 감축부(13), 화상 데이터 입체화부(14), 표시 전환 제어부(15), 혹은 도 7의 화상 데이터 감축부(23), 화상 데이터 입체화부(24), 표시 전환 제어부(15)를 구성한다. 단, 도 2의 프레임 메모리(32)에 대해서는, 메모리(42)로 구성한다.

또, 입출력 장치(43)는 촬상 장치(11)나 화상 표시 장치(12), 표시 전환 입력 장치(45)와의 데이터의 입출력을 매개하는 것이다. 또한, 버스(44)는 CPU(41)와, 메모리(42) 및 입출력 장치(43)와의 사이의 데이터 전송로이다. 이들은, 통상의 컴퓨터가 갖는 구성 부재이다.

또한, 표시 전환 입력 장치(45)는, 도 1, 도 2에서는 도시하지 않았지만, 사용자의 조작에 기초하여, 표시 전환 제어부(15)에 대하여 입체 화상 표시/평면 화상 표시의 전환의 지시를 공급하는 것이다.

이 화상 처리 장치(4a)에서는, 입체 화상 표시를 행하는 경우, 촬상 장치(11a·11b·11c)로부터 입력되는 입력 화상 데이터를, 입출력 장치(43) 및 버 스(44) 경유로 CPU(41)가 판독하고, 메모리(42)를 이용하여 화상의 감축 및 입체화를 행하여 입체 화상 데이터를 생성한다. 그리고, 생성한 입체 화상 데이터를 다시 버스(44) 및 입출력 장치(43) 경유로 화상 표시 장치(12)에 송출한다.

또한, 화상 처리 장치(4a)에서 평면 화상 표시를 행하는 경우, 촬상 장치(11a·11b·11c)로부터 입력되는 입력 화상 데이터를, 입출력 장치(43) 및 버스(44) 경유로 CPU(41)가 판독하고, 필요에 따라 메모리(42)를 이용하여 감축을 행하고 나서, 평면 화상 데이터로서 다시 버스(44) 및 입출력 장치(43) 경유로 화상 표시 장치(12)에 송출한다.

이들 입체 화상 표시를 행할지, 평면 화상 표시를 행할지는, 표시 전환 입력 장치(45)로부터의 입력에 기초하여, CPU(41)가 판별한다.

또, 상기 화상 처리 프로그램은 그 화상 처리 프로그램을 기록한 기록 매체로부터 화상 처리 장치(4a)로 공급되어도 되며, 통신 네트워크(인터넷, 인트라네트 등을 포함함)와 화상 처리 장치(4a)를 접속 가능하게 구성하여, 그 통신 네트워크를 통하여 화상 처리 장치(4a)로 공급되어도 된다.

화상 처리 프로그램을 기록하는 기록 매체는, 화상 처리 장치(4a)와 분리 가능하게 구성해도 되고, 화상 처리 장치(4a)에 내장되어 있어도 된다. 이 기록 매체는, 기록한 프로그램 코드를 컴퓨터가 직접 판독할 수 있도록 화상 처리 장치(4a)에 장착되는 것이어도, 외부 기억 장치로서 화상 처리 장치(4a)에 접속된 프로그램 판독 장치를 통하여 판독할 수 있도록 장착되는 것이어도 된다.

예를 들면, 상기 기록 매체로서는, 자기 테이프나 카세트 테이프 등의 테이 프계, 플렉시블 디스크/하드디스크 등의 자기 디스크나 CD-ROM/MO/MD/DVD/CD-R 등의 광 디스크를 포함하는 디스크계, IC 카드(메모리 카드를 포함함)/광 카드 등의 카드계, 혹은 마스크 ROM/EPROM/EEPROM/플래시 ROM 등의 반도체 메모리계 등을 이용할 수 있다.

또, 상기 프로그램 코드는, 통신 네트워크를 통하여 공급해도 된다. 이 통신 네트워크로서는, 특별히 한정되지 않고, 적절하게 선택 가능하다. 또한, 이 통신 네트워크를 구성하는 전송 매체로서는, 특별히 한정되지 않고, 적절하게 선택 가능하다. 또한, 본 발명은, 상기 프로그램 코드가 전자적인 전송으로 구현화된 반송파 혹은 데이터 신호열의 형태라도 실현될 수 있다.

이상, 제1 실시예∼제6 실시예에서 설명한 바와 같이, 본 발명의 화상 처리 장치(화상 처리 장치(1a·2a·4a))는, 상호 시차상의 관계에 있는 복수개의 화상에 대응하는 복수개의 입력 화상 데이터에 대하여, 각각의 화상을 가로 방향으로 감축하기 위한 감축 연산을 행하는 감축 연산 수단(감축 연산부(16a·16b·16c), 감축 연산부(16))과, 이 감축 연산 수단에 의해 감축 연산이 실시된 감축 화상 데이터를 조합함으로써 입체 화상 데이터를 생성하는 입체화 처리 수단(입체화 처리부(18·28))과, 해당 화상 처리 장치로부터의 출력으로서, 입체화 처리 수단에 의해 생성되는 입체 화상 데이터를 출력하거나, 복수개의 입력 화상 데이터의 어느 하나를 이용하여 생성되는 평면 화상 데이터를 출력하거나 하는 것을 전환하는 전환 수단(표시 전환 제어부(15))을 포함하는 것이다.

상기 구성의 화상 처리 장치에서는, 예를 들면 통상의 촬상 장치(11)를 복수 개 이용하여, 상호 시차상의 관계에 있는 복수개의 화상을 촬상하고, 각각의 입력 화상 데이터를 입력함으로써, 입체 화상 표시를 위한 입체 화상 데이터와, 평면 화상 표시를 위한 평면 화상 데이터를 전환하여 화상 표시 장치(12)에 출력할 수 있다.

즉, 입체 화상 표시를 행하는 경우에는, 입력 화상 데이터를 감축 연산 수단에 의해 가로 방향으로 감축하여 감축 화상 데이터를 생성하고, 그 감축 화상 데이터를 입체화 처리 수단에 의해 조합함으로써 입체 화상 데이터를 생성할 수 있다. 한편, 평면 화상 표시를 행하는 경우에는, 입력 화상 데이터의 어느 하나를 이용하여 평면 화상 데이터를 생성할 수 있다. 입체 화상 데이터와 평면 화상 데이터 중 무엇을 출력할지는, 전환 수단에 의해 전환할 수 있다.

이에 의해, 입체 화상 표시와 평면 화상 표시를 동일한 장치 구성으로 실현 할 수 있음과 함께, 예를 들면 사용자에 의한 표시의 전환 지시에 기초하여, 입체 화상 표시와 평면 화상 표시를 간단히 전환할 수 있다.

또, 본 발명의 화상 촬상 시스템은, 상기 화상 처리 장치와, 상호 시차상의 관계에 있는 복수개의 화상의 촬상에 의해 얻어지는 복수개의 입력 화상 데이터를 상기 화상 처리 장치에 입력하는 촬상 수단(촬상 장치(11a·11b·11c))을 구비하여 구성된다. 또, 본 발명의 화상 표시 시스템은, 상기 화상 처리 장치와, 이 화상 처리 장치로부터 출력되는 입체 화상 데이터 및 평면 화상 데이터에 기초하여, 입체 화상 표시 및 평면 화상 표시가 가능한 표시 수단(화상 표시 장치(12))을 구비하여 구성된다.

본 발명은 상술한 각 실시예에 한정되는 것은 아니며, 청구항에 기재한 범위에서 다양한 변경이 가능하고, 상이한 실시예에 각각 개시된 기술적 수단을 적절하게 조합하여 얻어지는 실시예도 본 발명의 기술적 범위에 포함된다.

발명의 상세한 설명의 항에서 이루어진 구체적인 실시 형태 또는 실시예는, 어디까지나 본 발명의 기술 내용을 분명히 하는 것으로, 그와 같은 구체예에만 한정하여 좁은 의미로 해석되어서는 안되며, 본 발명의 정신과 다음에 기재하는 특허 청구 사항의 범위 내에서, 다양하게 변경하여 실시할 수 있는 것이다.

이상 본 발명에 따르면, 화상 처리 장치에서, 입체 화상 표시와 평면 화상 표시를 전환하여 표시할 수 있다.

Claims

화상 처리 장치에 있어서,

상호 시차상의 관계에 있는 복수개의 화상에 대응하는 복수개의 입력 화상 데이터에 대하여, 각각의 화상을 가로 방향으로 감축하기 위한 감축 연산을 행하는 감축 연산 수단과,

상기 감축 연산 수단에 의해 감축 연산이 실시된 감축 화상 데이터를 조합함으로써 입체 화상 데이터를 생성하는 입체화 처리 수단과,

상기 화상 처리 장치로부터의 출력으로서, 상기 입체화 처리 수단에 의해 생성되는 입체 화상 데이터를 출력하거나, 상기 복수개의 입력 화상 데이터의 어느 하나를 이용하여 생성되는 평면 화상 데이터를 출력하거나 하는 것을 전환하는 전환 수단

을 포함하는 화상 처리 장치.
제1항에 있어서,

상기 입력 화상 데이터의 수에 대응하여 상기 감축 연산 수단을 복수개 포함하는 화상 처리 장치.
제2항에 있어서,

상기 각 감축 연산 수단의 후단 및 상기 입체화 처리 수단의 전단에, 상기 각 감축 연산 수단에 대응하여 각각 형성되고, 전단의 감축 연산 수단에 입력되는 입력 화상 데이터와, 전단의 감축 연산 수단으로부터 출력되는 감축 화상 데이터 중 한쪽을 선택하여 출력하는 복수개의 제1 선택기(selector)와,

상기 복수개의 제1 선택기의 후단 및 상기 입체화 처리 수단의 후단에 형성되고, 상기 입체화 처리 수단으로부터 출력되는 입체 화상 데이터와, 상기 복수개의 제1 선택기로부터 각각 출력되는 복수개의 입력 화상 데이터 중 어느 하나를 선택하여 출력하는 제2 선택기

를 구비하고,

상기 전환 수단은, 상기 제1 및 제2 선택기에서의 선택을 제어하는 화상 처리 장치.
제1항에 있어서,

상기 감축 연산 수단은, 상기 복수개의 입력 화상 데이터 각각에 대한 감축 연산을 시간적으로 전환하여 행함으로써, 상기 각 입력 화상 데이터에 대응하는 각 감축 화상 데이터를 시분할로 출력하는 화상 처리 장치.
제4항에 있어서,

상기 감축 연산 수단의 후단 및 상기 입체화 처리 수단의 전단에 형성되고, 전단의 감축 연산 수단에 입력되는 입력 화상 데이터와, 전단의 감축 연산 수단으로부터 출력되는 감축 화상 데이터 중 한쪽을 선택하여 출력하는 제3 선택기와,

상기 감축 연산 수단의 전단 및 상기 제3 선택기의 전단에 형성되고, 상기 복수개의 입력 화상 데이터를 시간적으로 순차적으로 전환하여 선택하여 상기 감축 연산 수단 및 상기 제3 선택기에 출력하는 제4 선택기와,

상기 제3 선택기의 후단 및 상기 입체화 처리 수단의 후단에 형성되며, 상기 입체화 처리 수단으로부터 출력되는 입체 화상 데이터와, 상기 제3 선택기로부터 출력되는 입력 화상 데이터 중 한쪽을 선택하여 출력하는 제5 선택기

를 구비하고,

상기 전환 수단은, 상기 제3 내지 제5 선택기에서의 선택을 제어하는 화상 처리 장치.
제4항에 있어서,

상기 입체화 처리부가 감축 화상 데이터를 조합하기 위해 화상 데이터를 기억시키는 프레임 메모리를 구비하는 화상 처리 장치.
제1항에 있어서,

상기 감축 연산 수단에 의한 감축 연산은, 상기 입력 화상 데이터에 대한 데이터의 솎아냄(thinning) 연산인 화상 처리 장치.
제1항에 있어서,

상기 입력 화상 데이터의 수는 n(n은 2 이상의 정수)이고,

상기 입체화 처리 수단은, 상기 n개의 입력 화상 데이터 중 m개(m은 2 이상, 또한 n 미만의 정수)의 입력 화상 데이터에 대응하는 감축 화상 데이터를 조합함으로써 상기 입체 화상 데이터를 생성하는 화상 처리 장치.
제1항의 화상 처리 장치와,

상호 시차상의 관계에 있는 복수개의 화상의 촬상에 의해 얻어지는 복수개의 입력 화상 데이터를 상기 화상 처리 장치에 입력하는 촬상 수단을 포함하는 화상 촬상 시스템.
제1항의 화상 처리 장치와,

상기 화상 처리 장치로부터 출력되는 입체 화상 데이터 및 평면 화상 데이터에 기초하여, 입체 화상 표시 및 평면 화상 표시가 가능한 표시 수단을 포함하는 화상 표시 시스템.
제10항에 있어서,

상기 표시 수단은, 시차 장벽(parallax barrier) 방식의 입체 화상 표시 장치인 화상 표시 시스템.
제10항에 있어서,

상기 표시 수단은 렌티큘러 렌즈(lenticular lens) 방식의 입체 화상 표시 장치인 화상 표시 시스템.
제1항의 화상 처리 장치와,

상호 시차상의 관계에 있는 복수개의 화상의 촬상에 의해 얻어지는 복수개의 입력 화상 데이터를 상기 화상 처리 장치에 입력하는 촬상 수단과,

상기 화상 처리 장치로부터 출력되는 입체 화상 데이터 및 평면 화상 데이터에 기초하여, 입체 화상 표시 및 평면 화상 표시가 가능한 표시 수단

을 포함하는 화상 촬상 표시 시스템.
제13항에 있어서,

상기 촬상 수단이 입력하는 입력 화상 데이터의 수는 n(n은 2 이상의 정수)이고,

상기 표시 수단은 가로 w개×세로 h개(w, h는 양의 정수)의 해상도를 갖는 n안식(眼式)의 입체 화상 표시가 가능하고,

상기 촬상 수단은 가로 w/n개×세로 h개보다도 높은 해상도를 갖는 화상 촬상 표시 시스템.
제14항에 있어서,

상기 촬상 수단은, 상기 복수개의 입력 화상 데이터마다 다른 해상도를 갖는 화상 촬상 표시 시스템.
제1항의 화상 처리 장치를 동작시키는 화상 처리 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체로서,

컴퓨터를 상기 화상 처리 장치의 각 수단으로서 기능시키기 위한 화상 처리 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.