KR101433121B1 - 소정의 종횡비의 합성 화상을 생성하는 화상 처리 장치 - Google Patents

소정의 종횡비의 합성 화상을 생성하는 화상 처리 장치 Download PDF

Info

Publication number
KR101433121B1
KR101433121B1 KR1020130142705A KR20130142705A KR101433121B1 KR 101433121 B1 KR101433121 B1 KR 101433121B1 KR 1020130142705 A KR1020130142705 A KR 1020130142705A KR 20130142705 A KR20130142705 A KR 20130142705A KR 101433121 B1 KR101433121 B1 KR 101433121B1
Authority
KR
South Korea
Prior art keywords
image
aspect ratio
composite image
setting
recording
Prior art date
Application number
KR1020130142705A
Other languages
English (en)
Other versions
KR20130133149A (ko
Inventor
고스케 마쓰모토
나오토모 미야모토
마사루 오노자와
Original Assignee
가시오게산키 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 가시오게산키 가부시키가이샤 filed Critical 가시오게산키 가부시키가이샤
Publication of KR20130133149A publication Critical patent/KR20130133149A/ko
Application granted granted Critical
Publication of KR101433121B1 publication Critical patent/KR101433121B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3876Recombination of partial images to recreate the original image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3872Repositioning or masking
    • H04N1/3873Repositioning or masking defined only by a limited number of coordinate points or parameters, e.g. corners, centre; for trimming
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00Still video cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

 본 발명에 따른 디지털 카메라는 CCD, CPU, 및 화상 처리부를 구비한다. CPU는 임의의 종횡비를 설정한다. 또, CPU는 CCD에 차례로 촬상된 복수의 화상을 합성함으로써, 생성된 소정의 종횡비의 합성 화상을 취득한다. 화상 처리부는 설정된 임의의 종횡비의 화상이 되도록, 상기 CPU에 의해 취득된 합성 화상에 대하여 트리밍을 행한다.

Description

소정의 종횡비의 합성 화상을 생성하는 화상 처리 장치 {IMAGE PROCESSING DEVICE FOR GENERATING COMPOSITE IMAGE HAVING PREDETERMINED ASPECT RATIO}
본 발명은 디지털 카메라나 촬상 기능을 가지는 휴대 전화기 등의 화상 처리 장치, 촬상 장치, 화상 합성 방법, 및 기록 매체에 관한 것이다.
종래부터, 일본 특허공개공보 평 11-282100호에서는, 촬영한 화상의 특징점을 추출하여 그 좌표를 검출하고, 다음에 촬영한 인접하는 화상의 동일한 특징점의 좌표를 검출하고, 이들 특징점이 일치하도록 인접하는 화상을 결합 합성하여 파노라마 화상을 얻는 것이 행해지고 있다.
그러나, 상기 종래 기술에서는, 파노라마 촬상을 행할 때, 수평 방향의 사이즈에 규정이 없고, 360도의 범위이면, 사용자가 촬영하고 싶은 화각 범위에서 촬영 가능하였다. 따라서, 최종적으로 얻어지는 파노라마 화상의 종횡비는 규격 외의 것이 되고(이른바 4:3이나, 16:9는 되지 않고), 일반적인 표시 장치로 감상하는 것은 좋지만, 그 이외의 용도가 없고, 예를 들면, 인쇄하는 경우에도 불편하였다. 바꾸어 말하면, 종래 기술에서는, 사용자가 원하는 종횡비의 합성 화상을 얻는 것이 어려울 우려가 있다.
그래서 본 발명은 용이하고도 효율적으로 원하는 종횡비의 합성 화상을 생성할 수 있는 화상 처리 장치, 화상 합성 방법, 및 기록 매체를 제공하는 것을 목적으로 한다.
본 발명은, 임의의 종횡비를 설정하는 설정 수단, 촬상된 복수의 화상을 합성함으로써 생성된 소정의 종횡비의 합성 화상을 취득하는 합성 화상 취득 수단, 및 상기 설정 수단에 의해 설정된 임의의 종횡비의 화상이 되도록, 상기 합성 화상 취득 수단에 의해 취득된 합성 화상에 대하여 트리밍(trimming)을 행하는 화상 처리 수단을 포함하는 화상 처리 장치이다.
도 1은 본 발명의 제1 실시예에 의한 디지털 카메라의 구성을 나타낸 블록도이다.
도 2는 통상의 촬상 모드를 설명하기 위한 개념도이다.
도 3은 본 제1 실시예에 의한 디지털 카메라(1)에서의 파노라마 촬상 모드를 설명하기 위한 개념도이다.
도 4는 본 제1 실시예에 의한 디지털 카메라(1)의 동작을 설명하기 위한 흐름도이다.
도 5는 본 제1 실시예에 의한 디지털 카메라(1)의 동작을 설명하기 위한 개념도이다.
도 6은 본 제1 실시예에 의한 디지털 카메라(1)에서의 연사(連寫) 처리의 동작을 설명하기 위한 흐름도이다.
도 7은 본 제1 실시예에 의한 파노라마 촬영 시의 디지털 카메라의 표시예를 나타내는 모식도이다.
도 8은 본 발명의 제2 실시예에 의한 디지털 카메라(1)에서의 동작을 설명하기 위한 흐름도이다.
도 9a 및 도 9b는 본 제2 실시예에 의한 디지털 카메라(1)의 동작을 설명하기 위한 개념도이다.
도 10a 및 도 10b는 본 제2 실시예에 의한 파노라마 촬영 시의 디지털 카메라의 표시예를 나타내는 모식도이다.
이하, 본 발명의 실시예를, 도면을 참조하여 설명한다.
A. 제1 실시예
A-1. 제1 실시예의 구성
도 1은 본 발명의 제1 실시예에 의한 디지털 카메라의 구성을 나타낸 블록도이다.  도면에서, 디지털 카메라(1)는 촬상 렌즈(2), 렌즈 구동부(3), 조리개 겸용 셔터(4), CCD(5)(촬상 수단), TG(Timing Generator)(6), 유닛 회로(7), 화상 처리부(8)(화상 처리 수단, 합성 화상 생성 수단), CPU(11)(설정 수단, 합성 화상 취득 수단, 종횡비 판단 수단, 표시 제어 수단), DRAM(12), 메모리(13), 플래시 메모리(14), 화상 표시부(15)(표시 수단), 키 입력부(16), 카드 I/F(17), 및 메모리·카드(18)를 구비하고 있다.
촬상 렌즈(2)는 포커스 렌즈, 줌 렌즈 등을 포함하고, 렌즈 구동부(3)가 접속되어 있다. 렌즈 구동부(3)는 촬상 렌즈(2)를 구성하는 포커스 렌즈, 줌 렌즈를 각각 광축 방향으로 구동시키는 모터와, CPU(11)로부터의 제어 신호에 따라 포커스 모터, 줌 모터를 구동시키는 포커스 모터 드라이버, 줌 모터 드라이버로 구성되어 있다.
조리개(4)는 도시하지 않은 구동 회로를 포함하고, 구동 회로는 CPU(11)로부터 전송되어 오는 제어 신호에 따라 조리개(4)를 동작시킨다. 이 조리개(4)는 촬상 렌즈(2)로부터 들어오는 광의 양을 제어한다. CCD(촬상 소자)(5)는 촬상 렌즈(2), 조리개(4)를 통하여 투영된 피사체의 광을 전기 신호로 변환하여, 촬상 신호로서 유닛 회로(7)에 출력한다.  또, CCD(5)는 TG(6)에 의해 생성된 소정 주파수의 타이밍 신호에 따라 구동된다.
유닛 회로(7)는 CCD(5)로부터 출력되는 촬상 신호를 상관 이중 샘플링하여 유지하는 CDS(Correlated Double Sampling) 회로, 그 샘플링 후의 촬상 신호의 자동 이득 조정을 행하는 AGC(Automatic Gain Control) 회로, 그 자동 이득 조정 후의 아날로그의 촬상 신호를 디지털 신호로 변환하는 A/D 변환기로 구성되어 있다. CCD(5)의 촬상 신호는 유닛 회로(7)를 거쳐 디지털 신호로서 화상 처리부(8)에 전송된다. 그리고, 유닛 회로(7)는 TG(6)에 의해 생성된 소정 주파수의 타이밍 신호에 따라 구동된다.
화상 처리부(8)는 유닛 회로(7)로부터 전송되어 온 화상 데이터의 화상 처리(화소 보간 처리, γ보정, 휘도 색차 신호의 생성, 화이트 밸런스 처리, 노출 보정 처리 등), 화상 데이터의 압축·신장(예를 들면, JPEG 형식이나 M-JPEG 형식 또는 MPEG 형식의 압축·신장)의 처리, 복수의 촬상 화상을 합성하는 처리, 사용자가 지정한 종횡비의 광각 화상이 되도록 합성 화상에 대하여 트리밍(trimming)이나, 리사이징(resizing) 등의 화상 처리 등을 행한다. 그리고, 화상 처리부(8)는 TG(6)에 의해 생성된 소정 주파수의 타이밍 신호에 따라 구동된다.
CPU(11)는 디지털 카메라(1)의 각 부를 제어하는 원칩 마이크로컴퓨터(one chip microcomputer)이다.  특히, 본 제1 실시예에서는, 사용자가 디지털 카메라(1)를 움직이고 있는 동안에, CPU(11)는 소정의 주기(시간 간격)로 복수의 화상을 연사하고, 촬상한 복수의 화상을 일부가 중복되도록(예를 들면, α 블랜딩(blending) 사용하여) 합성하여, 광각으로 촬상한 듯한 1개의 합성 화상을 생성하기 위해 각 부를 제어한다. 그리고, 화상 합성의 상세한 것에 대하여는 후술한다.
DRAM(12)은 CCD(5)에 의해 촬상된 후, CPU(11)에 전송되어 온 화상 데이터를 일시 기억하는 버퍼 메모리로서 사용되는 동시에, CPU(11)의 작업 메모리로서 사용된다. 메모리(13)는 CPU(11)에 의한 디지털 카메라(1)의 각 부의 제어에 필요한 프로그램, 및 각 부의 제어에 필요한 데이터가 기록되어 있고, CPU(11)는 이 프로그램에 따라 처리를 행한다. 플래시 메모리(14)나, 메모리·카드(18)는 CCD(5)에 의해 촬상된 화상 데이터 등을 저장해 두는 기록 매체이다.
 화상 표시부(15)는, 종횡비가 4:3인 컬러 LCD와 그 구동 회로를 포함하고, 촬상 대기 상태에 있을 때는 CCD(5)에 의해 촬상된 피사체를 스루 화상(through image)으로서 표시한다. 또, 화상 표시부(15)는 기록 화상의 재생 시에는, 플래시 메모리(14)나 메모리·카드(23)로부터 판독되어, 신장된 기록 화상을 표시하게 한다. 키 입력부(16)는 셔터 SW, 줌 SW, 모드 키, SET 키, 십자 키 등의 복수의 조작 키를 포함하고, 사용자의 키 조작에 따라 조작 신호를 CPU(11)에 출력한다. 카드 I/F(17)에는 디지털 카메라(1) 본체의 도시하지 않은 카드 슬롯을 통하여 메모리·카드(18)가 탈착 가능하게 장착되어 있다.
도 2는 통상의 촬상 모드를 설명하기 위한 개념도이다. 디지털 카메라(1)로, 통상의 촬상 모드로 촬영하는 경우에는, 도 2에 나타낸 바와 같이, 상기 디지털 카메라(1)의 촬상계의 화각의 화상(30)밖에 촬영할 수 없다.
도 3은 본 제1 실시예에 의한 디지털 카메라(1)에서의 파노라마 촬상 모드를 설명하기 위한 개념도이다. 이 모드에서는, 사용자는 원하는 경치에 대하여 화각의 길이 방향을 세로 방향이 되도록, 디지털 카메라(1)를 세로 방향으로 들고, 셔터 SW를 눌러(반누름→완전 누름), 도 3에 나타내는 화살표와 같이, 수평 방향(좌측 단에서 우측 방향)으로 작동시킨다. 디지털 카메라(1)에서는, 소정 시간 간격(예를 들면, 7fps라든지, 10fps 등)으로 차례로 화상을 촬상하면서, 소정의 타이밍에서 합성용 화상을 로딩(loading)하여, 전후의 화상이 이어져 합쳐지도록 합성용 화상끼리를 합성함으로써, 원하는 광각 화상(40, 41)을 생성한다. 광각 화상(40)은 종횡비가 4:3인 광각 화상이며, 광각 화상(41)은 종횡비가 16:9인 광각 화상이다.
본 제1 실시예에서는, 미리 사용자가 원하는 종횡비를 지정하면, 수평 방향으로 어느 정도 이동시키면 되는지(이동 거리, 촬영 범위)를 사용자에게 용이하게 알 수 있도록 제시함으로써, 원하는 종횡비의 광각 화상을 용이하게 촬상할 수 있도록 한다. 그리고, 본 제1 실시예에서 얻어지는 광각 화상은 종횡비가 4:3인 광각 화상, 또는 종횡비가 16:9인 광각 화상이지만, 모두 세로 방향의 화소 수를 공통으로 하고 있다(예를 들면, 4000 화소).  그러므로, 세로 방향을 공통의 화소 수로 함으로써, 화상 표시부(15)에 전체 화면 표시할 때에도 같은 비율로 축소 처리하면 된다.
또, 본 제1 실시예에서는, 화각의 길이 방향이 세로 방향이 되도록, 디지털 카메라(1)를 세로 방향으로 든 상태에서, 수평 방향으로 이동시켜 광각 화상을 촬영하고 있다. 이것은 세로 방향의 화소 수를 크게 취함으로써, 원하는 종횡비의 광각 화상을 얻기 위한 이동량을 가능한 한 적게 하고, 사용자의 부담을 경감하기 위해서이다.
또, 본 제1 실시예에서는, 최종적으로, 원하는 종횡비의 광각 화상을 생성할 때 행하여야 하는 리사이징이나, 클리핑(clipping) 등의 화상 처리를 최소한으로 함으로써, 하드웨어에 대한 부하의 저감화나 저소비 전력화 등을 도모하고 있다.
A-2. 제1 실시예의 동작
다음에, 전술한 제1 실시예의 동작에 대하여 설명한다.
도 4는 본 제1 실시예에 의한 디지털 카메라(1)의 동작을 설명하기 위한 흐름도이다. 도 5는 본 제1 실시예에 의한 디지털 카메라(1)의 동작을 설명하기 위한 개념도이다. 먼저, 사용자를 통해 최종적으로 얻어지는 광각 화상의 종횡비를 입력 또는 선택시켜, 그 종횡비를 설정한다(단계 S10). CPU(11)는 셔터 SW가 반누름되면(단계 S12), AF(오토 포커스) 처리를 실행한다(단계 S14).
사용자는, 원하는 경치에 대하여, 화각의 길이 방향이 세로 방향이 되도록, 디지털 카메라(1)를 세로 방향으로 들고, 이 세로로 든 카메라의 우측 아래에서 셔터 SW를 누르고(반누름→완전 누름), 셔터 SW를 완전히 누른 후, 디지털 카메라(1)를 수평 방향으로 회전시키도록 이동시킨다(도 3을 참조). 디지털 카메라(1)를 세로 방향으로 듦으로써 도 5에 나타낸 바와 같이, 한번에 촬영되는 화상은 3000×4000 도트의 사이즈로 된다.  이 경우, 세로가 4000 도트가 되므로, 4:3의 종횡비의 파노라마 화상을 생성하기 위해서는 가로 사이즈가 5332 도트가 된다. 즉, 촬상 사이즈(50)는 5332×4000 도트가 된다.
CPU(11)는, 셔터 SW가 완전히 눌러지면(단계 S16), 소정 시간 간격(예를 들면, 7fps라든지, 10fps 등)으로 차례로 촬상하고, 소정의 위치에 도달할 때마다 그 시점에서 촬상한 화상을 합성용 화상으로서 로딩하는 동시에, 로딩한 합성용 화상을 차례로 합성함으로써, 도 5에 나타낸 바와 같이, 1개의 합성 화상(51)을 생성한다(단계 S18).  이 합성 화상(51)은 5332×4000 도트의 사이즈가 된다. 그리고, 연사 처리 & 합성 처리에 대한 상세한 것은 후술한다.
다음에, CPU(11)는 연사 종료인지 여부를 판단한다(단계 S20). 연사 종료는 미리 설정된 촬상 사이즈의 종단에 도달한 것을 계기로 한다. 그리고, 연사가 종료되지 않은 경우에는(단계 S20의 NO), 단계 S18로 복귀하고, 연사 처리 & 합성 처리를 계속한다. 한편, 연사가 종료한 경우에는(단계 S20의 YES), 설정된 종횡비가 4:3인지 여부(설정된 종횡비가 4:3과 동일한지 상이한지)를 판단한다(단계 S22).
그리고, 종횡비가 4:3으로 설정(지정)되어 있는 경우에는(단계 S22의 YES), 5332×4000 도트의 합성 화상(51)을, 종횡비 4:3, 4000×3000 도트의 광각 화상(52)으로 리사이징(종횡비 고정으로 축소)하여 저장한다(단계 S24).
한편, 종횡비가 16:9로 설정(지정)되어 있는 경우에는(단계 S22의 NO), 화상 처리부(8)는 5332×4000 도트의 합성 화상(51)을, 종횡비 4:3, 4000×3000 도트에 리사이징한 후, 종횡비 16:9, 4000×2240의 광각 화상(53)으로 트리밍(자르기)하여 저장한다(단계 S26). 따라서, 이 경우, 종횡비 4: 3의 광각 화상(52)과 종횡비 16:9의 광각 화상(53)은 촬영 각도(가로 방향의 촬영 범위)가 같다.
도 6은 본 제1 실시예에 의한 디지털 카메라(1)에서의 연사 처리의 동작을 설명하기 위한 흐름도이다. 그리고, 상기 연사 처리 & 합성 처리의 실행중, CPU(11)는 CCD(5) 등을 제어하고, 소정 시간 간격(예를 들면, 7fps라든지, 10fps 등)으로 차례로 촬상하고 있다. 상기 촬상 화상은 모두 합성용 화상으로서 로딩되는 것은 아니고, 소정의 로딩 위치에서 촬상된 화상이 합성용 화상으로서 로딩되고 그 이외의 촬상 화상은 폐기된다.
먼저, CPU(11)는, 디지털 카메라(1)가 일정 거리 움직였는지 여부를 판단한다(단계 S30).  CPU(11)는, 소정 시간 간격으로 차례로 촬상하고 있는 화상의 중복 영역을 판정함으로써, 소정의 로딩 위치에서 촬상된 화상인지 여부를 판단하고 있다.  소정의 로딩 위치는, 1개 전에 로딩된 합성용 화상과 소정의 영역(예를 들면, 1/3 등)만큼 중복된 화상이다. 바꾸어 말하면, 합성에 필요한 중복 영역이 포함되는 화상이다.
즉, 합성용 화상으로서 로딩되어야 하는 화상이면, 소정의 위치에 도달한 것이 되어, 디지털 카메라(1)가 일정 거리 움직인 것이 된다. 이에 대하여, 중복되는 영역이 크면, 아직 소정의 위치에 도달하지 않은 것이고, 중복되는 있는 영역이 작으면, 소정의 위치를 지나친 것이 된다.
그리고, 디지털 카메라(1)가 일정 거리 움직이지 않은 경우에는(단계 S30의 NO),아직 소정의 위치에 도달하지 않은 것이므로, 단계 S30를 반복 실행한다. 한편, 디지털 카메라(1)가 일정 거리 움직였을 경우에는(단계 S30의 YES), 그때의 촬상 화상을 로딩하여 저장한다(단계 S32).
다음에, CPU(11)는, 1개 전의 합성용 화상과 이번에 로딩된 합성용 화상 일부가 중복되도록(예를 들면, α 블랜딩을 사용하여) 합성하여 저장한다(단계 S34). 그 후, 도 4에 나타내는 메인 루틴으로 돌아온다.
그리고, 미리 설정된 촬상 사이즈의 종단에 도달할 때까지, 차례로 로딩되는 복수의 합성용 화상을 차례로 합성함으로써, 1개의 연결된 합성 화상(파노라마 화상)을 얻을 수 있다.
도 7은 본 제1 실시예에 의한, 파노라마 촬영 시의 디지털 카메라의 표시예를 나타내는 모식도이다. 도 7에 나타낸 바와 같이, 파노라마 촬영시, 화상 표시부(15)에는 미리 설정된 촬상 범위(60)가 표시되고, 이 촬상 범위(60)에는, 상기 연사 &합성 처리의 단계 S34에서 순서대로 얻어지는 합성 화상(의 축소)이 순서대로 표시된다. 이로써, 사용자는 촬영 중에 어느 정도 촬상했는지, 어느 정도 촬상하여야 하는지를 알 수 있다.
전술한 제1 실시예에 의하면, 렌즈 교환을 행하지 않고, 용이하고도 효율적으로 원하는 종횡비의 광각 화상을 촬상할 수 있다.
그리고, 전술한 제1 실시예에서, 최종적으로 생성되는 화상의 종횡비의 지시, 설정은 촬영에 앞서 행해졌지만, 이에 한정되지 않고, 촬영 종료 후에 지시하도록 해도 된다(예를 들면, 도 4의 단계 S20와 S22 사이).
또, 전술한 제1 실시예에서, 도 5에 나타낸 바와 같이, 5332×4000 도트의 합성 화상(51)으로부터, 종횡비 16:9, 4000×2240의 광각 화상(53)을 트리밍(자르기)할 때, 합성 화상(51)의 어느 부분을 트리밍할 것인지를 사용자 조작에 의해 지정 가능하게 해도 된다.
B. 제2 실시예
다음에, 본 발명의 제2 실시예에 대하여 설명한다.
본 제2 실시예에서는, 촬영에 앞서 종횡비의 지시가 행해지면, 그 종횡비에 대응한 합성 화상을 촬영, 작성한 후에, 리사이징을 행하여 원하는 종횡비의 광각 화상을 작성하는 것을 특징으로 하고 있다. 그리고, 디지털 카메라(1)의 구성은 도 1과 마찬가지이므로 설명을 생략한다.
도 8은 본 제2 실시예에 의한 디지털 카메라(1)에서의 동작을 설명하기 위한 흐름도이다. 도 9는 본 제2 실시예에 의한 디지털 카메라(1)의 동작을 설명하기 위한 개념도이다. 먼저, 사용자를 통해 최종적으로 얻어지는 광각 화상의 종횡비를 입력 또는 선택시켜, 그 종횡비를 설정한다(단계 S40). CPU(11)는 종횡비에 따른 촬상 사이즈를 설정한다(단계 S42).
종횡비가 4:3인 경우에는, 도 9a에 나타낸 바와 같이, 5332×4000 도트의 촬상 사이즈(70)로 한다. 한번에 촬영되는 화상은 디지털 카메라(1)를 세로 방향으로 듦으로써, 3000×4000 도트의 사이즈가 된다. 또, 종횡비가 16:9인 경우에는, 도 9b에 나타낸 바와 같이, 7111×4000 도트의 촬상 사이즈(80)로 한다. 한번에 촬영되는 화상은, 종횡비가 4:3의 경우와 마찬가지로 디지털 카메라(1)를 세로 방향으로 듦으로써 3000×4000 도트의 사이즈가 된다.
다음에, CPU(11)는 셔터 SW가 반누름되면(단계 S44), AF(오토 포커스) 처리를 실행한다(단계 S46).
사용자는, 원하는 경치에 대하여, 화각의 길이 방향이 세로 방향이 되도록, 디지털 카메라(1)를 세로 방향으로 들고, 셔터 SW를 아래로 누르고(반누름→완전 누름), 셔터 SW를 완전히 누른 후, 디지털 카메라(1)를 수평 방향으로 이동시킨다(도 3을 참조).
CPU(11)는 셔터 SW가 완전히 눌러지면(단계 S48), 소정 시간 간격(예를 들면, 7fps라든지, 10fps 등)으로 차례로 촬상하고, 소정의 위치에 도달할 때마다 그 시점에서 촬상한 화상을 합성용 화상으로서 로딩하는 동시에, 로딩한 합성용 화상을 차례로 합성함으로써, 1개의 광각 화상을 생성한다(단계 S50).
종횡비가 4:3인 경우에는, 도 9a에 나타낸 바와 같이, 5332×4000 도트의 합성 화상(71)이 된다.  또, 종횡비가 16:9인 경우에는, 도 9b에 나타낸 바와 같이, 7111×4000 도트의 합성 화상(81)이 된다. 그리고, 연사 처리 & 합성 처리에 대한 상세한 것은 전술한 제1 실시예와 마찬가지이므로 생략한다(도 6을 참조)
다음에, CPU(11)는 연사 종료 인지 여부를 판단한다(단계 S52). 연사 종료는 미리 설정된 촬상 사이즈의 종단에 도달한 것을 계기로 한다. 즉, 종횡비가 4:3인 경우에는, 5332×4000 도트의 합성 화상(71)이 작성되면 연사 종료가 되고, 종횡비가 16:9인 경우에는, 7111×4000 도트의 합성 화상(81)이 작성되면 연사 종료가 된다. 그리고, 연사가 종료되지 않은 경우에는(단계 S52의 NO), 단계 S50으로 복귀하고, 연사 처리 & 합성 처리를 계속한다. 한편, 연사가 종료한 경우에는(단계 S52의 YES), 설정된 종횡비가 4:3인지 여부(설정된 종횡비가 4:3과 동일한지 상이한지)를 판단한다(단계 S54).
그리고, 종횡비가 4:3으로 설정(지정)되어 있는 경우에는(단계 S54의 YES), 도 9a에 나타낸 바와 같이, 5332×4000 도트의 합성 화상(71)을, 종횡비 4:3, 4000×3000도트의 광각 화상(72)으로 리사이징(종횡비 고정으로 축소)하여 저장한다(단계 S56). 한편, 종횡비가 16:9로 설정(지정)되어 있는 경우에는(단계 S54의 NO), 도 9b에 나타낸 바와 같이, 7111×4000 도트의 합성 화상(81)을, 종횡비 16:9, 4000×2240의 광각 화상(82)으로 리사이징(종횡비 고정으로 축소)하여 저장한다(단계 S58).  따라서, 이 경우, 종횡비 16:9의 광각 화상(82) 쪽이 종횡비 4:3의 광각 화상(72)에 비하여, 촬영 각도(수평 방향의 촬영 범위)가 넓게 되어 있다.
도 10a 및 도 10b는 본 제2 실시예에 의한 파노라마 촬영 시의 디지털 카메라의 표시예를 나타내는 모식도이다. 종횡비를 4:3으로 한 경우에는, 도 10a에 나타낸 바와 같이, 파노라마 촬영시, 화상 표시부(15)에는 미리 설정된 종횡비가 4:3인 촬상 범위(90)가 표시된다. 이 촬상 범위(90)에는, 상기 연사 & 합성 처리의 단계 S50에서 순서대로 얻어지는 합성 화상(의 축소)이 순서대로 표시된다.
한편, 종횡비를 16:9로 한 경우에는, 도 10b에 나타낸 바와 같이, 파노라마 촬영시, 화상 표시부(15)에는 미리 설정된 종횡비가 16:9인 촬상 범위(91)가 표시된다. 이 촬상 범위(91)에는, 상기 연사 & 합성 처리의 단계 S50로 순서대로 합성되는 합성 화상(의 축소)이 순서대로 표시된다. 이로써, 사용자는, 촬영 중에, 어느 정도 촬상했는지, 어느 정도 촬상하여야 하는지를 알 수 있다.
전술한 제2 실시예에 의하면, 렌즈 교환을 행하지 않고, 용이하고도 효율적으로 원하는 종횡비의 광각 화상을 촬상할 수 있다.
또, 전술한 제1 , 제2 실시예에서는, 소정의 위치에 도달했는지 여부를 촬상되는 화상에 기초하여 판단하도록 하였지만, 이에 한정되지 않고, 방위 센서나 가속도 센서 등의 정보를 사용하도록 해도 된다.
그리고, 전술한 제1 , 제2 실시예에서는, 원하는 종횡비만을 입력·설정하도록 했지만, 또한 최종적으로 얻어지는 광각 화상의 화상 사이즈를 지정하도록 해도 된다. 이 경우, 최종적인 광각 화상을 작성할 때, 지정된 종횡비, 지정된 화상 사이즈에 맞도록 리사이징, 트리밍을 적절히 행하도록 한다.
이상, 본 발명의 몇몇 실시예에 대하여 설명하였으나, 본 발명은 이들에 한정되지 않고, 특허청구범위에 기재된 발명과 그 균등 범위를 포함하는 것이다.

Claims (8)

  1. 촬상 수단,
    임의의 종횡비를 설정하는 설정 수단;
    상기 촬상 수단에 의해 촬상된 복수의 화상으로부터, 합성 화상을 생성하는 합성 화상 생성 수단;
    상기 합성 화상 생성 수단에 의해 생성된 합성 화상의 종횡비가 상기 설정 수단에 의해 설정된 임의의 종횡비로 되었는지의 여부를 판정하는 판정 수단; 및
    상기 판정 수단에 의해 상기 임의의 종횡비로 된 것으로 판정된 합성 화상을 기록 수단에 기록하는 기록 제어 수단
    을 포함하는 촬상 장치.
  2. 제1항에 있어서,
    상기 합성 화상 생성 수단은, 상기 촬상 수단에 의해 순차 촬상된 화상으로부터, 합성 화상을 순차 생성하고,
    상기 판정 수단은, 상기 합성 화상 생성 수단에 의해 순차 생성된 합성 화상이 상기 설정 수단에 의해 설정된 임의의 종횡비로 되었는지의 여부를 판정하고,
    상기 기록 제어 수단은, 상기 판정 수단에 의해 상기 임의의 종횡비로 된 시점의 합성 화상을 기록 수단에 기록하는, 촬상 장치.
  3. 제1항에 있어서,
    상기 합성 화상 생성 수단에 의해 생성된 합성 화상에 대하여 리사이징을 행하는 화상 처리 수단을 더 포함하는 촬상 장치.
  4. 제1항에 있어서,
    상기 설정 수단은 상기 종횡비에 더하여, 상기 합성 화상의 사이즈를 설정하고,
    상기 화상 처리 수단은 상기 설정 수단에 의해 설정된 사이즈에 따라, 상기 합성 화상 생성 수단에 의해 생성된 합성 화상에 대하여 리사이징을 행하는, 촬상 장치.
  5. 제1항에 있어서,
    상기 촬상 수단에 의해 촬상된 복수의 화상은, 상기 촬상 수단의 화소 배열의 길이 방향을 촬상 화각의 세로 방향으로 한 상태에서 사용자에 의해 상기 촬상 장치가 수평 방향으로 이동되는 과정에서 차례로 촬상한 화상인, 촬상 장치.
  6. 제1항에 있어서,
    표시 수단, 및
    상기 종횡비의 합성 화상에 대응하는 촬상 범위와 상기 촬상 범위에서의 미촬상 영역을 상기 표시 수단에 표시하는 표시 제어 수단을 더 포함하는 촬상 장치.
  7. 화상을 촬상하는 촬상 수단을 구비하는 촬상 장치에서의 화상 합성 방법에 있어서,
    임의의 종횡비를 설정하는 설정 단계;
    촬상된 복수의 화상으로부터, 합성 화상을 생성하는 합성 화상 생성 단계;
    상기 합성 화상 생성 단계에 의해 생성된 합성 화상의 종횡비가 상기 설정 단계에 의해 설정된 임의의 종횡비로 되었는지의 여부를 판정하는 판정 단계; 및
    상기 판정 단계에 의해 상기 임의의 종횡비로 된 것으로 판정된 합성 화상을 기록 수단에 기록하는 기록 제어 단계
    를 포함하는 화상 합성 방법.
  8. 촬상 수단을 구비하는 촬상 장치의 컴퓨터가 판독 가능한 기록 매체로서,
    임의의 종횡비를 설정하는 설정 수단;
    상기 촬상 수단에 의해 촬상된 복수의 화상으로부터, 합성 화상을 생성하는 합성 화상 생성 수단;
    상기 합성 화상 생성 수단에 의해 생성된 합성 화상의 종횡비가 상기 설정 수단에 의해 설정된 임의의 종횡비로 되었는지의 여부를 판정하는 판정 수단; 및
    상기 판정 수단에 의해 상기 임의의 종횡비로 된 것으로 판정된 합성 화상을 기록 수단에 기록하는 기록 제어 수단
    으로서의 기능을 컴퓨터에 실현시키는 프로그램을 기록한 기록 매체.
KR1020130142705A 2011-04-07 2013-11-22 소정의 종횡비의 합성 화상을 생성하는 화상 처리 장치 KR101433121B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JPJP-P-2011-085248 2011-04-07
JP2011085248A JP5578442B2 (ja) 2011-04-07 2011-04-07 撮像装置、画像合成方法、及びプログラム

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020120035344A Division KR101433119B1 (ko) 2011-04-07 2012-04-05 소정의 종횡비의 합성 화상을 생성하는 화상 처리 장치

Publications (2)

Publication Number Publication Date
KR20130133149A KR20130133149A (ko) 2013-12-06
KR101433121B1 true KR101433121B1 (ko) 2014-08-25

Family

ID=46965825

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020120035344A KR101433119B1 (ko) 2011-04-07 2012-04-05 소정의 종횡비의 합성 화상을 생성하는 화상 처리 장치
KR1020130142705A KR101433121B1 (ko) 2011-04-07 2013-11-22 소정의 종횡비의 합성 화상을 생성하는 화상 처리 장치

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020120035344A KR101433119B1 (ko) 2011-04-07 2012-04-05 소정의 종횡비의 합성 화상을 생성하는 화상 처리 장치

Country Status (5)

Country Link
US (1) US9253365B2 (ko)
JP (1) JP5578442B2 (ko)
KR (2) KR101433119B1 (ko)
CN (1) CN102739959B (ko)
TW (1) TWI459127B (ko)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10379324B2 (en) * 2013-08-02 2019-08-13 Honeywell International Inc. Adaptive optical zoom systems and methods
CN103888670B (zh) * 2014-02-21 2018-06-01 联想(北京)有限公司 一种信息处理方法和电子设备
KR102157675B1 (ko) * 2014-07-25 2020-09-18 삼성전자주식회사 촬영 장치 및 그 촬영 방법
JP6537231B2 (ja) * 2014-08-11 2019-07-03 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
JP5811425B1 (ja) * 2014-09-02 2015-11-11 株式会社サンキコー 周期運動観測システム
US9641764B2 (en) * 2015-03-03 2017-05-02 Honeywell International Inc. Variable focal length elements for adaptive optical zoom systems and methods
CN110557552A (zh) * 2018-05-31 2019-12-10 联想企业解决方案(新加坡)有限公司 便携式图像采集设备
KR20220106761A (ko) * 2019-11-29 2022-07-29 소니 세미컨덕터 솔루션즈 가부시키가이샤 전자기기
KR20220157196A (ko) * 2021-05-20 2022-11-29 삼성전자주식회사 이미지 처리 방법 및 그 전자 장치

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0818857A (ja) * 1994-06-30 1996-01-19 Canon Inc 画像合成方法および画像合成装置
JPH11177802A (ja) * 1997-12-12 1999-07-02 Fuji Photo Film Co Ltd 画像処理装置
JPH11196311A (ja) * 1998-01-05 1999-07-21 Fuji Photo Film Co Ltd 分割撮影機能付きカメラ
JP2000152042A (ja) * 1997-09-03 2000-05-30 Casio Comput Co Ltd 電子スチルカメラ及び画像再生方法
JP2002330322A (ja) * 2001-04-27 2002-11-15 Olympus Optical Co Ltd 電子カメラ

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07212642A (ja) * 1994-01-27 1995-08-11 Canon Inc 画像合成方法および該方法を用いた複眼撮像装置
JP3403060B2 (ja) 1998-03-27 2003-05-06 三洋電機株式会社 パノラマ画像撮影装置、およびパノラマ画像生成装置
JP2002330332A (ja) 2001-04-27 2002-11-15 Canon Inc 画像処理装置、撮像装置、その制御方法、及び記録媒体
JP2003333425A (ja) * 2002-05-15 2003-11-21 Fuji Photo Film Co Ltd カメラ
US20040189849A1 (en) 2003-03-31 2004-09-30 Hofer Gregory V. Panoramic sequence guide
US7746404B2 (en) * 2003-11-10 2010-06-29 Hewlett-Packard Development Company, L.P. Digital camera with panoramic image capture
US20050179817A1 (en) 2004-01-14 2005-08-18 Matsushita Electric Industrial Co., Ltd. Video signal display unit
KR101042638B1 (ko) * 2004-07-27 2011-06-20 삼성전자주식회사 파노라마 영상 생성을 위한 디지털 촬상장치 및 그 생성방법
JP4244973B2 (ja) * 2005-08-03 2009-03-25 ソニー株式会社 撮像システムとカメラ制御装置およびパノラマ画像表示方法とプログラム
JP4980779B2 (ja) * 2007-04-13 2012-07-18 富士フイルム株式会社 撮影装置、方法およびプログラム
JP4904223B2 (ja) * 2007-08-23 2012-03-28 キヤノン株式会社 画像処理装置及び画像処理方法
JP2009284309A (ja) * 2008-05-23 2009-12-03 Casio Comput Co Ltd 撮像装置、表示制御プログラム及び表示制御方法
JP5191941B2 (ja) * 2009-04-10 2013-05-08 オリンパスイメージング株式会社 撮像装置、画像処理装置、画像処理方法、および、画像処理プログラム
JP2010199971A (ja) * 2009-02-25 2010-09-09 Casio Computer Co Ltd 撮像装置、撮像方法、及びプログラム
JP5268025B2 (ja) * 2009-02-27 2013-08-21 株式会社リコー 撮影装置
US20100265313A1 (en) * 2009-04-17 2010-10-21 Sony Corporation In-camera generation of high quality composite panoramic images
JP5398408B2 (ja) * 2009-08-07 2014-01-29 オリンパスイメージング株式会社 カメラ、カメラの制御方法、表示制御装置、および表示制御方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0818857A (ja) * 1994-06-30 1996-01-19 Canon Inc 画像合成方法および画像合成装置
JP2000152042A (ja) * 1997-09-03 2000-05-30 Casio Comput Co Ltd 電子スチルカメラ及び画像再生方法
JPH11177802A (ja) * 1997-12-12 1999-07-02 Fuji Photo Film Co Ltd 画像処理装置
JPH11196311A (ja) * 1998-01-05 1999-07-21 Fuji Photo Film Co Ltd 分割撮影機能付きカメラ
JP2002330322A (ja) * 2001-04-27 2002-11-15 Olympus Optical Co Ltd 電子カメラ

Also Published As

Publication number Publication date
TW201245849A (en) 2012-11-16
KR20130133149A (ko) 2013-12-06
CN102739959B (zh) 2017-08-25
CN102739959A (zh) 2012-10-17
US9253365B2 (en) 2016-02-02
US20120257085A1 (en) 2012-10-11
JP2012222541A (ja) 2012-11-12
KR20120115119A (ko) 2012-10-17
TWI459127B (zh) 2014-11-01
KR101433119B1 (ko) 2014-08-22
JP5578442B2 (ja) 2014-08-27

Similar Documents

Publication Publication Date Title
KR101433121B1 (ko) 소정의 종횡비의 합성 화상을 생성하는 화상 처리 장치
JP4985808B2 (ja) 撮像装置、及びプログラム
KR101391042B1 (ko) 광각 화상을 생성 가능한 화상 처리 장치
JP5163676B2 (ja) 撮像装置、撮像方法及びプログラム
JP4943721B2 (ja) 画像データのカラーノイズ除去方法及びこの方法を用いた撮像装置
JP5665013B2 (ja) 画像処理装置、画像処理方法、及びプログラム
KR20080002667A (ko) 촬상장치 및 컴퓨터 판독 가능한 기록매체
US8593545B2 (en) Imaging apparatus, imaging method, and computer-readable recording medium with switched image capturing mode
JP2007215091A (ja) 撮像装置及びそのプログラム
US20120274780A1 (en) Image apparatus, image display apparatus and image display method
JP4986189B2 (ja) 撮像装置、及びプログラム
JP4379921B2 (ja) 撮像装置及びそのプログラム
JP2010192957A (ja) 電子カメラ
JP4888829B2 (ja) 動画処理装置、動画撮影装置および動画撮影プログラム
JP5105298B2 (ja) 撮像装置及びそのプログラム
JP5962974B2 (ja) 撮像装置、撮像方法、及びプログラム
JP5655804B2 (ja) 撮像装置、及びプログラム
JP5648563B2 (ja) 画像処理装置、画像処理方法、及びプログラム
JP5641352B2 (ja) 画像処理装置、画像処理方法、及びプログラム
JP5637400B2 (ja) 撮像装置、及びプログラム
JP6486132B2 (ja) 撮像装置およびその制御方法、並びにプログラム
JP2009200597A (ja) 撮像装置及び撮像プログラム

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170720

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180801

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190730

Year of fee payment: 6