KR101075826B1

KR101075826B1 - 촬상 장치 및 기억 장치

Info

Publication number: KR101075826B1
Application number: KR1020110067252A
Authority: KR
Inventors: 아키라 미야타
Original assignee: 가시오게산키 가부시키가이샤
Priority date: 2008-06-30
Filing date: 2011-07-07
Publication date: 2011-10-25
Also published as: TWI458352B; CN101621617B; KR20110089239A; EP2141913B1; EP3174284A1; TW201008277A; EP2141913A3; JP4730402B2; KR20100003240A; CN101621617A; HK1136727A1; US8294779B2; EP2141913A2; US20090322895A1; US20130010171A1; US8411158B2; EP3174284B1; JP2010011289A

Abstract

본 발명의 일태양은, 피사체 상(被寫體像)을 촬상하여 정지 화상 데이터를 순차적으로 생성하는 촬상부(11∼13), 촬상부(11∼13)로 얻은 복수의 정지 화상 데이터를 축적하여 유지하는 유지부(14), 유지부(14)에서 유지하는 정지 화상 데이터를 표시하는 표시부(15), 촬상부(11∼13)에서의 촬영 개시 타이밍이 되는 소정의 상태를 설정하는 설정부(19), 설정부(19)에서 설정한 소정의 상태로 되었는지를 판단하는 판단부(16∼18), 판단부(16∼18)에서 소정의 상태가 되었다고 판단한 시점에서 촬상부(11∼13)에 의한 촬영을 개시하게 하는 촬영 제어부(16∼18), 촬영 제어부(16∼18)에 의해 개시된 촬영에 의해 유지부(14)에 유지된 정지 화상 데이터를 실시간보다 지연된 표시 속도로 순차적으로 표시부(15)에 의해 표시하게 하는 표시 제어부(16∼18), 표시부(15)에서 표시되는 복수의 화상 데이터 중 1개를 선택하는 선택부(19), 및 선택부(19)에서 선택한 화상 데이터를 기록하는 기록부(29)를 구비하는 것을 특징으로 한다.

Description

촬상 장치 및 기억 장치{IMAGE SENSING APPARATUS AND STORAGE MEDIUM}

본 발명은, 예를 들면, 고속으로 이동하는 피사체를 촬영하기에 적합한 촬상 장치 및 기억 매체에 관한 것이다.

종래, 디지털 카메라의 동영상 촬영에 있어서, 촬영자의 의도를 반영시킨 대표 프레임을 간편하게 추출하는 것을 목적으로 한 기술이, 예를 들면 특허 문헌 1: 일본 특허출원 공개번호 2006-253768호 공보에 기재되어 있다. 상기 특허 문헌의 기술에서는, 사용자가 정지 화상 기록 버튼을 누르기 전, 또는 전후의 기간에 촬영된 화상 데이터를 동영상 데이터로 화상 압축할 때, 전후의 프레임과는 독립적으로 정지 화상을 생성 가능한 I(Intra) 픽쳐의 수를, 통상의 동영상 촬영 시보다 증대시킨다.

전술한 기술에서는, 사용자가 정지 화상 기록 버튼을 누른 시점보다 전의 소정 기간중(이하, "I 픽쳐 증가 기간"이라고 함)에 촬영된 화상이, 슬로우 재생 등의 대상이 되는 동영상 데이터가 된다.

그러므로, 사용자가 정지 화상 기록 보턴을 누르는 타이밍이, 사용자가 의도하는 화상 데이터가 촬영되는 타이밍에 비하여 상기 I 픽쳐 증가 기간분 이상 늦으면, 생성되는 동영상 데이터 중에 사용자가 의도하는 화상이 포함되지 않게 된다.

즉, 사용자의 조작 타이밍에 따라서는, 동영상 데이터를 취득하는 타이밍을 놓치는 경우도 많다.

본 발명은, 고속으로 이동하는 피사체에 대해서도 사용자가 의도하는 촬영 타이밍을 놓치지 않고, 시간 폭이 제한된 일련의 정지 화상 데이터의 취득 개시 타이밍을 용이하게 맞출 수 있는 촬상 장치 및 기억 매체를 제공하는 것을 목적으로 한다.

본 발명의 일태양에 관한 촬상 장치는, 촬상부, 상기 촬상부에 의해 연속하여 촬상된 복수의 화상 데이터를 유지하는 유지부, 상기 유지부에 의해 유지된 화상 데이터를 순차 표시하는 표시부, 상기 촬상부에 의해 순차 촬상된 화상 데이터 중의 피사체의 이동 속도를 검출하는 이동 속도 검출부, 상기 이동 속도 검출부에 의해 검출된 이동 속도에 기초하여, 상기 표시부에 의해 화상 데이터를 순차 표시하는 때의 표시 속도를, 상기 촬상부에 의한 촬상 속도보다도 늦은 속도로 설정하는 설정부, 및 상기 설정부에 의해 설정된 표시 속도로 상기 화상 데이터를 상기 표시부에 순차 표시시키도록 제어하는 표시 제어부를 포함한다.

본 발명의 추가되는 점과 이점은, 이하의 기술에 의해 상세하게 설명되며, 그 일부가 명백하게 되거나, 본 발명을 실시함으로써 지견을 얻을 수 있다. 본 발명의 대상물과 이점은 하기에서 설명하는 수단과 조합에 의해 이해되고 얻어진다.

본 발명에 따르면, 고속으로 이동하는 피사체에 대해서도 사용자가 의도하는 촬영 타이밍을 놓치지 않고, 시간 폭이 제한된 일련의 정지 화상 데이터의 취득 개시 타이밍을 용이하게 맞출 수 있는 촬상 장치 및 기억 매체를 제공할 수 있다.

본 발명의 명세서의 일부를 구성하는 첨부 도면은, 본 발명의 실시예를 예시하고, 본 발명의 일반적인 설명 및 상세한 설명과 함께, 본 발명의 원리를 설명하기 위해 제공된다.
도 1은 본 발명의 일실시예에 따른 디지털 카메라의 기능 회로의 개략적인 구성을 나타낸 블록도이다.
도 2는 상기 실시예에 따른 주로 슬로우 라이브 모드 시의 촬영 처리의 내용을 나타낸 흐름도이다.
도 3은 상기 실시예에 따른 슬로우 라이브 뷰의 개시 조건의 설정 표시 화면의 예를 나타낸 도면이다.
도 4의 (A)∼도 4의 (C)는, 상기 실시예에 따른 슬로우 라이브 뷰의 개시 조건으로 "매뉴얼" 설정 시의 1개의 정지 화상 데이터를 선택할 때까지의 기본적인 흐름을 나타낸 도면이다.
도 5는 상기 실시예에 따른 슬로우 라이브 뷰의 개시 조건으로 "무브 아웃"설정 시의 표시 화면을 예시하는 도면이다.

이하 본 발명을 정지 화상을 촬영하는 디지털 카메라에 적용한 경우의 일실시예에 대하여 도면을 참조하여 설명한다.

도 1은, 본 실시예에 따른 디지털 카메라(10)의 회로 구성을 나타낸다. 도 1에서, 렌즈 광학계(11)에 의해 고체 촬상 소자인 CCD(12)의 촬상면 상에 피사체의 광상이 결상된다.

모니터 상태에서는, 이 CCD(12)에서의 촬상에 의해 얻은 화상 신호가 화상 처리부(13)에 보내지고, 상관 이중 샘플링이나 AGC(automatic gain control), AD(analog-to-digital) 변환 처리가 실행되어 디지털화된 후에 화소 보간 처리, 감마(γ) 보정 처리를 포함하는 컬러 프로세스 처리가 실시되어 버퍼 메모리(14)에 일시적으로 유지된다.

이 버퍼 메모리(14)에 유지된 화상 데이터가 화상 처리부(13)에 읽어내어지고, 시스템 버스(SB)를 통하여 표시부(15)에 보내지고, 모니터 화상으로서 표시된다.

이상의 동작을 모두 제어부(16)가 통괄적으로 제어한다. 이 제어부(16)는 CPU로 구성되며, 메인 메모리(17) 및 프로그램 메모리(18)와 접속된다. 메인 메모리(17)는, SDRAM(synchronous DRAM)으로 구성된다. 프로그램 메모리(18)는, 후술하는 촬영 모드 시의 기록 제어를 포함하는 동작 프로그램이나 고정 데이터 등을 기억한, 전기적으로 재기입 가능한 불휘발성 메모리로 구성된다.

제어부(16)는 프로그램 메모리(18)로부터 필요한 프로그램이나 데이터 등을 읽어내고, 메인 메모리(17)에 일시적으로 적절하게 전개 기억시키면서, 디지털 카메라(10) 전체의 제어 동작을 실행한다.

또한, 제어부(16)는, 키 입력부(19)로부터 직접 입력되는 키 조작 신호에 대응하여 각종 제어 동작을 실행하며, 시스템 버스(SB)를 통하여 화상 처리부(13) 및 표시부(15) 이 외에, 렌즈 광학계 구동부(20), 플래시 구동부(21), CCD 드라이버(22), 메모리 카드 컨트롤러(23), 내장 메모리(24), USB(universal serial bus) I/F(interface)(25), 및 음성 처리부(26)와도 접속된다.

키 입력부(19)는, 예를 들면, 전원 키, 셔터 키, 촬영 모드 키, 재생 모드 키, 메뉴 키, 커서("↑", "→", "↓", "←") 키, 세트 키, 신(scene) 프로그램 키, 손떨림 보정 키, 얼굴 인식 기능 키 등을 구비한다.

렌즈 광학계 구동부(20)는, 제어부(16)로부터의 제어 신호를 받아 렌즈 모터(M)(27)의 회동을 제어한다. 렌즈 모터(27)는, 렌즈 광학계(11)를 구성하는 복수의 렌즈 중의 일부, 구체적으로는 포커스 렌즈 및 줌 렌즈와 연결된다. 렌즈 모터(27)의 회동에 따라 상기 포커스 렌즈 및 상기 줌 렌즈는 각각 광축 방향의 위치를 이동한다.

플래시 구동부(21)는, 정지 화상 촬영 시에 제어부(16)로부터의 제어 신호를 받아 플래시부(28)를 촬영 타이밍에 동기시켜서 점등 구동한다. 플래시부(28)는, 복수의 백색 고휘도 LED로 구성된다.

메모리 카드 컨트롤러(23)는, 카드 커넥터(C)를 통하여 메모리 카드(29)와 접속된다. 메모리 카드(29)는, 디지털 카메라(10)에 착탈 가능하게 장착되고, 디지털 카메라(10)의 기록 매체로 되는 화상 데이터 등의 기록용 메모리이다. 메모리 카드(29)의 내부에는, 블록 단위로 전기적으로 재기입 가능한 불휘발성 메모리인 플래시 메모리와 그 구동 회로가 설치된다.

내장 메모리(24)는, 디지털 카메라(10)에 착탈 가능한 메모리 카드(29)와는 별도로 고정적으로 구비된 화상 기록용 메모리이다. 내장 메모리(24)는, 동일하게 블록 단위로 전기적으로 재기입 가능한 불휘발성 메모리인 플래시 메모리와 그 구동 회로로 구성된다.

내장 메모리(24)는, 메모리 카드(29)가 장착되어 있지 않은 경우에 디지털 카메라(10)의 기록 매체로서 화상 데이터 등을 기록한다. 메모리 카드(29)가 장착되어 있는 경우에는, 메모리 카드(29)를 우선적으로 취급한다.

또한, 메모리 카드(29)와 내장 메모리(24) 사이에서 임의로 화상 데이터 등의 카피 및 이동 가능하게 된다.

USB 인터페이스(25)는, USB 커넥터(30)를 통하여 디지털 카메라(10)의 외부 기기, 예를 들면 퍼스널 컴퓨터와 접속할 때의 데이터의 송수신을 컨트롤한다.

음성 처리부(26)는, PCM 음원 등의 음원 회로를 구비한다. 음성 녹음 시에는 디지털 카메라(10)의 케이싱 앞면에 설치된 마이크로폰부(31)로부터 입력되는 음성 신호를 디지털화하고, 소정의 데이터 파일 형식, 예를 들면 MPEG-4(moving picture experts group-4) AAC(advanced audio coding) 형식으로 데이터 압축하여 음성 데이터 파일을 작성하고, 메모리 카드(29) 또는 내장 메모리(24)에 송출한다.

한편, 음성 처리부(26)는, 음성 재생 시에 메모리 카드(29) 또는 내장 메모리(24)로부터 읽어내어 온 음성 데이터 파일의 압축을 풀어서 아날로그화하고, 디지털 카메라(10)의 배면에 설치된 스피커부(32)를 구동하여, 확성방음(擴聲放音)시킨다.

그리고, 화상 처리부(13)는, 피사체 인식부(33) 및 압축 신장 처리부(34)를 함께 설치한다. 피사체 인식부(33)는, 버퍼 메모리(14)에 유지되는 화상 데이터에 대하여 윤곽 추출 및 얼굴 특징점의 추출을 행하여 얼굴 그래프를 작성함으로써 얼굴 인식을 행하는 것 외에, 피사체 상의 화상 프레임 사이의 모션량을 모션 벡터의 형태로 산출하는 등, 화상 데이터에 대한 피사체의 각종 인식 처리를 실행한다.

압축 신장 처리부(34)는, 키 입력부(19)의 셔터 키 조작에 수반하는 화상 촬영 시에, 버퍼 메모리(14)에 유지되는 화상 데이터를 소정의 데이터 파일 형식, 예를 들면 JPEG(joint photographic experts group)이면 DCT(discrete cosine transform)나 허프만 코딩화 등의 데이터 압축 처리를 행하여 데이터량을 대폭 삭감한다.

압축 신장 처리부(34)에서 작성된 화상 데이터 파일은, 메모리 카드(29) 또는 내장 메모리(24)에 기록된다.

또한, 압축 신장 처리부(34)는, 재생 모드 시에 메모리 카드(29) 또는 내장 메모리(24)로부터 읽어내어 온 화상 데이터를 기록 시와는 반대의 순서로 압축을 푸는 신장 처리에 의해 원래 사이즈의 화상 데이터를 얻고, 얻어진 화상 데이터를 버퍼 메모리(14)에 유지시킨다. 그리고, 버퍼 메모리(14)에 유지된 화상 데이터에 의해, 표시부(15)에서 재생하기 위한 표시가 실행된다.

다음으로, 상기 실시예의 동작에 대하여 설명한다.

그리고, 본 실시예에서의 모든 동작은, 프로그램 메모리(18)에 기억되는 동작 프로그램이나 고정 데이터 등을 제어부(16)가 읽어내고, 메인 메모리(17)에 전개하여 실행된다. 프로그램 메모리(18)에 기억되는 동작 프로그램 등은, 사전에 디지털 카메라(10)의 제조 시에 기억되거나, 또는 USB 인터페이스(25) 또는 USB 커넥터(30)를 통하여 접속한 외부 기기로부터 다운로드한 것을 인스톨하여 유지한다.

또한, 본 실시예의 동작에서는, 키 입력부(19)의 하나를 구성하는 셔터 키가, 2단계의 조작 스트로크를 가지는 것으로 한다.

통상적인 정지 화상 촬영에서는, 셔터 키를 가볍게 저항감이 있는 도중 위치까지 누르는 제1 단계의 조작 스트로크, 이른바, 반누름 상태에서, 자동 초점[AF(auto focus)] 동작 및 자동 노광[AE(auto exposure)] 동작을 행하고, 초점 위치, 조리개값 및 셔터 속도를 록킹(locking)한다.

그리고, 상기 반누름 상태로부터 일단 셔터 키의 조작을 해제하지 않고, 그대로 최하 위치까지 더 누르는 제2 단계의 조작 스트로크, 이른바, 완전 누름 상태로 정지 화상의 촬영을 실행하고, 취득된 화상 데이터를 메모리 카드(29) 또는 내장 메모리(24)에 기록한다.

이하에 나타내는 동작예에서는, 전술한 통상적인 정지 화상 촬영이 아니라, 주로 슬로우 라이브 촬영이라는 촬영 동작에 대하여 설명한다.

여기서 슬로우 라이브 촬영은, 시간적으로 연속하여 복수의 정지 화상 데이터를 촬영하고, 버퍼 메모리(14)에 일련의 연사(連寫) 촬영 화상을 유지한다. 그리고, 이 버퍼 메모리(14)에서 유지한 정지 화상 데이터를, 촬영 속도에 비해 충분히 늦은 속도로 표시부(15)에 의해 순차적으로 표시한다. 그리고, 그 표시 타이밍에 맞추어서 사용자가 1개의 화상을 선택하면, 선택된 1개의 정지 화상 데이터만을 메모리 카드(29)에 기록한다.

시간적으로 연속하여 촬영 가능한 일련의 정지 화상 데이터의 수는, 버퍼 메모리(14)의 기억 용량과, 그 시점에서 설정되어 있는 화상 사이즈 및 화질에 의해 결정된다. 또한, 일련의 연사 화상의 촬영 속도도, 예를 들면 60 [프레임/초]와 같은 프레임 레이트에 의해, 소정 범위 내에서 사용자가 임의로 설정할 수 있다.

도 2는, 슬로우 라이브 촬영의 처리 내용을 나타낸 것이며, 이 처리는 제어부(16)가 프로그램 메모리(18)로부터 읽어낸 동작 프로그램을 메인 메모리(17)에 전개하여 실행한다.

전술한 동작의 처음에는, 과거 촬영, 즉 키 입력부(19)의 셔터 키의 조작에 의하지 않고, 과거 일정 시간, 예를 들면, 1초 분의 연사 화상 데이터를 버퍼 메모리(14)에 순환적으로 기억시키는 동작을 개시하게 한다(단계 S101).

이 과거 촬영의 개시에 수반하여, 이후 버퍼 메모리(14)에는 새로운 정지 화상 데이터가 기입됨과 동시에, 가장 과거의 정지 화상 데이터가 소거되는 동작이 반복하여 실행되고, 직전의 1초 분의 연사 화상이 항상 기억된다.

이 과거 촬영의 개시와 함께, 그 시점에서 버퍼 메모리(14)에 기억된 가장 새로운 정지 화상 데이터의 내용을 실시간으로 표시부(15)에서 표시하는, 통상적인 라이브 뷰 표시를 개시한다(단계 S102).

이와 병행하여, 이 통상의 라이브 뷰 표시 상태로부터, 슬로우 라이브 모드로의 이동 지시가 있었는지를 키 입력부(19)의 소정의 키 조작의 유무에 의해 판단하고(단계 S103), 지시가 없었다면 단계 S103로부터 단계 S102의 처리로 되돌아온다.

이후, 마찬가지로 단계 S102과 S103의 처리를 반복하여 실행함으로써, 통상적인 라이브 뷰 표시를 행하면서, 슬로우 라이브 모드로의 지시가 있을 때까지 대기한다.

그리고, 키 입력부(19)의 소정의 키 조작, 예를 들면, 메뉴 키, 커서("↑", "→", "↓", "←") 키 및 세트 키의 조합에 의해 슬로우 라이브 모드로의 지시가 있으면, 단계 S103에서 이를 판단하여, 이후, 컨티뉴어스(continuous) AF 동작을 개시한다(단계 S104).

여기서 컨티뉴어스 AF는, 초점 맞춤 위치를 록킹하지 않고 AF 동작을 계속하여 행함으로써, 피사체가 이동체라도 초점 맞춤 위치를 계속 따라가는 AF 동작을 나타낸다.

이 컨티뉴어스 AF 동작 하에서, 슬로우 라이브 뷰의 개시 조건을 새롭게 선택하기 위한 키 조작이 행해졌는지를 판단한다(단계 S105).

상기 키 조작이 행해지지 않은 경우는, 다음으로 그 시점에서 이미 설정되어 있는 슬로우 라이브 뷰의 개시 조건이 성립했는지를 판단한다(단계 S110).

슬로우 라이브 뷰의 개시 조건이 아직 성립하고 있지 않은 경우는, 단계 S104의 처리로 되돌아온다.

이와 같이하여, 단계 S104, S105 및 S110의 처리를 반복하여 실행하면서, 슬로우 라이브 뷰의 개시 조건을 새롭게 선택하기 위한 키 조작이 행해지거나, 또는 슬로우 라이브 뷰의 개시 조건이 성립할 때까지 대기한다.

슬로우 라이브 뷰의 개시 조건을 새롭게 선택하기 위한 키 조작이 행해진 경우, 단계 S105에서 이를 판단하고, 이어서 슬로우 라이브 뷰의 개시 조건을 선택하는 처리로 이행한다(단계 S106).

도 3은, 표시부(15)에 표시되는 슬로우 라이브 뷰의 개시 조건의 선택 화면을 예시한다. 도 3에서는, "매뉴얼", "무브 인", "무브 아웃", "피사체가 정지했다", "피사체가 웃었다", "인물이 나타났다", "패닝(panning)" 등, 복수의 조건을 사전에 준비하고 있다.

상기 "매뉴얼"은, 사용자의 셔터 키의 반누름 조작에 의해 슬로우 라이브 뷰를 개시한다.

도 4의 (A)∼도 4의 (C)는, 이 "매뉴얼"을 슬로우 라이브 뷰의 개시 조건으로서 설정한 경우, 1개의 정지 화상 데이터를 선택할 때까지의 기본적인 흐름을 나타낸다. 도 4의 (A)에 나타낸 바와 같이 일련의 화상이 CCD(12)로 촬상되고 있는 것으로 한다. 도 4의 (A) 중의 "n-2", "n-1",…,"n+7"은 화상 프레임의 프레임 번호를 나타낸다.

화상 프레임 "n-1"을 촬영 시의 타이밍(Ths)에서 셔터 키의 반누름 조작을 행한 경우, 직후의 화상 프레임 "n"의 화상 데이터로부터 일정 프레임 수분이 연사 화상으로서, 이들 화상 데이터를 버퍼 메모리(14)에 일시적으로 기억된다.

여기서는, 설명을 간단하고 용이하게 하기 위해 화상 프레임 "n+5"까지의 합계 6 프레임 분을 기억하고 있지만, 실제로는, 예를 들면 프레임 레이트가 30 [프레임/초]로서 30 프레임, 즉 1초 분의 화상 데이터를 버퍼 메모리(14)에 기억한다.

버퍼 메모리(14)로의 일정 프레임 분의 화상 데이터의 기억과 동시에, 버퍼 메모리(14)로부터는 순차적으로 실시간보다 충분히 늦은 속도, 예를 들면 1 [프레임/초]의 프레임 레이트로 화상 데이터를 읽어내어, 표시부(15)에서 순차적으로 표시한다.

도 4의 (B)에서는, 6 프레임 분의 시간적으로 연속한 화상 데이터가 화살표(IV)로 나타낸 바와 같이 차례로 순환적으로 표시되는 과정을 나타낸다.

이와 같이하여, 일정 프레임 수분, 환언하면 일정 시간 분의 연사 화상을 각각의 화상 내용을 충분히 시인(視認) 가능한 상태로 표시하면서 차례로 순환적으로 표시하면서, 상기 셔터 키의 반누름 조작에 이어서, 상기 셔터 키가 완전 누름 조작될 때까지 대기한다.

도 4의 (B)에서는 화상 프레임 "n+2"가 표시되어 있는 타이밍(Tfs)에서 셔터 키가 완전 누름 조작된 것을 나타낸다. 이 셔터 키의 완전 누름 조작에 의해 원하는 정지 화상 데이터를 선택한 것으로서, 도 4의 (C)에 나타낸 바와 같이 화상 프레임 "n+2"의 정지 화상 데이터만을 압축 신장 처리부(34)에서 데이터 압축한 후에 메모리 카드(29) 또는 내장 메모리(24)에 기록한다.

그리고, 도 4의 (A)∼도 4의 (C)에서는, 기본적인 동작으로서, 셔터 키의 반누름 조작에 따라 슬로우 라이브 뷰를 개시하는 경우, 타이밍(Ths)의 직후에 위치하는 화상 프레임 "n"의 정지 화상 데이터가, 일련의 연사 화상 데이터의 선두에 위치하는 것으로 설명하였다. 본 실시예에서는, 단계 S101에서도 설명한 바와 같이, 과거 촬영의 기능을 실행하고 있고, 항상 일정 시간 분의 연사 화상을 버퍼 메모리(14)에 기억하는 것으로 하고 있다.

그러므로, 결과적으로, 예를 들면 셔터 키를 반누름 조작하는 타이밍(Ths)을 사이에 두고 전후 각 1초 분, 합계 2초 분의 화상을 버퍼 메모리(14)에 기억한다. 그러므로 슬로우 라이브 뷰 표시도, 셔터 키를 반누름 조작한 타이밍(Ths)보다 1초 전의 화상 데이터를 선두로 하여 차례로 표시를 개시한다.

도 3으로 되돌아와서, 다른 개시 조건 "무브 인", "무브 아웃", "피사체가 정지했다", "피사체가 웃었다", "인물이 나타났다", "패닝"은, 모두 항목 명의 선두 측에 "오토"로 기재되어 있는 바와 같이, 사용자의 키 조작에 의존하지 않고, 촬영에 의해 얻는 정지 화상 데이터 중의 피사체의 경시적(經時的)인 변화에 따라 자동적으로 슬로우 라이브 뷰를 개시하게 하는 조건으로서 설정된다.

"무브 인"과 "무브 아웃"은, 표시부(15)에 표시하는 모니터 화상 중의 가공의 프레임체에 대하여, 피사체가 외부로부터 진입하거나, 또는 내부로부터 진출하는 경우에, 상기 프레임체에 대한 피사체의 접촉을 검출하여 슬로우 라이브 뷰의 개시 타이밍으로 한다.

도 5는, "무브 아웃" 설정 시의 표시부(15)에서의 모니터 화상을 예시한다. 여기서는, 표시부(15)의 중앙으로부터 약간 좌측으로 직사각형의 프레임체(FR)를 표시하고, 피사체(OJ)로서의 새(대머리 독수리)를 프레임체(FR) 수용하고 있는 상태를 나타낸 것이며, 피사체(OJ)의 이동 등에 의해 표시부(15) 상에서 피사체(OJ)가 프레임체(FR)에 접촉한 경우에, 자동적으로 슬로우 라이브 뷰를 개시한다.

"피사체가 정지했다"는, 예를 들면 시간적으로 인접하는 화상 프레임 사이의 모션 벡터를 산출함으로써, 화상 전체에서의 움직이는 벡터의 총량이 소정값 이하로 되는 경우에 피사체가 정지했다고 인식하여, 자동적으로 슬로우 라이브 뷰를 개시한다.

"피사체가 웃었다"는, 화상 데이터에 대하여 피사체 인식부(33)를 사용하여 얼굴 인식 처리를 행함으로써 인물의 얼굴의 추출과 얼굴 표정의 해석을 행하고, 표정이 웃는 얼굴인 것으로 여겨지는, 미리 설정한 지표를 초과한 경우에 자동적으로 슬로우 라이브 뷰를 개시한다.

"인물이 나타났다"는, 화상 데이터에 대하여 피사체 인식부(33)를 사용하여 얼굴 인식 처리를 행함으로써, 그 때까지 추출할 수 없었던 인물의 얼굴이 추출 가능하게 된 시점에서 자동적으로 슬로우 라이브 뷰를 개시한다.

"패닝"은, 예를 들면 화상 데이터의 중앙과 주변부 각각에서, 시간적으로 인접하는 화상 프레임 사이의 모션 벡터를 산출함으로써, 중앙부의 모션 벡터의 크기에 비하여, 주변부의 모션 벡터의 크기가, 사전에 설정한 지표를 초과할 경우에 자동적으로 슬로우 라이브 뷰를 개시한다.

그런데, 도 2의 단계 S106에서 슬로우 라이브 뷰의 개시 조건의 선택 처리를 종료하면, 이어서, 이 선택한 개시 조건이 "무브 인" 또는 "무브 아웃 중의 어느 한쪽인지를 판단한다(단계 S107).

여기서, 선택한 개시 조건이 "무브 인" 또는 "무브 아웃" 중 어느 한쪽인 것으로 판단한 경우에만, 표시부(15)에 표시시키는 프레임체(FR)의 크기 및 위치의 조정을 행한다(단계 S108).

그 후, 선택한 슬로우 라이브 뷰의 개시 조건과, 특히 개시 조건이 "무브 인" 또는 "무브 아웃"인 경우의 프레임체(FR)의 조정 내용 등을 전체적으로 설정한다(단계 S109).

그 후, 단계 S110으로 진행하고, 다시 설정한 슬로우 라이브 뷰의 개시 조건이 성립했는지를 판단한다. 아직 성립하고 있지 않은 경우는, 다시 단계 S104의 처리로 되돌아온다.

그리고, 단계 S104, S105 및 S110의 처리를 반복하여 실행하고, 슬로우 라이브 뷰의 개시 조건을 새롭게 선택하기 위한 키 조작이 행해졌는지, 또는 슬로우 라이브 뷰의 개시 조건이 성립할 때까지 대기하는 과정에서, 설정된 슬로우 라이브 뷰의 개시 조건이 성립한 경우, 단계 S110에서 이를 판단한다.

그 경우, 먼저 설정되어 있는 슬로우 라이브 뷰의 개시 조건이 "매뉴얼", "무브 인" 또는 "무브 아웃" 중 어느 하나인지를 판단한다(단계 S111).

여기서, 설정되어 있는 개시 조건이 "매뉴얼", "무브 인" 또는 "무브 아웃"중 어느 하나인 것으로 판단한 경우, 또한 버퍼 메모리(14)에 기억하고 있는 직전에 촬영한 화상 데이터와 현재의 화상 데이터로 피사체의 이동 속도를 모션 벡터의 크기(화소수)의 형태로 산출한다(단계 S112).

즉, 설정되어 있는 개시 조건이 "매뉴얼"인 것으로 판단한 경우, 사용자의 셔터 키의 반누름 조작이 행해진 시점에 촬영한 화상 프레임과, 상기 화상 프레임의 직전에 촬영된 화상 프레임을 비교하여 피사체의 이동 속도를 산출한다.

또한, 설정되어 있는 개시 조건이 "무브 인" 또는 "무브 아웃"인 것으로 판단한 경우, 전술한 프레임체에 대한 피사체의 접촉이 검출되었을 때 촬영한 화상 프레임과, 상기 화상 프레임의 직전에 촬영된 화상 프레임을 비교하여 피사체의 이동 속도를 산출한다.

그리고, 산출된 피사체의 이동 속도로부터, 슬로우 라이브 뷰의 속도, 구체적으로는 1 화상 프레임 당의 표시 시간을 설정한다(단계 S113).

이 경우, 사전에 설정되어 있는 이동 속도의 임계치(PX1, PX2)(PX1<PX2)를 사용하여, 피사체의 이동 속도(PXn)가 임계치(PX1) 미만일 경우에는, 피사체의 움직임이 늦다[=화상 데이터 내의 이동 거리가 짧음(화소수가 적음)]고 판단하여, 슬로우 라이브 뷰의 속도를 빨리, 예를 들면 1 화상 프레임당 0.5 [초]로 설정한다.

또한, 피사체의 이동 속도(PXn)가 임계치(PX1) 이상이면서 임계치(PX2) 미만인 경우에는, 피사체의 움직임이 보통인 것으로 판단하여, 슬로우 라이브 뷰의 속도를 통상대로, 예를 들면 1 화상 프레임당 1 [초]로 설정한다.

또한, 피사체의 이동 속도(PXn)가 임계치(PX2) 이상인 경우에는, 피사체의 움직임이 빠르다[=화상 데이터 내의 이동 거리가 김(화소수가 많음)]고 판단하여, 슬로우 라이브 뷰의 속도를 늦게, 예를 들면 1 화상 프레임당 2 [초]로 설정한다.

그 후, 버퍼 메모리(14)에 기억하고 있는 일련의 정지 화상 데이터를 사용하여 슬로우 라이브 뷰를 개시하고, 개시 조건이 성립한 시점을 사이에 두고 전후 각 일정 시간 분, 예를 들면, 전후의 1초 분, 합계 2초 분의 정지 화상 데이터를, 설정되어 있는 속도로 순차적으로 순환적으로 표시부(15)에 의해 표시시킨다(단계 S114).

이 때 표시부(15)에서는, 예를 들면

"Cancel→Menu/선택→셔터 완전 누름"

과 같은 가이드 메시지의 OSD(on screen display) 표시를 행하고, 화상의 선택 또는 캔슬을 위한 키 조작을 촉구한다.

그리고, 이 슬로우 라이브 뷰 표시를 실행하면서, 동시에 키 입력부(19)에서 캔슬을 위한 키 조작이 행해졌는지를 판단한다(단계 S115).

여기서 캔슬을 위한 키 조작이 없는 경우에는, 또한 화상 선택을 위한 셔터 키의 완전 누름 조작이 행해졌는지를 판단한다(단계 S116).

여기서 화상 선택을 위한 셔터 키의 완전 누름 조작도 행해지지 않는 경우에는, 단계 S114로 되돌아온다.

이와 같이 하여 단계 S114∼S116의 처리를 반복하여 실행함으로써, 슬로우 라이브 뷰 표시를 행하면서, 캔슬 또는 화상 선택을 위한 키 조작이 행해질 때까지 대기한다.

슬로우 라이브 표시의 도중에 캔슬을 위한 키 조작이 행해진 경우, 단계 S115에서 이를 판단하고, 다음의 촬영에 대비하기 위하여, 다시 단계 S102의 처리로 되돌아온다.

또한, 슬로우 라이브 표시의 도중에 화상을 선택하기 위해 셔터 키가 완전 누름 조작된 경우, 단계 S116에서 이를 판단하고, 슬로우 라이브 뷰로서 그 시점에서 표시되어 있는 정지 화상 데이터를 선택 결과로서, 압축 신장 처리부(34)에서 데이터 압축을 행한 후에 메모리 카드(29) 또는 내장 메모리(24)에 기록한다(단계 S117). 이상으로 일련의 슬로우 라이브 촬영의 동작을 종료한다.

이상 상세하게 기술한 바와 같이, 본 실시예에 의하면, 고속으로 이동하는 피사체에 대해서도 사용자가 의도하는 촬영 타이밍을 놓치지 않고, 시간 폭이 제한된 일련의 정지 화상 데이터의 취득 개시 타이밍을 용이하게 맞출 수 있다.

특히 상기 실시예에서는, 촬영에 의해 얻어지는 일련의 정지 화상 데이터 내의 피사체의 경시적인 변화를 검출하여, 슬로우 라이브 뷰의 개시 조건으로 하였으므로, 사용자가 의도하는 정지 화상의 촬영 타이밍에 의해 직접적으로 결부된 취득 개시 타이밍을 설정할 수 있다.

이 경우, 컨티뉴어스 AF를 실행함으로써 피사체에 대하여 항상 초점 맞춤 상태를 유지한 채 슬로우 라이브 뷰를 개시함으로써, 슬로우 라이브 뷰 개시 시의 AF 타임랙을 없앨 수가 있어서, 보다 원활한 동작을 실현할 수 있다.

또한, 상기 실시예 중에 "무브 인", "무브 아웃"으로 기재한 바와 같이, 정지 화상 데이터 내의 소정 영역 내로 피사체 상이 진입하거나 또는 소정 영역 밖으로 피사체 상이 진출하는 것을 슬로우 라이브 뷰의 개시 조건으로 설정 가능하게 하였으므로, 특히 고속으로 이동하여 촬영 범위 내에 계속적으로 촬영하기 곤란한 피사체를 촬영하는 경우에도, 적절한 타이밍에서 슬로우 라이브 뷰를 개시할 수 있다.

또한, 슬로우 라이브 촬영을 행할 때, 피사체의 이동 속도에 맞추어서 슬로우 라이브 뷰의 표시 속도를 제어함으로써, 적정 표시 속도를 용이하면서도 자동적으로 실현할 수 있고, 다음의 촬영에도 신속하게 대비할 수 있다.

또한, 피사체 상이 정지하는 것을 슬로우 라이브 뷰의 개시 조건의 하나로서 설정 가능하게 하였으므로, 움직임을 예측할 수 없는 피사체에도 용이하게 대처할 수 있게 된다.

또한, 최근에는 충분히 실용적이 된 피사체의 얼굴 인식, 및 표정 검출을 이용하여 슬로우 라이브 뷰의 개시 조건의 하나로서 설정 가능하게 하였으므로, 예를 들면 특정한 인물의 웃는 얼굴을 촬영하고자 하는 경우 등에, 촬영 타이밍의 선택을 장치에 맡기면서도 확실하게 원하는 정지 화상을 취득할 수 있다.

또한, 촬영 범위 내로의 인물의 얼굴 출현을 슬로우 라이브 뷰의 개시 조건의 하나로서 설정할 수 있도록 하였으므로, 갑작스런 촬영 범위 내로의 진입에 의한 조작의 지연 등, 움직임을 예측할 수 없는 피사체에도 용이하게 대처할 수 있게 된다.

이에 더하여, 상기 실시예에서는, 과거 촬영을 행함으로써 슬로우 라이브 뷰의 개시 직전의 정지 화상도 소정 시간 분 취득할 수 있도록 하였지만, 슬로우 라이브 촬영의 개시 타이밍이 지연되어도, 원하는 타이밍을 놓치지 않고 촬영할 수 있다.

그리고, 상기 실시예는 모두, 촬영에 의해 얻어지는 일련의 정지 화상 데이터 내의 피사체의 경시적인 변화를 검출하여 슬로우 라이브 뷰의 개시 조건으로 하였지만, 본 발명은 이에 한정되지 않고, 예를 들면 마이크로폰부(31)와 음성 처리부(26)를 사용하여, 취득한 음성의 음향학적 특징의 경시적인 변화, 예를 들면 총체적인 음압(音壓)이 일정한 임계치에 이르렀을 경우, 또는 단일 대역, 복수 대역 등 소정의 주파수 대역의 음성이 검출된 경우 등을 소정의 상태로서 설정할 수도 있다.

이로써, 예를 들면 달리기 경주의 스타트의 피스톨 음을 슬로우 라이브 촬영의 개시 타이밍으로 하는 등, 보다 넓은 용도에 적용될 수 있다.

또한, 상기 실시예는, 본 발명을 디지털 카메라에 적용한 경우에 대하여 설명하였지만, 본 발명은 이에 한정되지 않고, 정지 화상의 촬영이 가능한 비디오 무비 카메라, 카메라 기능을 가지는 휴대 전화 단말기나, PDA(personal digital assistants), 또는 웹 카메라를 탑재한 모바일 퍼스널 컴퓨터 등의 소형 전자 기기에도 적용할 수 있다.

본 발명의 더 나은 이점과 수정을 당업자라면 용이하게 실행할 수 있다. 따라서, 본 발명은 보다 폭 넓은 측면에 있어서, 여기에 기술된 상세한 설명과 실시예로 한정되어서는 않된다. 또한, 첨부된 청구항과 그 균등물에 의해 정의된 일반적인 발명의 정신과 범위를 일탈하지 않고, 다양한 수정이 이루어질 수 있다.

Claims

촬상부;
상기 촬상부에 의해 연속하여 촬상된 복수의 화상 데이터를 유지하는 유지부;
상기 유지부에 의해 유지된 화상 데이터를 순차 표시하는 표시부;
상기 촬상부에 의해 순차 촬상된 화상 데이터 중의 피사체의 이동 속도를 검출하는 이동 속도 검출부;
상기 이동 속도 검출부에 의해 검출된 이동 속도에 기초하여, 상기 표시부에 의해 화상 데이터를 순차 표시하는 때의 표시 속도를, 상기 촬상부에 의한 촬상 속도보다도 늦은 속도로 설정하는 설정부; 및
상기 설정부에 의해 설정된 표시 속도로 상기 화상 데이터를 상기 표시부에 순차 표시시키도록 제어하는 표시 제어부
를 포함하는 촬상 장치.
제1항에 있어서,
상기 표시부에 의해 표시된 화상 데이터 중의 소정 영역에의 상기 피사체에 의한 접촉을 검출하는 접촉 검출부를 더 포함하고,
상기 이동 속도 검출부는, 상기 접촉 검출부에 의해 상기 피사체에 의한 접촉이 검출되면, 상기 피사체의 이동 속도를 검출하는,
촬상 장치.
제2항에 있어서,
상기 접촉 검출부는, 상기 표시부에 의해 표시된 화상 데이터 중의 상기 소정 영역 내로의 상기 피사체의 진입 또는 상기 소정 영역 밖으로의 상기 피사체의 진출을 상기 소정 영역에의 접촉으로서 검출하는,
촬상 장치.
제1항에 있어서,
상기 표시 속도 제어부에 의해 제어된 표시 속도로 상기 화상 데이터를 순차 표시하는 때에, 외부 조작을 검출하는 조작 검출부; 및
상기 조작 검출부에 의해 외부 조작이 검출되면, 상기 표시부에 의해 표시되고 있는 화상 데이터를 기록하는 기록부
를 더 포함하는 촬상 장치.
제2항에 있어서,
상기 유지부는, 상기 촬상부에 의해 촬상된 복수의 화상 데이터를 상기 유지부의 일부의 영역에서 제1 시간분만큼 순환적으로 유지하고,
상기 촬상 장치는, 상기 접촉 검출부에 의해 상기 피사체에 의한 접촉이 검출되면, 상기 유지부의 일부의 영역에 제1 시간분만큼 유지하고 있던 복수의 화상 데이터와 함께, 상기 유지부의 나머지 영역에 상기 촬상부에 의해 촬상된 복수의 화상 데이터를 계속해서 유지시키도록 제어하는 유지 제어부를 더 포함하는,
촬상 장치.
제2항에 있어서,
상기 소정의 영역은 프레임체인, 촬상 장치.
제1항에 있어서,
상기 촬상부에 의해 촬상된 화상 데이터 중의 피사체에 대해 초점을 맞추는 초점부를 더 포함하는 촬상 장치.
촬상부, 상기 촬상부에 의해 촬상된 복수의 화상 데이터를 유지하는 유지부, 및 상기 유지부에 의해 유지된 화상 데이터를 순차 표시하는 표시부를 구비한 촬상 장치의 촬상 제어 방법으로서,
상기 촬상부에 의해 순차 촬상된 화상 데이터 중의 피사체의 이동 속도를 검출하는 이동 속도 검출 단계;
상기 이동 속도 검출 단계에 의해 검출된 이동 속도에 기초하여, 상기 표시부에 의해 화상 데이터를 순차 표시하는 때의 표시 속도를, 상기 촬상부에 의한 촬상 속도보다도 늦은 속도로 설정하는 설정 단계; 및
상기 설정 단계에서 설정된 표시 속도로 상기 표시부에 의해 화상 데이터를 순차 표시시키도록 제어하는 표시 속도 제어 단계
를 포함하는 촬상 제어 방법.
촬상 수단, 상기 촬상 수단에 의해 촬상된 복수의 화상 데이터를 유지하는 유지 수단, 상기 유지 수단에 의해 유지된 화상 데이터를 순차 표시하는 표시 수단을 구비한 촬상 장치의 컴퓨터가 실행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록 매체로서,
상기 촬상 장치를,
상기 촬상 수단에 의해 순차 촬상된 화상 데이터 중의 피사체의 이동 속도를 검출하는 이동 속도 검출 수단;
상기 이동 속도 검출 수단에 의해 검출된 이동 속도에 기초하여, 상기 표시 수단에 의해 화상 데이터를 순차 표시하는 때의 표시 속도를, 상기 촬상 수단에 의한 촬상 속도보다도 늦은 속도로 설정하는 설정 수단; 및
상기 설정 수단에 의해 설정된 표시 속도로 상기 표시 수단에 의해 화상 데이터를 순차 표시시키도록 제어하는 표시 속도 제어 수단
으로서 기능시키는 프로그램이 기록된, 컴퓨터 판독 가능한 기록 매체.