KR20080081859A - 촬상 장치 및 그 제어 방법 - Google Patents

촬상 장치 및 그 제어 방법 Download PDF

Info

Publication number
KR20080081859A
KR20080081859A KR1020080020650A KR20080020650A KR20080081859A KR 20080081859 A KR20080081859 A KR 20080081859A KR 1020080020650 A KR1020080020650 A KR 1020080020650A KR 20080020650 A KR20080020650 A KR 20080020650A KR 20080081859 A KR20080081859 A KR 20080081859A
Authority
KR
South Korea
Prior art keywords
person
image data
recording
composition
image
Prior art date
Application number
KR1020080020650A
Other languages
English (en)
Other versions
KR100924685B1 (ko
Inventor
마코토 오이시
Original Assignee
후지필름 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2007053644A external-priority patent/JP2008219449A/ja
Priority claimed from JP2007053645A external-priority patent/JP2008219450A/ja
Priority claimed from JP2007053646A external-priority patent/JP2008219451A/ja
Application filed by 후지필름 가부시키가이샤 filed Critical 후지필름 가부시키가이샤
Publication of KR20080081859A publication Critical patent/KR20080081859A/ko
Application granted granted Critical
Publication of KR100924685B1 publication Critical patent/KR100924685B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00132—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture in a digital photofinishing system, i.e. a system where digital photographic images undergo typical photofinishing processing, e.g. printing ordering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00132—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture in a digital photofinishing system, i.e. a system where digital photographic images undergo typical photofinishing processing, e.g. printing ordering
    • H04N1/00183—Photography assistance, e.g. displaying suggestions to the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/0122—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal the input and the output signals having different aspect ratios
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8233—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a character code signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/87—Regeneration of colour television signals
    • H04N9/8715—Regeneration of colour television signals involving the mixing of the reproduced video signal with a non-recorded signal, e.g. a text signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00—Still video cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/907—Television signal recording using static stores, e.g. storage tubes or semiconductor memories
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H04N9/8047—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8211—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a sound signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 디지털 카메라에 인물 추출 수단, 비인물 추출 수단 및 구도 판정 수단을 제공한다. 인물 추출 수단은 화상 데이터를 해석함으로써 인물을 나타내는 화상 영역을 추출한다. 비인물 추출 수단은 인물 추출 수단에 의해 추출된 화상 영역 이외의 화상 영역을 해석함으로써 인물 이외의 주요 피사체를 추출한다. 구도 판정 수단은 추출 결과에 의거하여 인물과 인물 이외의 주요 피사체의 배치를 평가하여 구도의 양부(良否)를 판정한다. 구도의 양부에 의거하여 화상 데이터를 기록하는 타이밍을 결정한다. 바람직하게는, 결정한 타이밍에 화상 데이터가 기록되도록 기록 수단을 제어하거나 결정한 타이밍을 유저에 보고한다.
촬상 장치, 제어 방법, 인물 추출 수단, 비인물 추출 수단, 구도 판정 수단

Description

촬상 장치 및 그 제어 방법{IMAGING APPARATUS AND CONTROL METHOD THEREOF}
본 발명은 촬영 중의 화상의 구도에 의거하여 촬영 제어를 행하는 촬상 장치, 및 그 촬상 장치의 제어 방법에 관한 것이다. 또한, 본 발명은 음성을 트리거로서 자동 촬영을 행하는 촬상 장치, 및 그 촬상 장치의 제어 방법에 관한 것이다.
디지털 카메라의 AE(Auto Exposure) 및 AF(Auto Focus) 기능은 해마다 향상되고 있고, 최근에는 카메라의 조작에 익숙하지 않은 사람이라도 선명하고 밝은 색조의 좋은 사진을 촬영할 수 있게 되었다. 그러나, 카메라를 어떻게 준비하고 어느 타이밍에 셔터 릴리즈 버튼을 누를지는 아직 촬영자의 기량에 의존하는 것이 크다. 이에 따라, 구도가 좋은 사진을 찍는 것은 초심자에게 있어서 여전히 어려운 상황에 있다.
이 문제의 해결책으로서 예를 들면, 일본 특허 공개 2001-051338호 공보에는 인물 촬영에 있어서 그 인물의 얼굴의 방향을 인식하여 인물이 소정의 방향을 향한 것인가 아닌가를 판정하고, 그 판정 결과에 따라 기록 동작을 제어하는 카메라가 개시되어 있다. 그러나, 동 문헌에는 한명의 인물을 촬영할 때의 제어 방법이 개시되어 있지만, 복수의 인물의 촬영이나 인물 이외의 대상을 촬영할 때의 제어 방법 은 개시되어있지 않다. 한편, 일본 특허 공개 2006-203346호 공보에는 촬영한 정경의 구도를 해석하고 구도에 따라 촬영 조건을 설정하는 카메라가 개시되어 있다. 그러나, 동 문헌은 인물의 얼굴 이외에 하늘을 검출하고 그 위에 피사체상의 경사를 검출하여 제어를 행하는 것을 제안할 뿐으로 얼굴이나 하늘 이외의 대상을 촬영할 때의 구체적인 제어 방법을 개시하지 않는다.
또한, 다른 해결책으로서 셔터 릴리즈 버튼이 눌리기 전에 취득된 화상을 사용하여 화상 데이터를 기록하는 타이밍을 제어함으로써 좋은 구도의 화상을 얻으려고 시도되고 있다. 일본 특허 공개 2000-196934호 공보에는 촬영 중의 화상의 소정부분에 주목하여 그 부분이 변화되었을 때에 셔터를 동작시키는 촬상 장치가 개시되어 있다. 그러나, 이 촬상 장치는 유저가 지정한 소정의 부분에만 주목한 제어를 행할뿐이고 화상 전체의 구도를 생각한 제어는 행하지 않고 있다.
게다가, 다른 해결책으로서 셔터 찬스의 도래를 시사하는 특정 음성을 트리거로서 자동 촬영을 행하는 디지털 카메라도 제안되고 있다. 예를 들면, 일본 특허 공개 2006-184589호 공보에는 디지털 카메라가 구비하는 마이크로부터 입력되는 특정 음성 프레이즈(phrase)를 식별하고, 그 음성 프레이즈가 검출되었을 때에 자동적으로 촬영 동작을 행하여 화상을 취득하는 디지털 카메라가 개시되어 있다. 그러나, 음성을 트리거로서 자동 촬영을 행하는 디지털 카메라는 편리한 반면, 관계없는 음성에 반응하여 무용한 동작을 행하는 경우가 있다. 예를 들면, 관광지 등의 사람이 많은 곳에서는 가까이 있는 관계없는 사람의 목소리에 카메라가 반응하는 경우가 있다. 또는, 집합 사진 촬영 등에서 아직 촬영의 준비가 갖춰지지 않음에도 불구하고 누군가가 「세이 치즈」라는 목소리를 발성하였으므로 촬영이 행해지는 경우도 있다.
본 발명은 상기 종래 기술의 문제를 해결하고 초심자도 간단히 좋은 구도의 사진을 찍을 수 있는 촬상 장치를 제공하는 것을 목적으로 한다. 게다가, 음성을 트리거로 하는 자동 촬영의 편리성을 확보하면서 무용한 촬영 동작이 행해지는 부적합을 해소하는 것을 목적으로 한다.
본 발명은 상기 목적을 달성하기 위해서 다음 3종류의 촬상 장치를 제공한다.
제 1 촬상 장치는 정경을 촬영하고 그 정경을 나타내는 화상 데이터를 생성하는 촬상 수단, 및 촬상 수단에 의해 생성된 화상 데이터를 소정의 기록 매체에 기록하는 기록 수단을 구비하고, 다음에 설명하는 인물 추출 수단, 비인물 추출 수단, 구도 판정 수단 및 기록 타이밍 결정 수단을 구비한다.
인물 추출 수단은 촬상 수단에 의해 생성된 화상 데이터를 해석함으로써 인물을 나타내는 화상 영역을 추출한다. 예를 들면, 화상 데이터에 포함되는 얼굴을 탐색하고 추출 결과로서 그 탐색에 의해 검출된 얼굴의 수, 각 얼굴의 위치 및 각 얼굴의 크기를 나타내는 정보를 출력하는 것으로 한다. 이 경우, 탐색에 의해 검출된 얼굴의 표정을 식별하고 식별된 표정을 나타내는 정보를 더 출력하도록 해도 좋다. 또한, 화상 데이터에 포함되는 인물의 제스처를 식별하고 추출 결과로서 식별된 제스처를 나타내는 정보를 출력하는 것으로 해도 좋다.
비인물 추출 수단은 촬상 수단에 의해 생성된 화상 데이터의 인물 추출 수단에 의해 추출된 화상 영역 이외의 화상 영역을 해석하고 인물 이외의 주요 피사체 를 추출한다. 예를 들면, 화상 데이터에 대하여 하이패스 필터를 사용한 필터링 처리를 실시함으로써 주요 피사체를 추출하는 것으로 한다. 또는, 상기 화상 데이터에 포함되는 대상 중에서 미리 등록된 소정의 대상을 식별함으로써 그 대상을 주요 피사체로서 추출하는 것으로 해도 좋다. 게다가, 이들의 방법을 모두 이용하여 주요 피사체를 추출하는 것으로 해도 좋다.
구도 판정 수단은 인물 추출 수단 및 비인물 추출 수단의 추출 결과에 의거하여 인물 및 인물 이외의 주요 피사체의 배치가 소정의 조건을 충족시키는지의 여부를 평가하고, 그 배치의 평가에 의거하여 상기 화상 데이터 구도의 양부를 판정한다.
기록 타이밍 결정 수단은 구도 판정 수단의 판정 결과에 의거하여 화상 데이터를 기록하는 타이밍을 결정한다.
본 발명의 일실시형태에 있어서 촬상 장치는 상기 촬상 수단, 기록 수단, 인물 추출 수단, 비인물 추출 수단, 구도 판정 수단 및 기록 타이밍 결정 수단에 더하여 기록 타이밍 결정 수단이 결정한 타이밍에 화상 데이터가 기록되도록 기록 수단을 제어하는 기록 제어 수단을 구비한다. 이 형태에서는 좋은 구도의 화상이 촬영되었을 때 자동적으로 화상 데이터의 기록이 행해지므로 촬영자의 기량에 상관없이 항상 좋은 구도의 화상을 취득할 수 있다.
또한, 다른 실시형태에 있어서 촬상 장치는 기록 타이밍 결정 수단이 결정한 타이밍의 도래를 보고하는 보고 수단을 구비한다. 보고 수단에 의한 보고에 의해 촬영자는 좋은 구도의 화상이 촬영되는 타이밍을 알 수 있다. 따라서, 보고된 타이 밍에 셔터 릴리즈 버튼을 누름으로써 간단히 좋은 구도의 화상을 취득할 수 있다.
제 1 촬상 장치는 인물 추출 수단 및 비인물 추출 수단의 추출 결과를 이용하여 소정의 조건을 충족시키는 인물 및 주요 피사체의 배치를 결정하는 구도 제안 수단, 및 구도 제안 수단에 의해 결정된 배치에서 인물 및 주요 피사체가 배치된 화상 데이터가 생성되도록 촬상 수단의 동작을 제어하는 촬상 제어 수단을 더 구비하는 것으로 해도 좋다. 구도 제안 수단과 촬상 제어 수단을 구비한 구성에서는 촬영된 화상의 구도가 나쁠 때에는 그 후의 촬상 수단의 동작이 변경되어(예를 들면, 촬영 배율 등이 변경되어) 구도가 개선되므로 좋은 구도의 화상을 빨리 취득할 수 있다.
또는, 상기 구도 제안 수단, 및 인물 및 주요 피사체의 배치가 구도 제안 수단에 의해 결정된 배치가 되도록 화상 데이터에 대하여 화상 처리를 실시하는 화상 처리 수단을 더 구비하는 것으로 해도 좋다. 구도 제안 수단과 화상 처리 수단을 구비한 구성에서도 촬영된 화상의 구도가 나쁠 때에는 화상 처리에 의해 좋은 구도의 화상이 자동적으로 생성되므로 좋은 구도의 화상을 빨리 취득할 수 있다.
또한, 기록 수단은 인물 추출 수단 및 비인물 추출 수단의 추출 결과를 화상 데이터와 함께 기록 매체에 기록하는 것이 바람직하다. 이에 따라, 기록 매체에 기록된 화상 데이터를 퍼스널 컴퓨터 등으로 편집할 때 그러한 추출 결과를 이용한 편집을 행할 수 있다.
게다가, 상기 수단에 더하여 입력된 음성을 해석함으로써 음성에 관한 소정의 특징을 검출하는 음성 해석 수단을 더 구비하여도 좋다. 예를 들면, 음성의 특 징으로서 소정의 음량 변화, 소정의 음성 프레이즈, 소정 인물의 목소리의 특징으로 미리 등록된 특징 등을 검출한다. 이 경우 구도 판정 수단은 음성 해석 수단에 의해 검출된 음성의 특징과 상술한 배치의 평가에 의거하여 화상 데이터 구도의 양부를 판정한다. 또한, 이 경우 기록 수단은 인물 추출 수단 및 비인물 추출 수단의 추출 결과, 및 음성 해석 수단의 검출 결과를 화상 데이터와 함께 기록 매체에 기록하는 것이 바람직하다. 구도의 양부를 판정할 시에 음성도 고려함으로써 보다 적절한 타이밍에 화상 데이터를 기록할 수 있다.
본 발명의 제 1 제어 방법은 촬상 장치를 다음 순서로 제어함으로써 상기 제 1 촬상 장치로서 동작시키는 방법이다. 우선, 촬상 수단에 의해 생성된 화상 데이터를 해석함으로써 인물을 나타내는 화상 영역을 추출한다. 그 다음에, 촬상 수단에 의해 생성된 화상 데이터의 인물을 나타내는 화상 영역 이외의 화상 영역을 해석함으로써 인물 이외의 주요 피사체를 추출한다. 계속해서, 추출된 인물 및 주요 피사체의 배치가 소정의 조건을 충족시키는지의 여부를 평가하고 그 배치의 평가에 의거하여 화상 데이터 구도의 양부를 판정한다. 그리고, 구도의 양부의 판정 결과에 의거하여 화상 데이터를 기록하는 타이밍을 결정한다. 그리고, 일실시형태에서는 결정한 타이밍에 화상 데이터가 기록되도록 기록 수단을 제어한다. 또한, 다른 실시형태에서는 예를 들면 모니터, 스피커, 램프 등 소정의 출력 수단의 동작을 제어함으로써 상기 결정한 타이밍의 도래를 유저에 보고한다.
제 2 촬상 장치는 정경을 촬영하고 그 정경을 나타내는 화상 데이터를 생성하는 촬상 수단, 및 촬상 수단에 의해 생성된 화상 데이터를 소정의 기록 매체에 기록하는 기록 수단을 구비하고 있고, 다음에 설명하는 인물 추출 수단, 음성 해석 수단, 구도 판정 수단 및 기록 타이밍 결정 수단을 구비한다.
인물 추출 수단은 촬상 수단에 의해 생성된 화상 데이터를 해석함으로써 인물을 나타내는 화상 영역을 추출한다. 예를 들면, 화상 데이터에 포함되는 얼굴을 탐색하고 추출 결과로서 그 탐색에 의해 검출된 얼굴의 수, 각 얼굴의 위치 및 각 얼굴의 크기를 나타내는 정보를 출력하는 것으로 한다. 이 경우 탐색에 의해 검출된 얼굴의 표정을 식별하고 식별된 표정을 나타내는 정보를 더 출력하도록 해도 좋다. 또한, 화상 데이터에 포함되는 인물의 제스처를 식별하고 추출 결과로서 식별된 제스처를 나타내는 정보를 출력하는 것으로 해도 좋다.
음성 해석 수단은 입력된 음성을 해석함으로써 음성에 관한 소정의 특징을 검출한다. 예를 들면, 음성의 특징으로서 소정의 음량 변화, 소정의 음성 프레이즈, 소정 인물의 목소리의 특징으로 미리 등록된 특징 등을 검출한다. 구도 판정 수단은 인물 추출 수단의 추출 결과 및 음성 해석 수단의 검출 결과에 의거하여 화상 데이터 구도의 양부를 판정한다.
기록 타이밍 결정 수단은 구도 판정 수단의 판정 결과에 의거하여 화상 데이터를 기록하는 타이밍을 결정한다.
본 발명의 일실시형태에서 촬상 장치는 상기 촬상 수단, 기록 수단, 인물 추출 수단, 구도 판정 수단 및 기록 타이밍 결정 수단에 더하여 기록 타이밍 결정 수단이 결정한 타이밍에 화상 데이터가 기록되도록 기록 수단을 제어하는 기록 제어 수단을 구비한다. 이 형태에서는 자동 촬영의 트리거가 될 수 있는 음성이 발생되 어도 구도가 소정의 조건을 충족시키지 않으면 자동 촬영은 행하여지지 않으므로 음성에만 반응한 무용한 촬영은 행해질 걱정이 없다.
또한, 다른 실시형태에서 촬상 장치는 기록 타이밍 결정 수단이 결정한 타이밍의 도래를 보고하는 보고 수단을 구비한다. 이 형태의 촬상 장치는 자동 촬영을 행하는 것은 아니지만, 구도가 소정의 조건을 충족시키거나 소정의 음성이 발생했을 때 셔터 릴리즈 버튼을 눌러야 할 타이밍이 도래한 것을 유저에 보고하므로 유저는 자동 촬영으로 동등한 편리성을 누릴 수 있다. 또한, 촬영 동작이 자동으로 행하여지는 일이 없으므로 유저의 의도에 반하여 촬상 장치가 무용한 동작을 행하는 일도 없다.
또한, 기록 수단은 인물 추출 수단의 추출 결과 및 음성 해석 수단의 검출 결과를 화상 데이터와 함께 기록 매체에 기록하는 것이 바람직하다. 이에 따라, 기록 매체에 기록된 화상 데이터를 퍼스널 컴퓨터 등으로 편집할 때 그러한 추출 결과를 이용한 편집을 행할 수 있다.
본 발명의 제 2 제어 방법은 촬상 장치를 다음 순서로 제어함으로써 상기 제 2 촬상 장치로서 동작시키는 방법이다. 우선, 촬상 수단에 의해 생성된 화상 데이터를 해석함으로써 인물을 나타내는 화상 영역을 추출한다. 이와 병행하여 입력된 음성을 해석함으로써 음성에 관한 소정의 특징을 검출한다. 계속해서, 인물의 추출 결과 및 음성의 검출 결과에 의거하여 화상 데이터 구도의 양부를 판정한다. 그리고, 그 판정의 결과에 의거하여 화상 데이터를 기록하는 타이밍을 결정한다. 그리고, 일실시형태에서는 결정한 타이밍에 화상 데이터가 기록되도록 기록 수단을 제 어한다. 또한, 다른 실시형태에서는 소정의 출력 수단의 동작을 제어함으로써 결정한 타이밍의 도래를 유저에 보고한다.
본 발명의 제 3 촬상 장치는 정경을 촬영하고 그 정경을 나타내는 화상 데이터를 생성하는 촬상 수단, 및 촬상 수단에 의해 생성된 화상 데이터를 소정의 기록 매체에 기록하는 기록 수단을 구비하고 있고, 다음에 설명하는 인물 추출 수단, 비인물 추출 수단, 구도 판정 수단 및 구도 제안 수단을 구비한다.
인물 추출 수단은 촬상 수단에 의해 생성된 화상 데이터를 해석함으로써 인물을 나타내는 화상 영역을 추출한다. 예를 들면, 화상 데이터에 포함되는 얼굴을 탐색하고 추출 결과로서 그 탐색에 의해 검출된 얼굴의 수, 각 얼굴의 위치 및 각 얼굴의 크기를 나타내는 정보를 출력하는 것으로 한다. 이 경우 탐색에 의해 검출된 얼굴의 표정을 식별하고 식별된 표정을 나타내는 정보를 더 출력하도록 해도 좋다. 또한, 화상 데이터에 포함되는 인물의 제스처를 식별하고 추출 결과로서 식별된 제스처를 나타내는 정보를 출력하는 것으로 해도 좋다.
비인물 추출 수단은 촬상 수단에 의해 생성된 화상 데이터의 인물 추출 수단에 의해 추출된 화상 영역 이외의 화상 영역을 해석하고 인물 이외의 주요 피사체를 추출한다. 예를 들면, 화상 데이터에 대하여 하이패스 필터를 사용한 필터링 처리를 실시함으로써 주요 피사체를 추출하는 것으로 한다. 또는, 상기 화상 데이터에 포함되는 대상 중에서 미리 등록된 소정의 대상을 식별함으로써 그 대상을 주요 피사체로서 추출하는 것으로 해도 좋다. 게다가, 이들의 방법을 모두 이용하여 주요 피사체를 추출하는 것으로 해도 좋다.
구도 판정 수단은 인물 추출 수단 및 비인물 추출 수단의 추출 결과에 의거하여 인물 및 인물 이외의 주요 피사체의 배치가 소정의 조건을 충족시키는지의 여부를 평가하고 그 배치의 평가에 의거하여 상기 화상 데이터 구도의 양부를 판정한다. 또한, 구도 제안 수단은 인물 추출 수단 및 비인물 추출 수단의 추출 결과를 이용하여 소정의 조건을 충족시키는 인물 및 주요 피사체의 배치를 결정한다.
본 발명의 일실시형태에서 촬상 장치는 상기 촬상 수단, 기록 수단, 인물 추출 수단, 비인물 추출 수단, 구도 판정 수단 및 구도 제안 수단에 더하여 구도 제안 수단에 의해 결정된 배치에서 인물 및 주요 피사체가 배치된 화상 데이터가 생성되도록 촬상 수단의 동작을 제어하는 촬상 제어 수단을 구비한다. 이 형태의 촬상 장치에 의하면, 촬영된 화상의 구도가 나쁠 때에는 그 후의 촬상 수단의 동작이 변경되어(예를 들면, 촬영 배율 등이 변경되어) 자동적으로 구도가 개선된다.
다른 실시형태에서 촬상 장치는 인물 및 주요 피사체의 배치가 구도 제안 수단에 의해 결정된 배치가 되도록 화상 데이터에 대하여 화상 처리를 실시하는 화상 처리 수단을 구비한다. 이 형태의 촬상 장치에 의하면, 촬영된 화상의 구도가 나쁠 때에는 화상 처리에 의해 좋은 구도의 화상이 자동적으로 생성되어 구도가 개선된다.
또한, 이 촬상 장치는 구도 판정 수단의 판정 결과에 의거하여 화상 데이터를 기록하는 타이밍을 결정하고 결정한 타이밍에 화상 데이터가 기록되도록 기록 수단을 제어하는 기록 제어 수단을 구비하는 것으로 해도 좋다. 이 기록 제어 수단을 구비한 구성에서는 좋은 구도의 화상을 취득할 수 있는 시점에서 자동적으로 화 상 데이터의 기록이 행하여지므로 촬영자의 기량에 상관없이 항상 좋은 구도의 화상을 취득할 수 있다.
또는, 상기 기록 제어 수단에 대신하여 구도 판정 수단의 판정 결과에 의거하여 화상 데이터를 기록하는 타이밍을 결정하고 결정한 타이밍의 도래를 보고하는 보고 수단을 구비하는 것으로 해도 좋다. 보고 수단을 구비한 구성에서 촬영자는 좋은 구도의 화상이 촬영되는 타이밍을 알 수 있다. 따라서, 보고된 타이밍에 셔터 릴리즈 버튼을 누름으로써 간단히 좋은 구도의 화상을 취득할 수 있다.
또한, 기록 수단은 인물 추출 수단 및 비인물 추출 수단의 추출 결과를 화상 데이터와 함께 기록 매체에 기록하는 것이 바람직하다. 이에 따라, 기록 매체에 기록된 화상 데이터를 퍼스널 컴퓨터 등으로 편집할 때 그러한 추출 결과를 이용한 편집을 행할 수 있다.
또한, 상기 수단에 더하여 입력된 음성을 해석함으로써 음성에 관한 소정의 특징을 검출하는 음성 해석 수단을 더 구비하고 있어도 좋다. 예를 들면, 음성의 특징으로서 소정의 음량 변화, 소정의 음성 프레이즈, 소정 인물의 목소리의 특징으로 미리 등록된 특징 등을 검출한다. 이 경우 구도 판정 수단은 음성 해석 수단에 의해 검출된 음성의 특징과 상술한 배치의 평가에 의거하여 화상 데이터 구도의 양부를 판정한다. 또한, 이 경우 기록 수단은 인물 추출 수단 및 비인물 추출 수단의 추출 결과 및 음성 해석 수단의 검출 결과를 화상 데이터와 함께 기록 매체에 기록하는 것이 바람직하다. 구도의 양부를 판정할 시에 음성도 고려함으로써 보다 적절한 타이밍에 화상 데이터를 기록할 수 있다.
본 발명의 제 3 제어 방법은 촬상 장치를 다음 순서로 제어함으로써 상기 제 3 촬상 장치로서 동작시키는 방법이다. 우선, 촬상 수단에 의해 생성된 화상 데이터를 해석함으로써 인물을 나타내는 화상 영역을 추출한다. 그 다음에, 촬상 수단에 의해 생성된 화상 데이터의 인물을 나타내는 화상 영역 이외의 화상 영역을 해석함으로써 인물 이외의 주요 피사체를 추출한다. 계속해서, 추출된 인물 및 주요 피사체의 배치가 소정의 조건을 충족시키는지의 여부를 평가하고 그 배치의 평가에 의거하여 화상 데이터 구도의 양부를 판정한다. 그리고, 상기 소정의 조건을 충족시키는 추출된 인물 및 주요 피사체의 배치를 결정한다. 그리고, 일실시형태에 있어서는 결정된 배치에서 인물 및 주요 피사체가 배치된 화상 데이터가 생성되도록 촬상 수단의 동작을 제어한다. 또한 다른 실시형태에 있어서는 인물 및 인물 이외의 주요 피사체의 배치가 결정된 배치가 되도록 상기 화상 데이터에 대하여 화상 처리를 실시한다.
이하, 본 발명의 방법 및 장치의 일실시형태로서 복수의 제어 방법을 선택적으로 이용하여 제어를 행하는 디지털 카메라를 개시한다. 이 디지털 카메라는 통상 촬영 모드, 화상 재생 모드, 자동 촬영 모드 및 촬영 어시스트 모드의 4개의 동작 모드를 갖는다.
처음에, 디지털 카메라의 구성에 대하여 설명한다. 도 1A 및 도 1B는 디지털 카메라(1)의 외관을 나타내는 도면이며, 도 1A는 디지털 카메라의 정면을 도 1B는 배면을 나타내고 있다. 이들의 도면에 나타낸 바와 같이, 디지털 카메라(1)는 촬상 렌즈(2), 셔터 릴리즈 버튼(3), 마이크(4), 조작 다이얼 혹은 버튼(5a~5f), 모니터(6) 및 LED 램프(9)를 구비하고 있다. 또한, 디지털 카메라(1)의 하부에는 스피커(8)와 개폐가능한 슬롯 커버가 있고(도시되지 않음), 슬롯 커버의 중에는 메모리 카드(7)를 장전하는 카드 슬롯이 구비되어 있다.
도 2는 디지털 카메라(1)의 내부 구성을 나타내는 도면이다. 이 도면에 나타낸 바와 같이, 디지털 카메라(1)는 촬상 렌즈(2), 렌즈 구동부(16), 조리개(13), 조리개 구동부(17), CCD(14) 및 타이밍 제너레이터(TG)(18)로 이루어지는 촬상부를 구비한다. 촬상 렌즈(2)는 피사체에 포커스를 맞추기 위한 포커스 렌즈, 줌 기능을 실현하기 위한 줌 렌즈 등 복수의 기능별 렌즈에 의해 구성된다. 렌즈 구동부(16)은 스테핑 모터 등 소형의 모터로 CCD(14)로부터 각 기능별 렌즈의까지의 거리가 목적으로 알맞은 거리가 되도록 각 기능별 렌즈의 위치를 조정한다. 조리개(13)는 복수의 조리개 날개로 이루어진다. 조리개 구동부(17)는 스테핑 모터 등 소형의 모터로 조리개의 개구 사이즈가 목적으로 알맞은 사이즈가 되도록 조리개 날개의 위치를 조정한다. CCD(14)는 원색 컬러 필터를 수반하는 500~1200만 화소의 CCD에서 타이밍 제너레이터(18)로부터의 지시 신호에 따라 축적된 전하를 방출한다. 타이밍 제너레이터(18)는 CCD(14)에 소망의 시간 동안만 전하가 축적되도록 CCD(14)에 대하여 신호를 보내고 이에 따라 셔터 속도를 조정한다.
또한, 디지털 카메라(1)는 CCD(14)의 출력 신호를 디지털 신호로 변환하는 Ａ/D 변환부(15), A/D 변환부(15)가 출력한 화상 데이터를 시스템 버스(24)를 통하여 다른 처리부에 전송하는 화상 입력 제어부(23), 및 화상 입력 제어부(23)로부터 전송된 화상 데이터를 일시적으로 기억하는 메모리(22)를 구비한다.
또한, 디지털 카메라(1)는 렌즈 구동부(16)에 렌즈의 이동을 지시하여 초점 맞춤을 행하는 초점 조절부(20), 및 조리개 값과 셔터 속도를 결정하고 조리개 구동부(17)와 타이밍 제너레이터(18)에 지시 신호를 송출하는 노출 조정부(21)를 구비한다. 또한, 디지털 카메라(1)는 메모리(22)에 기억되어 있는 화상 데이터에 대하여 화상 처리를 실시하는 화상 처리부(25)를 구비한다. 화상 처리부(25)는 화상을 자연스러운 색조, 밝기로 하기 위한 색계조 보정이나 밝기 보정, 화상 데이터가 적목(赤目)을 포함하는 것일 때에 적목을 흑목으로 수정하는 처리, 화상의 구도가 나쁠 때에 구도를 수정하는 처리 등의 화상의 볼품을 좋게 하기 위한 각종 처리 처리를 행한다. 화상 처리부(25)에 의해 처리된 처리 완료 화상 데이터는 다시 메모리(22)에 격납된다.
또한, 디지털 카메라(1)는 메모리(22)에 기억되어 있는 화상 데이터의 모니터(6)로의 출력을 제어하는 표시 제어부(26)를 구비한다. 표시 제어부(26)는 메모리(22)에 기억되어 있는 화상 데이터의 화소수를 표시하기에 알맞은 크기가 되도록 세선화한 후 모니터(9)에 출력한다. 또한, 표시 제어부(26)는 동작 조건 등의 설정 화면의 표시도 제어한다.
또한, 디지털 카메라(1)는 메모리(22)에 기억되어 있는 화상 데이터의 메모리 카드(7)로의 기록, 및 메모리 카드(7)에 기록되어 있는 화상 데이터의 메모리(22)로의 로드를 제어하는 기록 판독 제어부(27)를 구비한다. 기록 판독 제어부(27)는 유저의 설정에 따라 촬영에 의해 취득된 화상 데이터를 압축하지 않고 그 대로, 또는 압축 부호화하여 Exif(Exchangeable Image File Format) 파일로서 메모리 카드(7)에 기록한다. Exif는 일본 전자 공업 진흥 협회(JEIDA)가 정한 파일 포멧 규격이다. 또한, 메모리 카드(7)에 기록되어 있는 화상 파일의 재생을 요구하는 조작이 행해졌을 때에는 Exif 파일에 포함된 화상 데이터를 메모리(22)에 로드한다. 화상 데이터가 압축되어 있을 경우에는 신장한 후 메모리(22)에 로드한다.
또한, 디지털 카메라(1)는 LED(9)의 점등, 소등을 제어하는 LED 제어부(19)를 구비한다. 게다가, 마이크(4), 스피커(8), A/D 변환부(10), D/A 변환부(11) 및 음성의 입출력을 제어하는 음성 입출력 제어부(12)를 구비한다. 마이크(4)로부터 입력되어 A/D 변환부(10)에 의해 디지털 데이터로 변환된 음성 데이터는 음성 입출력 제어부(12)에 의해 시스템 버스(24)를 통하여 메모리(22)에 전송되어 기억된다. 또한, 각 처리부 또는 후술하는 전체 제어부로부터 음성 입출력 제어부(12)에 공급되는 음성 데이터는 D/A 변환부(11)에 의해 변환된 후 스피커(8)에 출력된다.
또한, 디지털 카메라(1)는 화상을 취득해야 할 타이밍을 검출하는 타이밍 검출부(28)를 구비한다. 타이밍 검출부(28)는 메모리(22)에 기억되어 있는 화상 데이터나 음성 데이터를 해석하여 그 데이터가 소정의 조건을 충족시킬 때 화상을 취득해야 할 타이밍이 도래한 것을 나타내는 신호를 출력한다.
디지털 카메라(1)는 이외에 CPU(Central Processor Unit)(31), 조작/제어 프로그램이 격납된 RAM(Random Access Memory)(32), 및 각종 설정값이 기억되어 있는 EEPROM(Electronically Erasable and Programmable Read Only Memory)(33)으로 이루어지는 전체 제어부(30)를 구비한다. 전체 제어부(30)의 CPU(31)는 EEPROM(33)에 기억된 설정값을 참조하고, 그 설정값에 의거하여 RAM(32)에 기억되어 있는 프로그램을 선택 실행한다. 이에 따라, 전체 제어부(30)는 셔터 릴리즈 버튼(3), 조작 다이얼/버튼(5a~5f)의 조작을 검출하거나, 또는 각 처리부의 처리 결과를 수신하고 LED 제어부(19), 초점 조절부(20), 노출 조정부(21), 화상 입력 제어부(23), 화상 처리부(25), 표시 제어부(26), 기록 판독 제어부(27), 타이밍 검출부(28) 및 음성 입출력 제어부(12)에 대하여 실행해야 할 처리를 지시하는 지시 신호를 송출한다. 이에 따라, 디지털 카메라(1)의 동작이 제어된다.
통상 촬영 모드, 자동 촬영 모드 및 촬영 어시스트 모드에서는 전체 제어부(30)의 제어하에 각 처리부가 각각 초점 조절, 노출 제어, 플래시 제어, 화상 처리, 기록 등을 실행함으로써 화상이 취득된다. 재생 모드에서는 전체 제어부(30)의 제어하에 메모리 카드(7)에 기록되어 있는 화상이 모니터(6)에 출력된다. 설정 모드에서는 전체 제어부(30)의 제어하에 모니터(6)에 설정 화면이 표시되어 조작 다이얼/버튼(5a~5f)으로부터의 조작 입력을 접수할 수 있다. 설정 화면에 있어서 유저가 조작 다이얼/버튼(5a~5f)을 사용하여 선택한 정보, 또는 메모리 카드(7)로부터 입력된 정보는 EEPROM(33)에 기억된다.
이하, 자동 촬영 모드와 촬영 어시스트 모드에 대하여 더 설명한다. 도 3은 자동 촬영 모드에 설정되었을 때의 디지털 카메라(1)의 동작 개요를 나타내는 플로우 챠트이다. 디지털 카메라(1)는 자동 촬영 모드에 설정되면 렌즈에 비치는 정경을 나타내는 화상 데이터의 생성을 시작한다(S101). 그리고, 생성된 화상 데이터가 의미하는 화상의 구도를 판정하고(S102), 구도가 좋은 경우에 셔터 릴리즈 버튼(3) 의 조작의 유무에 상관없이 메모리 카드(7)에 화상을 기록한다(S103). 구도가 나쁜 경우에는 보다 좋은 구도를 제안하고(S104), 스텝(S101)에서 생성되는 화상 데이터가 스텝(S104)에서 제안된 구도가 되도록 촬상부의 동작을 제어하거나 화상 처리부(25)에 소정의 처리를 행하게 한다(S105). 예를 들면, 주요한 피사체가 지나치게 작을 때에는 촬상부에 줌 동작을 행하게 한다. 또한, 주요한 피사체가 치우쳐서 배치되어 있을 때에는 화상 처리부(25)에 지시하여 그 피사체가 비치는 영역만을 트리밍하여 이동 또는 확대하는 화상 처리를 행하게 한다. 또는, 수직으로 서있어야 하는 피사체가 비스듬하게 비치고 있으면 회전 처리를 실시하여 피사체가 수직이 되도록 한다.
촬상부나 화상 처리부(25)에 의해 재생성(S101)된 화상 데이터는 스텝(S102)에서 다시 평가된다. 이상의 처리는 모드 스위칭 조작이 검출될 때까지(S106) 반복된다.
도 4는 촬영 어시스트 모드에 설정되었을 때의 디지털 카메라(1)의 동작 개요를 나타내는 플로우 챠트이다. 디지털 카메라(1)는 촬영 어시스트 모드에 설정되면 렌즈에 비치는 정경을 나타내는 화상 데이터의 생성을 시작한다(S201). 그리고, 생성된 화상 데이터가 의미하는 화상의 구도를 판정(평가)한다(S202).
구도가 좋은 경우에는 타이밍의 도래를 보고한다(S203). 도 5 및 도 6에 타이밍 도래의 보고 예를 나타낸다. 도 5는 모니터(6)에 셔터 릴리즈 버튼의 누름을 재촉하는 마크(34)를 표시함으로써 타이밍의 도래를 보고하는 예를 나타내고 있다. 마크을 대신하여 「셔터 찬스입니다」라는 메시지를 표시해도 좋다. 도 6은 LED 램 프(9)를 점멸시킴으로써 타이밍의 도래를 보고하는 예를 나타내고 있다. 이밖에, 스피커로부터의 음성 출력에 의해 타이밍의 도래를 보고하는 방법도 생각된다.
구도가 나쁜 경우에는 보다 좋은 구도를 제안한다(S204). 그리고, 제안한 구도를 모니터(6)에 표시함으로써(이하, 어시스트 표시라고 칭한다) 촬영자에 대하여 카메라의 준비하는 방식을 고치도록, 또는 소정의 조작 버튼을 조작하도록 재촉한다(S205). 도 7 및 도 8에 어시스트 표시의 일례를 나타낸다. 도 7은 촬영된 그대로의 화상 데이터에 프레이밍 테두리(35)를 포개서 표시함으로써 바람직한 프레이밍의 방법을 제시하는 예를 나타내고 있다. 도 8은 화상 처리에 의해 생성된 바람직한 프레이밍의 화상을 표시하고 화면의 가장자리에 프레이밍을 어떻게 하면 표시중의 화상과 같은 화상 데이터를 취득할 수 있을지를 시사하는 마크(36)를 표시한 예이다. 이밖에, 「줌하여 주십시요.」, 「카메라를 조금 왼쪽으로 향하여 주십시요.」라는 메시지를 표시 또는 음성 출력함으로써 바람직한 프레이밍을 제시해도 좋다. 촬영 어시스트 모드에서는 이상의 처리가 모드 스위칭 조작이 검출될 때까지 (S206) 반복된다.
계속해서, 스텝(S102 및 S202)의 구도를 판정하는 처리, 및 스텝(S104 및 S204)의 구도를 제안하는 처리에 대하여 더 자세하게 설명한다. 구도의 판정 및 구도의 제안은 도 2의 타이밍 검출부(28)가 행한다. 도 9는 타이밍 검출부(28)의 구성을 나타내는 도면이다. 도면에 나타낸 바와 같이, 타이밍 검출부(28)는 인물 추출 수단(41), 비인물 추출 수단(42), 음성 해석 수단(43), 구도 판정 수단(44) 및 구도 제안 수단(45)에 의해 구성된다. 또한, 타이밍 검출부(28)는 수단(41~45)으로 서 기능하는 LSI에 의해 구성된 회로로 해도 좋고, 수단(41~45)의 처리를 실행하는 소프트웨어 프로그램이 구비된 마이크로 컴퓨터로 해도 좋다.
인물 추출 수단(41)은 메모리(22)에 기억되어 있는 화상 데이터를 판독하여 화상 데이터 내의 인물 영역을 탐색한다. 본 실시형태에서는 얼굴의 탐색을 행함으로써 인물을 검출한다. 인물 추출 수단(41)은 얼굴을 검출했을 경우에 일련 번호 등의 식별자를 부여한 후 얼굴 영역의 면적과 얼굴을 포함하는 신체 전체를 나타내는 영역(이하, 전신 영역)의 면적 및 중심 좌표를 산출한다. 중심 좌표는 얼굴의 면적이 소정값을 초과할 때는 얼굴 영역의 중심 좌표를, 소정값 이하일 때는 전신 영역의 중심 좌표를 구한다. 예를 들면, 도 10A 및 도 10B의 예시와 같이 얼굴 영역이 비교적 큰 경우에는 각각의 얼굴 영역의 중심 좌표가 산출된다. 또한, 도 10C 및 도 10D와 같이 얼굴 영역이 작은 경우에는 십자선으로 나타낸 전신 영역의 중심 좌표가 산출된다. 인물 추출 수단(41)은 전체 영역의 탐색을 끝내면 검출된 인물의 수, 위치, 크기를 나타내는 정보로서 검출된 인물의 총수, 각 인물의 얼굴 영역의 범위 및 면적, 전신 영역의 범위 및 면적, 중심 좌표를 타이밍 검출부(28)가 구비하는 메모리(도시되지 않음)에 기억한다.
또한, 얼굴을 탐색해 검출하는 수법으로는 일본 특허 공개 2001-51338호 공보에 소개되어 있는 바와 같이 피부색 영역을 얼굴로서 검출하는 방법, 머리나 눈이나 입 등 기하학적 특징을 갖는 파트의 유무에 의해 얼굴인지의 여부를 판별하여 얼굴을 검출하는 방법, 및 그외 여러가지 방법이 알려져 있다. 인물 추출 수단(41)이 실행하는 얼굴 검출 처리에는 공공히 알려진 모든 수법이 이용될 수 있다.
인물 추출 수단(41)은 계속하여 검출된 얼굴의 표정을 식별한다. 단, 표정의 식별은 자동 촬영 모드의 상세 설정에서 표시 식별 기능이 ON으로 설정되어 있을 때만 실행한다. 또는, 검출된 얼굴의 크기가 소정값 이상일 때만 표정의 식별을 행하는 것으로 해도 좋다. 본 실시형태에서 인물 추출 수단(41)은 도 11A, 도 11B, 도 11C, 도 11D에 예시한 웃는 얼굴, 분노한 얼굴, 우는 얼굴, 놀란 얼굴의 4개의 표정을 식별한다. 도면의 예로부터 명확해지는 바와 같이, 이들의 표정은 각각 눈이나 입의 열림 상태, 눈썹이나 구각의 오름 상태에 특징이 있어서 그 부위의 화상적 특징에 의거하여 표정을 식별할 수 있다. 표정을 식별하는 수법은 일본 특허 공개 2001-51338호 공보에 소개되어 있는 수법을 비롯하여 여러가지 방법이 알려져 있고, 인물 추출 수단(41)이 실행하는 표정 식별 처리에는 공공히 알려진 모든 수법이 이용될 수 있다. 인물 추출 수단(41)은 식별한 표정을 타이밍 검출부(28)가 구비한 메모리에 기억한다.
또한, 인물 추출 수단(41)은 검출된 얼굴을 가지는 인물의 제스처를 식별한다. 제스처의 식별은 자동 촬영 모드의 상세 설정에서 제스처 식별 기능이 ON으로 설정되어 있을 때만 실행한다. 또는, 검출된 얼굴의 크기가 소정값 이상일 때는 표정의 식별을 행하고 소정값 이하일 때는 제스처의 식별을 행하는 것으로 해도 좋다.
본 실시형태에서 타이밍 검출부(28)가 구비한 메모리에는 잘 알려져 있는 제스처가 그 제스처의 기하학적 특징을 의미하는 데이터로 미리 등록되어 있다. 예를 들면, 도 12A에 예시한 검지와 중지만을 세우는 제스처(피스), 도 12B에 예시한 양 팔을 올리는 제스처(만세, 승리의 포즈), 그외 엄지와 검지로 원을 이루는 제스처(OK 또는 일본의 엔), 엄지만을 세워서 위로 향하는 제스처(굿) 등이 등록되어 있다. 인물 추출 수단(41)은 메모리(22)로부터 판독한 화상 데이터의 얼굴 주변에서 추출된 기하학적 특징을 등록 데이터와 대조한다. 그리고, 추출된 특징이 등록되어 있는 제스처의 특징과 일치했을 때에는 그 제스처 이름 또는 미리 정해져 있는 제스처의 식별자를 타이밍 검출부(28)가 구비한 메모리에 기억한다.
제스처를 식별하는 수법도 일본 특허 공개 2001-51338호 공보에 소개되어 있는 수법을 비롯하여 여러가지 방법이 알려져 있다. 인물 추출 수단(41)이 실행하는 제스처 식별 처리에는 공공히 알려진 모든 수법이 이용될 수 있다.
인물 추출 수단(41)은 계속해서 얼굴 영역의 합계 면적을 산출한다. 예를 들면, 도 10A ~ 도 10D의 예에서 각각 점선 테두리로서 표시한 영역의 면적의 합계를 산출한다. 단, 전신 영역의 면적의 합계를 산출하는 것으로 해도 좋다.
인물 추출 수단(41)은 산출된 영역 면적의 합계가 소정의 문턱값을 상회할 때 타이밍 검출부(28)가 구비하는 메모리에 기억해 둔 얼굴의 수, 얼굴 영역의 면적, 전신 영역의 면적, 중심 좌표, 표정 및 제스처의 정보를 구도 판정 수단(44)에만 공급한다. 한편, 산출된 영역 면적의 합계가 소정의 문턱값 이하일 때는 메모리에 기억해 둔 정보를 구도 판정 수단(44)과 비인물 추출 수단(42)에 공급한다.
비인물 추출 수단(42)은 화상 데이터에 포함되는 인물 이외의 주요 피사체를 추출한다. 본 실시형태에서 비인물 추출 수단(42)은 메모리(22)에 기억되어 있는 화상 데이터를 판독한 화상 데이터의 얼굴 또는 동체를 포함하는 인물에 상당하는 영역의 화소값을 0으로 바꿔 놓는 등으로 화상 데이터로부터 인물 영역의 데이터를 소거한다. 예를 들면, 판독한 화상 데이터가 도 13A에 예시된 바와 같이 인물(50a, 50b)과 인물 이외의 피사체(51)를 포함하는 화상 데이터라고 한다. 또한, 인물 추출 수단(41)으로부터 도면의 점선 테두리로 둘러싸인 영역(52a,52b)에 대하여 중심 등의 정보가 공급되는 것으로 한다. 이 화상 데이터로부터 인물 영역(52a,52b) 내의 화소 데이터를 소거하면, 도 13B에 예시된 바와 같이, 피사체(51)만을 포함하는 화상 데이터를 얻을 수 있다.
계속해서, 비인물 추출 수단(42)은 인물 영역(52a, 52b)의 정보가 소거된 화상 데이터에 대하여 하이패스 필터를 사용한 필터링 처리를 실시한다. 이에 따라, 도 13C에 예시된 바와 같이, 피사체(51)의 에지 부분이 추출된 에지 화상(53)을 얻을 수 있다. 에지 화상(53)은 화상 데이터에 포함되어 있는 인물 이외의 피사체의 윤곽으로 이루어지는 화상이므로 이 화상을 해석함으로써, 도 13D에 예시된 바와 같이, 피사체(53)가 배치된 대략의 영역(54)을 식별할 수 있다. 비인물 추출 수단(42)은 식별된 영역(54)의 면적 및 중심 좌표를 산출하고 구도 판정 수단(44)에 공급한다.
인물 이외의 피사체 영역을 식별하는 방법으로서는 하이패스 필터에 의한 필터링 처리을 대신하여 퓨리에 변환을 이용하여 특정의(에지에 상당하는) 주파수 성분만을 취출하는 방법도 생각된다. 또한, 주파수 해석이 아닌 색의 정보를 이용한 해석을 행함으로써 주요 피사체를 추출하는 방법도 생각된다. 예를 들면, 화소값이 소정의 색을 나타내는 값일 때는 그대로의 값으로 하고 소정의 색 이외의 색을 나 타내는 값일 때는 화소값을 0 또는 1로 바꾸어 놓는다. 이에 따라, 화상은 2개의 영역으로 분할되어 그 소정의 색의 피사체 또는 그 소정의 색 이외의 피사체가 배치되어 있는 영역이 추출된다. 이밖에, 인물과 함께 촬영되기 쉬운 대상(예를 들면 펫으로서 잘 길러지는 동물 등)에 대해서는 Adaboost 알고리즘 등의 학습에 의거하는 판별 알고리즘을 이용하여 식별을 행하고 피사체 영역을 나타내는 데이터를 생성할 수도 있다.
또한, 화상의 선예도는 화상 데이터를 취득했을 때의 셔터 스피드에 의존하는 경우가 있고 화상의 색은 측광치나 조리개 등에 의존하는 경우가 있다. 이것 때문에, 화상 해석을 행할 때에 화상 데이터가 생성되었을 때의 각종 조정값, 설정값을 고려함으로써 피사체 영역의 식별이 용이해지는 경우도 있다.
음성 해석 수단(43)은 마이크(4)로부터 입력되는 음성을 해석하고 이하의 음성을 검출한다. 단, 본 실시형태에서 이하에 설명하는 처리는 음성 해석 기능이 ON으로 설정되어 있을 때만 실행된다. 첫번째로 음성 해석 수단(43)은 마이크(4)로부터 입력되는 음성의 음량을 상시 측량하고 소정의 문턱값과 비교한다. 도 14는 횡축을 시간, 세로축을 음량으로 한 그래프를 나타내고 있다. 음성 해석 수단(43)은 도 14의 예시에 있어서의 시점(T), 즉 음량이 급격히 변화되어 문턱값(Th)을 초과한 시점을 검출한다. 스포츠 관전시의 촬영이나 파티에서의 촬영에서는, 예를 들면 축구의 골 씬이나 결혼식의 건배 씬 등의 환성이 오른 순간이 셔터 찬스인 경우가 많다. 따라서, 음량이 급격히 변화된 시점을 검출함으로써 셔터 찬스를 검출할 수 있다. 또는, 음량이 변화된 것을 검출하는 것이 아닌 음량이 문턱값(Th)을 초과하 는 것을 검출하는 것만으로도 좋다. 환성이 오르고 있는 사이는 항상 셔터 찬스라고 생각할 수도 있기 때문이다. 반대로, 예를 들면 아기의 잠자는 얼굴을 촬영하고 싶을 경우 등의 조용해졌을 때가 셔터 찬스인 경우에는 음량이 문턱값을 하회하는 시점 또는 하회하는 상황을 검출해도 좋다. 음량을 해석한 결과 어느 시점을 검출할지는 설정에 의해 변경될 수 있다.
또한, 음성 해석 수단(43)은 음성이 의미하는 프레이즈를 식별하여 미리 등록되어 있는 특정의 프레이즈와 대조를 행한다. 이 등록 데이터는 타이밍 검출부(28)가 구비한 메모리에 기억되어 있고, 예를 들면, 「세이, 치즈」, 「건배」 등의 셔터 릴리즈 버튼을 누르는 타이밍과 동기해서 발생할 가능성이 높은 프레이즈가 등록되어 있다. 또한, 본 실시형태에서는 등록 데이터의 하나로서 목소리를 등록할 수 있고, 또한 목소리와 프레이즈를 대응시켜 붙여서 등록할 수도 있다. 음성 해석 수단(43)은 이들의 등록 데이터와 대조를 행함으로써 (a) 등록 프레이즈가 음성으로서 발생한 시점, (b) 등록자가 음성을 발생한 시점, (c) 등록자가 등록 프레이즈를 음성으로서 발생한 시점을 검출할 수 있다. (a), (b), (c)의 어느 시점을 검출할지는 원칙적으로 설정에 의해 결정된다. 단, 등록 데이터의 등록 상황에 따라 설정과 다른 처리를 실행해도 좋다. 예를 들면, 검출하고 싶은 시점으로서 (c)가 설정되어 있어도 목소리가 등록되지 않으면 (a)의 시점을 검출하도록 한다.
또한, 음량에 의거하는 검출 처리와 프레이즈의 대조에 의거하는 검출 처리를 양쪽 모두 실행할지, 한쪽만 실행할지, 한쪽만 실행한다면 어느 쪽을 실행할지는 설정에 의존한다.
계속해서, 구도 판정 수단(44)의 처리에 대하여 설명한다. 도 9에 나타낸 바와 같이, 구도 판정 수단(44)에는 메모리(22)로부터 판독한 화상 데이터, 인물 추출 수단(41) 및 비인물 추출 수단(42)에 의한 추출 결과, 및 음성 해석 수단(43)에 의한 검출 결과가 공급된다. 단, 추출이나 검출이 행해지지 않았을 때에는 공급되는 정보가 없는 것을 나타내는 값(예를 들면, 0)이 입력된다.
도 15는 구도 판정 수단(44)의 처리의 일례를 나타내는 플로우 챠트이다. 구도 판정 수단(44)에 대하여는 인물 추출 수단(41)으로부터 각 인물의 얼굴 영역의 범위 및 면적, 전신 영역의 범위 및 면적, 인물의 중심 좌표, 표정, 제스처의 정보가, 비인물 추출 수단(42)으로부터 인물 이외의 피사체의 범위, 면적 및 중심 좌표의 정보가, 또한 음성 해석 수단(43)으로부터 음성의 검출 결과의 정보가 공급되는 것으로 한다.
구도 판정 수단(44)은 우선, 인물을 포함하는 피사체의 배치의 밸런스를 평가한다(S301). 인물 추출 수단(41)이 N명(N은 정수)의 인물을 검출하고, 비인물 추출 수단(42)이 M개(M은 정수)의 피사체를 검출했다고 하면 구도 판정 수단(44)은 추출된 각각의 인물 영역 또는 피사체 영역의 중심 좌표에서 N+M개의 영역 전체의 중심 좌표를 산출한다. 예를 들어, 도 13A ~ 도 13D에 예시한 화상이면, 도 16에 나타낸 바와 같이, 인물 영역(52a,52b)의 중심(g1,g2)과 피사체 영역(54)의 중심(g3)의 좌표에 의거하여 3개의 영역의 중심(G)의 좌표를 산출한다. 그리고, 중심(G)이 화상 중앙의 소정 범위(55) 내에 있으면 배치 밸런스가 좋다고 판단하고, 소정 범위(55) 외에 있으면 배치 밸런스가 나쁘다고 판단한다.
또한, N+M개의 영역 전체의 중심 좌표를 산출할 때에는 각 영역의 중심에 그 대상의 면적에 따른 가중치를 주고나서 중심 좌표를 구해도 좋다. 면적의 큰 대상일수록 가중치를 크게 하면 영역 전체의 중심은 면적이 큰 대상에 가까운 위치가 된다. 예를 들면, 도 17의 예시에서는 각 영역에서 균등한 가중치를 주어서 구한 경우의 중심은 범위(55) 외의 점(GA)이 되고 배치 밸런스는 나쁘다고 판단된다. 그러나, 면적의 큰 영역일수록 가중치를 크게 하는 산출 방법에서 산출되는 중심은 범위(55) 내의 점(GB)이 되고 배치 밸런스는 좋다고 판단된다.
또한, 구도 판정 수단(44)은 일부의 피사체에 관해서 배치 밸런스뿐만 아니라 회전 흔들림의 평가도 행한다. 여기서, 회전 흔들림은 화상에 포함되는 피사체가 향하는 곳이나 방향이 실제 세계에 있어서의 피사체가 향하는 곳이나 방향과 다른 것을 말한다. 예를 들면 수직으로 서있는 고층 빌딩이 화상 중에 비스듬히 배치되어 있을 경우에 회전 흔들림이 있다고 판정한다. 비인물 추출 수단(42)이 학습에 의거하는 판별 알고리즘을 이용한 피사체 추출을 행하는 형태에서 비인물 추출 수단(42)은 피사체의 윤곽뿐만 아니라 그 피사체의 종류를 판별할 수 있다. 그리고, 그러한 피사체에 관해서는 비인물 추출 수단(42)으로부터 구도 판정 수단(44)으로 피사체의 종류를 나타내는 정보가 공급된다. 구도 판정 수단(44)은 추출된 피사체가 고층 빌딩이나 수평선과 같이 실제 세계에서 수직 또는 수평으로 배치된 대상일 때에는 추출된 피사체가 향하는 곳이나 방향을 산출하고 회전 흔들림의 유무를 판정한다.
구도 판정 수단(44)은 스텝(S302)에서 배치 밸런스가 나쁘다고 판단했을 때, 또는 회전 흔들림이 있다고 판단했을 때에 구도가 나쁘다(NG)라는 판정 결과를 출력한다(S306).
구도 판정 수단(44)은 배치 밸런스가 좋고 회전 흔들림도 없다고 판단했을 때에 인물 추출 수단(41)으로부터 공급된 표정의 정보에 의거하여 인물의 표정이 셔터 릴리즈 버튼을 누르기에 적합한 특정의 표정인지의 여부를 판정한다(S303). 또는, 직전에 공급된 표정의 정보와 대조하여 표정에 변화가 있었는지의 여부를 판정한다. 단, 표정의 판정은 얼굴 영역의 면적이 소정값 이상일 때만 행하는 것으로 해도 좋다. 특정의 표정인(또는 변화가 있는) 경우에는 구도가 좋다(OK)라는 판정 결과를 출력한다(S307).
표정이 특정의 표정이 아닌(또는 변화가 없는) 경우에 구도 판정 수단(44)은 인물 추출 수단(41)으로부터 공급된 제스처의 정보에 의거하여 인물이 셔터 릴리즈 버튼을 누르기에 적합한 제스처를 하고 있는지의 여부를 판정한다(S304). 또는, 직전에 공급된 제스처의 정보와 대조하여 인물의 움직임에 변화가 있었는지의 여부를 판정한다. 단, 제스처의 판정은 인물 영역의 면적이 소정값 이상의 때만 행하는 것으로 해도 좋다. 특정의 제스처 또는 움직임이 있는 경우에는 구도가 좋다라는 판정 결과를 출력한다 (S307).
특정의 제스처 또는 움직임이 없는 경우에 구도 판정 수단(44)은 음성 해석 수단(43)으로부터 공급된 정보에 의거하여 특정의 음성이 검출되는지의 여부를 판정한다(S305). 그리고, 특정의 음성이 검출되지 않는 경우에는 구도가 나쁘다라는 판정 결과를 출력하고(S306), 특정의 음성이 검출되는 경우에는 구도가 좋다라는 판정 결과를 출력한다(S307).
구도 판정 수단(44)이 구도가 좋다라는 판정 결과를 출력했을 경우 타이밍 검출부(28)는 그 판정 결과를 전체 제어부(30)에 송신한다. 이 판정 결과를 수신한 전체 제어부(30)는 디지털 카메라(1)가 자동 촬영 모드에 설정되어 있을 때면 기록 판독 제어부(27)에 대하여 메모리(22)에 기억되어 있는 화상 데이터를 메모리 카드(7)에 기록하도록 지시한다. 또한, 촬영 어시스트 모드에 설정되어 있을 때면 표시 제어부(26)에 대하여 모니터에 셔터 찬스의 도래를 알리는 마크 또는 메시지를 표시하도록 지시한다(도 5). 또는, LED 제어부(19)에 대하여 LED(9)의 점등을 지시한다(도 6).
또한, 본 실시형태에서 기록 판독 제어부(27)는 구도의 판정에 이용한 정보를 화상 데이터의 부속 정보로서 메모리 카드(7)에 기록한다. 상세하게는, Exif 파일의 태그 부분에 기록한다. 한편, 구도 판정 수단(44)은 구도가 나쁘다고 판정했을 때 구도 제안 수단(45)에 구도의 판정에 이용한 정보를 공급한다. 구도 제안 수단(45)은 이들의 정보를 이용하여 이하에 설명하는 처리를 실행한다.
구도 제안 수단(45)은 구도 판정 수단(44)으로부터 공급된 정보를 해석하고 구도가 나쁘다고 판정된 화상에 대하여 보다 바람직한 구도를 제안한다. 여기서 구도를 제안한다는 화상에 포함되는 피사체에 대하여 구도 판정의 판정 기준을 충족시키도록 배치를 결정하는 것을 의미한다. 결정된 구도는 그 구도의 화상을 취득하기 위해 실행해야 할 처리의 정보와 함께 출력된다. 예를 들면, 도 18A에 예시한 바와 같이, 촬영된 화상으로부터 추출된 영역(52a,52b,54)이 좌측 아래에 치우쳐 배치되어 있는 경우, 도 18B에 예시한 바와 같이 영역(52a,52b,54)의 중심(G)이 화상의 중앙에 배치되는 구도를 제안한다. 또는, 도 18C에 예시한 바와 같이 영역( 52a,52b,54)의 중심(G)이 화상의 중앙에 배치되고, 또한 피사체가 보다 크게 비치는 구도를 제안한다. 그리고, 그 구도의 화상을 취득하기 위해 실행해야 할 처리의 정보로서 2종류의 정보를 출력한다.
구도 제안 수단(45)이 출력하는 제 1 정보는 촬영에 의해 취득된 화상 데이터를 화상 처리에 의해 바람직한 구도의 화상 데이터로 변환할 때 필요한 정보이다. 예를 들면, 도 18B의 예에서는 트리밍 범위(도면의 굵은 테두리)와 중심(G)의 이동 방향(이동 벡터), 도 18C의 예에서는 트리밍 범위와 중심의 이동 방향, 확대 배율 등의 정보가 출력된다.
구도 제안 수단(45)이 출력하는 제 2 정보는 재촬영에 의해 보다 바람직한 구도의 화상 데이터를 취득할 때 필요한 정보이다. 예를 들면, 도 18B의 예에서는 카메라를 보다 왼쪽으로 향하는 조작을 나타내는 정보가 출력된다. 또한, 도 18C의 예에서는 카메라를 보다 왼쪽으로 향하는 조작, 및 설정해야 할 촬영 배율의 정보가 출력된다.
이밖에, 구도가 나쁘다고 판정되는 원인에는 회전 흔들림이 있지만, 회전 흔들림의 경우에는 제 1 정보로서 경사를 수정할 때의 회전 방향 및 각도의 정보가,또한 제 2 정보로서 카메라를 왼쪽 또는 오른쪽으로 기울여야 할 것을 나타내는 정보가 출력된다. 또한, 구도가 나쁘다고 판정된 요인이 표정, 제스처 또는 음성인 경우에는 화상 처리에 의한 수정은 행할 수 없으므로 판정 요인이 표정, 제스처 또 는 음성인 것을 나타내는 정보가 출력된다.
구도 제안 수단(45)이 출력한 상기 각 정보는 전체 제어부(30)로 송신된다. 이 판정 결과를 수신한 전체 제어부(30)는 디지털 카메라(1)가 자동 촬영 모드, 촬영 어시스트 모드 중 어느 것으로 설정될지를 판단하고 각각의 모드에 따른 처리를 행한다.
디지털 카메라(1)가 자동 촬영 모드로 설정되어 있을 때 전체 제어부(30)는 화상 처리부(25)에 대하여 메모리(22)로부터 화상 데이터를 판독하여 구도를 개선하기 위해서 필요한 화상 처리(트리밍, 이동, 확대축소, 회전 등)를 실행하도록 지시한다. 또한, 표시 제어부(26)에 대하여 화상 처리부(25)에 의한 처리완료 화상 데이터를 모니터(6)에 표시하도록 지시한다. 또한, 기록 판독 제어부(27)에 대하여 화상 처리부(25)에 의한 처리완료 화상 데이터를 메모리 카드(7)에 기록하도록 지시한다.
본 실시형태에서 표시 제어부(26)는 상기 지시를 받았을 때에, 도 19에 예시한 바와 같이, 촬영된 그대로의 구도의 화상 데이터(촬영 화상)를 기록할지, 제안된 구도의 화상 데이터(제안 화상)를 기록할지, 촬영 화상과 제안 화상의 모두를 기록할지를 유저가 선택하도록 하기 위한 선택 화면을 표시한다. 그리고, 기록 판독 제어부(27)는 이 선택 화면에서 선택된 화상 데이터를 메모리 카드(7)에 기록한다. 단, 이러한 선택 화면을 표시하지 않고 무조건 제안 화상만, 또는 촬영 화상과 제안 화상의 모두를 기록하는 것으로 해도 좋다.
또한, 본 실시형태에서 상기 지시를 수신한 기록 판독 제어부(27)는 구도 판 정 수단(44)이 구도 판정에 이용한 정보, 즉 N+M개의 영역 전체의 중심 좌표, 회전 흔들림을 판정한 피사체의 방향, 인물의 표정 및 제스처, 검출된 음성 등의 정보를 화상 데이터의 부속 정보로서 메모리 카드(7)에 기록한다. 또한, 구도 제안 수단(45)이 출력하는 제 1 정보, 즉 촬영에 의해 취득된 화상 데이터를 화상 처리에 의해 바람직한 구도의 화상 데이터로 변환할 때에 필요한 정보도 화상 데이터의 부속 정보로서 메모리 카드(7)에 기록한다. 상세하게는, 이러한 정보는 Exif 파일의 태그 부분에 기록된다.
Exif 파일의 태그 부분에 기록된 정보는 퍼스널 컴퓨터를 사용하여 화상을 편집할 때 이용할 수 있다. 예를 들면, 촬영 화상과 구도 제안 수단(45)이 출력한 제 1 정보가 있으면 제안 화상으로 동등한 화상을 퍼스널 컴퓨터상에서 생성할 수 있으므로 제안 화상의 기록을 행하지 않고 화상 파일의 파일 사이즈를 억제를 수 있다. 또한, 구도 제안 수단(45)이 출력한 제 1 정보를 기초로 하면서 조금 수정을 가함으로써 구도 제안 수단(45)이 제안한 구도와 다른 구도의 화상을 생성할 수도 있다.
한편, 디지털 카메라(1)가 촬영 어시스트 모드에 설정되어 있을 때에 전체 제어부(30)는 화상 처리부(25)에 대하여 메모리(22)로부터 화상 데이터를 판독하여 구도를 개선하기 위해서 필요한 화상 처리(트리밍, 이동, 확대축소, 회전 등)를 실행하도록 지시한다. 또한, 표시 제어부(26)에 대하여 화상 처리부(25)에 의한 처리완료 화상 데이터와 구도 제안 수단(45)이 출력한 제 2 정보에 의거하여 생성한 마크 또는 메시지를 표시하도록 지시한다. 이에 따라, 도 7 및 도 8을 참조하여 설명 한 어시스트 표시가 행하여진다.
본 실시형태에서 디지털 카메라를 자동 촬영 모드로 설정하면 촬영된 화상의 배치 밸런스가 좋고, 또한 소정의 표정, 제스처 또는 음성이 검출되었을 때 자동적으로 화상 데이터가 메모리 카드에 기록된다. 이것 때문에, 촬영에 익숙하지 않은 사람이여도 항상 좋은 구도의 화상을 취득할 수 있다. 또한, 소정의 음성이 검출된 것만으로는 디지털 카메라는 반응하지 않으므로 카메라를 피사체로 향하기 전에 촬영 동작이 행해지거나 우연히 가까이 있었던 사람의 목소리에 반응하여 무용한 촬영 동작이 행해지는 경우는 없다. 다시 말해, 음성을 트리거로 하는 자동 촬영의 편리성을 확보하면서 무용한 촬영이 행해지는 부적합을 해소할 수 있다.
또한, 촬영 어시스트 모드에서는 촬영자에게 셔터 찬스가 보고된다. 따라서, 보고된 타이밍에 셔터 릴리즈 버튼을 누르는 것만으로 간단히 좋은 구도의 화상을 취득할 수 있고 자동 촬영으로 동등한 편리성을 누릴 수 있다. 이 보고도 소정의 음성이 검출되는 것만으로는 행해지지 않는다. 촬영된 화상의 배치 밸런스가 좋고, 또한 구도가 좋은 것을 시사하는 표정 변화, 제스처, 음성 등이 검출되었을 때에 처음으로 셔터 찬스인 것이 보고되므로 잘못한 보고가 이루어지는 일은 없다.
또한, 좋은 구도의 화상이 얻어질 수 없을 때에는 좋은 구도의 화상을 얻을 수 있도록 촬상부의 동작이 제어되거나 얻어진 화상에 대하여 화상 처리가 실시되므로 유저는 서있는 위치를 바꾸거나 카메라를 준비하는 방식을 고치거나 줌 배율 등의 설정을 조정하지 않아도 좋은 구도의 화상을 취득할 수 있다.
또한, 상기 실시형태에서는 영역의 중심 좌표를 산출하여 구도를 판정 또는 제안하는 방법 등의 몇개의 판정/제안 방법을 예시했지만, 구도가 만족시켜야 할 조건, 조건 판정으로 이용하는 데이터는 그 외에도 여러가지가 생각되고 상기 실시형태의 예시에 한정되는 것이 아니다. 또한, 상기 실시형태의 설명에서는 정지 화상 촬영을 행할 경우를 예시하면서 설명하고 있지만, 본 발명은 동화상 촬영에 있어서 기록을 시작하는 타이밍을 결정할 때에도 유용하다.
도 1A는 디지털 카메라의 외관을 나타내는 정면도이다.
도 1B는 디지털 카메라의 외관을 나타내는 배면도이다.
도 2는 디지털 카메라의 내부 구성을 나타내는 도면이다.
도 3은 디지털 카메라의 동작 개요를 나타내는 플로우 챠트이다(자동 촬영 모드).
도 4는 디지털 카메라의 동작 개요를 나타내는 플로우 챠트이다(촬영 어시스트 모드).
도 5는 타이밍의 보고 예를 나타내는 도면이다.
도 6은 타이밍의 다른 보고 예를 나타내는 도면이다.
도 7은 어시스트 표시의 예를 나타내는 도면이다.
도 8은 어시스트 표시의 다른 예를 나타내는 도면이다.
도 9는 타이밍 검출부의 구성을 나타내는 도면이다.
도 10A는 얼굴의 검출 처리에 대하여 설명하기 위한 도면이다.
도 10B는 얼굴의 검출 처리에 대하여 설명하기 위한 도면이다.
도 10C는 얼굴의 검출 처리에 대하여 설명하기 위한 도면이다.
도 10D는 얼굴의 검출 처리에 대하여 설명하기 위한 도면이다.
도 11A는 표정 식별 처리에 대하여 설명하기 위한 도면이다.
도 11B는 표정 식별 처리에 대하여 설명하기 위한 도면이다.
도 11C는 표정 식별 처리에 대하여 설명하기 위한 도면이다.
도 11D는 표정 식별 처리에 대하여 설명하기 위한 도면이다.
도 12A는 제스처 식별 처리에 대하여 설명하기 위한 도면이다.
도 12B는 제스처 식별 처리에 대하여 설명하기 위한 도면이다.
도 13A는 인물 이외의 피사체의 추출 처리에 대하여 설명하기 위한 도면이다.
도 13B는 인물 이외의 피사체의 추출 처리에 대하여 설명하기 위한 도면이다.
도 13C는 인물 이외의 피사체의 추출 처리에 대하여 설명하기 위한 도면이다.
도 13D는 인물 이외의 피사체의 추출 처리에 대하여 설명하기 위한 도면이다.
도 14는 음성 해석의 일례를 나타내는 도면이다.
도 15는 구도 판정 처리의 일례를 나타내는 플로우 챠트이다.
도 16은 구도 판정 처리에 대하여 설명하기 위한 도면이다.
도 17은 구도 판정 처리에 대하여 설명하기 위한 도면이다.
도 18A는 구도 제안 처리에 대하여 설명하기 위한 도면이다.
도 18B는 구도 제안 처리에 대하여 설명하기 위한 도면이다.
도 18C는 구도 제안 처리에 대하여 설명하기 위한 도면이다.
도 19는 기록 화상 선택 화면의 일례를 나타내는 도면이다.

Claims (51)

  1. 정경을 촬영하고 상기 정경을 나타내는 화상 데이터를 생성하는 촬상 수단, 및 상기 촬상 수단에 의해 생성된 화상 데이터를 소정의 기록 매체에 기록하는 기록 수단을 구비한 촬상 장치로서:
    상기 촬상 수단에 의해 생성된 화상 데이터를 해석함으로써 인물을 나타내는 화상 영역을 추출하는 인물 추출 수단;
    상기 촬상 수단에 의해 생성된 화상 데이터의 상기 인물 추출 수단에 의해 추출된 화상 영역 이외의 화상 영역을 해석함으로써 인물 이외의 주요 피사체를 추출하는 비인물 추출 수단;
    상기 인물 추출 수단 및 상기 비인물 추출 수단의 추출 결과에 의거하여 상기 인물 및 상기 인물 이외의 주요 피사체의 배치가 소정의 조건을 충족시키는지의 여부를 평가하고, 상기 배치의 평가에 의거하여 상기 화상 데이터 구도의 양부를 판정하는 구도 판정 수단; 및
    상기 구도 판정 수단의 판정 결과에 의거하여 화상 데이터를 기록하는 타이밍을 결정하는 기록 타이밍 결정 수단을 구비한 것을 특징으로 하는 촬상 장치.
  2. 제 1 항에 있어서,
    상기 기록 타이밍 결정 수단이 결정한 타이밍에 화상 데이터가 기록되도록 상기 기록 수단을 제어하는 기록 제어 수단을 더 구비한 것을 특징으로 하는 촬상 장치.
  3. 제 1 항에 있어서,
    상기 기록 타이밍 결정 수단이 결정한 타이밍의 도래를 보고하는 보고 수단을 더 구비한 것을 특징으로 하는 촬상 장치.
  4. 제 1 항에 있어서,
    상기 인물 추출 수단 및 상기 비인물 추출 수단의 추출 결과를 이용하여 상기 소정의 조건을 충족시키는 상기 인물 및 상기 주요 피사체의 배치를 결정하는 구도 제안 수단, 및
    상기 구도 제안 수단에 의해 결정된 배치에서 상기 인물 및 상기 주요 피사체가 배치된 화상 데이터가 생성되도록 상기 촬상 수단의 동작을 제어하는 촬상 제어 수단을 더 구비한 것을 특징으로 하는 촬상 장치.
  5. 제 1 항에 있어서,
    상기 인물 추출 수단 및 상기 비인물 추출 수단의 추출 결과를 이용하여 상기 소정의 조건을 충족시키는 상기 인물 및 상기 주요 피사체의 배치를 결정하는 구도 제안 수단, 및
    상기 인물 및 상기 주요 피사체의 배치가 상기 구도 제안 수단에 의해 결정된 배치가 되도록 상기 화상 데이터에 대하여 화상 처리를 실시하는 화상 처리 수 단을 더 구비한 것을 특징으로 하는 촬상 장치.
  6. 제 1 항에 있어서,
    상기 기록 수단은 상기 인물 추출 수단 및 상기 비인물 추출 수단의 추출 결과를 상기 화상 데이터와 함께 상기 기록 매체에 기록하는 것을 특징으로 하는 촬상 장치.
  7. 제 1 항에 있어서,
    상기 인물 추출 수단은 상기 화상 데이터에 포함되는 얼굴을 탐색하고, 상기 추출 결과로서 상기 탐색에 의해 검출된 얼굴의 수, 각 얼굴의 위치 및 각 얼굴의 크기를 나타내는 정보를 출력하는 것을 특징으로 하는 촬상 장치.
  8. 제 7 항에 있어서,
    상기 인물 추출 수단은 상기 탐색에 의해 검출된 얼굴의 표정을 식별하고, 식별된 표정을 나타내는 정보를 더 출력하는 것을 특징으로 하는 촬상 장치.
  9. 제 1 항에 있어서,
    상기 인물 추출 수단은 상기 화상 데이터에 포함되는 인물의 제스처를 식별하고, 상기 추출 결과로서 식별된 제스처를 나타내는 정보를 출력하는 것을 특징으로 하는 촬상 장치.
  10. 제 1 항에 있어서,
    상기 비인물 추출 수단은 상기 화상 데이터에 대하여 하이패스 필터를 사용한 필터링 처리를 실시함으로써 상기 주요 피사체를 추출하는 것을 특징으로 하는 촬상 장치.
  11. 제 1 항에 있어서,
    상기 비인물 추출 수단은 상기 화상 데이터에 포함되는 대상 중에서 미리 등록된 소정의 대상을 식별함으로써 상기 대상을 상기 주요 피사체로서 추출하는 것을 특징으로 하는 촬상 장치.
  12. 제 1 항에 있어서,
    입력된 음성을 해석함으로써 음성에 관한 소정의 특징을 검출하는 음성 해석 수단을 더 구비하고,
    상기 구도 판정 수단은 상기 음성 해석 수단에 의해 검출된 음성의 특징과 상기 배치의 평가에 의거하여 상기 화상 데이터 구도의 양부를 판정하는 것을 특징으로 하는 촬상 장치.
  13. 제 12 항에 있어서,
    상기 기록 수단은 상기 인물 추출 수단 및 상기 비인물 추출 수단의 추출 결 과, 및 상기 음성 해석 수단의 검출 결과를 상기 화상 데이터와 함께 상기 기록 매체에 기록하는 것을 특징으로 하는 촬상 장치.
  14. 제 12 항에 있어서,
    상기 음성 해석 수단은 상기 음성의 특징으로서 소정의 음량 변화를 검출하는 것을 특징으로 하는 촬상 장치.
  15. 제 12 항에 있어서,
    상기 음성 해석 수단은 상기 음성의 특징으로서 소정의 음성 프레이즈를 검출하는 것을 특징으로 하는 촬상 장치.
  16. 제 12 항에 있어서,
    상기 음성 해석 수단은 상기 음성의 특징으로서 소정 인물의 목소리의 특징으로 미리 등록된 특징을 검출하는 것을 특징으로 하는 촬상 장치.
  17. 정경을 촬영하고 상기 정경을 나타내는 화상 데이터를 생성하는 촬상 수단, 및 상기 촬상 수단에 의해 생성된 화상 데이터를 소정의 기록 매체에 기록하는 기록 수단을 구비한 촬상 장치의 제어 방법으로서:
    상기 촬상 수단에 의해 생성된 화상 데이터를 해석함으로써 인물을 나타내는 화상 영역을 추출하고;
    상기 촬상 수단에 의해 생성된 화상 데이터의 상기 인물을 나타내는 화상 영역 이외의 화상 영역을 해석함으로써 인물 이외의 주요 피사체를 추출하고;
    추출된 인물 및 주요 피사체의 배치가 소정의 조건을 충족시키는지의 여부를 평가하고;
    상기 배치의 평가에 의거하여 상기 화상 데이터 구도의 양부를 판정하고;
    상기 구도의 양부의 판정 결과에 의거하여 화상 데이터를 기록하는 타이밍을 결정하는 것을 특징으로 하는 촬상 장치의 제어 방법.
  18. 제 17 항에 있어서,
    또한, 결정한 타이밍에 화상 데이터가 기록되도록 상기 기록 수단을 제어하는 것을 특징으로 하는 촬상 장치의 제어 방법.
  19. 제 17 항에 있어서,
    또한, 소정의 출력 수단의 동작을 제어함으로써 상기 결정한 타이밍의 도래를 유저에 보고하는 것을 특징으로 하는 촬상 장치의 제어 방법.
  20. 정경을 촬영하고 상기 정경을 나타내는 화상 데이터를 생성하는 촬상 수단, 및 상기 촬상 수단에 의해 생성된 화상 데이터를 소정의 기록 매체에 기록하는 기록 수단을 구비한 촬상 장치로서:
    상기 촬상 수단에 의해 생성된 화상 데이터를 해석함으로써 인물을 나타내는 화상 영역을 추출하는 인물 추출 수단;
    입력된 음성을 해석함으로써 음성에 관한 소정의 특징을 검출하는 음성 해석 수단;
    상기 인물 추출 수단의 추출 결과 및 상기 음성 해석 수단의 검출 결과에 의거하여 상기 화상 데이터 구도의 양부를 판정하는 구도 판정 수단; 및
    상기 구도 판정 수단의 판정 결과에 의거하여 화상 데이터를 기록하는 타이밍을 결정하는 기록 타이밍 결정 수단을 구비한 것을 특징으로 하는 촬상 장치.
  21. 제 20 항에 있어서,
    상기 기록 타이밍 결정 수단이 결정한 타이밍에 화상 데이터가 기록되도록 상기 기록 수단을 제어하는 기록 제어 수단을 더 구비한 것을 특징으로 하는 촬상 장치.
  22. 제 20 항에 있어서,
    상기 기록 타이밍 결정 수단이 결정한 타이밍의 도래를 보고하는 보고 수단을 더 구비한 것을 특징으로 하는 촬상 장치.
  23. 제 20 항에 있어서,
    상기 기록 수단은 상기 인물 추출 수단의 추출 결과 및 상기 음성 해석 수단의 검출 결과를 상기 화상 데이터와 함께 상기 기록 매체에 기록하는 것을 특징으 로 하는 촬상 장치.
  24. 제 20 항에 있어서,
    상기 음성 해석 수단은 상기 음성의 특징으로서 소정의 음량 변화를 검출하는 것을 특징으로 하는 촬상 장치.
  25. 제 20 항에 있어서,
    상기 음성 해석 수단은 상기 음성의 특징으로서 소정의 음성 프레이즈를 검출하는 것을 특징으로 하는 촬상 장치.
  26. 제 20 항에 있어서,
    상기 음성 해석 수단은 상기 음성의 특징으로서 소정 인물의 목소리의 특징으로 미리 등록된 특징을 검출하는 것을 특징으로 하는 촬상 장치.
  27. 제 20 항에 있어서,
    상기 인물 추출 수단은 상기 화상 데이터에 포함되는 얼굴을 탐색하고, 상기 추출 결과로서 상기 탐색에 의해 검출된 얼굴의 수, 각 얼굴의 위치 및 각 얼굴의 크기를 나타내는 정보를 출력하는 것을 특징으로 하는 촬상 장치.
  28. 제 27 항에 있어서,
    상기 인물 추출 수단은 상기 탐색에 의해 검출된 얼굴의 표정을 식별하고, 식별된 표정을 나타내는 정보를 더 출력하는 것을 특징으로 하는 촬상 장치.
  29. 제 20 항에 있어서,
    상기 인물 추출 수단은 상기 화상 데이터에 포함되는 인물의 제스처를 식별하고, 상기 추출 결과로서 식별된 제스처를 나타내는 정보를 출력하는 것을 특징으로 하는 촬상 장치.
  30. 정경을 촬영하고 상기 정경을 나타내는 화상 데이터를 생성하는 촬상 수단, 및 상기 촬상 수단에 의해 생성된 화상 데이터를 소정의 기록 매체에 기록하는 기록 수단을 구비한 촬상 장치의 제어 방법으로서:
    상기 촬상 수단에 의해 생성된 화상 데이터를 해석함으로써 인물을 나타내는 화상 영역을 추출하고;
    입력된 음성을 해석함으로써 음성에 관한 소정의 특징을 검출하고;
    상기 인물의 추출 결과 및 상기 음성의 검출 결과에 의거하여 상기 화상 데이터 구도의 양부를 판정하고;
    상기 판정의 결과에 의거하여 화상 데이터를 기록하는 타이밍을 결정하는 것을 특징으로 하는 촬상 장치의 제어 방법.
  31. 제 30 항에 있어서,
    또한, 결정한 타이밍에 화상 데이터가 기록되도록 상기 기록 수단을 제어하는 것을 특징으로 하는 촬상 장치의 제어 방법.
  32. 제 30 항에 있어서,
    또한, 소정의 출력 수단의 동작을 제어함으로써 상기 결정한 타이밍의 도래를 유저에 보고하는 것을 특징으로 하는 촬상 장치의 제어 방법.
  33. 정경을 촬영하고 상기 정경을 나타내는 화상 데이터를 생성하는 촬상 수단, 및 상기 촬상 수단에 의해 생성된 화상 데이터를 소정의 기록 매체에 기록하는 기록 수단을 구비한 촬상 장치로서:
    상기 촬상 수단에 의해 생성된 화상 데이터를 해석함으로써 인물을 나타내는 화상 영역을 추출하는 인물 추출 수단;
    상기 촬상 수단에 의해 생성된 화상 데이터의 상기 인물 추출 수단에 의해 추출된 화상 영역 이외의 화상 영역을 해석함으로써 인물 이외의 주요 피사체를 추출하는 비인물 추출 수단;
    상기 인물 추출 수단 및 상기 비인물 추출 수단의 추출 결과에 의거하여 상기 인물 및 상기 인물 이외의 주요 피사체의 배치가 소정의 조건을 충족시키는지의 여부를 평가하고, 상기 배치의 평가에 의거하여 상기 화상 데이터 구도의 양부를 판정하는 구도 판정 수단, 및
    상기 인물 추출 수단 및 상기 비인물 추출 수단의 추출 결과를 이용하여 상 기 소정의 조건을 충족시키는 상기 인물 및 상기 주요 피사체의 배치를 결정하는 구도 제안 수단을 구비한 것을 특징으로 하는 촬상 장치.
  34. 제 33 항에 있어서,
    상기 구도 제안 수단에 의해 결정된 배치에서 상기 인물 및 상기 주요 피사체가 배치된 화상 데이터가 생성되도록 상기 촬상 수단의 동작을 제어하는 촬상 제어 수단을 더 구비한 것을 특징으로 하는 촬상 장치.
  35. 제 33 항에 있어서,
    상기 인물 및 상기 주요 피사체의 배치가 상기 구도 제안 수단에 의해 결정된 배치가 되도록 상기 화상 데이터에 대하여 화상 처리를 실시하는 화상 처리 수단을 더 구비한 것을 특징으로 하는 촬상 장치.
  36. 제 33 항에 있어서,
    상기 구도 판정 수단의 판정 결과에 의거하여 화상 데이터를 기록하는 타이밍을 결정하고, 결정한 타이밍에 화상 데이터가 기록되도록 상기 기록 수단을 제어하는 기록 제어 수단을 더 구비한 것을 특징으로 하는 촬상 장치.
  37. 제 33 항에 있어서,
    상기 구도 판정 수단의 판정 결과에 의거하여 화상 데이터를 기록하는 타이 밍을 결정하고, 결정한 타이밍의 도래를 보고하는 보고 수단을 더 구비한 것을 특징으로 하는 촬상 장치.
  38. 제 33 항에 있어서,
    상기 기록 수단은 상기 인물 추출 수단 및 상기 비인물 추출 수단의 추출 결과를 상기 화상 데이터와 함께 상기 기록 매체에 기록하는 것을 특징으로 하는 촬상 장치.
  39. 제 33 항에 있어서,
    상기 인물 추출 수단은 상기 화상 데이터에 포함되는 얼굴을 탐색하고, 상기 추출 결과로서 상기 탐색에 의해 검출된 얼굴의 수, 각 얼굴의 위치 및 각 얼굴의 크기를 나타내는 정보를 출력하는 것을 특징으로 하는 촬상 장치.
  40. 제 39 항에 있어서,
    상기 인물 추출 수단은 상기 탐색에 의해 검출된 얼굴의 표정을 식별하고, 식별된 표정을 나타내는 정보를 더 출력하는 것을 특징으로 하는 촬상 장치.
  41. 제 33 항에 있어서,
    상기 인물 추출 수단은 상기 화상 데이터에 포함되는 인물의 제스처를 식별하고, 상기 추출 결과로서 식별된 제스처를 나타내는 정보를 출력하는 것을 특징으 로 하는 촬상 장치.
  42. 제 33 항에 있어서,
    상기 비인물 추출 수단은 상기 화상 데이터에 대하여 하이패스 필터를 사용한 필터링 처리를 실시함으로써 상기 주요 피사체를 추출하는 것을 특징으로 하는 촬상 장치.
  43. 제 33 항에 있어서,
    상기 비인물 추출 수단은 상기 화상 데이터에 포함되는 대상 중에서 미리 등록된 소정의 대상을 식별함으로써 상기 대상을 상기 주요 피사체로서 추출하는 것을 특징으로 하는 촬상 장치.
  44. 제 33 항에 있어서,
    입력된 음성을 해석함으로써 음성에 관한 소정의 특징을 검출하는 음성 해석 수단을 더 구비하고,
    상기 구도 판정 수단은 상기 음성 해석 수단에 의해 검출된 음성의 특징과 상기 배치의 평가에 의거하여 상기 화상 데이터 구도의 양부를 판정하는 것을 특징으로 하는 촬상 장치.
  45. 제 44 항에 있어서,
    상기 기록 수단은 상기 인물 추출 수단 및 상기 비인물 추출 수단의 추출 결과, 및 상기 음성 해석 수단의 검출 결과를 상기 화상 데이터와 함께 상기 기록 매체에 기록하는 것을 특징으로 하는 촬상 장치.
  46. 제 44 항에 있어서,
    상기 음성 해석 수단은 상기 음성의 특징으로서 소정의 음량 변화를 검출하는 것을 특징으로 하는 촬상 장치.
  47. 제 44 항에 있어서,
    상기 음성 해석 수단은 상기 음성의 특징으로서 소정의 음성 프레이즈를 검출하는 것을 특징으로 하는 촬상 장치.
  48. 제 44 항에 있어서,
    상기 음성 해석 수단은 상기 음성의 특징으로서 소정 인물의 목소리의 특징으로 미리 등록된 특징을 검출하는 것을 특징으로 하는 촬상 장치.
  49. 정경을 촬영하고 상기 정경을 나타내는 화상 데이터를 생성하는 촬상 수단, 및 상기 촬상 수단에 의해 생성된 화상 데이터를 소정의 기록 매체에 기록하는 기록 수단을 구비한 촬상 장치의 제어 방법으로서:
    상기 촬상 수단에 의해 생성된 화상 데이터를 해석함으로써 인물을 나타내는 화상 영역을 추출하고;
    상기 촬상 수단에 의해 생성된 화상 데이터의 상기 인물을 나타내는 화상 영역 이외의 화상 영역을 해석함으로써 인물 이외의 주요 피사체를 추출하고;
    추출된 인물 및 주요 피사체의 배치가 소정의 조건을 충족시키는지의 여부를 평가하고;
    상기 배치의 평가에 의거하여 상기 화상 데이터 구도의 양부를 판정하고;
    상기 소정의 조건을 충족시키는 추출된 인물 및 주요 피사체의 배치를 결정하는 것을 특징으로 하는 촬상 장치의 제어 방법.
  50. 제 49 항에 있어서,
    또한, 결정된 배치에서 상기 인물 및 상기 주요 피사체가 배치된 화상 데이터가 생성되도록 상기 촬상 수단의 동작을 제어하는 것을 특징으로 하는 촬상 장치의 제어 방법.
  51. 제 49 항에 있어서,
    또한, 상기 인물 및 상기 주요 피사체의 배치가 상기 결정된 배치가 되도록 상기 화상 데이터에 대하여 화상 처리를 실시하는 것을 특징으로 하는 촬상 장치의 제어 방법.
KR1020080020650A 2007-03-05 2008-03-05 촬상 장치 및 그 제어 방법 KR100924685B1 (ko)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2007053644A JP2008219449A (ja) 2007-03-05 2007-03-05 撮像装置およびその制御方法
JP2007053645A JP2008219450A (ja) 2007-03-05 2007-03-05 撮像装置およびその制御方法
JPJP-P-2007-00053646 2007-03-05
JPJP-P-2007-00053645 2007-03-05
JPJP-P-2007-00053644 2007-03-05
JP2007053646A JP2008219451A (ja) 2007-03-05 2007-03-05 撮像装置およびその制御方法

Publications (2)

Publication Number Publication Date
KR20080081859A true KR20080081859A (ko) 2008-09-10
KR100924685B1 KR100924685B1 (ko) 2009-11-03

Family

ID=39741225

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080020650A KR100924685B1 (ko) 2007-03-05 2008-03-05 촬상 장치 및 그 제어 방법

Country Status (2)

Country Link
US (1) US7995106B2 (ko)
KR (1) KR100924685B1 (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100091844A (ko) * 2009-02-11 2010-08-19 삼성전자주식회사 촬상 장치 및 촬상 방법
WO2011081378A2 (en) * 2010-01-04 2011-07-07 Lg Electronics Inc. Display device and control method thereof
KR101539043B1 (ko) * 2008-10-31 2015-07-24 삼성전자주식회사 인물 구도 제안 영상 촬영 장치 및 방법
KR20150134822A (ko) * 2014-05-23 2015-12-02 삼성전자주식회사 카메라를 구비하는 전자 장치의 부가 정보 획득 방법 및 장치
US9503632B2 (en) 2012-12-04 2016-11-22 Lg Electronics Inc. Guidance based image photographing device and method thereof for high definition imaging

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100856273B1 (ko) * 2006-12-12 2008-09-03 삼성전자주식회사 영상 자동 기록 방법 및 장치
JP5053950B2 (ja) * 2008-07-29 2012-10-24 キヤノン株式会社 情報処理方法、情報処理装置、プログラムおよび記憶媒体
CN101930533B (zh) * 2009-06-19 2013-11-13 株式会社理光 在图像采集设备中进行天空检测的装置和方法
JP4844657B2 (ja) * 2009-07-31 2011-12-28 カシオ計算機株式会社 画像処理装置及び方法
US8170332B2 (en) * 2009-10-07 2012-05-01 Seiko Epson Corporation Automatic red-eye object classification in digital images using a boosting-based framework
US8515127B2 (en) 2010-07-28 2013-08-20 International Business Machines Corporation Multispectral detection of personal attributes for video surveillance
US10424342B2 (en) 2010-07-28 2019-09-24 International Business Machines Corporation Facilitating people search in video surveillance
US9134399B2 (en) 2010-07-28 2015-09-15 International Business Machines Corporation Attribute-based person tracking across multiple cameras
US8532390B2 (en) 2010-07-28 2013-09-10 International Business Machines Corporation Semantic parsing of objects in video
US20120105663A1 (en) * 2010-11-01 2012-05-03 Cazier Robert P Haptic Feedback Response
KR101795601B1 (ko) 2011-08-11 2017-11-08 삼성전자주식회사 영상 처리 장치, 영상 처리 방법, 및 컴퓨터 판독가능 저장매체
US20130106683A1 (en) * 2011-10-31 2013-05-02 Elwha LLC, a limited liability company of the State of Delaware Context-sensitive query enrichment
US8959082B2 (en) 2011-10-31 2015-02-17 Elwha Llc Context-sensitive query enrichment
US20130169834A1 (en) * 2011-12-30 2013-07-04 Advanced Micro Devices, Inc. Photo extraction from video
KR101862128B1 (ko) * 2012-02-23 2018-05-29 삼성전자 주식회사 얼굴을 포함하는 영상 처리 방법 및 장치
JP2014086849A (ja) * 2012-10-23 2014-05-12 Sony Corp コンテンツ取得装置及びプログラム
CN103501410B (zh) * 2013-10-08 2017-04-05 百度在线网络技术（北京）有限公司 拍摄的提醒方法、装置及检测模式的生成方法、装置
KR102031874B1 (ko) * 2014-06-10 2019-11-27 삼성전자주식회사 구도 정보를 이용하는 전자 장치 및 이를 이용하는 촬영 방법
CN104902176B (zh) * 2015-05-22 2018-07-06 广东欧珀移动通信有限公司 一种调整拍摄角度的提示方法及终端
CN110115025B (zh) * 2017-03-09 2022-05-20 Oppo广东移动通信有限公司 基于深度的控制方法、控制装置及电子装置

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6377995B2 (en) * 1998-02-19 2002-04-23 At&T Corp. Indexing multimedia communications
JP2000004435A (ja) 1998-06-12 2000-01-07 Canon Inc カメラ制御装置及び方法並びに記憶媒体
JP4341936B2 (ja) 1998-12-25 2009-10-14 カシオ計算機株式会社 撮像方法および撮像装置
US7038715B1 (en) * 1999-01-19 2006-05-02 Texas Instruments Incorporated Digital still camera with high-quality portrait mode
JP4227257B2 (ja) 1999-08-12 2009-02-18 キヤノン株式会社 カメラ
WO2001050416A2 (en) * 2000-01-03 2001-07-12 Amova.Com Automatic personalized media creation system
JP2001305642A (ja) 2000-04-25 2001-11-02 Fuji Photo Film Co Ltd 撮像装置
JP4596214B2 (ja) 2001-06-15 2010-12-08 ソニー株式会社 画像処理装置および方法、記録媒体、並びにプログラム
US7224851B2 (en) * 2001-12-04 2007-05-29 Fujifilm Corporation Method and apparatus for registering modification pattern of transmission image and method and apparatus for reproducing the same
US7821541B2 (en) * 2002-04-05 2010-10-26 Bruno Delean Remote control apparatus using gesture recognition
US7369685B2 (en) * 2002-04-05 2008-05-06 Identix Corporation Vision-based operating method and system
JP3971240B2 (ja) 2002-05-21 2007-09-05 オリンパス株式会社 アドバイス機能付きカメラ
US6919892B1 (en) * 2002-08-14 2005-07-19 Avaworks, Incorporated Photo realistic talking head creation system and method
JP2004294498A (ja) 2003-03-25 2004-10-21 Fuji Photo Film Co Ltd 自動撮影システム
JP2005051541A (ja) 2003-07-29 2005-02-24 Casio Comput Co Ltd 画像撮影処理装置及びプログラム
GB2405948B (en) * 2003-09-12 2006-06-28 Canon Res Ct Europ Ltd Voice activated device
JP4578948B2 (ja) 2003-11-27 2010-11-10 富士フイルム株式会社 画像編集装置および方法並びにプログラム
JP4325385B2 (ja) 2003-12-09 2009-09-02 株式会社ニコン デジタルカメラおよびデジタルカメラの画像取得方法
JP3714350B2 (ja) 2004-01-27 2005-11-09 セイコーエプソン株式会社 画像中の人物候補領域抽出方法及び人物候補領域抽出システム並びに人物候補領域抽出プログラム
JP2005303991A (ja) 2004-03-15 2005-10-27 Fuji Photo Film Co Ltd 撮像装置、撮像方法、及び撮像プログラム
JP4135100B2 (ja) 2004-03-22 2008-08-20 富士フイルム株式会社 撮影装置
JP2005318084A (ja) 2004-04-27 2005-11-10 Fuji Photo Film Co Ltd 撮影装置
JP2006191524A (ja) 2004-12-09 2006-07-20 Nikon Corp 自動フレーミング装置および撮影装置
JP4904691B2 (ja) 2004-12-28 2012-03-28 カシオ計算機株式会社 カメラ装置、及び撮影方法
JP4487781B2 (ja) 2005-01-18 2010-06-23 株式会社ニコン 電子カメラ
JP4741362B2 (ja) 2005-02-25 2011-08-03 富士フイルム株式会社 出力装置、出力方法、及びプログラム
JP2006287749A (ja) * 2005-04-01 2006-10-19 Canon Inc 撮像装置、及びその制御方法
JP4687265B2 (ja) 2005-06-14 2011-05-25 富士ゼロックス株式会社 画像分析装置

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101539043B1 (ko) * 2008-10-31 2015-07-24 삼성전자주식회사 인물 구도 제안 영상 촬영 장치 및 방법
KR20100091844A (ko) * 2009-02-11 2010-08-19 삼성전자주식회사 촬상 장치 및 촬상 방법
WO2011081378A2 (en) * 2010-01-04 2011-07-07 Lg Electronics Inc. Display device and control method thereof
WO2011081378A3 (en) * 2010-01-04 2011-11-17 Lg Electronics Inc. Display device and control method thereof
US8611596B2 (en) 2010-01-04 2013-12-17 Lg Electronics Inc. Display device and control method thereof
US9503632B2 (en) 2012-12-04 2016-11-22 Lg Electronics Inc. Guidance based image photographing device and method thereof for high definition imaging
KR20150134822A (ko) * 2014-05-23 2015-12-02 삼성전자주식회사 카메라를 구비하는 전자 장치의 부가 정보 획득 방법 및 장치

Also Published As

Publication number Publication date
KR100924685B1 (ko) 2009-11-03
US20080218603A1 (en) 2008-09-11
US7995106B2 (en) 2011-08-09

Similar Documents

Publication Publication Date Title
KR100924685B1 (ko) 촬상 장치 및 그 제어 방법
KR101142316B1 (ko) 화상 선택 장치 및 화상 선택 방법
JP4254873B2 (ja) 画像処理装置及び画像処理方法、撮像装置、並びにコンピュータ・プログラム
US8218815B2 (en) Image pick-up apparatus having a function of recognizing a face and method of controlling the apparatus
JP4196714B2 (ja) デジタルカメラ
JP4898475B2 (ja) 撮影制御装置、撮影装置、及び撮影制御方法
US8456538B2 (en) Digital camera with automatic functions
JP4315148B2 (ja) 電子カメラ
JP2008219449A (ja) 撮像装置およびその制御方法
KR101795601B1 (ko) 영상 처리 장치, 영상 처리 방법, 및 컴퓨터 판독가능 저장매체
JP2000350123A (ja) 画像選択装置、カメラ、画像選択方法及び記録媒体
KR20100048600A (ko) 인물 구도 제안 영상 촬영 장치 및 방법
KR20100055946A (ko) 동영상 썸네일 생성 방법 및 장치
US9055212B2 (en) Imaging system, image processing method, and image processing program recording medium using framing information to capture image actually intended by user
TW201102938A (en) Image capturing apparatus, face area detecting method and program recording medium
KR20100081049A (ko) 휴대용 단말기에서 영상 촬영 방법 및 장치
JP4127521B2 (ja) ディジタル・カメラおよびその制御方法
US7796163B2 (en) System for and method of taking image based on objective body in a taken image
JP2003338955A (ja) アドバイス機能付きカメラ
JP4360369B2 (ja) 電子カメラ
JP2008219450A (ja) 撮像装置およびその制御方法
JP2011048295A (ja) 複眼撮影装置及びその姿勢検出方法
JP2008219451A (ja) 撮像装置およびその制御方法
JP5044472B2 (ja) 画像処理装置、撮像装置、画像処理方法及びプログラム
JP2005045601A (ja) 画像撮影装置およびプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121002

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20131001

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20141007

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20151001

Year of fee payment: 7

LAPS Lapse due to unpaid annual fee