WO2023189367A1 - 撮像装置、撮像制御方法、プログラム - Google Patents

撮像装置、撮像制御方法、プログラム Download PDF

Info

Publication number
WO2023189367A1
WO2023189367A1 PCT/JP2023/009113 JP2023009113W WO2023189367A1 WO 2023189367 A1 WO2023189367 A1 WO 2023189367A1 JP 2023009113 W JP2023009113 W JP 2023009113W WO 2023189367 A1 WO2023189367 A1 WO 2023189367A1
Authority
WO
WIPO (PCT)
Prior art keywords
subject
imaging
settings
recognition
recognized
Prior art date
Application number
PCT/JP2023/009113
Other languages
English (en)
French (fr)
Inventor
高弘 佐藤
Original Assignee
ソニーグループ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニーグループ株式会社 filed Critical ソニーグループ株式会社
Publication of WO2023189367A1 publication Critical patent/WO2023189367A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/18Signals indicating condition of a camera member or suitability of light
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders

Definitions

  • the present technology relates to an imaging device, an imaging control method, and a program, and particularly relates to a technology for registering imaging settings for each type of subject.
  • a photographing device has a function of recognizing a specific subject such as a person's face in an image and focusing on the subject (for example, see Patent Document 1).
  • the present technology proposes a technology that can perform imaging based on the object type to be recognized without forcing the user to perform complicated operations.
  • the imaging device includes a settings registration unit that registers imaging settings for each type of subject, a recognition unit that recognizes a subject from an image based on the imaging settings of the subject type to be recognized, and the recognition unit. and an imaging control unit that controls imaging based on the subject recognized by. This makes it possible to recognize and image a subject based on the imaging settings of the subject type to be recognized, simply by having the user register the imaging settings for each subject type in advance.
  • FIG. 1 is a diagram showing the appearance of an imaging device according to the present embodiment.
  • FIG. 1 is a diagram showing the appearance of an imaging device according to the present embodiment.
  • 1 is a diagram showing the internal configuration of an imaging device.
  • FIG. 3 is a diagram showing recognizable parts for each type of subject.
  • FIG. 7 is a diagram showing recognition parts when the recognition target is a subject type "bird.”
  • FIG. 6 is a diagram illustrating the priority when the subject type “animal + bird” is determined as a recognition target. It is a figure explaining the transfer range. It is a figure explaining the transfer range. It is a figure explaining tracking tenacity. It is a figure explaining recognition sensitivity. It is a figure showing a menu screen at the time of AF setting.
  • FIG. 3 is a diagram showing a function menu.
  • FIG. 3 is a diagram showing an imaging standby screen.
  • FIG. 4 is a diagram showing on/off of AF control and recognition targets.
  • 3 is a flowchart showing the flow of a setting registration process for recognition targets and imaging settings.
  • 7 is a flowchart showing the flow of autofocus control processing.
  • FIG. 7 is a diagram showing a display of imaging settings in a modified example.
  • image includes both still images and moving images.
  • image refers not only to the state displayed on the display section, but also to the image data that is not displayed on the display section.
  • subject refers not only to the object imaged by the imaging device 1, but also includes the image of the object captured in the image. Further, the “subject” includes not only people but also various objects such as animals, birds, insects, cars, trains, etc., and also includes parts (parts) of these objects.
  • subject type indicates the type or type of the subject, such as a person, animal, bird, insect, car, or train. Further, one subject type may include a plurality of (two or more) subject types.
  • the subject types may include a separate subject type (kingfisher) that is included in one subject type (bird), such as a relationship between "bird” and "kingfisher.”
  • the "imaging settings” define settings (conditions) related to imaging control, such as settings used when recognizing a subject from an image and settings used when capturing an image.
  • Configuration of imaging device> 1 and 2 are diagrams showing the appearance of an imaging device 1 according to this embodiment. Note that the following description will be made with the subject side as the front and the imager side as the rear.
  • the imaging device 1 includes a camera casing 2 in which necessary parts are arranged inside and outside, and a lens mirror that is detachable from the camera casing 2 and attached to the front part 2a.
  • a cylinder 3 is provided.
  • FIG. 2 shows the camera housing 2 with the lens barrel removed. Note that the lens barrel 3 may be detachably attached as a so-called interchangeable lens, but may be a lens barrel that cannot be removed from the camera housing 2.
  • a rear monitor 4 is arranged on the rear surface portion 2b of the camera housing 2.
  • the rear monitor 4 displays live view images, reproduced images of recorded images, and the like.
  • the rear monitor 4 is configured by a display device such as a liquid crystal display (LCD) or an organic EL (electro-luminescence) display, for example.
  • the rear monitor 4 is rotatable with respect to the camera housing 2.
  • the lower end of the rear monitor 4 can be rotated using the upper end of the rear monitor 4 as a rotation axis so that the lower end of the rear monitor 4 moves rearward.
  • the right end or left end of the rear monitor 4 may be used as a rotation axis.
  • it may be rotatable in directions around a plurality of axes.
  • An EVF (Electric Viewfinder) 5 is arranged on the upper surface 2c of the camera housing 2.
  • the EVF 5 includes an EVF monitor 5a and a frame-shaped enclosure 5b that protrudes rearward so as to surround the upper and left and right sides of the EVF monitor 5a.
  • the EVF monitor 5a is formed using an LCD, an organic EL display, or the like. Note that an optical view finder (OVF) may be provided instead of the EVF monitor 5a.
  • OVF optical view finder
  • buttons include a shutter button (release button), a playback menu activation button, a decision button, a cross key, a cancel button, a zoom key, a slide key, and the like.
  • These operators 6 include various types of operators, such as buttons, dials, and complex operators that can be pressed and rotated.
  • Various types of operators 6 enable, for example, shutter operation, menu operation, playback operation, mode selection/switching operation, focus operation, zoom operation, and parameter selection/setting such as shutter speed and F-number.
  • the operators 6 include, for example, a shutter button 6a, a plurality of custom buttons 6b, an upper button 6c, a lower button 6d, a right button 6e, a left button 6f, a decision button 6g, a menu button 6h, and a function button 6i. .
  • FIG. 3 is a diagram showing the internal configuration of the imaging device 1.
  • the imaging device 12 which is constituted by, for example, a CMOS (Complementary Metal Oxide Semiconductor) sensor or a CCD (Charge Coupled Device) sensor, through an imaging optical system 11, and 12, the signal is photoelectrically converted, and an analog image signal is obtained from the image sensor 12.
  • CMOS Complementary Metal Oxide Semiconductor
  • CCD Charge Coupled Device
  • the imaging optical system 11 is provided with various lenses such as a zoom lens, a focus lens, and a condensing lens, an aperture mechanism, a zoom lens drive mechanism, and a focus lens drive mechanism.
  • a mechanical shutter may also be provided.
  • the image sensor 12 has a plurality of two-dimensional pixels, each having a photodiode (photogate), a transfer gate (shutter transistor), a switching transistor (address transistor), an amplification transistor, a reset transistor (reset gate), etc., on a CMOS substrate, for example.
  • a vertical scanning circuit, a horizontal scanning circuit, and an image signal output circuit are formed.
  • the image sensor 12 may be either a primary color system or a complementary color system, and the analog image signal obtained from the image sensor 12 is a primary color signal of each RGB color or a complementary color system color signal.
  • the image sensor 12 may be configured without a color filter so that the analog image signal obtained from the image sensor 12 is a black and white image signal.
  • the analog image signal from the image sensor 12 is sampled and held for each color signal in an analog signal processing unit 13 configured as an IC (Integrated circuit), and the amplitude is adjusted by AGC (Automatic Gain Control).
  • AGC Automatic Gain Control
  • the image signal is adjusted and converted into a digital image signal by A/D (Analog to Digital) conversion.
  • a digital image signal (hereinafter referred to as image data) from the analog signal processing section 13 is input to the temporary storage section 14 .
  • image data A digital image signal (hereinafter referred to as image data) from the analog signal processing section 13 is input to the temporary storage section 14 .
  • the image sensor 12, the analog signal processing section 13, or even the temporary storage section 14 may be integrated.
  • a frame memory described below as the temporary storage section 14 may be provided within the stacked image sensor.
  • the temporary storage unit 14 includes two frame memories 14A and 14B in this example.
  • Image data from the analog signal processing section 13 is stored alternately in the frame memory 14A and the frame memory 14B. That is, the temporary storage unit 14 stores two consecutively captured image frames.
  • the image data stored in the temporary storage section 14 is sequentially output to the digital signal processing section 15 from the preceding storage frame. That is, image data is sequentially output from the frame memory 14A and the frame memory 14B to the digital signal processing unit 15 alternately in accordance with the imaging order.
  • the digital signal processing unit 15 is configured as an image processing processor using, for example, a DSP (Digital Signal Processor). This digital signal processing section 15 performs various signal processing on input image data. For example, as a camera process, the digital signal processing unit 15 performs preprocessing, synchronization processing, YC generation processing, etc. In addition, the digital signal processing unit 15 performs file formation processing on the image data that has been subjected to these various processes, such as compression encoding for recording and communication, formatting, and generation and addition of metadata, and records the data. Generates files for use and communication. For example, an image file in a format such as JPEG, TIFF (Tagged Image File Format), or GIF (Graphics Interchange Format) is generated as a still image file.
  • JPEG Joint Photographics Interchange Format
  • image files in the MP4 format which is used for recording video and audio in accordance with MPEG-4.
  • image file as raw (RAW) image data.
  • the digital signal processing unit 15 executes resolution conversion processing on image data (input image) that has been subjected to various signal processing, and generates image data with a lower resolution for, for example, live view display. .
  • the memory unit 16 is a buffer memory for image data.
  • This memory section 16 is composed of, for example, a D-RAM (Dynamic Random Access Memory).
  • the image data processed by the digital signal processing section 15 is temporarily stored in the memory section 16, and is transferred to the display section 18, recording control section 17, or communication section 19 at a predetermined timing.
  • the recording control unit 17 performs recording and reproduction on a recording medium such as a nonvolatile memory.
  • the recording control unit 17 performs processing for recording image files such as moving image data and still image data onto a recording medium, for example.
  • the actual form of the recording control section 17 can be considered in various ways.
  • the recording control unit 17 may be configured as a flash memory built into the imaging device 1 and its writing/reading circuit.
  • the recording control unit 17 may also be configured as a card recording/reproducing unit that performs recording/reproducing access to a recording medium that can be attached to and detached from the imaging device 1, such as a memory card (portable flash memory, etc.).
  • the recording control unit 17 may be implemented as a built-in form of an HDD (Hard Disk Drive) in the imaging device 1.
  • HDD Hard Disk Drive
  • the display unit 18 is a display unit that displays various displays to the user, and is, for example, the back monitor 4 or EVF 5 arranged in the housing of the imaging device 1 as shown in FIG.
  • the display unit 18 executes various displays on the display screen based on instructions from the camera control unit 21.
  • the display unit 18 displays a reproduced image of the image data read from the recording medium by the recording control unit 17.
  • the display unit 18 is supplied with image data of a captured image whose resolution has been converted for display by the digital signal processing unit 15, and performs display according to the image data, for example, a live view image.
  • the display unit 18 displays various operation menus, icons, messages, etc., ie, a GUI (Graphical User Interface), on the screen based on instructions from the camera control unit 21.
  • GUI Graphic User Interface
  • the communication unit 19 performs data communication and network communication with external devices by wire or wirelessly. For example, image data (still image files and video files) and metadata are transmitted and output to external information processing devices, display devices, recording devices, playback devices, and the like. Further, the communication unit 19 serves as a network communication unit, and performs various network communications such as the Internet, a home network, and a LAN (Local Area Network), and sends and receives various data to and from servers, terminals, etc. on the network. I can do it.
  • network communications such as the Internet, a home network, and a LAN (Local Area Network)
  • the operation unit 20 collectively represents input devices through which the user performs various operation inputs.
  • the operation unit 20 is various types of operators 6 provided on the casing of the imaging device 1 .
  • the operating elements 6 corresponding to the operating unit 20 include, for example, a touch panel provided on the rear monitor 4 and a touch pad.
  • the operation section 20 may be configured as a receiving section for receiving operation signals from a remote controller. The operation unit 20 detects a user's operation, and a signal corresponding to the input operation is sent to the camera control unit 21.
  • the camera control section 21 is constituted by a microcomputer (arithmetic processing unit) equipped with a CPU (Central Processing Unit).
  • the camera control unit 21 is an imaging control device that controls the operation of the imaging device 1.
  • the memory section 22 stores information and the like used by the camera control section 21 for processing.
  • ROM Read Only Memory
  • RAM Random Access Memory
  • flash memory etc. are comprehensively shown.
  • the memory section 22 may be a memory area built into a microcomputer chip as the camera control section 21, or may be constituted by a separate memory chip.
  • the camera control unit 21 controls the entire imaging device 1 by executing programs stored in the ROM, flash memory, etc. of the memory unit 22.
  • the camera control unit 21 controls various signal processing instructions in the digital signal processing unit 15, imaging operations and recording operations in response to user operations, playback operations of recorded image files, and the like.
  • the camera control unit 21 also controls the operation of the aperture mechanism, the shutter speed of the image sensor 12, and the AGC gain control in the analog signal processing unit 13 as automatic exposure control. Further, the camera control unit 21 performs drive control of a focus lens and a zoom lens in response to autofocus control, manual focus operation, zoom operation, and the like. Further, the camera control unit 21 controls the shutter speed, exposure timing, etc. of the image sensor 12.
  • the camera control section 21 is provided with functions as a setting registration section 31, a recognition section 32, and an imaging control section 33 that perform control processing related to autofocus control.
  • the settings registration unit 31 performs a process of registering imaging settings for each subject type.
  • the recognition unit 32 performs a process of recognizing a subject from an image (input image) based on the imaging settings of the subject type to be recognized.
  • the imaging control unit 33 performs a process of controlling imaging based on the subject recognized by the recognition unit 32. Note that the processing performed by the setting registration section 31, recognition section 32, and imaging control section 33 will be described in detail later.
  • the RAM in the memory unit 22 is used to temporarily store data, programs, etc. as a work area when the CPU of the camera control unit 21 processes various data.
  • the ROM and flash memory (non-volatile memory) in the memory unit 22 are used to store an OS (Operating System) for the CPU to control various parts, application programs for various operations, firmware, various setting information, etc. used.
  • OS Operating System
  • Various types of setting information include communication setting information, setting information regarding imaging operation, setting information regarding image processing, and the like.
  • Setting information related to the imaging operation includes exposure settings, shutter speed settings, mechanical shutter or electronic shutter curtain speed settings, mode settings, imaging settings, and the like.
  • the driver section 23 is provided with, for example, a motor driver for a zoom lens drive motor, a motor driver for a focus lens drive motor, a motor driver for an aperture mechanism motor, and the like. These motor drivers apply drive current to the corresponding drivers in response to instructions from the camera control unit 21 (imaging control unit 33) to move the focus lens and zoom lens, open and close the aperture blades of the aperture mechanism, etc. It turns out.
  • Autofocus control (AF)>
  • the camera control unit 21 registers the imaging settings determined by the user for each of a plurality of subject types, recognizes the subject from the image based on the imaging settings of the subject type to be recognized, and focuses on the recognized subject. Perform autofocus control to match. Furthermore, in autofocus control, the camera control unit 21 is also capable of performing so-called tracking AF control, in which a predetermined subject, such as a subject that has been once focused, is tracked and focused. .
  • “people”, “animals”, “birds”, “insects”, and “cars/trains” are provided.
  • “Animal” is a species in which the subject is a mammal other than a person, such as a mammal that is a pet such as a dog or a cat, or a mammal that is a wild animal.
  • “Bird” is a species in which the subject is a bird.
  • “Car/Train” is a type in which the subject is a car (automobile) or a train.
  • animal + bird is provided as the subject type.
  • Animal+bird includes the above-described subject types “animal” and “bird”. That is, “animal + bird” is a species in which the subject is a mammal other than a person or a bird. In this way, the subject types may include a plurality of subject types.
  • Imaging settings include recognition site, transfer range, tracking strength, recognition sensitivity, and the like.
  • the recognition part (control target part) is a part of the subject that can be recognized in the recognition process described later (hereinafter referred to as a recognizable part), a part to be focused on, a part to be tracked, etc. This indicates the part to be controlled.
  • the transfer range defines the range in which the tracking target can be transferred when a subject (part) with a higher priority than the tracked subject (part) is recognized. is set to The tracking tenacity defines the degree of tracking tenacity of the object (part) being tracked, and is set to one of five levels, for example.
  • the recognition sensitivity defines the ease with which a subject can be recognized, and is set to one of five levels, for example. Note that the recognition site, transfer range, tracking strength, and recognition sensitivity illustrated as imaging settings are merely examples, and other settings may be used. Further, the recognition part, transfer range, tracking strength, and recognition sensitivity may or may not be set depending on the type of subject.
  • the settings registration unit 31 determines imaging settings for each subject type in response to user operations, and registers (stores) the determined imaging settings in the memory unit 22. Note that registration of imaging settings will be described in detail later.
  • FIG. 4 is a diagram showing recognizable parts for each type of subject.
  • a recognizable part is shown surrounded by a square.
  • recognizable parts are determined in advance for each type of subject.
  • the subject types "person”, “animal”, and “bird” have “eyes,”"face,””head,” and “body” as recognizable parts.
  • the recognizable parts "face” and “head” are recognized as the same part, and hereinafter, they will be collectively referred to as “head.”
  • the recognizable parts “face” and “head” may be recognized as different parts.
  • the subject types “person”, “animal”, and “bird”, “right eye” and “left eye” are provided as recognizable parts, and these can be switched.
  • the setting registration unit 31 determines and registers a recognized part from among the recognizable parts according to a user's operation for each subject type.
  • the recognition part the recognizable parts “pupil”, “head”, and “body” can be determined individually, and the combination of multiple recognition parts, specifically “pupil + head” and “body” can be determined individually.
  • “Auto (pupils + head + body)” can also be determined.
  • the recognition part “pupil + head” includes “pupil” and “head” as recognition parts, and “pupil” is given priority over “head”.
  • the recognition part “Auto” includes “pupil”, “head”, and “body” as recognition parts, and “pupil” is given priority over “head”, and “head” is given priority over “body”. is given priority over.
  • the recognition unit 32 recognizes the subject and the recognizable parts of the subject through recognition processing for each subject type.
  • the recognition process is performed using, for example, an algorithm learned by deep learning such as CNN (Convolutional Neural Network).
  • CNN Convolutional Neural Network
  • an algorithm learned in advance by deep learning or the like is stored in the memory unit 22 for each type of subject.
  • the recognition unit 32 recognizes the subject and the recognizable parts using an algorithm for the type of subject to be recognized. Therefore, in the recognition process, while it is possible to recognize a subject of a subject type that is a recognition target, it is not possible to recognize a subject of a subject type that is not a recognition target. Then, when the recognizable part set as the recognition part is recognized, the imaging control unit 33 performs autofocus control to focus on that part.
  • FIG. 5 is a diagram showing focus frames for each recognition part when the recognition target is a subject type "bird.” Note that in FIG. 5, the area in focus, that is, the focus frame 100 is shown as a square. When the recognition target is the subject type "bird" and the recognition part is set to "pupil”, “pupil + head”, or “auto”, depending on the recognized part (recognizable part) Which part is in focus (whether the focus frame 100 is displayed) will be explained. Here, the explanation will be based on the assumption that a "bird" is recognized as the subject.
  • the focus is on the pupil, which is the recognition part, regardless of whether the head and body are recognized. (The focus frame 100 is displayed).
  • the predetermined setting will be applied regardless of whether the head and body are recognized. (for example, on the subject in the center of the image). Therefore, in this case, even if the bird to be recognized is recognized, the bird is not necessarily in focus.
  • the recognition unit 32 does not recognize the eyes and recognizes the head, regardless of whether the body is recognized or not. , the focus is on the head, which is the recognition area.
  • a predetermined Focus is adjusted based on settings.
  • the recognition unit 32 does not recognize the eyes and recognizes the head, the recognition unit 32 The head with the highest priority is focused.
  • the recognition unit 32 does not recognize the eyes or the head, but recognizes the body, the body, which is the recognition part, is focused.
  • FIG. 6 is a diagram illustrating the priority when the subject type "animal + bird” is determined as a recognition target. Note that in FIG. 6, the area in focus, that is, the focus frame 100 is shown as a square. By the way, as described above, "animal + bird” is provided as the subject type. For the subject type "animal + bird", recognition processing is performed using an algorithm that recognizes animals and birds. Therefore, a subject will be recognized if only an animal is shown in the image, if only a bird is shown in the image, or if both an animal and a bird are shown in the image.
  • the recognition part of the subject is focused on in accordance with the pre-registered priority. Therefore, the priority determined here is one of the imaging settings.
  • the priorities include “auto,””animalpriority,” and “bird priority.””Auto” determines the subject to be focused on according to predetermined settings.
  • animals are given priority over birds. Therefore, if the priority is set to "animal priority” and both animals and birds are recognized as subjects, the recognition part of the recognized animal (in the figure ”), the focus frame 100 is displayed and the focus is adjusted.
  • “Bird priority” means that birds are given priority over animals.
  • the priority is set to "Bird Priority" and both an animal and a bird are recognized as the subject, as shown in the lower part of Figure 6, the recognition part of the recognized bird (in the figure, the ”), the focus frame 100 is displayed and the focus is adjusted. For example, even if the priority is set to "animal priority", if only a bird is recognized as the subject, the recognized part of the bird will be in focus.
  • FIGS. 7 and 8 are diagrams illustrating the transfer range.
  • the tracking target 101 is shown as a square
  • the transfer range 102 is shown as an ellipse.
  • the transfer range defines the range within which the tracking target can be transferred when a subject with a higher priority than the tracked subject is recognized, and is classified into five levels (1: narrow to narrow). 5: Wide).
  • the subject type "animal” has been determined as the recognition target and the "pupil” has been determined as the recognition part.
  • FIG. 7 suppose that after the tracking target 101 is set in the eyes of one animal (dog), another animal (another dog) appears in the image.
  • the transfer range 102 is 1 (narrow), as shown in the upper part of FIG. 7, even if another animal appears in the image (even if another animal is recognized), the tracking It is possible to prevent the object 101 from transferring to the eyes of other animals.
  • the transfer range 102 is 5 (wide), as shown in the lower part of FIG. 7, when another animal appears in the image, there is a risk that the tracking target 101 may transfer to the other animal's eyes. be.
  • the transfer range 102 is 1 (narrow), as shown in the upper part of FIG. 8, when the animal hides behind an obstacle, the tracking target 101 is moved to the obstacle, and when it reappears, The eyes of the animal may be outside the transfer range 102, and the tracking target 101 may not be moved to the eyes even though they are the same animal.
  • the transfer range 102 is 5 (wide), as shown in the lower part of FIG. The pupil of the animal falls within the transfer range 102, and the tracking target 101 is moved to the pupil of the animal again.
  • FIG. 9 is a diagram illustrating tracking tenacity.
  • the tracking tenacity defines the degree of tracking tenacity of the object being tracked (the tracking target 101), and is set to one of five levels (1: not sticky to 5: sticky), for example.
  • FIG. 10 is a diagram illustrating recognition sensitivity.
  • the recognition sensitivity defines the ease with which a subject can be recognized, and is determined, for example, to one of five levels (1: low to 5: high).
  • 1 low
  • 5 high
  • the recognition sensitivity is 1 (low)
  • the recognition sensitivity is 5 (high)
  • the complex background of the tree may be mistakenly recognized as a bird, and the bird may not be recognized.
  • FIG. 11 is a diagram showing a menu screen when setting AF. In the imaging device 1, it is possible to determine and register imaging settings for each subject type on the menu screen.
  • the menu screen 41 includes a "part priority during AF" item for switching on/off of autofocus control that gives priority to the recognition part during AF, a "recognition target” item for selecting a recognition target, and a function. Multiple items are provided, including a “recognition target switching setting” item to determine which recognition target can be switched using the menu or custom key, and a “right/left eye selection” item to switch between focusing on the right or left eye. It is being Note that there are also items, such as the item ⁇ recognition target,'' for which the determined content (denoted as ⁇ person'' in the figure) is displayed on the right side of the item. Further, among the plurality of items provided on the menu screen 41, one item being selected is highlighted as shown by hatching in the figure.
  • a menu screen 42 is displayed.
  • the menu screen 42 displays a plurality of subject types (“person”, “animal + bird”, “animal”, “bird”, “insect”, and “car/train”) that are recognition target candidates. , as shown by the black circles in the figure, any one of the subject types can be selected. Note that object types that are not selected are indicated by white circles.
  • the menu screen 43 is a screen for determining imaging settings for the subject type "person”, and displays a "transition range” item for selecting a transition range, and also displays the value of the transition range.
  • a menu screen 44 is displayed.
  • the menu screen 44 displays options in the transfer range of "1" to "5".
  • the menu screen 42 is displayed. Further, when the left button 6f or the enter button 6g is operated while the menu screen 42 is displayed, the menu screen 41 is displayed.
  • FIG. 12 is a diagram showing the menu screen when setting AF. As shown in FIG. 12, when the right button 6e is operated after "animal" is selected by operating the upper button 6c and lower button 6d on the menu screen 42, that subject type is determined as a recognition target. , a menu screen 45 is displayed.
  • the menu screen 45 is a screen for determining the imaging settings for the subject type "animal", and includes a "transfer range” item, a “tracking strength” item for selecting the tracking strength, and a "recognition sensitivity” for selecting the recognition sensitivity.
  • the menu screen 44 (see FIG. 11) is displayed, and the transfer range can be selected via the menu screen 44. You can decide the choice.
  • the "Tracking tenacity” item and the "Recognition sensitivity” item are selected, the tracking tenacity and recognition sensitivity options from "1" to "5" A menu screen is displayed on which you can make selections.
  • a menu screen 46 is displayed.
  • "auto”, “pupil + head”, and “pupil” are displayed as recognition part candidates, and as shown by the black circle in the figure, any one recognition part candidate can be selected. It has become.
  • a menu screen 47 is displayed.
  • "auto”, "pupil + head”, and “pupil” are displayed as recognition part candidates that can be switched using the function menu or custom key, and one or more recognition part candidates can be selected. ing. For example, as shown in the figure, if only “auto” is selected (checked), only “auto” can be selected as a recognition part in the function menu or custom key.
  • the selected recognition site candidate is determined as a recognition site that can be switched using the function menu or custom key, and the menu screen 45 is displayed.
  • the Cancel button is selected on the menu screen 47, the menu screen 45 is displayed without determining the recognition region that can be switched.
  • FIG. 13 is a diagram showing the menu screen when setting the AF. As shown in FIG. 13, when the right button 6e is operated after "animal + bird" is selected by operating the upper button 6c and lower button 6d on the menu screen 42, "animal + bird” is selected as a recognition target. ” is determined, and the menu screen 48 is displayed.
  • the menu screen 48 is a screen for determining and registering imaging settings for the subject type "animal + bird", and includes a "priority” item for selecting a priority, a "recognition site” item for selecting a recognition site, and a function. "Recognition region switching setting” item for selecting the recognition region that can be switched using the menu or custom key, "Animal: Detailed settings” item for making detailed settings (imaging settings) for the subject type "Animal”, “Bird” subject type “Bird: Detailed Settings” item is provided for making detailed settings regarding "Bird: Detailed Settings.”
  • a menu screen 49 is displayed.
  • the menu screen 49 displays "Auto,” which sets the priority based on predetermined rules, "Animal Priority,” which prioritizes animals, and "Bird Priority,” which prioritizes birds. One can be selected.
  • a menu screen 50 is displayed.
  • "Auto”, “Eye + Head”, “Eye”, and “Follow settings for each recognition target” are displayed as recognition parts, and as shown by black circles in the figure, one of the recognition parts is displayed. Parts can be selected.
  • “Follow the settings for each recognition target” means that the recognition part selected on the menu screen 46 when each of the recognition targets "Animal” and “Bird” becomes the recognition target is the recognition target here. It will be set individually as a part.
  • a menu screen 51 is displayed.
  • the menu screen 51 displays "Auto”, “Eye + Head”, “Eye”, and “Follow settings for each recognition target" as recognition part candidates that can be switched using the function menu or custom key.
  • One or more candidates can be selected. For example, if only “auto” is selected as shown in the figure, only “auto” can be selected as a recognition part in the function menu or custom key.
  • the setting registration unit 31 associates the determined recognition target and imaging settings with the subject type and stores them in the memory unit 22. Register at any time.
  • the setting registration unit 31 can register a common recognition part (imaging setting) for a plurality of subject types ("animal”, “bird”) for "animal + bird” including a plurality of subject types. Further, the setting registration unit 31 can also register individual recognition parts (imaging settings) for a plurality of subject types ("animal", “bird”) for "animal + bird” including a plurality of subject types. In addition, when the recognition target is a subject type "animal + bird" that includes a plurality of subject types "animal” and "bird", the recognition unit 32 is configured to recognize recognition parts set individually for the subject types "animal” and "bird". (imaging settings) can be shared and used.
  • the imaging device it is possible to switch recognition targets and imaging settings using the function menu 61.
  • FIG. 14 is a diagram showing the function menu. As shown in FIG. 14, in the imaging apparatus 1, when the function button 6i is operated while the imaging standby screen 60 is displayed on the display unit 18, a function menu 61 is displayed. Twelve function menus are registered in advance in the function menu 61 according to menu settings, and icons corresponding to the registered function menus are displayed.
  • recognition target switching and recognition region switching can be set as a function menu.
  • the recognition site switching function menu is registered second from the left in the upper row.
  • recognition site candidates selected and determined on the menu screen 47 are displayed at the top of the function menu 61, for example.
  • one of them is highlighted to show that it is currently selected.
  • the setting registration unit 31 determines the finally selected recognition site candidate as the recognition site.
  • the OK button 6g is operated after the function menu for switching the recognition region in the function menu 61 is selected, the recognition selected and determined on the menu screen 47 is displayed on the left side of the screen, as shown in the lower part of FIG. 14.
  • the body part candidates are displayed, and the recognition body part candidates whose selection is currently being determined are also displayed in the upper center of the screen.
  • the setting registration unit 31 determines the finally selected recognition site candidate as the recognition site.
  • FIG. 15 is a diagram showing the imaging standby screen 60. Furthermore, in the imaging device 1, it is possible to switch recognition targets and imaging settings using the custom button 6b. For example, recognition site switching is assigned in advance to one of the plurality of custom buttons 6b. Then, when the imaging standby screen 60 is displayed, each time the custom button 6b to which recognition site switching is assigned is operated, the recognition site candidates selected and determined on the menu screen 47 are toggled and determined, for example. At the same time, the determined recognition site is displayed in the center of the imaging standby screen 60.
  • FIG. 16 is a diagram showing on/off of AF control and recognition targets. As shown in FIG. 15, on the imaging standby screen 60, a plurality of icons indicating various setting contents are displayed. At the lower left of the imaging standby screen 60, an AF icon 62 indicating on/off of AF control and a recognition target is displayed.
  • AF icon 62 one of the plurality of icons shown in FIG. 16 is displayed. For example, if autofocus control (AF) is on and the recognition target is a “person” type of subject, an icon with the words “AF ON” superimposed on a person-shaped icon is displayed as the AF icon 62. be done.
  • AF autofocus control
  • the recognition target is the subject type "animal + bird
  • the text "AF ON” is displayed on the animal-shaped icon and bird-shaped icon as the AF icon 62.
  • An icon with a superimposed icon will be displayed.
  • the recognition target is of the subject type "animal + bird”
  • the animal-shaped icon and the bird-shaped icon are displayed with different sizes depending on the set priority. For example, if the priority is set to animal, the animal icon will be displayed larger than the bird icon, and if the priority is set to auto, the animal icon and the bird icon will be the same size. displayed.
  • FIG. 17 is a flowchart showing the process of registering settings for recognition targets and imaging settings.
  • the setting registration unit 31 determines whether the menu button 6h has been operated.
  • the setting registration unit 31 performs menu setting processing in step S2.
  • a menu screen (see FIGS. 11 to 13) is displayed on the display unit 18, and recognition targets and imaging settings are determined and registered, depending on the user's operation on the operator 6.
  • step S3 the setting registration unit 31 determines whether the function button 6i has been operated.
  • the setting registration unit 31 performs function menu setting processing in step S4.
  • the function menu 61 (see FIG. 14) is displayed on the display unit 18, and the recognition target or imaging setting (recognition region) is switched in accordance with the user's operation on the operator 6.
  • step S5 the setting registration unit 31 determines whether the custom button 6b has been operated.
  • the setting registration unit 31 performs custom button setting processing in step S6.
  • settings for example, recognition target and imaging settings assigned to the operated custom button 6b are switched.
  • FIG. 18 is a flowchart showing the flow of autofocus control processing.
  • the recognition unit 32 reads out the recognition target (subject type) stored in the memory unit 22 in step S11. Further, in step S12, the recognition unit 32 reads out the imaging settings registered for the type of subject to be recognized from the memory unit 22.
  • step S13 the recognition unit 32 performs recognition processing using an algorithm for the type of subject to be recognized, and recognizes the subject and the recognizable parts of the subject from the captured image.
  • step S14 the recognition unit 32 determines whether a subject of the subject type to be recognized has been recognized. If a subject of the subject type to be recognized is recognized (Yes in step S14), the recognition unit 32 determines in step S15 whether a recognition part has been recognized for the recognized subject.
  • a recognition part has been recognized for the recognized subject.
  • one subject is determined according to a priority registered or set in advance, and it is determined whether the recognized part of the determined subject has been recognized.
  • the imaging control unit 33 controls each part in step S16 so that the recognized recognition part is brought into focus. Note that, here, when a plurality of recognition sites are recognized, one recognition site is determined according to a preset priority, and the determined recognition site is brought into focus.
  • recognition targets and imaging settings are determined, registered, or switched by operating the menu screen, function menu, or custom button.
  • a plurality of recommended imaging settings are stored in the memory unit 22 in advance.
  • the setting registration unit 31 displays the imaging settings stored in the memory unit 22 on the display unit 18, and then registers the imaging settings selected by the user in the memory unit 22 in association with the subject type.
  • recommended imaging settings are stored for each subject and imaging scene, such as the flight or diving of a small bird, or the flight of a large bird. Therefore, the user can easily register the imaging settings for each subject type by selecting and registering the recommended imaging settings according to the subject and imaging scene from among the plurality of imaging settings.
  • the recommended imaging settings may be downloaded from the outside (on the Internet) via the communication unit 19 and registered.
  • the imaging control based on the recognized subject is performed by focusing, but other processing may be used.
  • the imaging device 1 includes a setting registration unit 31 that registers imaging settings for each type of subject, a recognition unit 32 that recognizes a subject from an image based on the imaging settings of the subject type to be recognized, and a recognition unit 32 that recognizes a subject from an image based on the imaging settings of the subject type to be recognized.
  • the imaging controller 33 includes an imaging control unit 33 that controls imaging based on the subject recognized by the unit 32.
  • the imaging control unit 33 focuses on the subject recognized by the recognition unit 32. Thereby, the imaging device 1 can focus on the subject desired by the user, without forcing the user to perform complicated operations, simply by having the user register the imaging settings for each subject type in advance.
  • the recognition unit 32 recognizes a plurality of subject types as recognition targets. As a result, even if different subject types are included, such as the subject type "animal + bird", the imaging device 1 can focus on both subject types without switching the subject type. be able to.
  • the setting registration unit 31 registers common imaging settings for the plurality of subject types to be recognized.
  • the imaging device 1 can focus on both subject types by simply making common imaging settings. can be matched.
  • the setting registration unit 31 registers individual imaging settings for the plurality of subject types to be recognized.
  • the imaging device 1 can perform individual imaging settings desired by the user for each subject type, and You can adjust the focus using different imaging settings.
  • the setting registration unit 31 shares the imaging settings for a plurality of object types to be recognized when individual object types are to be recognized.
  • the imaging device 1 can share the imaging settings for the subject type "animal” and the imaging setting for the subject type "bird”, respectively. The user can register the imaging settings with a simpler operation.
  • the recognition unit 32 controls imaging based on the subject according to a pre-registered priority.
  • the imaging device 1 can focus on the subject according to the registered priority.
  • the setting registration unit 31 registers common imaging settings and individual imaging settings for the multiple subject types to be recognized
  • the recognition unit 32 registers common imaging settings and registers individual imaging settings.
  • the object is recognized based on either the common imaging settings or the individual imaging settings.
  • the imaging device 1 can switch between common imaging settings or individual imaging settings to recognize the subject and focus on the subject. can be matched.
  • the imaging settings also include a transfer range that defines a range in which the tracking target can be transferred when a subject with a higher priority than the tracked subject is recognized. In this way, an optimal transition range can be set for each type of subject.
  • the imaging settings include a tracking tenacity that defines the degree of tracking tenacity of the object being tracked.
  • the optimal tracking strength can be set for each type of subject.
  • the imaging settings include recognition sensitivity that defines the ease with which a subject can be recognized. This allows the optimal recognition sensitivity to be set for each type of subject.
  • the setting registration unit registers a part of the subject to be controlled for each subject type. Thereby, it is possible to focus on the optimal part for each type of subject.
  • the setting registration unit 31 registers the priorities of a plurality of parts to be controlled for each subject type. Thereby, when a plurality of parts are recognized, it is possible to focus on a more optimal part.
  • the settings registration unit 31 displays an icon indicating the imaging settings on the display unit. Thereby, the imaging settings can be easily confirmed.
  • the icon is displayed in a size that corresponds to the priority of the subject type when a plurality of subject types are to be recognized. Thereby, the priority of the subject type can be easily confirmed via the icon.
  • the setting registration unit 31 can switch the imaging settings by operating a predetermined operator 6. Thereby, the imaging settings can be easily switched.
  • the settings registration unit 31 displays the changed imaging settings on the display unit. Thereby, the changed imaging settings can be easily confirmed.
  • the setting registration unit 31 displays predetermined imaging settings on the display unit, and when the displayed imaging settings are selected, registers the selected imaging settings. Thereby, imaging settings can be registered more easily.
  • the imaging control method registers imaging settings for each subject type, recognizes the subject from the image based on the imaging settings of the subject type to be recognized, and controls imaging based on the recognized subject.
  • the program also registers imaging settings for each type of subject, recognizes the subject from the image based on the imaging settings for the subject type to be recognized, and executes a process in which the computer controls imaging based on the recognized subject. have it executed.
  • the program of the embodiment is a program that causes a processor such as a CPU or a DSP, or a device including these, to execute the above image processing.
  • Such a program can be recorded in advance in an HDD as a recording medium built into equipment such as a computer device, or in a ROM in a microcomputer having a CPU.
  • such programs can be used for flexible discs, CD-ROMs (Compact Disc Read Only Memory), MO (Magneto Optical) discs, DVDs (Digital Versatile Discs), Blu-ray Discs (registered trademark), magnetic It can be stored (recorded) temporarily or permanently in a removable recording medium such as a disk, semiconductor memory, or memory card.
  • a removable recording medium can be provided as so-called package software.
  • a program In addition to installing such a program into a personal computer or the like from a removable recording medium, it can also be downloaded from a download site via a network such as a LAN (Local Area Network) or the Internet.
  • LAN Local Area Network
  • a settings registration section that registers imaging settings for each subject type; a recognition unit that recognizes a subject from an image based on the imaging settings of the subject type to be recognized; an imaging control unit that controls imaging based on the subject recognized by the recognition unit;
  • An imaging device comprising: (2) The imaging device according to (1), wherein the imaging control unit focuses on the subject recognized by the recognition unit. (3) The imaging device according to (1) or (2), wherein the recognition unit recognizes the subject using a plurality of subject types as recognition targets. (4) The imaging device according to (3), wherein the settings registration unit registers the common imaging settings for the plurality of subject types to be recognized when a plurality of the subject types are to be recognized.
  • the setting registration unit registers individual imaging settings for the plurality of subject types to be recognized.
  • the settings registration unit shares the imaging settings for a plurality of the object types to be recognized when each of the object types is to be recognized.
  • the recognition unit controls imaging based on the subject according to a pre-registered priority when recognizing the subject of a plurality of subject types.
  • the setting registration unit registers the common imaging settings for the plurality of subject types to be recognized, and also registers the individual imaging settings;
  • the imaging device according to any one of (3) to (7), wherein the recognition unit recognizes the subject based on either the common imaging settings or the individual imaging settings.
  • the imaging settings include any one of (1) to (8) that defines a range in which the tracking target can be transferred when a subject with a higher priority than the tracked subject is recognized.
  • the imaging device described in . (10) The imaging device according to any one of (1) to (9), wherein the imaging settings include a tracking tenacity that defines the degree of tracking tenacity of the object being tracked.
  • the imaging device according to any one of (1) to (10), wherein the imaging settings include recognition sensitivity that defines ease of recognition of the subject.
  • the setting registration unit registers a part of the subject to be controlled for each subject type.
  • the setting registration unit registers priorities of the plurality of parts to be controlled for each subject type.
  • the settings registration unit displays an icon indicating the imaging settings on a display unit.
  • the icon is displayed in a size that corresponds to the priority of the subject type when a plurality of subject types are to be recognized.
  • the imaging device can switch the imaging settings by operating a predetermined operator.
  • the imaging device displays the changed imaging settings on a display unit when the imaging settings are changed.
  • the settings registration unit displays the predetermined imaging settings on the display unit, and when the displayed imaging settings are selected, registers the selected imaging settings (1) to (17).
  • An imaging device according to claim 1. (19) Register imaging settings for each subject type, Recognizing a subject from an image based on the imaging settings of the subject type to be recognized; An imaging control method that controls imaging based on the recognized subject.
  • (20) Register imaging settings for each subject type Recognizing a subject from an image based on the imaging settings of the subject type to be recognized; A program that causes a computer to execute a process of controlling imaging based on the recognized subject.
  • Imaging device 6 Operator 21 Camera control section 31 Setting registration section 32 Recognition section 33 Imaging control section

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)

Abstract

撮像装置は、被写体種別ごとの撮像設定を登録する設定登録部と、認識対象となる被写体種別の撮像設定に基づいて、画像から被写体を認識する認識部と、認識部によって認識された被写体に基づいて撮像を制御する撮像制御部と、を備える。

Description

撮像装置、撮像制御方法、プログラム
 本技術は撮像装置、撮像制御方法、プログラムに関し、特に被写体種別ごとに撮像設定を登録する技術に関する。
 撮影装置(カメラ)には、画像内の人物の顔などの特定の被写体を認識し、その被写体にピントを合わせる機能がある(例えば、特許文献1参照)。
国際公開第2015/045911号
 ところで、従来の撮像装置では、認識対象となる被写体種別を切り換える度に、ユーザによって撮像設定を手動で切り換えていた。したがって、このような撮像装置では、ユーザに煩雑な操作を強いることになる。
 そこで本技術では、ユーザに煩雑な操作を強いることなく認識対象となる被写体種別の被写体に基づいた撮像を行うことが可能な技術を提案する。
 本技術に係る撮像装置は、被写体種別ごとの撮像設定を登録する設定登録部と、認識対象となる前記被写体種別の前記撮像設定に基づいて、画像から被写体を認識する認識部と、前記認識部によって認識された前記被写体に基づいて撮像を制御する撮像制御部と、を備える。
 これにより、被写体種別ごとに撮像設定をユーザに予め登録させておくだけで、認識対象となる被写体種別の撮像設定に基づいた被写体の認識および撮像を行うことが可能となる。
本実施の形態に係る撮像装置の外観を示した図である 本実施の形態に係る撮像装置の外観を示した図である 撮像装置の内部構成を示した図である。 被写体種別ごとに認識可能な部位を示した図である。 認識対象が被写体種別「鳥」である場合の認識部位を示した図である。 認識対象として被写体種別「動物+鳥」が決定された場合の優先度を説明する図である。 乗り移り範囲を説明する図である。 乗り移り範囲を説明する図である。 追尾ねばりを説明する図である。 認識感度を説明する図である。 AF設定時のメニュー画面を示した図である。 AF設定時のメニュー画面を示した図である。 AF設定時のメニュー画面を示した図である。 ファンクションメニューを示した図である。 撮像待機画面を示した図である。 AF制御のオンオフ、および、認識対象を示した図である。 認識対象および撮像設定の設定登録処理の流れを示したフローチャートである。 オートフォーカス制御処理の流れを示したフローチャートである。 変形例の撮像設定の表示を示した図である。
 以下、実施の形態を次の順序で説明する。
<1.撮像装置の構成>
<2.オートフォーカス制御(AF)>
<3.撮像設定の登録>
<4.設定登録処理>
<5.オートフォーカス制御処理>
<6.変形例>
<7.まとめ>
<8.本技術>
 なお、本技術において「画像」とは静止画、動画のいずれをも含む。また「画像」とは表示部に表示されている状態を指すだけでなく、表示部に表示されていない状態の画像データについても「画像」と表記する。
 「被写体」とは、撮像装置1によって撮像される対象を指すだけでなく、画像に写っている被写体像も含むものである。また、「被写体」は、人物だけでなく、動物、鳥、昆虫、車、電車などを様々な物を含むものであり、さらに、これらの一部(部位)も含むものである。
 「被写体種別」とは、被写体の種別または種類を示すものであり、人物、動物、鳥、昆虫、車、電車等である。また、1つの被写体種別には、複数(2以上)の被写体種別が含まれていてもよい。さらに、被写体種別には、例えば「鳥」および「カワセミ」の関係のように、1つの被写体種別(鳥)に包含される被写体種別(カワセミ)が別に設けられていてもよい。
 「撮像設定」とは、画像から被写体を認識する際に用いられる設定や、画像を撮像する際に用いられる設定等、撮像の制御に関する設定(条件)を規定するものである。
<1.撮像装置の構成>
 図1および図2は、本実施の形態に係る撮像装置1の外観を示した図である。なお以下では、被写体側を前方とし撮像者側を後方として説明を行う。
 図1および図2に示すように、撮像装置1は、内外に所要の各部が配置されるカメラ筐体2と、カメラ筐体2に対して着脱可能とされ、前面部2aに取り付けられるレンズ鏡筒3とを備える。図2はレンズ鏡筒が取り外されたカメラ筐体2を示している。
 なお、レンズ鏡筒3がいわゆる交換レンズとして着脱可能とされるのは一例であり、カメラ筐体2から取り外せないレンズ鏡筒であってもよい。
 カメラ筐体2の後面部2bには、背面モニタ4が配置されている。背面モニタ4には、ライブビュー画像や記録した画像の再生画像などが表示される。
 背面モニタ4は、例えば、液晶ディスプレイ(LCD:Liquid Crystal Display)や有機EL(Electro-Luminescence)ディスプレイ等の表示デバイスにより構成される。
 背面モニタ4は、カメラ筐体2に対して回動可能とされている。例えば、背面モニタ4の上端部を回動軸として背面モニタ4の下端部が後方に移動するように回動可能とされている。なお、背面モニタ4の右端部や左端部が回動軸とされていてもよい。さらに、複数の軸回り方向に回動可能とされていてもよい。
 カメラ筐体2の上面部2cには、EVF(Electric Viewfinder)5が配置されている。EVF5は、EVFモニタ5aとEVFモニタ5aの上方および左右の側方を囲むように後方に突出された枠状の囲い部5bを備えている。
 EVFモニタ5aは、LCDや有機ELディスプレイ等を用いて形成されている。なお、EVFモニタ5aに代わって光学式ファインダ(OVF:Optical View Finder)が設けられていてもよい。
 後面部2bや上面部2cには、各種の操作子6が設けられている。例えば、シャッターボタン(レリーズボタン)、再生メニュー起動ボタン、決定ボタン、十字キー、キャンセルボタン、ズームキー、スライドキー等である。
 これらの操作子6としては、ボタン、ダイヤル、押圧および回転可能な複合操作子など、各種の態様のものを含んでいる。各種の態様の操作子6により、例えば、シャッター操作、メニュー操作、再生操作、モード選択/切換操作、フォーカス操作、ズーム操作、シャッタースピードやF値等のパラメータ選択/設定が可能とされる。
 操作子6としては、例えば、シャッターボタン6a、複数のカスタムボタン6b、上ボタン6c、下ボタン6d、右ボタン6e、左ボタン6f、決定ボタン6g、メニューボタン6h、ファンクションボタン6iが設けられている。
 図3は、撮像装置1の内部構成を示した図である。
 撮像装置1では、被写体からの光が、撮像光学系11を介して例えばCMOS(Complementary Metal Oxide Semiconductor)センサやCCD(Charge Coupled Device)センサなどにより構成される撮像素子12に入射して、撮像素子12で光電変換され、撮像素子12からアナログ画像信号が得られる。
 撮像光学系11には、ズームレンズ、フォーカスレンズ、集光レンズ等の各種レンズや、絞り機構、ズームレンズの駆動機構、フォーカスレンズの駆動機構が設けられている。メカニカルシャッターが設けられる場合もある。
 撮像素子12は、例えばCMOS基板上に、フォトダイオード(フォトゲート)、転送ゲート(シャッタートランジスタ)、スイッチングトランジスタ(アドレストランジスタ)、増幅トランジスタ、リセットトランジスタ(リセットゲート)などを有する画素が複数、2次元状に配列されて形成されるとともに、垂直走査回路、水平走査回路および画像信号出力回路が形成されたものである。
 撮像素子12は、原色系と補色系のいずれでもよく、撮像素子12から得られるアナログ画像信号は、RGB各色の原色信号または補色系の色信号である。また撮像素子12がカラーフィルタを有さない構成とされて、撮像素子12から得られるアナログ画像信号は白黒の画像信号となるようにしてもよい。
 撮像素子12からのアナログ画像信号は、IC(Integrated circuit:集積回路)として構成されたアナログ信号処理部13において、色信号ごとに、サンプルホールドされ、AGC(Automatic Gain Control :自動利得制御)によって振幅調整され、A/D(Analog to Digital)変換によってデジタル画像信号に変換される。
 アナログ信号処理部13からのデジタル画像信号(以下、画像データ)は、一時記憶部14に入力される。
 なお、撮像素子12とアナログ信号処理部13、或いはさらに一時記憶部14は、一体化されている場合もある。また、一時記憶部14として次に述べるフレームメモリは積層型撮像素子内に設けられてもよい。
 一時記憶部14は、この例では2つのフレームメモリ14A、14Bを備えている。
 アナログ信号処理部13からの画像データは、フレームメモリ14Aと、フレームメモリ14Bに交互に格納される。すなわち、一時記憶部14は、2つの連続撮像された画像フレームを格納する。一時記憶部14に格納された画像データは、先行格納フレームから、順次、デジタル信号処理部15に出力される。すなわち、フレームメモリ14Aとフレームメモリ14Bとから、交互に撮像順に従って、画像データがデジタル信号処理部15に順次出力される。
 このようにフレームメモリ14A,14Bを備えることで、例えば連写撮像中にもライブビュー画像を継続して、ブラックアウトすることなく表示させることができる。
 デジタル信号処理部15は、例えばDSP(Digital Signal Processor)等により画像処理プロセッサとして構成される。このデジタル信号処理部15は、入力された画像データに対して、各種の信号処理を施す。例えばカメラプロセスとしてデジタル信号処理部15は、前処理、同時化処理、YC生成処理等を行う。
 またデジタル信号処理部15では、これらの各種処理が施された画像データについて、ファイル形成処理として、例えば記録用や通信用の圧縮符号化、フォーマティング、メタデータの生成や付加などを行って記録用や通信用のファイル生成を行う。例えば静止画ファイルとしてJPEG、TIFF(Tagged Image File Format)、GIF(Graphics Interchange Format)等の形式の画像ファイルの生成を行う。またMPEG-4準拠の動画・音声の記録に用いられているMP4フォーマットなどとしての画像ファイルの生成を行うことも考えられる。
 なお、ロー(RAW)画像データとして画像ファイルを生成することも考えられる。
 また、デジタル信号処理部15では、各種の信号処理が施された画像データ(入力画像)に対して、解像度変換処理を実行し、例えばライブビュー表示のために低解像度化した画像データを生成する。
 メモリ部16は、画像データのバッファメモリである。このメモリ部16は例えばD-RAM(Dynamic Random Access Memory)で構成される。
 デジタル信号処理部15で処理された画像データは、メモリ部16に一旦格納され、所定のタイミングで表示部18や記録制御部17、或いは通信部19に転送される。
 記録制御部17は、例えば不揮発性メモリによる記録媒体に対して記録再生を行う。記録制御部17は例えば記録媒体に対し動画データや静止画データ等の画像ファイルを記録する処理を行う。
 記録制御部17の実際の形態は多様に考えられる。例えば記録制御部17は、撮像装置1に内蔵されるフラッシュメモリとその書込/読出回路として構成されてもよい。また記録制御部17は、撮像装置1に着脱できる記録媒体、例えばメモリカード(可搬型のフラッシュメモリ等)に対して記録再生アクセスを行うカード記録再生部による形態でもよい。また記録制御部17は、撮像装置1に内蔵されている形態としてHDD(Hard Disk Drive)などとして実現されることもある。
 表示部18は、ユーザに対して各種表示を行う表示部であり、例えば図1に示したように撮像装置1の筐体に配置される背面モニタ4やEVF5である。
 表示部18は、カメラ制御部21の指示に基づいて表示画面上に各種表示を実行する。
 例えば表示部18は、記録制御部17において記録媒体から読み出された画像データの再生画像を表示する。
 また、表示部18は、デジタル信号処理部15で表示用に解像度変換された撮像画像の画像データが供給され、それに応じた表示、例えばライブビュー画像の表示を行う。
 また、表示部18は、カメラ制御部21の指示に基づいて、各種操作メニュー、アイコン、メッセージ等、即ちGUI(Graphical User Interface)としての表示を画面上に行う。
 通信部19は、外部機器との間のデータ通信やネットワーク通信を有線または無線で行う。
 例えば、外部の情報処理装置、表示装置、記録装置、再生装置等に対して画像データ(静止画ファイルや動画ファイル)やメタデータの送信出力を行う。
 また、通信部19は、ネットワーク通信部として、例えばインターネット、ホームネットワーク、LAN(Local Area Network)等の各種のネットワーク通信を行い、ネットワーク上のサーバ、端末等との間で各種データ送受信を行うことができる。
 操作部20は、ユーザが各種操作入力を行うための入力デバイスを総括して示している。具体的には操作部20は撮像装置1の筐体に設けられた各種の操作子6である。また、操作部20に該当する操作子6としては、例えば背面モニタ4に設けられたタッチパネルや、タッチパッドも含む。さらに操作部20は、リモートコントローラからの操作信号の受信部として構成されてもよい。
 操作部20によりユーザの操作が検知され、入力された操作に応じた信号はカメラ制御部21へ送られる。
 カメラ制御部21は、CPU(Central Processing Unit)を備えたマイクロコンピュータ(演算処理装置)により構成される。カメラ制御部21は、撮像装置1の動作を制御する撮像制御装置である。
 メモリ部22は、カメラ制御部21が処理に用いる情報等を記憶する。メモリ部22としては、例えばROM(Read Only Memory)、RAM(Random Access Memory)、フラッシュメモリなどを包括的に示している。
 メモリ部22は、カメラ制御部21としてのマイクロコンピュータチップに内蔵されるメモリ領域であってもよいし、別体のメモリチップにより構成されてもよい。
 カメラ制御部21は、メモリ部22のROMやフラッシュメモリ等に記憶されたプログラムを実行することで、この撮像装置1の全体を制御する。
 例えばカメラ制御部21は、デジタル信号処理部15における各種信号処理の指示、ユーザの操作に応じた撮像動作や記録動作、記録した画像ファイルの再生動作等の制御を行う。
 また、カメラ制御部21は、自動露出制御として、絞り機構の動作制御、撮像素子12のシャッタースピードの制御、アナログ信号処理部13におけるAGCゲイン制御を行う。
 また、カメラ制御部21は、オートフォーカス制御やマニュアルフォーカス操作、ズーム操作等に応じてのフォーカスレンズやズームレンズの駆動制御を行う。
 また、カメラ制御部21は、撮像素子12におけるシャッタースピードや、露光タイミングなどを制御する。
 カメラ制御部21には、オートフォーカス制御に関する制御処理を行う設定登録部31、認識部32および撮像制御部33としての機能が設けられる。
 設定登録部31は、被写体種別ごと撮像設定を登録する処理を行う。
 認識部32は、認識対象となる被写体種別の撮像設定に基づいて、画像(入力画像)から被写体を認識する処理を行う。
 撮像制御部33は、認識部32によって認識された被写体に基づいて撮像を制御する処理を行う。
 なお、設定登録部31、認識部32および撮像制御部33が行う処理について、詳しくは後述する。
 メモリ部22におけるRAMは、カメラ制御部21のCPUの各種データ処理の際の作業領域として、データやプログラム等の一時的な格納に用いられる。
 メモリ部22におけるROMやフラッシュメモリ(不揮発性メモリ)は、CPUが各部を制御するためのOS(Operating System)や、各種動作のためのアプリケーションプログラムや、ファームウエア、各種の設定情報等の記憶に用いられる。
 各種の設定情報としては、通信設定情報、撮像動作に関する設定情報、画像処理に係る設定情報などがある。撮像動作に関する設定情報としては、露出設定、シャッタースピード設定、メカニカルシャッターまたは電子シャッターの幕速設定、モード設定、撮像設定などがある。
 ドライバ部23には、例えばズームレンズ駆動モータに対するモータドライバ、フォーカスレンズ駆動モータに対するモータドライバ、絞り機構のモータに対するモータドライバ等が設けられている。
 これらのモータドライバはカメラ制御部21(撮像制御部33)からの指示に応じて駆動電流を対応するドライバに印加し、フォーカスレンズやズームレンズの移動、絞り機構の絞り羽根の開閉等を実行させることになる。
<2.オートフォーカス制御(AF)>
 カメラ制御部21は、複数の被写体種別ごとにユーザによって決定された撮像設定を登録しておき、認識対象となる被写体種別の撮像設定に基づいて画像から被写体を認識し、認識した被写体にピントを合わせるオートフォーカス制御を行う。また、カメラ制御部21は、オートフォーカス制御において、例えば一度ピントを合わせた被写体等、所定の被写体を追尾対象として追尾(トラッキング)してピントを合わせる、いわゆるトラッキングAF制御も行うことが可能である。
 ここで、被写体種別としては、一例として「人物」、「動物」、「鳥」、「昆虫」、「車・電車」が設けられている。「動物」は、例えば犬や猫等のペットとなる哺乳類や、野生動物である哺乳類等、被写体が人物以外の哺乳類である種別である。「鳥」は、被写体が鳥類である種別である。「車・電車」は、被写体が車(自動車)もしくは電車である種別である。
 また、被写体種別には、「動物+鳥」が設けられている。「動物+鳥」は、上記した被写体種別「動物」および「鳥」を含むものである。すなわち、「動物+鳥」は、被写体が人物以外の哺乳類、もしくは、鳥類である種別である。このように、被写体種別には、複数の被写体種別を含むものが設けられることもある。
 撮像設定としては、認識部位、乗り移り範囲、追尾ねばり、認識感度等が設けられている。
 認識部位(制御対象部位)は、後述する認識処理において認識可能な被写体の部位(以下、認識可能部位と表記する)のうちのピントを合わせる対象となる部位や、トラッキングの対象となる部位等、制御対象となる部位を示すものである。
 乗り移り範囲は、追尾している被写体(部位)より優先度が高い被写体(部位)を認識した際に、追尾対象を乗り移ることが可能な範囲を規定したものであり、例えば5段階の中からいずれかに設定される。
 追尾ねばりは、追尾している被写体(部位)の追尾のねばり度合いを規定したものであり、例えば5段階の中からいずれかに設定される。
 認識感度は、被写体の認識のしやすさを規定したものであり、例えば5段階の中からいずれかに設定される。
 なお、撮像設定として例示した認識部位、乗り移り範囲、追尾ねばり、認識感度は一例であり他の設定であってもよい。
 また、認識部位、乗り移り範囲、追尾ねばり、認識感度は、被写体種別によって設定できたり設定できなかったりする。
 設定登録部31は、被写体種別ごとの撮像設定をユーザ操作に応じて決定し、決定した撮像設定をメモリ部22に登録(記憶)する。なお、撮像設定の登録について、詳しくは後述する。
 図4は、被写体種別ごとの認識可能部位を示した図である。なお、図4では、認識可能部位を四角で囲んで示す。
 撮像装置1では、被写体種別ごとに認識可能部位が予め決められている。図4に示すように、被写体種別「人物」、「動物」および「鳥」は、認識可能部位として「瞳」、「顔」、「頭」「体」が設けられている。
 なお、認識可能部位「顔」および「頭」は、同一の部位として認識されるようになされており、以下では、これらをまとめて「頭」と表記する。ただし、認識可能部位「顔」および「頭」をそれぞれ異なる部位として認識するようにしてもよい。
 また、被写体種別「人物」、「動物」および「鳥」は、認識可能部位として「右目」および「左目」が設けられており、これらを切り換えることが可能となっている。
 設定登録部31は、被写体種別ごとに、認識可能部位の中からユーザ操作に応じて認識部位を決定、登録する。ここで、認識部位として、認識可能部位である「瞳」、「頭」、「体」を個別に決定可能であるとともに、複数の認識可能部位の組み合わせ、具体的には「瞳+頭」および「オート(瞳+頭+体)」も決定することが可能である。
 認識部位「瞳+頭」は、認識部位として「瞳」および「頭」が含まれており、かつ、「瞳」が「頭」よりも優先される。また、認識部位「オート」は、認識部位として「瞳」、「頭」および「体」が含まれており、かつ、「瞳」が「頭」よりも優先され、「頭」が「体」よりも優先される。
 なお、被写体種別「昆虫」および「車・電車」についても認識可能部位が1または複数設けられているがここではその説明は省略する。
 認識部32は、被写体種別ごとの認識処理によって被写体、および、その被写体の認識可能部位を認識する。認識処理は、例えば、CNN(Convolutional Neural Network)等のディープラーニング等によって学習されたアルゴリズムを用いて行う。
 撮像装置1では、被写体種別ごとに予めディープラーニング等によって学習されたアルゴリズムがメモリ部22に記憶されている。認識部32は、認識対象となる被写体種別のアルゴリズムを用いて被写体および認識可能部位を認識する。したがって、認識処理では、認識対象となる被写体種別の被写体を認識することができる一方、認識対象でない被写体種別の被写体を認識することができない。
 そして、撮像制御部33は、認識部位に設定された認識可能部位が認識されると、その部位にピントを合わせるオートフォーカス制御を行う。
 図5は、認識対象が被写体種別「鳥」である場合の認識部位ごとのフォーカス枠を示した図である。なお、図5では、ピントが合わせられる領域、すなわちフォーカス枠100を四角で示す。
 認識対象が被写体種別「鳥」であり、かつ、認識部位として「瞳」、「瞳+頭」、「オート」のいずれかが設定されている場合に、認識された部位(認識可能部位)によってどの部位にピントが合わせられるか(フォーカス枠100が表示されるか)を説明する。ここでは、被写体として「鳥」が認識されていることを前提として説明する。
 認識部位として「瞳」が設定されている場合であって、認識部32により瞳が認識された場合、頭および体が認識されているか否かによらず、認識部位である瞳にピントが合わせられる(フォーカス枠100が表示される)。
 また、認識部位として「瞳」が設定されている場合であって、認識部32により瞳が認識されなかった場合、頭および体が認識されているか否かによらず、予め決められた設定に基づいて(例えば、画像中央の被写体に)ピントが合わせられる。したがって、この場合には、認識対象である鳥が認識されていても、必ずしも鳥にピントが合わせられるわけではない。
 認識部位として「瞳+頭」が設定されている場合であって、認識部32により瞳が認識された場合、頭および体が認識されているか否かによらず、認識部位であり、かつ、最も優先度が高い瞳にピントが合わせられる。
 また、認識部位として「瞳+頭」が設定されている場合であって、認識部32により瞳が認識されず、かつ、頭が認識された場合、体が認識されているか否かによらず、認識部位である頭にピントが合わせられる。
 また、認識部位として「瞳+頭」が設定されている場合であって、認識部32により瞳および頭が認識されなかった場合、体が認識されているか否かによらず、予め決められた設定に基づいてピントが合わせられる。
 認識部位として「オート」が設定されている場合であって、認識部32により瞳が認識された場合、頭および体が認識されているか否かによらず、認識部位であり、かつ、最も優先度が高い瞳にピントが合わせられる。
 また、認識部位として「オート」が設定されている場合であって、認識部32により瞳が認識されず、かつ、頭が認識された場合、体が認識されているか否かによらず、2番目に優先度が高い頭にピントが合わせられる。
 また、認識部位として「オート」が設定されている場合であって、認識部32により瞳および頭が認識されず、かつ、体が認識された場合、認識部位である体にピントが合わせられる。
 このように、被写体種別ごとに認識部位が予め登録されていれば、認識対象となる被写体種別を決定することで、被写体種別を切り換える度に認識部位を設定し直さなくてもよくなる。
 図6は、認識対象として被写体種別「動物+鳥」が決定された場合の優先度を説明する図である。なお、図6では、ピントが合わせられる領域、すなわちフォーカス枠100を四角で示す。
 ところで、上記したように、被写体種別として「動物+鳥」が設けられている。被写体種別「動物+鳥」は、動物および鳥を認識するアルゴリズムを用いて認識処理がなされる。したがって、画像に動物のみが写っている場合、画像に鳥のみが写っている場合、画像に動物および鳥の双方が写っている場合に、それぞれ被写体が認識されることになる。
 そして、認識処理において動物および鳥の双方が認識された場合、予め登録された優先度に応じた被写体の認識部位にピントが合わせられる。したがって、ここで決められる優先度は、撮像設定の一つである。
 優先度としては、「オート」、「動物優先」、「鳥優先」が設けられている。「オート」は予め決められた設定に従ってピントが合わせられる被写体が決定される。
 また、「動物優先」は、動物が鳥よりも優先される。したがって、優先度として「動物優先」に設定されており、かつ、被写体として動物および鳥の双方が認識された場合、図6上段に示すように、認識された動物の認識部位(図中「瞳」)にフォーカス枠100が表示されピントが合わせられる。
 「鳥優先」は、鳥が動物よりも優先される。したがって、優先度として「鳥優先」に設定されており、かつ、被写体として動物および鳥の双方が認識された場合、図6下段に示すように、認識された鳥の認識部位(図中「瞳」)にフォーカス枠100が表示されピントが合わせられる。
 なお、例えば優先度として「動物優先」に設定されている場合であっても、被写体として鳥のみが認識された場合、その鳥の認識部位にピントが合わせられることになる。
 図7および図8は、乗り移り範囲を説明する図である。なお、図7では、追尾対象101を四角で示し、乗り移り範囲102を楕円で示している。
 上記したように、乗り移り範囲は、追尾している被写体より優先度が高い被写体を認識した際に、追尾対象を乗り移ることが可能な範囲を規定したものであり、例えば5段階(1:狭い~5:広い)の中からいずれかに設定される。
 ここで、認識対象として被写体種別「動物」、認識部位として「瞳」が決定されていたとする。そして、図7に示すように、1匹の動物(犬)の瞳に追尾対象101が設定された後に他の動物(別の犬)が画像内に写り込んだとする。このような場合に、乗り移り範囲102が1(狭い)であると、図7上段に示すように、他の動物が画像内に写ったとしても(他の動物が認識されたとしても)、追尾対象101が他の動物の瞳に乗り移ってしまうことを防止することができる。
 一方で、乗り移り範囲102が5(広い)であると、図7下段に示すように、他の動物が画像内に写ったときに、他の動物の瞳に追尾対象101が乗り移ってしまうおそれがある。
 また、図8に示すように、1匹の動物(犬)の瞳に追尾対象101が設定された後に障害物に動物が一旦隠れ、その後、再度現れたとする。このような場合に、乗り移り範囲102が1(狭い)であると、図8上段に示すように、動物が障害物に隠れた際に障害物に追尾対象101が移動され、再度現れたときの動物の瞳が乗り移り範囲102外となり、同一の動物であるにも拘わらず瞳に追尾対象101が移動されなくなることがある。
 一方で、乗り移り範囲102が5(広い)であると、図8下段に示すように、動物が障害物に隠れた際に障害物に追尾対象101が移動したとしても、再度現れたときの動物の瞳が乗り移り範囲102内となり、動物の瞳に再度、追尾対象101が移動されることになる。
 このように、認識対象となる被写体種別ごとに乗り移り範囲102をユーザが予め決定して登録しておくことで、被写体種別ごとに最適に追尾対象101の追尾を行うことが可能となる。
 図9は、追尾ねばりを説明する図である。追尾ねばりは、追尾している被写体(追尾対象101)の追尾のねばり度合いを規定したものであり、例えば5段階(1:粘らない~5:粘る)の中からいずれかに設定される。
 図9上段に示すように、追尾対象101である鳥が手前側に飛び立つようなシーンにおいて、追尾ねばりが1(粘らない)であると、奥側の木の枝を追尾することなく手前側に飛び立つ鳥に追尾対象101を継続して設定して追尾することができる。
 一方、追尾対象101である鳥が手前側に飛び立つようなシーンにおいて、追尾ねばりが5(粘る)であると、追尾範囲が奥側で移動しづらいため奥側の木の枝を追尾対象101として設定してしまい、手前側の鳥を追尾することができなくなるおそれがある。
 また、図9下段に示すように、追尾対象101である奥側の動物(猫)が手前側の草むらに隠れるようなシーンにおいて、追尾ねばりが5(粘る)であると、追尾範囲が奥側で移動しづらいため、手前側の草むらを追尾することなく奥側の動物が再度現れたときに追尾対象101として継続して追尾することができる。
 一方、追尾対象101である奥側の動物(猫)が手前側の草むらに隠れるようなシーンにおいて、追尾ねばりが1(粘らない)であると、動物が隠れたときに手前側の草むらを追尾対象101として設定してしまい、奥側の動物が再度現れたとしても追尾することができなくなるおそれがある。
 このように、認識対象となる被写体種別ごとに追尾ねばりをユーザが予め決定して登録しておくことで、被写体種別ごとに最適な追尾を行うことが可能となる。
 図10は、認識感度を説明する図である。認識感度は、被写体の認識のしやすさを規定したものであり、例えば5段階(1:低い~5:高い)の中からいずれかに決定される。
 図10上段に示すように、木に鳥が止まっているようなシーンにおいて、認識感度が1(低い)であると、木のような複雑な背景を鳥と誤認識しにくくなるため、鳥を認識しやすくなる。
 一方、木に鳥が止まっているようなシーンにおいて、認識感度が5(高い)であると、複雑な背景である木を鳥と誤認識してしまい、鳥を認識できなくなるおそれがある。
 また、図10下段に示すように、背景と鳥とが似たような色合いであるシーンにおいて、認識感度が5(高い)であると、鳥を認識しやすくなる。
 一方、背景と鳥とが似たような色合いであるシーンにおいて、認識感度が1(低い)と、背景を鳥と誤認識してしまい、鳥を認識することができなくなるおそれがある。
 このように、認識対象となる被写体種別ごとに認識感度をユーザが予め決定して登録おくことで、被写体種別ごとに最適な認識を行うことが可能となる。
<3.撮像設定の登録>
 図11は、AF設定時のメニュー画面を示した図である。撮像装置1では、メニュー画面において被写体種別ごとの撮像設定を決定、登録することが可能である。
 メニューボタン6hが操作された後、上ボタン6c、下ボタン6d、右ボタン6e、左ボタン6f、決定ボタン6gが適宜操作されると、オートフォーカスに関する撮像設定を行うための「フォーカス>AF」のメニュー画面41が表示部18に表示される。
 メニュー画面41には、AF時に認識部位に優先してピントを合わせるオートフォーカス制御の入切を切り換えるための「AF時の部位優先」項目、認識対象を選択するための「認識対象」項目、ファンクションメニューやカスタムキーで切り換えられる認識対象を決定するための「認識対象切換設定」項目、右目または左目のどちらにフォーカスを合わせるかを切り換えるための「右目/左目選択」項目等、複数の項目が設けられている。
 なお、例えば、「認識対象」項目のように、決定された内容(図中「人物」と表記)が、項目内の右側に表示される項目もある。
 また、メニュー画面41に設けられた複数の項目のうち、選択中である1つの項目が、図中ハッチングで示すように強調表示されている。
 メニュー画面41において「認識対象」項目が選択された後に決定ボタン6gが操作されると、メニュー画面42が表示される。メニュー画面42には、認識対象の候補である複数の被写体種別(「人物」、「動物+鳥」、「動物」、「鳥」、「昆虫」、「車・電車」)が表示されるとともに、図中黒丸で示すように、いずれか1つの被写体種別が選択可能となっている。なお、選択されていない被写体種別は白丸で示される。
 そして、上ボタン6c、下ボタン6dを操作して例えば「人物」が選択された後に、右ボタン6eが操作されると、その被写体種別が認識対象に決定され、メニュー画面43が表示される。メニュー画面43は、被写体種別「人物」の撮像設定を決定する画面であり、乗り移り範囲を選択するための「乗り移り範囲」項目が表示されるとともに、乗り移り範囲の値が合わせて表示される。
 そして、「乗り移り範囲」項目が選択された状態で右ボタン6eまたは決定ボタン6gが操作されると、メニュー画面44が表示される。メニュー画面44には、「1」~「5」の乗り移り範囲の選択肢が表示される。
 そして、上ボタン6c、下ボタン6dを操作して「1」~「5」の乗り移り範囲の選択肢のいずれかが選択された後に、左ボタン6fまたはメニューボタン6hが操作されると、選択中の乗り移り範囲が決定され、メニュー画面43が表示される。
 また、メニュー画面43が表示されているときに左ボタン6fまたはメニューボタン6hが操作されると、メニュー画面42が表示される。また、メニュー画面42が表示されているときに左ボタン6fまたは決定ボタン6gが操作されると、メニュー画面41が表示される。
 図12は、AF設定時のメニュー画面を示した図である。図12に示すように、メニュー画面42において、上ボタン6c、下ボタン6dを操作して「動物」が選択された後に、右ボタン6eが操作されると、その被写体種別が認識対象に決定され、メニュー画面45が表示される。
 メニュー画面45は、被写体種別「動物」の撮像設定を決定する画面であり、「乗り移り範囲」項目、追尾ねばりを選択するための「追尾ねばり」項目、認識感度を選択するための「認識感度」項目、認識部位を選択するための「認識部位(個別)」項目、ファンクションメニューやカスタムキーで切り換えられる認識部位を選択するための「認識部位切換設定(個別)」項目が設けられている。
 メニュー画面45において「乗り移り範囲」項目が選択された後に、右ボタン6eまたは決定ボタン6gが操作されるとると、メニュー画面44(図11参照)が表示され、メニュー画面44を介して乗り移り範囲を選択決定することができる。また、「追尾ねばり」項目および「認識感度」項目が選択された場合、「乗り移り範囲」項目が選択された場合と同様に、「1」~「5」の追尾ねばり、認識感度の選択肢のいずれかが選択決定可能なメニュー画面が表示される。
 メニュー画面45において「認識部位(個別)」項目が選択された後に、右ボタン6eまたは決定ボタン6gが操作されるとると、メニュー画面46が表示される。メニュー画面46には、認識部位の候補として「オート」、「瞳+頭」、「瞳」が表示されるとともに、図中黒丸で示すように、いずれか1つの認識部位の候補が選択可能となっている。
 そして、上ボタン6c、下ボタン6dを操作して認識部位として「オート」、「瞳+頭」、「瞳」のいずれかが選択された後に、左ボタン6fまたはメニューボタン6hが操作されると、選択中の認識部位が決定され、メニュー画面45が表示される。
 また、メニュー画面45において「認識部位切換設定(個別)」が選択された後に、右ボタン6eまたは決定ボタン6gが操作されるとると、メニュー画面47が表示される。メニュー画面47には、ファンクションメニューやカスタムキーで切り換えられる認識部位の候補として「オート」、「瞳+頭」、「瞳」が表示されるとともに、認識部位の候補を1または複数選択可能となっている。例えば、図示しているように「オート」のみが選択されている場合(チェックが入れられている場合)、ファンクションメニューやカスタムキーでは認識部位として「オート」のみが選択可能となる。
 メニュー画面47においてOKボタンが選択されると、選択されている認識部位の候補がファンクションメニューやカスタムキーで切り換えが可能な認識部位として決定され、メニュー画面45が表示される。一方、メニュー画面47においてCancelボタンが選択されると、切り換えが可能な認識部位が決定されることなくメニュー画面45が表示される。
 なお、メニュー画面42において「鳥」が選択された場合、「動物」が選択された場合のメニュー画面45と同様のメニュー画面が表示され、乗り移り範囲、追尾ねばり、認識感度、認識部位(個別)、認識部位切換設定(個別)を選択決定することが可能である。
 図13は、AF設定時のメニュー画面を示した図である。図13に示すように、メニュー画面42において、上ボタン6c、下ボタン6dを操作して「動物+鳥」が選択された後に、右ボタン6eが操作されると、認識対象として「動物+鳥」が決定され、メニュー画面48が表示される。
 メニュー画面48は、被写体種別「動物+鳥」の撮像設定を決定登録する画面であり、優先度を選択するための「優先度」項目、認識部位を選択するための「認識部位」項目、ファンクションメニューやカスタムキーで切り換えられる認識部位を選択するための「認識部位切換設定」項目、被写体種別「動物」に関する詳細設定(撮像設定)を行うための「動物:詳細設定」項目、被写体種別「鳥」に関する詳細設定を行うための「鳥:詳細設定」項目が設けられている。
 メニュー画面48において「優先度」項目が選択された後に、右ボタン6eまたは決定ボタン6gが操作されると、メニュー画面49が表示される。メニュー画面49には、予め決められたルールに基づいて優先度を設定する「オート」、動物を優先する「動物優先」、鳥を優先する「鳥優先」が表示されるとともに、これらのうちの1つが選択可能となっている。
 そして、上ボタン6c、下ボタン6dを操作して優先度として「オート」、「動物優先」、「鳥優先」のいずれかが選択された後に、左ボタン6fまたはメニューボタン6hが操作されると、選択中の優先度が決定され、メニュー画面48が表示される。
 また、「認識部位」項目が選択されると、メニュー画面50が表示される。メニュー画面50には、認識部位として「オート」、「瞳+頭」、「瞳」、「認識対象ごとの設定に従う」が表示されるとともに、図中黒丸で示すように、いずれか1つの認識部位が選択可能となっている。
 ここで、「認識対象ごとの設定に従う」は、認識対象である「動物」および「鳥」について、それぞれが認識対象となった際のメニュー画面46で選択された認識部位が、ここでの認識部位として個別に設定されることになる。
 したがって、例えば、被写体種別「動物」については認識部位として「オート」が設定され、被写体種別「鳥」については認識部位として「瞳」が設定されるなど、被写体種別ごとに個別の認識部位が決定されることになる。
 一方、「オート」、「瞳+頭」、「瞳」は、被写体種別である「動物」および「鳥」について共通で認識部位が決定されることになる。
 また、メニュー画面48において「認識部位切換設定」が選択された後に、右ボタン6eまたは決定ボタン6gが操作されるとると、メニュー画面51が表示される。メニュー画面51には、ファンクションメニューやカスタムキーで切り替えられる認識部位の候補として「オート」、「瞳+頭」、「瞳」、「認識対象ごとの設定に従う」が表示されるとともに、認識部位の候補を1または複数選択可能となっている。例えば、図示しているように「オート」のみが選択されている場合、ファンクションメニューやカスタムキーでは認識部位として「オート」のみが選択可能となる。
 このように、撮像装置1では、メニュー画面を介して、認識対象および撮像設定が決定されると、設定登録部31は、決定された認識対象および撮像設定を被写体種別に関連付けてメモリ部22に随時登録する。
 したがって、設定登録部31は、複数の被写体種別を含む「動物+鳥」について、複数の被写体種別(「動物」、「鳥」)について共通の認識部位(撮像設定)を登録することができる。
 また、設定登録部31は、複数の被写体種別を含む「動物+鳥」について、複数の被写体種別(「動物」、「鳥」)について個別の認識部位(撮像設定)を登録することもできる。
 また、認識部32は、複数の被写体種別「動物」および「鳥」を含む被写体種別「動物+鳥」を認識対象とする場合、被写体種別「動物」、「鳥」で個別に設定した認識部位(撮像設定)を共用して用いることができる。
 また、撮像装置1では、ファンクションメニュー61を用いて認識対象および撮像設定の切り換えを行うことが可能である。
 図14は、ファンクションメニューを示した図である。図14に示すように、撮像装置1では、撮像待機画面60が表示部18に表示されているときに、ファンクションボタン6iが操作されると、ファンクションメニュー61が表示される。ファンクションメニュー61には、メニュー設定によって予め12個の機能メニューが登録されており、登録された機能メニューに対応するアイコンが表示される。
 撮像装置1では、機能メニューとして例えば認識対象切換および認識部位切換が設定可能である。例えば、ファンクションメニュー61において上段の左から2番目に認識部位切換の機能メニューが登録されているとする。
 この場合において、認識部位切換の機能メニューが選択された後、所定のダイヤルキーが操作されると、ファンクションメニュー61の上部に、例えばメニュー画面47で選択決定された認識部位の候補が表示されるとともに、いずれか1つが選択中であることを示すように強調表示されている。
 そして、ダイヤルキーが操作される度に、ファンクションメニュー61の上部に表示された認識部位の候補のうち、選択中の候補が切り換えられて表示される。そして、設定登録部31は、最終的に選択されていた認識部位の候補を、認識部位として決定する。
 また、ファンクションメニュー61の認識部位切換の機能メニューが選択された後、決定ボタン6gが操作されると、図14下段に示すように、画面の左側に、例えばメニュー画面47で選択決定された認識部位の候補が表示されるとともに、画面の中央上段に、選択決定中である認識部位の候補が表示される。
 そして、上ボタン6cまたは下ボタン6dが操作される度に、画面左側に表示された認識部位の候補のうち、選択中の候補が切り換えられて表示される。そして、設定登録部31は、最終的に選択されていた認識部位の候補を、認識部位として決定する。
 図15は、撮像待機画面60を示した図である。また、撮像装置1では、カスタムボタン6bを用いて認識対象および撮像設定の切り換えを行うことが可能である。
 複数のカスタムボタン6bのいずれかに、例えば、予め認識部位切換をアサインしておく。そうすると、撮像待機画面60が表示されているときに、認識部位切換がアサインされたカスタムボタン6bが操作される度に、例えばメニュー画面47で選択決定された認識部位の候補がトグルして決定されるとともに、撮像待機画面60の中央に、決定された認識部位が表示される。
 図16は、AF制御のオンオフ、および、認識対象を示した図である。
 図15に示すように撮像待機画面60においては、各種設定内容を示す複数のアイコンが表示されている。そして、撮像待機画面60の左下には、AF制御のオンオフ、および、認識対象を示したAFアイコン62が表示される。
 AFアイコン62は、図16に示した複数のアイコンのいずれかが表示される。例えば、オートフォーカス制御(AF)がオンであり、かつ、認識対象が被写体種別「人物」である場合、AFアイコン62として、人物型のアイコンに「AF ON」の文字が重畳されたアイコンが表示される。
 また、オートフォーカス制御(AF)がオンであり、かつ、認識対象が被写体種別「動物+鳥」である場合、AFアイコン62として、動物型のアイコンと鳥型のアイコンに「AF ON」の文字が重畳されたアイコンが表示される。また、認識対象が被写体種別「動物+鳥」である場合、設定されている優先度に応じて動物型のアイコンと鳥型のアイコンの大きさが変えて表示される。
 例えば、優先度が動物優先である場合には動物型のアイコンが鳥型のアイコンよりも大きく表示され、優先度がオートである場合には動物型のアイコンと鳥型のアイコンとが同一の大きさで表示される。
<4.設定登録処理>
 図17は、認識対象および撮像設定の設定登録処理の流れを示したフローチャートである。図17に示すように、設定登録処理が開始されると、ステップS1で設定登録部31は、メニューボタン6hが操作されたかを判定する。メニューボタン6hが操作されると(ステップS1でYes)、ステップS2で設定登録部31は、メニュー設定処理を行う。メニュー設定処理では、操作子6に対するユーザ操作に応じて、メニュー画面(図11~図13参照)を表示部18に表示したり、認識対象および撮像設定の決定登録を行ったりする。
 ステップS3で設定登録部31は、ファンクションボタン6iが操作されたかを判定する。ファンクションボタン6iが操作されると(ステップS3でYes)、ステップS4で設定登録部31は、ファンクションメニュー設定処理を行う。ファンクションメニュー設定処理では、ファンクションメニュー61(図14参照)を表示部18に表示したり、操作子6に対するユーザ操作に応じて、認識対象または撮像設定(認識部位)を切り換えたりする。
 ステップS5で設定登録部31は、カスタムボタン6bが操作されたかを判定する。カスタムボタン6bが操作されると(ステップS5でYes)、ステップS6で設定登録部31は、カスタムボタン設定処理を行う。カスタムボタン設定処理では、操作されたカスタムボタン6bにアサインされた設定(例えば認識対象および撮像設定)を切り換える。
<5.オートフォーカス制御処理>
 図18は、オートフォーカス制御処理の流れを示したフローチャートである。図18に示すように、オートフォーカス制御処理が開始されると、ステップS11で認識部32は、メモリ部22に記憶されている認識対象(被写体種別)を読み出す。また、ステップS12で認識部32は、認識対象の被写体種別について登録された撮像設定をメモリ部22から読み出す。
 そして、ステップS13で認識部32は、認識対象である被写体種別のアルゴリズムを用いた認識処理を行い、撮像された画像から被写体およびその被写体の認識可能部位を認識する。ステップS14で認識部32は、認識対象である被写体種別の被写体が認識されたかを判定する。そして、認識対象である被写体種別の被写体が認識された場合(ステップS14でYes)、ステップS15で認識部32は、認識された被写体について認識部位が認識されたかを判定する。なお、ここでは、複数の被写体が認識された場合、予め登録または設定された優先度に応じて1つの被写体を決定し、決定した被写体について認識部位が認識されたかを判定する。
 被写体について認識部位が認識された場合(ステップS15でYes)、ステップS16で撮像制御部33は、認識された認識部位にピントが合うように各部を制御する。なお、ここでは、複数の認識部位が認識された場合、予め設定された優先度に応じて1つの認識部位が決定され、決定された認識部位にピントが合わさせられる。
<6.変形例>
 なお、実施の形態としては上記により説明した具体例に限定されるものではなく、多様な変形例としての構成を採り得るものである。
 上記した実施の形態では、メニュー画面、ファンクションメニュー、カスタムボタンの操作によって、認識対象および撮像設定を決定、登録または切り換えるするようにした。しかしながら、例えば、図19に示すように、予め複数のおすすめの撮像設定をメモリ部22に記憶しておく。設定登録部31は、メモリ部22に記憶された撮像設定を表示部18に表示した後、ユーザに選択された撮像設定を被写体種別に関連付けてメモリ部22に登録する。例えば、図19の例では、小鳥の飛翔や飛び込み、大きな鳥の飛翔など、被写体および撮像シーンごとにおすすめの撮像設定が記憶されている。
 したがって、ユーザは、複数の撮像設定の中から、被写体および撮像シーンに応じたおすすめの撮像設定を選んで登録することで、簡単に被写体種別ごとの撮像設定を登録することができる。
 また、複数の被写体種別「動物+鳥」の場合であっても、被写体および撮像シーンに応じたおすすめの撮像設定を選んで登録することができる。
 なお、おすすめの撮像設定は、通信部19を介して外部(インターネット上)からダウンロードして登録するようにしてもよい。
 また、上記した実施の形態では、認識された被写体に基づいた撮像の制御として、ピント(焦点)を合わせるようにしたが、他の処理であってもよい。
<7.まとめ>
 以上の実施の形態の撮像装置1によれば、以下のような効果を得ることができる。
 実施の形態の撮像装置1は、被写体種別ごとの撮像設定を登録する設定登録部31と、認識対象となる被写体種別の前記撮像設定に基づいて、画像から被写体を認識する認識部32と、認識部32によって認識された被写体に基づいて撮像を制御する撮像制御部33と、を備える。
 これにより、撮像装置1は、被写体種別ごとに撮像設定をユーザに予め登録させておくだけで、認識対象となる被写体種別の撮像設定に基づいた被写体の認識および撮像を行うことが可能となる。
 したがって、撮像装置1は、ユーザに煩雑な操作を強いることなく認識対象となる被写体種別の被写体に基づいた撮像を行うことができる。
 また、撮像制御部33は、認識部32によって認識された被写体にピントを合わせる。
 これにより、撮像装置1は、被写体種別ごとに撮像設定をユーザに予め登録させておくだけで、ユーザに煩雑な操作を強いることなく、ユーザが所望する被写体にピントを合わせることができる。
 また、認識部32は、複数の被写体種別を認識対象として被写体を認識する。
 これにより、撮像装置1は、例えば被写体種別「動物+鳥」のように異なる被写体種別が含まれる場合であっても、被写体種別を切り換えることなく、両方の被写体種別の被写体に対してピントを合わせることができる。
 また、設定登録部31は、複数の被写体種別を認識対象とする場合、認識対象となる複数の被写体種別について共通の撮像設定を登録する。
 これにより、撮像装置1は、例えば被写体種別「動物+鳥」のように異なる被写体種別が含まれる場合であっても、共通の撮像設定を行うだけで、両方の被写体種別の被写体に対してピントを合わせることができる。
 また、設定登録部31は、複数の被写体種別を認識対象とする場合、認識対象となる複数の被写体種別について個別の撮像設定を登録する。
 これにより、撮像装置1は、例えば被写体種別「動物+鳥」のように異なる被写体種別が含まれる場合に、それぞれの被写体種別についてユーザが所望する個別の撮像設定を行うことができ、被写体種別ごとに異なる撮像設定でピントを合わせることができる。
 また、前記設定登録部31は、認識対象となる複数の被写体種別について、個別の被写体種別を認識対象とする場合の撮像設定を共用する。
 これにより、撮像装置1は、例えば被写体種別「動物+鳥」のように異なる被写体種別が含まれる場合に、被写体種別「動物」の撮像設定、および、被写体種別「鳥」の撮像設定をそれぞれ共用することができ、ユーザはより簡易な操作で撮像設定を登録することができる。
 また、認識部32は、複数の被写体種別を認識対象とする場合において、複数の被写体種別の被写体を認識した場合、予め登録された優先度に応じた被写体に基づいて撮像を制御する。
 これにより、撮像装置1は、例えば被写体種別「動物+鳥」のように異なる被写体種別について被写体が認識された場合、登録された優先度に応じた被写体にピントを合わせることができる。
 また、設定登録部31は、複数の被写体種別を認識対象とする場合、認識対象となる複数の被写体種別について、共通の撮像設定を登録するとともに、個別の撮像設定を登録し、認識部32は、共通の撮像設定、または、個別の撮像設定のどちらか一方に基づいて被写体を認識する。
 これにより、撮像装置1は、例えば被写体種別「動物+鳥」のように異なる被写体種別が含まれる場合に、共通の撮像設定、または、個別の撮像設定を切り換えて、被写体の認識および被写体にピントを合わせることができる。
 また、撮像設定には、追尾している被写体より優先度が高い被写体を認識した際に、追尾対象を乗り移ることが可能な範囲を規定した乗り移り範囲が含まれる。
 これにより、被写体種別ごとに最適な乗り移り範囲が設定できる。
 また、撮像設定には、追尾している被写体の追尾のねばり度合いを規定した追尾ねばりが含まれる。
 これにより、被写体種別ごとに最適な追尾ねばりが設定できる。
 また、撮像設定には、被写体の認識のしやすさを規定した認識感度が含まれる。
 これにより、被写体種別ごとに最適な認識感度が設定できる。
 前記設定登録部は、被写体種別ごとに制御対象となる被写体の部位を登録する。
 これにより、被写体種別ごとに最適な部位を対象としてピントを合わせることができる。
 また、設定登録部31は、被写体種別ごとに制御対象となる複数の部位の優先度を登録する。
 これにより、複数の部位が認識された場合に、より最適な部位を対象としてピントを合わせることができる。
 また、設定登録部31は、撮像設定を示すアイコンを表示部に表示する。
 これにより、撮像設定を容易に確認させることができる。
 また、アイコンは、複数の被写体種別を認識対象とする場合における被写体種別の優先度に応じた大きさで表示する。
 これにより、アイコンを介して、被写体種別の優先度を容易に確認させることができる。
 また、設定登録部31は、撮像設定を所定の操作子6に対する操作で切換できる。
 これにより、撮像設定を容易に切り換えることができる。
 また、設定登録部31は、撮像設定が変更された場合、変更された撮像設定を表示部に表示する。
 これにより、変更された撮像設定を容易に確認させることができる。
 また、設定登録部31は、予め決められた撮像設定を表示部に表示し、表示された撮像設定が選択された場合、選択された撮像設定を登録する。
 これにより、撮像設定をより容易に登録することができる。
 また、撮像制御方法は、被写体種別ごとの撮像設定を登録し、認識対象となる被写体種別の撮像設定に基づいて、画像から被写体を認識し、認識された被写体に基づいて撮像を制御する。
 また、プログラムは、被写体種別ごとの撮像設定を登録し、認識対象となる被写体種別の前記撮像設定に基づいて、画像から被写体を認識し、認識された被写体に基づいて撮像を制御する処理をコンピュータに実行させる。
 実施の形態のプログラムは、上記の画像処理を、例えばCPU、DSP等のプロセッサ、或いはこれらを含むデバイスに実行させるプログラムである。
 このようなプログラムはコンピュータ装置等の機器に内蔵されている記録媒体としてのHDDや、CPUを有するマイクロコンピュータ内のROM等に予め記録しておくことができる。また、このようなプログラムは、フレキシブルディスク、CD-ROM(Compact Disc Read Only Memory)、MO(Magneto Optical)ディスク、DVD(Digital Versatile Disc)、ブルーレイディスク(Blu-ray Disc(登録商標))、磁気ディスク、半導体メモリ、メモリカードなどのリムーバブル記録媒体に、一時的あるいは永続的に格納(記録)しておくことができる。このようなリムーバブル記録媒体は、いわゆるパッケージソフトウェアとして提供することができる。
 また、このようなプログラムは、リムーバブル記録媒体からパーソナルコンピュータ等にインストールする他、ダウンロードサイトから、LAN(Local Area Network)、インターネットなどのネットワークを介してダウンロードすることもできる。
 なお、本明細書に記載された効果はあくまでも例示であって限定されるものではなく、また他の効果があってもよい。
<8.本技術>
 なお本技術は以下のような構成も採ることができる。
(1)
 被写体種別ごとの撮像設定を登録する設定登録部と、
 認識対象となる前記被写体種別の前記撮像設定に基づいて、画像から被写体を認識する認識部と、
 前記認識部によって認識された前記被写体に基づいて撮像を制御する撮像制御部と、
を備える撮像装置。
(2)
 前記撮像制御部は、前記認識部によって認識された前記被写体にピントを合わせる
 (1)に記載の撮像装置。
(3)
 前記認識部は、複数の前記被写体種別を認識対象として前記被写体を認識する
 (1)または(2)に記載の撮像装置。
(4)
 前記設定登録部は、複数の前記被写体種別を認識対象とする場合、認識対象となる複数の前記被写体種別について共通の前記撮像設定を登録する
 (3)に記載の撮像装置。
(5)
 前記設定登録部は、複数の前記被写体種別を認識対象とする場合、認識対象となる複数の前記被写体種別について個別の前記撮像設定を登録する
 (3)または(4)に記載の撮像装置。
(6)
 前記設定登録部は、認識対象となる複数の前記被写体種別について、個別の前記被写体種別を認識対象とする場合の前記撮像設定を共用する
 (5)に記載の撮像装置。
(7)
 前記認識部は、複数の前記被写体種別を認識対象とする場合において、複数の前記被写体種別の前記被写体を認識した場合、予め登録された優先度に応じた前記被写体に基づいて撮像を制御する
 (3)から(6)のいずれかに記載の撮像装置。
(8)
 前記設定登録部は、複数の前記被写体種別を認識対象とする場合、認識対象となる複数の前記被写体種別について、共通の前記撮像設定を登録するとともに、個別の前記撮像設定を登録し、
 前記認識部は、共通の前記撮像設定、または、個別の前記撮像設定のどちらか一方に基づいて前記被写体を認識する
 (3)から(7)のいずれかに記載の撮像装置。
(9)
 前記撮像設定には、追尾している被写体より優先度が高い被写体を認識した際に、追尾対象を乗り移ることが可能な範囲を規定した乗り移り範囲が含まれる
 (1)から(8)のいずれかに記載の撮像装置。
(10)
 前記撮像設定には、追尾している被写体の追尾のねばり度合いを規定した追尾ねばりが含まれる
 (1)から(9)のいずれかに記載の撮像装置。
(11)
 前記撮像設定には、前記被写体の認識のしやすさを規定した認識感度が含まれる
 (1)から(10)のいずれかに記載の撮像装置。
(12)
 前記設定登録部は、前記被写体種別ごとに制御対象となる前記被写体の部位を登録する
 (1)から(11)のいずれかに記載の撮像装置。
(13)
 前記設定登録部は、前記被写体種別ごとに制御対象となる複数の前記部位の優先度を登録する
 (12)に記載の撮像装置。
(14)
 前記設定登録部は、前記撮像設定を示すアイコンを表示部に表示する
 (1)から(13)のいずれかに記載の撮像装置。
(15)
 前記アイコンは、複数の前記被写体種別を認識対象とする場合における前記被写体種別の優先度に応じた大きさで表示する
 (14)に記載の撮像装置。
(16)
 前記設定登録部は、前記撮像設定を所定の操作子に対する操作で切換できる
 (1)から(15)のいずれかに記載の撮像装置。
(17)
 前記設定登録部は、前記撮像設定が変更された場合、変更された前記撮像設定を表示部に表示する
 (1)から(16)のいずれかに記載の撮像装置。
(18)
 前記設定登録部は、予め決められた前記撮像設定を表示部に表示し、表示された前記撮像設定が選択された場合、選択された前記撮像設定を登録する
 (1)から(17)のいずれかに記載の撮像装置。
(19)
 被写体種別ごとの撮像設定を登録し、
 認識対象となる前記被写体種別の前記撮像設定に基づいて、画像から被写体を認識し、
 認識された前記被写体に基づいて撮像を制御する
 撮像制御方法。
(20)
 被写体種別ごとの撮像設定を登録し、
 認識対象となる前記被写体種別の前記撮像設定に基づいて、画像から被写体を認識し、
 認識された前記被写体に基づいて撮像を制御する
 処理をコンピュータに実行させるプログラム。
1 撮像装置
6 操作子
21 カメラ制御部
31 設定登録部
32 認識部
33 撮像制御部

Claims (20)

  1.  被写体種別ごとの撮像設定を登録する設定登録部と、
     認識対象となる前記被写体種別の前記撮像設定に基づいて、画像から被写体を認識する認識部と、
     前記認識部によって認識された前記被写体に基づいて撮像を制御する撮像制御部と、
    を備える撮像装置。
  2.  前記撮像制御部は、前記認識部によって認識された前記被写体にピントを合わせる
     請求項1に記載の撮像装置。
  3.  前記認識部は、複数の前記被写体種別を認識対象として前記被写体を認識する
     請求項1に記載の撮像装置。
  4.  前記設定登録部は、複数の前記被写体種別を認識対象とする場合、認識対象となる複数の前記被写体種別について共通の前記撮像設定を登録する
     請求項3に記載の撮像装置。
  5.  前記設定登録部は、複数の前記被写体種別を認識対象とする場合、認識対象となる複数の前記被写体種別について個別の前記撮像設定を登録する
     請求項3に記載の撮像装置。
  6.  前記設定登録部は、認識対象となる複数の前記被写体種別について、個別の前記被写体種別を認識対象とする場合の前記撮像設定を共用する
     請求項5に記載の撮像装置。
  7.  前記認識部は、複数の前記被写体種別を認識対象とする場合において、複数の前記被写体種別の前記被写体を認識した場合、予め登録された優先度に応じた前記被写体に基づいて撮像を制御する
     請求項3に記載の撮像装置。
  8.  前記設定登録部は、複数の前記被写体種別を認識対象とする場合、認識対象となる複数の前記被写体種別について、共通の前記撮像設定を登録するとともに、個別の前記撮像設定を登録し、
     前記認識部は、共通の前記撮像設定、または、個別の前記撮像設定のどちらか一方に基づいて前記被写体を認識する
     請求項3に記載の撮像装置。
  9.  前記撮像設定には、追尾している被写体より優先度が高い被写体を認識した際に、追尾対象を乗り移ることが可能な範囲を規定した乗り移り範囲が含まれる
     請求項1に記載の撮像装置。
  10.  前記撮像設定には、追尾している被写体の追尾のねばり度合いを規定した追尾ねばりが含まれる
     請求項1に記載の撮像装置。
  11.  前記撮像設定には、前記被写体の認識のしやすさを規定した認識感度が含まれる
     請求項1に記載の撮像装置。
  12.  前記設定登録部は、前記被写体種別ごとに制御対象となる前記被写体の部位を登録する
     請求項1に記載の撮像装置。
  13.  前記設定登録部は、前記被写体種別ごとに制御対象となる複数の前記部位の優先度を登録する
     請求項12に記載の撮像装置。
  14.  前記設定登録部は、前記撮像設定を示すアイコンを表示部に表示する
     請求項1に記載の撮像装置。
  15.  前記アイコンは、複数の前記被写体種別を認識対象とする場合における前記被写体種別の優先度に応じた大きさで表示する
     請求項14に記載の撮像装置。
  16.  前記設定登録部は、前記撮像設定を所定の操作子に対する操作で切換できる
     請求項1に記載の撮像装置。
  17.  前記設定登録部は、前記撮像設定が変更された場合、変更された前記撮像設定を表示部に表示する
     請求項1に記載の撮像装置。
  18.  前記設定登録部は、予め決められた前記撮像設定を表示部に表示し、表示された前記撮像設定が選択された場合、選択された前記撮像設定を登録する
     請求項1に記載の撮像装置。
  19.  被写体種別ごとの撮像設定を登録し、
     認識対象となる前記被写体種別の前記撮像設定に基づいて、画像から被写体を認識し、
     認識された前記被写体に基づいて撮像を制御する
     撮像制御方法。
  20.  被写体種別ごとの撮像設定を登録し、
     認識対象となる前記被写体種別の前記撮像設定に基づいて、画像から被写体を認識し、
     認識された前記被写体に基づいて撮像を制御する
     処理をコンピュータに実行させるプログラム。
PCT/JP2023/009113 2022-03-30 2023-03-09 撮像装置、撮像制御方法、プログラム WO2023189367A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2022-056223 2022-03-30
JP2022056223 2022-03-30

Publications (1)

Publication Number Publication Date
WO2023189367A1 true WO2023189367A1 (ja) 2023-10-05

Family

ID=88200638

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2023/009113 WO2023189367A1 (ja) 2022-03-30 2023-03-09 撮像装置、撮像制御方法、プログラム

Country Status (1)

Country Link
WO (1) WO2023189367A1 (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007019893A (ja) * 2005-07-08 2007-01-25 Casio Comput Co Ltd 画像生成装置、及び画像生成方法
JP2007074141A (ja) * 2005-09-05 2007-03-22 Canon Inc 撮像装置及びその制御方法
JP2021132362A (ja) * 2020-02-19 2021-09-09 キヤノン株式会社 被写体追尾装置、被写体追尾方法、コンピュータプログラム及び記憶媒体
JP2022130038A (ja) * 2021-02-25 2022-09-06 キヤノン株式会社 撮像装置、制御方法、プログラム
JP2022190237A (ja) * 2021-06-14 2022-12-26 キヤノン株式会社 電子機器、電子機器の制御方法、プログラム、記憶媒体

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007019893A (ja) * 2005-07-08 2007-01-25 Casio Comput Co Ltd 画像生成装置、及び画像生成方法
JP2007074141A (ja) * 2005-09-05 2007-03-22 Canon Inc 撮像装置及びその制御方法
JP2021132362A (ja) * 2020-02-19 2021-09-09 キヤノン株式会社 被写体追尾装置、被写体追尾方法、コンピュータプログラム及び記憶媒体
JP2022130038A (ja) * 2021-02-25 2022-09-06 キヤノン株式会社 撮像装置、制御方法、プログラム
JP2022190237A (ja) * 2021-06-14 2022-12-26 キヤノン株式会社 電子機器、電子機器の制御方法、プログラム、記憶媒体

Similar Documents

Publication Publication Date Title
US11099711B2 (en) Display apparatus and method
JP4761146B2 (ja) 撮像装置及びそのプログラム
JP4577113B2 (ja) 対象決定装置、撮像装置および監視装置
WO2013088917A1 (ja) 画像処理装置、画像処理方法、及び記録媒体
JP5719223B2 (ja) 画像記録装置、記録方法およびプログラム
JP4780205B2 (ja) 撮像装置、画角調節方法、及び、プログラム
US8502883B2 (en) Photographing apparatus and photographing control method
CN107087103B (zh) 摄像装置、摄像方法以及计算机可读存储介质
JP2010165012A (ja) 撮像装置、画像検索方法及びプログラム
US20190349530A1 (en) Control apparatus and control method
JP2024019284A (ja) 撮像装置、撮像方法、およびプログラム
WO2023189367A1 (ja) 撮像装置、撮像制御方法、プログラム
JP2003262786A (ja) 撮像装置及びその自動合焦方法
WO2023189366A1 (ja) 撮像装置、撮像制御方法、プログラム
JP2015159550A (ja) 撮像装置、撮像方法およびプログラム
JP7342883B2 (ja) 撮像制御装置、撮像装置、撮像制御方法
JP2013242408A (ja) 撮像装置およびその制御方法
JP6988355B2 (ja) 撮像装置
JP6602093B2 (ja) 撮像装置、撮像方法、撮影システムおよびプログラム
JP2006254278A (ja) 撮影装置
WO2022070938A1 (ja) 撮像装置、撮像方法、およびプログラム
WO2021140746A1 (ja) 撮像装置、情報処理方法、プログラム
JP7294392B2 (ja) 撮像装置
JP5938268B2 (ja) 撮像装置およびその制御方法
US20230139034A1 (en) Image capturing apparatus and method for controlling image capturing apparatus

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23779393

Country of ref document: EP

Kind code of ref document: A1