JP2012178820A - 電子機器 - Google Patents

電子機器 Download PDF

Info

Publication number
JP2012178820A
JP2012178820A JP2011281258A JP2011281258A JP2012178820A JP 2012178820 A JP2012178820 A JP 2012178820A JP 2011281258 A JP2011281258 A JP 2011281258A JP 2011281258 A JP2011281258 A JP 2011281258A JP 2012178820 A JP2012178820 A JP 2012178820A
Authority
JP
Japan
Prior art keywords
image
processing
thumbnail
input image
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2011281258A
Other languages
English (en)
Inventor
Masahiro Yokohata
正大 横畠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Priority to JP2011281258A priority Critical patent/JP2012178820A/ja
Priority to CN2012100190539A priority patent/CN102685374A/zh
Priority to US13/362,498 priority patent/US20120194544A1/en
Publication of JP2012178820A publication Critical patent/JP2012178820A/ja
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/0044Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet
    • H04N1/00442Simultaneous viewing of a plurality of images, e.g. using a mosaic display arrangement of thumbnails
    • H04N1/00453Simultaneous viewing of a plurality of images, e.g. using a mosaic display arrangement of thumbnails arranged in a two dimensional array
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/0044Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet
    • H04N1/00461Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet marking or otherwise tagging one or more displayed image, e.g. for selective reproduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32101Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N1/32128Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title attached to the image data, e.g. file header, transmitted message header, information on the same page or in the same computer file as the image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/958Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging
    • H04N23/959Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging by adjusting depth of field during image capture, e.g. maximising or setting range based on scene characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00Still video cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/325Modified version of the image, e.g. part of the image, image reduced in size or resolution, thumbnail or screennail
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3273Display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3274Storage or retrieval of prestored additional information
    • H04N2201/3277The additional information being stored in the same storage device as the image data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)
  • User Interface Of Digital Computer (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

【課題】サムネイル表示モードにおいて、所望の入力画像を容易に識別する。
【解決手段】電子機器は、入力画像についてのサムネイル画像を表示する表示部と、ユーザによる加工指示操作に従って入力画像又は入力画像の元になる画像に加工処理(デジタルフォーカス等)を実行する画像処理部と、を備える。入力画像は、オリジナル画像又はオリジナル画像に加工処理を施して得られる加工画像である。注目入力画像のサムネイル画像を含む複数のサムネイル画像を同時表示する表示画面において、注目入力画像が加工画像であるとき、注目入力画像が加工画像であることをユーザに知らしめるアイコン450を表示する。例えば、注目入力画像がオリジナル画像に加工処理をQ回施して得られた画像である場合、Q個のアイコン450をサムネイル画像(511又は512)と共に表示する。
【選択図】図19

Description

本発明は、撮像装置等の電子機器に関する。
撮像装置にて画像の撮影を行った後に、画像処理にて撮影画像の合焦状態(被写界深度等)を変更する方法が様々に提案されており、そのような画像処理の一種はデジタルフォーカスとも呼ばれている。上記のような画像処理を含む、画像を加工するための画像処理を、ここでは加工処理と呼ぶ。また、加工処理を経ていない画像をオリジナル画像と呼び、オリジナル画像に対して加工処理を施して得られる画像を加工画像と呼ぶ。図27に、オリジナル画像と複数の加工画像との関係を示す。
加工処理を繰り返してオリジナル画像に順次適用することもできる。即ち、図27に示す如く、オリジナル画像900に対して加工処理を1回施して加工画像901を得た後、加工画像901に更に加工処理を施すことで加工画像901と異なる加工画像902を生成する、といったことも成されうる。尚、図27の例では、加工処理によってオリジナル画像900の被写界深度が狭められたことが想定されおり、被写体の像のボケ具合いが被写体の輪郭線の太さによって表現されている。
一方、多数の入力画像を取り扱う電子機器では、サムネイル表示機能が備えられていることが多い。オリジナル画像及び加工画像の夫々は入力画像の一種であり、ここでは、電子機器が撮像装置であることを想定する。サムネイル表示機能を実現するサムネイル表示モードでは、一般的に、図28に示す如く、表示画面に複数の入力画像についての複数のサムネイル画像(図28の例では、6枚のサムネイル画像)が同時に並べて表示される。サムネイル画像は、通常、対応する入力画像の縮小画像である。
何れかの入力画像の閲覧又は編集等を望むユーザは、表示された複数のサムネイル画像の中から注目入力画像に対応するサムネイル画像を、ユーザインターフェースを介して選択する。この選択後、ユーザは、注目入力画像に対して所望の操作を成すことができる。
ここにおける所望の操作には、注目入力画像を加工するための上記加工処理が含まれ、電子機器としての撮像装置のユーザは、撮影されたオリジナル画像に対する加工処理(例えば、オリジナル画像の被写界深度を変更する画像処理)の実行を指示することができる。このような加工処理を利用するユーザは、オリジナル画像と加工画像の両方を記録媒体に保存しておくことが多い。その結果、撮像装置の記録媒体には、オリジナル画像としての入力画像と加工画像としての入力画像が混在して記録される。図29に、このような混在が生じているときのサムネイル表示画面例を示す。図29において、画像TM900及びTM901は、夫々、図27のオリジナル画像900及び加工画像901に対応するサムネイル画像である。
尚、下記特許文献1には、画像内の人物の笑顔レベルに応じたランキングをサムネイル画像と共に表示する方法が提案されている。
特開2010−187109号公報
図29の表示画面を見たユーザは、サムネイル画像TM900及びTM901を含む複数のサムネイル画像の中から所望の入力画像に対応するサムネイル画像を選択することができる。しかしながら、サムネイル画像の表示サイズが十分に大きくなく、またサムネイル画像TM900及びTM901が互いに類似していることが多いため、ユーザは、注目したサムネイル画像がオリジナル画像に対応するものであるのか或いは加工画像に対応するものであるのかを判別し難いことも多い。この判別が容易になれば、ユーザは、所望の入力画像(オリジナル画像及び加工画像の何れか)を容易に見つけ出すことが可能となる。尚、上記特許文献1の方法は上記判別の容易化に寄与しない。
そこで本発明は、ユーザによる所望の入力画像の認識容易化に寄与する電子機器を提供することを目的とする。
本発明に係る電子機器は、入力画像についてのサムネイル画像を表示する表示部と、加工処理の実行を指示する加工指示操作を受けるユーザインターフェースと、前記加工指示操作に従って前記入力画像又は前記入力画像の元になる画像に前記加工処理を実行する画像処理部と、を備えた電子機器において、前記表示部にて前記サムネイル画像が表示される際、前記入力画像が前記加工処理を経て得られた画像であるか否かが、前記表示部を用いて視覚的に示されることを特徴とする。
これにより例えば、ユーザは、注目したサムネイル画像がオリジナル画像に対応するものであるのか或いは加工画像に対応するものであるのかを容易に判別することが可能となる。結果、サムネイル画像が表示されている表示画面上において、ユーザは、所望の入力画像を容易に見つけ出すことが可能となる。
具体的には例えば、前記表示部にて前記サムネイル画像が表示される場合において、前記入力画像が前記加工処理を経て得られた画像であるとき、前記入力画像が前記加工処理を経て得られた画像であることを示す映像情報を表示すると良い。
更に例えば、前記入力画像が前記加工処理を経て得られた画像である場合、前記入力画像を得るために実行された前記加工処理の回数に応じて、前記映像情報を変化させても良い。
これにより、ユーザは、サムネイル画像の表示画面上で、前記入力画像を得るために実行された加工処理の回数を容易に認識することができる。
或いは例えば、前記表示部にて前記サムネイル画像が表示される場合において、前記入力画像が前記加工処理を経て得られた画像であるとき、表示される前記サムネイル画像を変形しても良い。
この際例えば、前記入力画像が前記加工処理を経て得られた画像である場合、前記入力画像を得るために実行された前記加工処理の回数に応じて、表示される前記サムネイル画像の変形状態を変化させても良い。
これにより、ユーザは、サムネイル画像の表示画面上で、前記入力画像を得るために実行された加工処理の回数を容易に認識することができる。
また具体的には例えば、前記加工処理は、前記入力画像又は前記入力画像の元になる画像の合焦状態を変化させるための画像処理を含んでいても良い。或いは例えば、前記加工処理は、前記入力画像又は前記入力画像の元になる画像に設定された補正対象領域を他の画像領域の画像データを用いて補正するための画像処理を含んでいても良い。この場合において、前記入力画像が前記加工処理を経て得られた画像であるとき、前記サムネイル画像上で前記補正対象領域の位置を特定可能なように前記映像情報を表示すると良い。
本発明によれば、ユーザによる所望の入力画像の認識容易化に寄与する電子機器を提供することが可能である。
本発明の第1実施形態に係る撮像装置の概略全体ブロック図である。 図1の撮像部の内部構成図である。 被写体距離の意義を説明するための図(a)と、注目画像を示す図(b)と、被写界深度の意義を説明するための図(c)である。 本発明の第1実施形態に係る画像ファイルの構造を示す図である。 図1の撮像装置に設けられる被写体距離検出部を示す図である。 複数の入力画像と、複数のサムネイル画像と、複数の画像ファイルとの関係を示す図である。 本発明の第1実施形態の特徴的動作に特に関与する部位のブロック図を示す。 加工画像が画像ファイルに格納される様子を示す図である。 図1の撮像装置による、加工画像の生成動作のフローチャートである。 複数の入力画像と、複数のサムネイル画像と、複数の画像ファイルとの関係を示す図である。 表示画面に複数の表示領域が設定される様子を示す図(a)と、表示画面に複数のサムネイル画像が同時表示される様子を示す図(b)である。 図1の撮像装置による、サムネイル表示モードにおける動作のフローチャートである。 サムネイル表示モードにおいて、1つのサムネイル画像が指定された様子を示す図である。 選択操作及び加工処理等のタイミング関係を示す図である。 入力画像及び加工画像と、それらに対応するサムネイル画像と、を示す図である。 サムネイル表示モードにおける、更新された表示画面の例を示す図である。 オリジナル画像を元に2枚の加工画像が生成される様子を示す図である。 複数の記号の意義を説明するための図である。 表示方法例αに係り、表示画面に表示されるサムネイル画像を示す図である。 表示方法例αに係り、表示画面に表示されるサムネイル画像を示す図である。 表示方法例αに係り、表示画面に表示されるサムネイル画像を示す図である。 表示方法例αに係り、表示画面に表示されるサムネイル画像を示す図である。 表示方法例αに係り、表示画面に表示されるサムネイル画像を示す図である。 表示方法例βに係り、表示画面に表示されるサムネイル画像を示す図である。 表示方法例βに係り、表示画面に表示されるサムネイル画像を示す図である。 表示方法例βに係り、表示画面に表示されるサムネイル画像を示す図である。 従来技術に係り、オリジナル画像と加工画像との関係を示す図である。 従来技術に係り、サムネイル表示モードの表示画面例を示す図である。 従来技術に係り、サムネイル表示モードの表示画面例を示す図である。 本発明の第2実施形態の特徴的動作に特に関与する部位のブロック図を示す。 本発明の第2実施形態で想定される入力画像を示す図である。 本発明の第2実施形態に係る入力画像及び加工画像を示す図である。 本発明の第2実施形態に係る画像ファイルの構造を示す図である。 本発明の第2実施形態に係り、入力画像と、それに対応するサムネイル画像及び画像ファイルを示す図である。 本発明の第2実施形態に係る複数のサムネイル画像を示す図である。 本発明の第2実施形態に係り、表示画面に表示されるサムネイル画像の例を示す図である。 本発明の第2実施形態に係り、表示画面に表示されるサムネイル画像の他の例を示す図である。 本発明の第2実施形態に係り、表示画面に表示されるサムネイル画像の更に他の例を示す図である。
以下、本発明の実施形態の例を、図面を参照して具体的に説明する。参照される各図において、同一の部分には同一の符号を付し、同一の部分に関する重複する説明を原則として省略する。尚、本明細書では、記述の簡略化上、情報、物理量、状態量又は部材等を参照する記号又は符号を付記することによって該記号又は符号に対応する情報、物理量、状態量又は部材等の名称を省略又は略記することがある。例えば、入力画像を記号I[i]によって表す場合(図6参照)、入力画像I[i]を画像I[i]又は単にI[i]と表記する場合がある。
<<第1実施形態>>
本発明の第1実施形態を説明する。図1は、本発明の第1実施形態に係る撮像装置1の概略全体ブロック図である。撮像装置1は、静止画像及び動画像を撮影及び記録可能なデジタルビデオカメラである。但し、撮像装置1は、静止画像のみを撮影及び記録可能なデジタルスチルカメラであっても良い。また、撮像装置1は、携帯電話機などの携帯端末に搭載されるものであっても良い。
撮像装置1は、撮像部11と、AFE(Analog Front End)12と、主制御部13と、内部メモリ14と、表示部15と、記録媒体16と、操作部17と、を備えている。尚、表示部15は撮像装置1の外部機器(不図示)に設けられたものである、と解釈しても良い。
撮像部11は、撮像素子を用いて被写体の撮影を行う。図2は、撮像部11の内部構成図である。撮像部11は、光学系35と、絞り32と、CCD(Charge Coupled Device)又はCMOS(Complementary Metal Oxide Semiconductor)イメージセンサなどから成る撮像素子(固体撮像素子)33と、光学系35や絞り32を駆動制御するためのドライバ34と、を有している。光学系35は、撮像部11の画角を調節するためのズームレンズ30及び焦点を合わせるためのフォーカスレンズ31を含む複数枚のレンズから形成される。ズームレンズ30及びフォーカスレンズ31は光軸方向に移動可能である。主制御部13からの制御信号に基づき、光学系35内におけるズームレンズ30及びフォーカスレンズ31の位置並びに絞り32の開度(即ち絞り値)が制御される。
撮像素子33は、水平及び垂直方向に複数の受光画素が配列されることによって形成される。撮像素子33の各受光画素は、光学系35及び絞り32を介して入射した被写体の光学像を光電変換し、該光電変換によって得られた電気信号をAFE12(Analog Front End)に出力する。
AFE12は、撮像部11(撮像素子33)から出力されるアナログ信号を増幅し、増幅されたアナログ信号をデジタル信号に変換してから主制御部13に出力する。AFE12における信号増幅の増幅度は主制御部13によって制御される。主制御部13は、AFE12の出力信号によって表される画像に対して必要な画像処理を施し、画像処理後の画像についての映像信号を生成する。主制御部13は、表示部15の表示内容を制御する表示制御部22を備え、表示に必要な制御を表示部15に対して行う。
内部メモリ14は、SDRAM(Synchronous Dynamic Random Access Memory)等にて形成され、撮像装置1内で生成された各種データを一時的に記憶する。
表示部15は、液晶ディスプレイパネル等の表示画面を有する表示装置であり、主制御部13の制御の下、撮影された画像や記録媒体16に記録されている画像などを表示する。本明細書において、単に表示及び表示画面と言った場合、それらは、表示部15における表示及び表示画面を指すものとする。表示部15にはタッチパネル19が設けられており、ユーザは、表示部15の表示画面を操作体(指やタッチペンなど)で触れることで撮像装置1に特定の指示を与えることができる。尚、タッチパネル19を割愛することも可能である。
記録媒体16は、カード状半導体メモリや磁気ディスク等の不揮発性メモリであり、主制御部13による制御の下、撮影画像の映像信号等を記録する。操作部17は、静止画像の撮影指示を受け付けるシャッタボタン20及びズーム倍率の変更指示を受け付けるズームボタン21等を備え、外部からの各種操作を受け付ける。操作部17に対する操作内容は、主制御部13に伝達される。操作部17及びタッチパネル19を、ユーザからの任意の指示及び操作を受けるユーザインターフェースと呼ぶことができる。シャッタボタン20及びズームボタン21は、タッチパネル19上のボタンであってもよい。
撮像装置1の動作モードには、画像(静止画像又は動画像)の撮影及び記録が可能な撮影モードと、記録媒体16に記録された画像(静止画像又は動画像)を表示部15に再生表示する再生モードと、が含まれる。操作部17に対する操作に応じて、各モード間の遷移は実施される。
撮影モードでは、所定のフレーム周期にて周期的に被写体の撮影が行われ、被写体の撮影画像が順次取得される。画像を表す映像信号を画像データとも呼ぶ。映像信号は、例えば、輝度信号及び色差信号を含む。或る画素に対する画像データを、画素信号と呼ぶこともある。或る画像の大きさ又は画像領域の大きさを、画像サイズとも呼ぶ。注目画像又は注目画像領域の画像サイズを、注目画像を形成する画素の数又は注目画像領域に属する画素の数にて表現することができる。尚、本明細書では、或る画像の画像データのことを単に画像と言うこともある。従って、例えば、入力画像の生成、記録、加工、変形、編集又は保存とは、入力画像の画像データの生成、記録、加工、変形、編集又は保存を意味する。
図3(a)に示す如く、任意の被写体と撮像装置1(より具体的には撮像素子33)との間における実空間上の距離を、被写体距離と呼ぶ。図3(b)に示す注目画像300の撮影時において、撮像部11の被写界深度内の被写体距離を有する被写体301は注目画像300上で合焦しており、撮像部11の被写界深度外の被写体距離を有する被写体302は注目画像300上で合焦していない(図3(c)参照)。図3(b)では、被写体の像のボケ具合いを、被写体の輪郭線の太さによって表現している(後述の図6等においても同様)。
図4に、入力画像の画像データを格納する画像ファイルの構造を示す。撮像部11の出力信号に基づく画像、即ち撮像装置1の撮影によって得た画像は、入力画像の一種である。入力画像を、対象画像又は記録画像と呼ぶこともできる。1又は複数の画像ファイルを記録媒体16に保存可能である。画像ファイルには、入力画像の画像データを格納する本体領域と、入力画像に対応する付加データを格納するヘッダ領域が設けられている。付加データには、距離データ、合焦状態データ、加工回数データ、サムネイル画像の画像データを含む、入力画像に関する様々なデータが含まれている。
距離データは、主制御部13等に備えられた被写体距離検出部41(図5参照)によって生成される。被写体距離検出部41は、入力画像の各画素における被写体の被写体距離を検出し、その検出結果(入力画像の各画素における被写体の被写体距離の検出値)を表す距離データを生成する。被写体距離の検出方法として、公知の方法を含む任意の方法を利用可能である。例えば、ステレオカメラ又は測距センサを用いて被写体距離を検出しても良いし、入力画像におけるエッジ情報を利用した推定処理によって被写体距離を求めてもよい。
合焦状態データは、入力画像における被写界深度を特定するデータであり、例えば、合焦状態データによって入力画像の被写界深度に属する距離の内の最短距離、最長距離及び中心距離が特定される。被写界深度の最短距離及び最長距離間の大きさは、一般に、被写界深度の深さとも呼ばれる。上記の最短距離、中心距離及び最長距離の数値が合焦状態データとして与えられていても良いし、入力画像の撮影時における撮像部11の焦点距離及び絞り値など、上記の最短距離、中心距離及び最長距離を導出するためのデータが合焦状態データとして与えられていても良い。
加工回数データは、入力画像を得るために成された加工処理の実行回数を示す(加工処理の具体例については後述)。図6に示す如く、加工処理が1回も施されていない入力画像を特にオリジナル画像と呼び、オリジナル画像としての入力画像を記号I[0]で表す。また、入力画像I[0]に加工処理をi回施すことで得られた入力画像を記号I[i]で表す(iは整数)。即ち、入力画像I[i]に加工処理を1回施すことで入力画像I[i]は入力画像I[i+1]に加工される。そうすると、入力画像I[i]を得るために成された加工処理の実行回数はi回であり、従って、入力画像I[i]の画像データを格納する画像ファイルにおける加工回数データは、変数iの値を指し示す。尚、変数iが自然数であるとき、入力画像I[i]は後述の加工画像でもある(図7参照)。従って、変数iが自然数であるときの入力画像I[i]は加工画像とも称される。
サムネイル画像は、入力画像の解像度を低減させることで得られる画像(換言すれば、入力画像の画像サイズを低減させることで得られる画像)である。従って、サムネイル画像の解像度及び画像サイズは入力画像の解像度及び画像サイズよりも小さい。解像度又は画像サイズの低減は、公知の解像度変換によって実現される。図6に示す如く、入力画像I[i]に対応するサムネイル画像を記号TM[i]にて示す。単純には例えば、サムネイル画像TM[i]は、入力画像I[i]における幾つかの画素を間引くことで生成可能である。また、入力画像I[i]の画像データを格納した画像ファイルを記号FL[i]にて表す(図6参照)。画像ファイルFL[i]には、サムネイル画像TM[i]の画像データも格納されている。
図7に、本実施形態の特徴的動作に特に関与する部位のブロック図を示す。ユーザインターフェース51(以下、UI51と略記する)は、操作部17及びタッチパネル19を含んで形成される(図1参照)。距離マップ生成部52及び画像処理部53を、例えば、主制御部13に設けておくことができる。
UI51は、処理対象画像を選択するための選択操作及び処理対象画像に対する加工処理の実行を指示する加工指示操作を含む、ユーザからの各種の操作を受け付ける。記録媒体16に記録されている各入力画像は処理対象画像の候補であり、ユーザは、記録媒体16に記録されている複数の入力画像の何れかを、選択操作により処理対象画像として選択することができる。選択操作にて選択された入力画像の画像データは処理対象画像の画像データとして画像処理部53に送られる。
距離マップ生成部52は、処理対象画像としての入力画像の画像データを格納した画像ファイルのヘッダ領域から距離データを読み出し、読み出した距離データに基づき距離マップを生成する。距離マップは、自身を形成する各画素値が被写体距離の検出値を持つ距離画像である。距離マップによって、処理対象画像としての入力画像の各画素における被写体の被写体距離が特定される。尚、距離データそのものが距離マップであってもよく、その場合、距離マップ生成部52は不要である。距離データも距離マップも被写体距離情報の一種である。
加工指示操作は、加工処理の内容をも指示する操作であり、加工指示操作にて指示された加工処理の内容を表す加工内容情報が画像処理部53に送られる。画像処理部53は、処理対象画像としての入力画像に加工内容情報に従った加工処理を実行することにより加工画像を生成する。即ち、加工画像は加工処理後の処理対象画像である。
ここでは、主として、加工内容情報が合焦状態設定情報であることを想定する。合焦状態設定情報は、加工画像の合焦状態を指定する情報である。画像処理部53は、距離マップに基づく加工処理によって処理対象画像の合焦状態を調整することができ、合焦状態の調整後の処理対象画像を加工画像として出力することができる。処理対象画像の合焦状態を調整するための加工処理は距離マップに基づく画像処理Jであり、画像処理Jにおける合焦状態の調整は被写界深度の調整を含む。尚、合焦状態又は被写界深度の調整によって、合焦状態又は被写界深度が変化するため、画像処理Jは、処理対象画像の合焦状態を変化させるための画像処理とも言える。
例えば、ユーザは、加工指示操作において、加工画像の被写界深度における中心距離CNDEPの目標値CNDEP 及び加工画像の被写界深度の深さMDEPの目標値MDEP を指定することができる。この場合、目標値CNDEP 及びMDEP が合焦状態設定情報に含められ、画像処理部53は、合焦状態設定情報に従い、加工画像の被写界深度における中心距離CNDEP及び深さMDEPが夫々CNDEP 及びMDEP に応じたものとなるように(理想的には、加工画像における中心距離CNDEP及び深さMDEPが夫々CNDEP 及びMDEP と一致するように)、距離マップに基づき処理対象画像に対して画像処理Jを成す。
画像処理Jは、処理対象画像の合焦状態を任意に調整することが可能な画像処理であっても良い。画像処理Jの一種はデジタルフォーカスとも呼ばれており、デジタルフォーカスを実現する画像処理の方法として、様々な画像処理方法が提案されている。距離マップに基づき処理対象画像の合焦状態を任意に調整することができる公知の方法(例えば、特開2010−81002号公報、国際公開第06/039486号パンフレット、特開2009−224982号公報、特開2010−252293号公報又は特開2010−81050号公報に記載の方法)を、画像処理Jの方法として利用することができる。
加工画像又は記録媒体16から読み出されたサムネイル画像は、表示部15にて表示されうる。また、或る入力画像に加工処理を施して得られる加工画像を、他の入力画像の画像データとして新たに記録媒体16に記録することができる。
図8に、この記録の概念図を示す。図8に示されるサムネイル生成部54を、例えば図1の表示制御部22に設けておくことができる。今、画像ファイルFL[i]に格納された入力画像I[i]が処理対象画像として画像処理部53に入力されたことを考える(図6も参照)。この場合、画像処理部53は、入力画像I[i]に加工処理を1回施して得た加工画像を入力画像I[i+1]として生成する。生成された入力画像I[i+1]の画像データは画像ファイルFL[i+1]に格納された上で記録媒体16に記録される。また、サムネイル生成部54は、加工画像としての入力画像I[i+1]からサムネイル画像TM[i+1]を生成する。生成されたサムネイル画像TM[i+1]の画像データも画像ファイルFL[i+1]に格納された上で記録媒体16に記録される。入力画像I[i+1]及びサムネイル画像TM[i+1]の画像データを格納した画像ファイルFL[i+1]を記録媒体16に記録する際、入力画像I[i+1]に対応する距離データ、合焦状態データ及び加工回数データも画像ファイルFL[i+1]に格納される。入力画像I[i+1]に対応する距離データは、画像ファイルFL[i]に格納された距離データと同じである。入力画像I[i+1]に対応する合焦状態データは、合焦状態設定情報に従って決定される。入力画像I[i+1]に対応する加工回数データは、画像ファイルFL[i]に格納された加工回数データよりも1だけ大きい。尚、サムネイル生成部54は、加工画像ではない入力画像I[0]からサムネイル画像TM[0]を生成することもでき、また、表示部15にて表示されるべきサムネイル画像も生成することができる。
図9に、加工画像の生成動作のフローチャートを示す。まず、ステップS11において選択操作に従い処理対象画像が選択され、続くステップS12にて処理対象画像の画像データが記録媒体16から画像処理部53に送られると共に処理対象画像が表示部15にて表示される。更にステップS13において、処理対象画像に対応する合焦状態データが記録媒体16から読み出され、ステップS14において、主制御部13は処理対象画像に対応する合焦状態データから処理対象画像の被写界深度の中心距離及び深さを求める。求められた中心距離(例えば3メートル)及び深さ(例えば5メートル)の値は、表示部15に表示される。この後、ステップS15において、UI51に対する加工指示操作の入力を待機する。
加工指示操作が成されると、ステップS16において、画像処理部53は、加工指示操作に基づく加工内容情報に従い、加工処理を処理対象画像に施すことで加工画像を生成する。加工内容情報が合焦状態設定情報である場合には、処理対象画像の距離マップを用いた画像処理Jを処理対象画像に施すことで加工画像を生成する。処理対象画像の選択後の任意のタイミングにおいて(例えばステップS11の処理直後において)、処理対象画像の距離マップを生成することができる。続くステップS17では、ステップS16にて生成された加工画像が表示部15にて表示され、この表示を成しつつ、ステップS18においてユーザによる確定操作の入力を待機する。ステップS16にて生成された加工画像にユーザが満足している場合、ユーザはUI51に対して確定操作を成すことができ、そうでない場合、ユーザは加工指示操作をUI51に対して再度成すことができる。ステップS18において、再度の加工指示操作が成されると、ステップS16に戻ってステップS16以降の処理が繰り返し実行される。即ち、再度の加工指示操作に基づく加工内容情報に従い、加工処理を処理対象画像に施すことで加工画像を新たに生成し、新たに生成された加工画像を表示する(ステップS16及びS17)。
ステップS18において確定操作が成されるとステップS16にて生成された最新の加工画像がステップS19において記録媒体16に記録される。この際、記録媒体16に記録される加工画像に基づくサムネイル画像も記録媒体16に記録される。ステップS11にて選択された処理対象画像が入力画像I[i]である場合、ステップS12からステップS19までの一連の処理を実行して記録媒体16に記録される加工画像は、入力画像I[i+1]である。また、ステップS19において、入力画像I[i+1]の画像データを記録媒体16に記録する際、ユーザの指示に応じて、入力画像I[i]の画像データを記録媒体16から削除するようにしても良い。即ち、加工処理前の画像に対して加工処理後の画像を上書き記録するようにしても良い。
再生モードの一種としてサムネイル表示モードが存在し、撮像装置1は、サムネイル表示モードにおいて特異な表示を行うことができる。第1実施形態では、以下、特に記述なき限り、サムネイル表示モードにおける撮像装置1の動作を説明する。また、図10に示される入力画像401〜406を含む複数の入力画像の画像データが記録媒体16に記録されているものとする。入力画像401〜406に対応するサムネイル画像をそれぞれ記号TM401〜TM406によって表し、入力画像401〜406の画像データを格納した画像ファイルをそれぞれ記号FL401〜FL406にて表す。画像ファイルFL401〜FL406には、それぞれサムネイル画像TM401〜TM406の画像データも格納されている。
サムネイル表示モードでは、複数のサムネイル画像が同時に表示部15に表示される。例えば、複数のサムネイル画像が表示画面の水平及び垂直方向に沿って並べて表示される。本実施形態では、図11(a)及び(b)に示す表示画面状態を基準にして考え、その表示画面状態を基準表示状態と呼ぶ。基準表示状態では、表示画面に互いに異なる6つの表示領域DR[1]〜DR[6]が設けられ、サムネイル画像TM401〜TM406を夫々表示領域DR[1]〜DR[6]に表示することでサムネイル画像TM401〜TM406の同時表示を実現する。但し、サムネイル表示モードにおいて、同時に表示されるサムネイル画像の枚数は6以外でも良い。また、サムネイル表示モードにおいて、1枚のサムネイル画像のみを表示することも可能である。
図12に、サムネイル表示モードにおける動作のフローチャートを示す。サムネイル表示モードでは、ステップS21及びS22にて1枚以上のサムネイル画像を記録媒体16から読み出して表示部15に表示した後、ステップS23〜S26の処理を繰り返すことができる。ステップS23ではユーザによる選択操作及び加工指示操作を受け付ける。ユーザは、表示画面上の何れかのサムネイル画像を指定することで、指定サムネイル画像に対応する入力画像を処理対象画像として選択することができる。例えば、図11(b)の基準表示状態において、ユーザがUI51を介して表示画面上のサムネイル画像TM402を指定することで、サムネイル画像TM402に対応する入力画像402を処理対象画像として選択することができる。図13は、サムネイル画像TM402が指定されたときの表示画面例を示している。ステップS24では選択操作にて選択された処理対象画像に対し加工指示操作に従った加工処理を実行することで加工画像を生成する。ステップS25では、加工画像及び加工画像に基づくサムネイル画像を記録媒体16に記録する。ステップS23〜S25における処理は、図9のステップS11〜S19における処理に相当する。
ステップS23〜S25の処理後、サムネイル表示モードが維持されている場合にはステップS26にてサムネイル画像の表示を更新することができ、この更新後に、ステップS23に戻ることができる。ステップS26では、例えば、ステップS24にて生成された加工画像に基づくサムネイル画像が表示部15に表示されるように、表示部15の表示内容を変更する。
ステップS26における、より具体的な表示更新方法を例示する。図14に示す如く、時刻tにおける表示状態が基本表示状態(図11(b)参照)であって、且つ、時刻tにおいてサムネイル画像TM402が選択操作にて指定されることで入力画像402が処理対象画像として選択され、且つ、時刻tにおいて入力画像402に対し1回分の加工処理が実行されることで図15の画像402Aが入力画像402の加工画像として得られた状況(以下、状況STと呼ぶ)を考える。時刻ti+1は時刻tよりも後の時刻である。また、画像402Aをサムネイル生成部54に供給することで生成されるサムネイル画像を記号TM402Aによって表す(図15参照)。図15の例では、入力画像402に対し、被写界深度を浅くする画像処理Jが加工処理として成されたことが想定されている。
状況STの下、図16(a)に示す如く、時刻tにおいてサムネイル画像TM401、TM402、TM402A、TM403、TM404及びTM405を同時に表示画面に表示すると良い。この際、サムネイル画像TM402及びTM402Aが表示画面上で隣接して表示されるようにサムネイル画像TM402及びTM402Aの表示位置を決定すると良い。或いは、状況STの下、図16(b)に示す如く、時刻tにおいてサムネイル画像TM401、TM402A、TM403、TM404、TM405及びTM406を同時に表示画面に表示しても良い。図16(a)に示す表示は、時刻tの加工処理後においても入力画像402を格納した画像ファイルFL402が記録媒体16に保持されているケースに利用可能であり、図16(b)に示す表示は、主として、時刻tの加工処理後に画像ファイルFL402が記録媒体16から削除されたケースに利用可能である。
画像処理Jのような加工処理を利用するユーザは、オリジナル画像と加工画像の両方を記録媒体16に保存しておくことが多いため、加工画像402Aの生成後は、図16(a)に示すような表示が成される。図16(a)の表示画面を見たユーザは、サムネイル画像TM402及びTM402Aを含む複数のサムネイル画像の中から所望の入力画像に対応するサムネイル画像を選択することができるが、サムネイル画像の表示サイズが十分に大きくないこともあって、ユーザは、注目したサムネイル画像がオリジナル画像に対応するものであるのか或いは加工画像に対応するものであるのかを判別し難いことも多い。この判別を容易にすることができれば、ユーザにとって有益である。
また、加工処理の種類にもよるが、加工処理が実行されるとオリジナル画像の情報の一部が加工画像において失われ、加工処理によって画質劣化を伴うこともある。例えば、背景をぼかす画像処理Jを画像処理Jとして採用した上でオリジナル画像I[0]に対し複数回分の画像処理Jを順次適用し、これによって加工画像I[1]、I[2]・・・を得た場合、画像処理Jを適用するたびに加工画像上においてオリジナル画像I[0]の情報が失われてゆく。
仮に、ユーザが、背景のぼかし度合いの異なる2枚の加工画像を得ることを望んでいる場合、図17(a)に示す如く、オリジナル画像I[0]を基準として背景のぼかし度合いの異なる画像処理Jを2回個別に適用して2枚の加工画像を得ることができる。一方で、図17(b)に示す如く、オリジナル画像I[0]に対して画像処理Jを1回適用した後、得られた加工画像I[1]に対して画像処理Jを再度適用して加工画像I[2]を生成する方法もある。加工画像I[2]では、オリジナル画像I[0]に対して2回の画像処理Jを重畳して適用した分、オリジナル画像の情報の損失量又は画質劣化が増大する。
他方、図13を参照して説明したように、ユーザは、表示画面上の何れかのサムネイル画像を指定することで所望の入力画像を処理対象画像として選択することができるが、注目したサムネイル画像がオリジナル画像に対応するものであるのか或いは加工画像に対応するものであるのかの判別が、仮に難しかったならば、図17(a)に示すような方法で2枚の加工画像を得ることを望んでいる場合でも、加工画像I[1]を誤って処理対象画像に選択してしまい、意図せず、図17(b)に示すような方法で2枚の加工画像が得られることもある。逆に、図17(b)に示すような方法で2枚の加工画像を得ることを望んでいるのにも関わらず、選択ミスにより、図17(a)に示すような方法で2枚の加工画像が得られることもある。このような事態の発生は避けられた方が望ましい。
撮像装置1では、このような事態の発生の抑制にも寄与する特殊表示機能を有する。この特殊表示機能を用いると、表示部15にてサムネイル画像TM401が表示される際、サムネイル画像TM401に対応する入力画像401が加工処理を経て得られた画像であるか否かが、表示部15を用いて視覚的に示される。サムネイル画像TM402〜TM406についても同様である。
これにより、ユーザは、表示された各サムネイル画像がオリジナル画像に対応するサムネイル画像であるのか否かを視覚的に容易に判別することが可能となり、結果、所望の入力画像の選択操作が容易となると共に、上述したような望ましくない事態の発生を回避することも可能となる。
また、加工処理による情報損失又は画質劣化は加工処理の実行ごとに蓄積してゆくため、注目したサムネイル画像に対応する入力画像が加工処理を何回経て得られた画像であるのかを、サムネイル表示にてユーザに認識させることは有益である。この認識が得られれば、ユーザは、各サムネイル画像に対応する入力画像の情報損失又は画質劣化の程度を把握することができ、例えば、各入力画像の画質劣化の程度を考慮した上で適切な入力画像を処理対象画像に選択することができるからである。特殊表示機能は、このような有益性も提供する。即ち、特殊表示機能により、ユーザは、各サムネイル画像に対応する入力画像が加工処理を何回経て得られた画像であるのかを認識することができる。
上記特殊表示機能はサムネイル画像TM401〜TM406の夫々に対して適用され、サムネイル画像TM402〜TM406に対する特殊表示機能の適用方法は、サムネイル画像TM401に対する特殊表示機能の適用方法と同じである。従って、以下では、特殊表示機能をサムネイル画像TM401の表示に適用したときの表示内容を説明し、特殊表示機能をサムネイル画像TM402〜TM406の表示に適用したときの表示内容の説明を割愛する。
上記特殊表示機能を実現する方法は、表示方法αと表示方法βに大別される。尚、表示方法α及びβに関与する幾つかの記号の定義を、図18にまとめて示す。
表示方法αを説明する。表示方法αでは、サムネイル画像TM401を表示する場合において入力画像401が加工処理を経て得られた画像であるとき、入力画像401が加工処理を経て得られた画像であることを示す映像情報Vも表示する(例えば、後述の図19(b)におけるアイコン450を参照)。映像情報Vは、入力画像401が加工処理を経て得られた画像であるか否かを示す映像情報である、と解釈することもできる。更に、入力画像401が加工処理を1回以上経て得られた画像である場合(即ち、入力画像401がi≧1であるときの入力画像I[i]である場合)、入力画像401を得るために実行された加工処理の回数Qに応じて映像情報Vを変化させる(例えば後述の図19(a)〜(c)参照)。
回数Qは、入力画像401を得るために、入力画像401の元となる画像に対して実行された加工処理の回数である。入力画像401がi≧1であるときの入力画像I[i]である場合、入力画像401の元となる画像とはオリジナル画像I[0]である。入力画像401が入力画像I[i]である場合、Q=iである。従って、入力画像401がオリジナル画像I[0]である場合には、Q=0である。
図1の表示制御部22は、入力画像401に対応する画像ファイルFL401のヘッダ領域から加工回数データを読み出すことで回数Qを知ることができ、回数Qに応じた映像情報Vαを生成して表示部15に表示させることができる。
表示方法βを説明する。表示方法βでは、サムネイル画像TM401を表示する場合において入力画像401が加工処理を経て得られた画像であるとき、表示されるサムネイル画像TM401を変形する(例えば後述の図24(a)〜(c)参照)。この変形は、言うまでもなく、入力画像401がオリジナル画像であるときに表示されるサムネイル画像TM401を基準とした変形である。表示方法βは、入力画像401が加工処理を経て得られた画像であるか否かに応じて、表示されるサムネイル画像TM401を変形させる方法であるとも言える。更に、入力画像401が加工処理を1回以上経て得られた画像である場合(即ち、入力画像401がi≧1であるときの入力画像I[i]である場合)、入力画像401を得るために実行された加工処理の回数Qに応じ、表示されるサムネイル画像TM401の変形状態を変化させる(例えば後述の図24(a)〜(c)参照)。換言すれば、表示されるサムネイル画像TM401の変形状態は、Q=Qである場合とQ=Qである場合とで、互いに異なる(Q及びQは自然数であって、Q≠Q)。
図1の表示制御部22は、回数Qに応じてサムネイル画像TM401を変形させることができ、変形後のサムネイル画像TM401を表示部15にて表示させることができる。サムネイル画像TM401の変形を実現するための画像処理は、図8のサムネイル生成部54にて行われても良い。
以下、表示方法αに属する表示方法例α〜αと表示方法βに属する表示方法例β及びβを個別に説明する。但し、表示方法例α〜α、β及びβは例示に過ぎない。入力画像401がオリジナル画像であるのか否かをユーザが認識できる限り、又は、入力画像401についての処理回数Qをユーザが認識できる限り、表示方法αにおける映像情報Vはどのような映像情報でも良く、同様に、表示方法βにおけるサムネイル画像TM401の変形はどのような変形でも良い。以下、便宜上、入力画像401がオリジナル画像であるのか否かをユーザが認識することを処理有無認識と呼び、入力画像401についての処理回数Qをユーザが認識することを処理回数認識と呼ぶ。
[表示方法例α
図19(a)〜(c)を参照して、表示方法例αを説明する。画像510、511、512は、夫々、Q=0、Q=1、Q=2であるときにおいて、表示領域DR[1]に表示される画像の例である(図11(a)及び(b)も参照)。画像510は、サムネイル画像TM401そのものであり、画像511は、サムネイル画像TM401にアイコン450を1つだけ付与した画像であり、画像512は、サムネイル画像TM401にアイコン450を2つだけ付与した画像である。Q≧3であるときも同様であり、サムネイル画像TM401にQ個のアイコン450を重畳表示することができる。
つまり、Q=0であるときには表示領域DR[1]にアイコン450が表示されないが、Q≧1であるときにはQの値に応じた個数のアイコン450がサムネイル画像TM401と共に表示領域DR[1]に表示される。ユーザは、アイコン450の表示有無及び表示個数を見ることで、処理有無認識及び処理回数認識を成すことができる。
表示方法例αにおける1又は複数のアイコン450は、映像情報Vの一種である(図18参照)。サムネイル画像TM401上に表示されるQ個のアイコン450を1つの映像情報と捉えた場合、その映像情報は、回数Qに応じて変化していると言える。
尚、サムネイル画像TM401上に複数のアイコン450を表示する場合、その複数のアイコン450を互いに異なるアイコンにしてもよい(例えば、サムネイル画像TM401上に青のアイコン450と赤のアイコン450を表示しても良い)。また、アイコン450を、サムネイル画像TM401上ではなく、サムネイル画像TM401の表示領域の外側であって且つサムネイル画像TM401の表示領域の近傍に表示するようにしても良い。これは、アイコン450以外の、後述の他のアイコンについても適用されうる。
[表示方法例α
図20(a)〜(c)を参照して、表示方法例αを説明する。画像520、521、522は、夫々、Q=0、Q=1、Q=2であるときにおいて、表示領域DR[1]に表示される画像の例である(図11(a)及び(b)も参照)。画像520は、サムネイル画像TM401そのものであり、画像521及び522の夫々は、サムネイル画像TM401にアイコン452を付与した画像である。但し、図20(b)及び(c)から分かるように、サムネイル画像TM401に重畳されるアイコン452の表示サイズは、回数Qが増大するにつれて大きくされる。Q≧3であるときも同様である。
つまり、Q=0であるときには表示領域DR[1]にアイコン452が表示されないが、Q≧1であるときにはQの値に応じた表示サイズにてアイコン452がサムネイル画像TM401と共に表示領域DR[1]に表示される。ユーザは、アイコン452の表示有無及び表示サイズを見ることで、処理有無認識及び処理回数認識を成すことができる。
表示方法例αにおけるアイコン452は、映像情報Vの一種である(図18参照)。映像情報としてのアイコン452には、回数Qに応じた変化(表示サイズ変化)がある。
[表示方法例α
図21(a)〜(d)を参照して、表示方法例αを説明する。画像530、531、532は、夫々、Q=0、Q=1、Q=2であるときにおいて、表示領域DR[1]に表示される画像の例である(図11(a)及び(b)も参照)。画像530は、サムネイル画像TM401そのものであり、画像531及び532の夫々は、サムネイル画像TM401にゲージアイコン454及びバーアイコン456を付与した画像である。但し、図21(b)及び(c)から分かるように、サムネイル画像TM401に重畳されるバーアイコン456の表示サイズは、ゲージアイコン454の長手方向において、回数Qが増大するにつれて大きくされる。Q≧3であるときも同様である。
つまり、Q=0であるときには表示領域DR[1]にアイコン454及び456が表示されないが、Q≧1であるときにはQの値に応じた長さを有するバーアイコン456がサムネイル画像TM401と共に表示領域DR[1]に表示される。ユーザは、アイコン454及び456の表示有無及びバーアイコン456の長さを見ることで、処理有無認識及び処理回数認識を成すことができる。
表示方法例αにおけるアイコン454及び456は、映像情報Vの一種である(図18参照)。映像情報としてのバーアイコン456には、回数Qに応じた変化(表示サイズ変化、表示長さ変化)がある。
尚、Q=0であるとき、図21(a)の画像530の代わりに図21(d)の画像530’を表示領域DR[1]に表示するようにしても良い。画像530’は、サムネイル画像TM401にゲージアイコン454のみを付与した画像である。この場合においても、Q≧1であるときに表示されるバーアイコン456は、映像情報Vの一種である。また、図19(a)等に示されるアイコン450を、Q≧1であるときにのみ、サムネイル画像TM401と共に表示領域DR[1]に表示するようにしても良い。
[表示方法例α
図22(a)〜(d)を参照して、表示方法例αを説明する。画像540、541、542は、夫々、Q=0、Q=1、Q=2であるときにおいて、表示領域DR[1]に表示される画像の例である(図11(a)及び(b)も参照)。画像540は、サムネイル画像TM401そのものであり、画像541及び542の夫々は、サムネイル画像TM401の外周を取り囲む枠アイコンをサムネイル画像TM401に付与した画像である。但し、図22(b)及び(c)から分かるように、Q≧1であるときにサムネイル画像TM401に付与される枠アイコンの色は、回数Qに応じて変化する。Q≧3であるときも同様である。
つまり、Q=0であるときには表示領域DR[1]に枠アイコンが表示されないが、Q≧1であるときにはQの値に応じた色を有する枠アイコンがサムネイル画像TM401と共に表示領域DR[1]に表示される。ユーザは、枠アイコンの表示有無及び枠アイコンの色を見ることで、処理有無認識及び処理回数認識を成すことができる。
表示方法例αにおける枠アイコンは、映像情報Vの一種である(図18参照)。映像情報としての枠アイコンには、回数Qに応じた変化(色変化)がある。
尚、Q=0であるとき、図22(a)の画像540の代わりに図22(d)の画像540’を表示領域DR[1]に表示するようにしても良い。画像540’も、画像541及び542と同様、サムネイル画像TM401の外周を取り囲む枠アイコンをサムネイル画像TM401に付与した画像である。但し、画像540’における枠アイコンの色、即ちQ=0である時に表示される枠アイコンの色は、Q≧1である時に表示される枠アイコンの色と異なる。Q=0、Q=1、Q=2であるときに表示される枠アイコンの色を、夫々、第1の色、第2の色、第3の色と呼んだ場合、第2又は第3の色を有する枠アイコンは、入力画像401が加工処理を経て得られた画像であることを示す映像情報Vであるが、第1の色を有する枠アイコンは、そのような映像情報Vではない(第1、第2及び第3の色は互いに異なる色である)。
但し、入力画像401が加工処理を経て得られた画像であるか否かを示す映像情報が映像情報Vである、と解釈することもできる。この解釈を用いた場合、画像540’、541及び542の例では、画像540’ 、541及び542の夫々における枠アイコンを映像情報Vとして捉えることが可能であり、枠アイコンの色によって、入力画像401が加工処理を経て得られた画像であるか否かが示されている。
[表示方法例α
図23(a)〜(d)を参照して、表示方法例αを説明する。画像550、551、552は、夫々、Q=0、Q=1、Q=2であるときにおいて、表示領域DR[1]に表示される画像の例である(図11(a)及び(b)も参照)。画像550は、サムネイル画像TM401そのものであり、画像551及び552の夫々は、サムネイル画像TM401に、数値と図形から成るアイコン460を付与した画像である(アイコン460を数値のみで形成することも可能である)。但し、図23(b)及び(c)から分かるように、Q≧1であるときにサムネイル画像TM401に付与されるアイコン460内の数値は、回数Qに応じて変化する。Q≧3であるときも同様である。
つまり、Q=0であるときには表示領域DR[1]にアイコン460が表示されないが、Q≧1であるときにはQの値に応じた数値(単純にはQの値そのもの)を文字として内包するアイコン460がサムネイル画像TM401と共に表示領域DR[1]に表示される。ユーザは、アイコン460の表示有無及びアイコン460内の数値を見ることで、処理有無認識及び処理回数認識を成すことができる。
表示方法例αにおけるアイコン460は、映像情報Vの一種である(図18参照)。映像情報としてのアイコン460には、回数Qに応じた変化(アイコン460内の数値変化)がある。
尚、Q=0であるとき、図23(a)の画像550の代わりに図23(d)の画像550’を表示領域DR[1]に表示するようにしても良い。画像550’も、画像551及び552と同様、サムネイル画像TM401にアイコン460を付与した画像である。但し、画像550’におけるアイコン460内の数値、即ちQ=0である時に表示されるアイコン460内の数値は、Q≧1である時に表示されるアイコン460内の数値と異なる。この場合、画像551又は552における枠アイコン460は、入力画像401が加工処理を経て得られた画像であることを示す映像情報Vであるが、画像550’における枠アイコン460は、そのような映像情報Vではない。
但し、入力画像401が加工処理を経て得られた画像であるか否かを示す映像情報が映像情報Vである、と解釈することもできる。この解釈を用いた場合、画像550’、551及び552の例では、画像550’ 、551及び552の夫々におけるアイコン460を映像情報Vとして捉えることが可能であり、アイコン460内の数値によって、入力画像401が加工処理を経て得られた画像であるか否かが示されている。
[表示方法例β
図24(a)〜(c)を参照して、表示方法例βを説明する。画像610、611、612は、夫々、Q=0、Q=1、Q=2であるときにおいて、表示領域DR[1]に表示される画像の例である(図11(a)及び(b)も参照)。画像610は、サムネイル画像TM401そのものであり、画像611及び612の夫々は、サムネイル画像TM401を変形するための画像処理Jβ1をサムネイル画像TM401に施して得られた画像である。但し、図24(b)及び(c)から分かるように、Q≧1であるときにサムネイル画像TM401に施される画像処理Jβ1の処理内容は、回数Qに応じて変化する(即ち、表示されるサムネイル画像TM401の変形状態は、回数Qに応じて変化する)。Q≧3であるときも同様である。
例えば、画像処理Jβ1は、空間フィルタ又は周波数フィルタを用いたフィルタリング処理であってもよい。より具体的には例えば、画像処理Jβ1は、サムネイル画像TM401を平滑化する平滑化処理であっても良く、この場合、平滑化度合いを回数Qに応じて変化させることができる(例えば、平滑化を行うための平滑化フィルタのフィルタ強度を回数Qの増大に伴って増大させる)。或いは例えば、画像処理Jβ1は、サムネイル画像TM401の輝度、彩度又はコントラストを低減させる画像処理であっても良く、この場合、輝度、彩度又はコントラストの低減度合いを回数Qに応じて変化させることができる(例えば、その低減度合いを回数Qの増大に伴って増大させることができる)。ユーザは、表示領域DR[1]の表示内容を見ることで、処理有無認識及び処理回数認識を成すことができる。
また例えば、画像処理Jβ1は幾何学的変換であっても良い。画像処理Jβ1としての幾何学的変換は、サムネイル画像TM401を、魚眼レンズを用いて撮影されたかのような魚眼画像に変換する魚眼変換処理であっても良い。図25の画像615は、Q≧1であるときに表示領域DR[1]に表示することのできる魚眼画像の例である。画像処理Jβ1として幾何学的変換を用いた場合でも、表示領域DR[1]に表示されるサムネイル画像TM401は変形されることになるが、その変形の度合いは、回数Qに応じて変化せしめられる。
[表示方法例β
図26(a)〜(c)を参照して、表示方法例βを説明する。画像620、621、622は、夫々、Q=0、Q=1、Q=2であるときにおいて、表示領域DR[1]に表示される画像の例である(図11(a)及び(b)も参照)。画像620は、サムネイル画像TM401そのものであり、画像621及び622の夫々は、サムネイル画像TM401を変形するための画像処理Jβ2をサムネイル画像TM401に施して得られた画像である。
画像処理Jβ2は、サムネイル画像TM401の一部を欠損させる画像処理であり、その欠損量は回数Qに応じて変化する。画像処理Jβ2では、サムネイル画像TM401の全画像領域が第1及び第2画像領域に分割され、サムネイル画像TM401の第2画像領域をサムネイル画像TM401から除去する。即ち、サムネイル画像TM401の第1画像領域内の画像が、画像621又は622である。除去される第2画像領域の大きさ又は形状は、回数Qに応じて変化する(即ち、表示されるサムネイル画像TM401の変形状態は、回数Qに応じて変化する)。例えば、図26(b)及び(c)に示す如く、回数Qが増大するにつれて第2画像領域の大きさを増大させることができる。Q≧3であるときも同様である。ユーザは、表示領域DR[1]の表示内容を見ることで、処理有無認識及び処理回数認識を成すことができる。
<<第2実施形態>>
本発明の第2実施形態を説明する。第2実施形態は第1実施形態を基礎とする実施形態であり、第2実施形態において特に述べない事項に関しては、矛盾なき限り、第1実施形態の記載が第2実施形態にも適用される。第1実施形態の撮像装置1が持つ構成要素を、第2実施形態の撮像装置1も有する。
図30は、第2実施形態の特徴的動作に特に関与する部位のブロック図である。上述したように、UI51は、処理対象画像を選択するための選択操作及び処理対象画像に対する加工処理の実行を指示する加工指示操作を含む、ユーザからの各種の操作を受け付け、加工指示操作によって加工内容情報が指定される。第2実施形態では、加工内容情報によって補正対象領域の位置、大きさ及び形状等が指定され、画像処理部53が、加工内容情報を用いて処理対象画像の補正対象領域を補正する画像処理Pを行うものとする。画像処理Pによって補正対象領域の補正が成された後の処理対象画像が、加工画像として画像処理部53より出力される。補正対象領域は、入力画像の全画像領域の一部である。
画像処理Pについて説明する。図31の入力画像700は、オリジナル画像(即ち入力画像I[0])の例である(図6参照)。入力画像700には、4つの被写体710〜713の画像データが存在している。今、ユーザが、被写体711を不要物体(不要被写体)と捉え、入力画像700から被写体711を除去したいと考えていることを想定する。この場合、ユーザは、選択操作によって入力画像700を処理対象画像に選択した状態で加工指示操作により被写体711を不要物体として指定する。これによって、入力画像700において被写体711の画像データが存在する画像領域721の位置、大きさ及び形状が決定する(図32(a)参照)。ユーザがUI51を介した加工指示操作により画像領域721の位置、大きさ及び形状の詳細を全て指定するようにしても良いし、加工指示操作を元に画像処理部53による輪郭抽出処理等を利用してそれらの詳細を決定するようにしても良い。
画像処理部53は、画像領域721を補正対象領域に設定し、入力画像700から被写体711を除去するための画像処理P(換言すれば補正対象領域を補正するための画像処理P)を実行する。例えば、画像処理部53は、補正対象領域と異なる画像領域である補正用領域の画像データを用いて、不要物体としての被写体711を入力画像700から除去し、この除去が成された加工画像700Aを生成する(図32(b)参照)。通常、補正用領域は、処理対象画像(入力画像700)内の画像領域であるが、処理対象画像以外の画像内の画像領域であってもよい。補正用領域の設定方法を含む、不要物体を除去するための画像処理Pの方法として、公知の方法(例えば、特開2011−170838号公報又は特開2011−170840号公報に記載された方法)を利用することができる。例えば、補正対象領域の画像データを補正用領域の画像データにて置き換えることで不要物体を除去しても良いし、補正対象領域の画像データに補正用領域の画像データを混合することで不要物体を除去しても良い。尚、ここにおける除去は、完全なる除去であっても良いし、部分的な除去であっても良い。また、図32(a)の例では、図示の便宜上、補正対象領域721の形状が矩形になっているが、該形状は矩形以外の形状(不要物体の輪郭に沿った形状等)でも良い(後述の他の補正対象領域についても同様)。
ユーザは、入力画像I[1](図6参照)の例である加工画像700Aを新たな処理対象画像として選択し、加工指示操作によって被写体712を更なる不要物体として指定することもできる。図32(c)において、被写体712の画像データが存在する画像領域722は、この指定を介して、処理対象画像700Aに設定された新たな補正対象領域である。この指定が成されると、画像処理部53は、画像処理Pを処理対象画像700Aに実行し、処理対象画像700Aから被写体712を除去することで得た画像である加工画像700Bを生成する(図32(d)参照)。同様にして、加工画像700Bから被写体713を除去する画像処理Pを更に実行することもできる。
図8を参照して説明した、加工画像の画像データ及び付加データ(図4も参照)の記録方法は、本実施形態にも適用される。但し、第2実施形態では、図33に示す如く、画像ファイルに格納される付加データに、加工回数データ及びサムネイル画像の画像データに加えて、補正対象領域情報が含められる。即ち、入力画像I[i]に加工処理(画像処理P)が1回施されることで入力画像I[1+1]が生成されたとき、入力画像I[i+1]の画像データ、サムネイル画像TM[i+1]の画像データ及び加工回数データに加えて、補正対象領域情報も画像ファイルFL[i+1]に記録される。
画像ファイルFL[i+1]に記録される補正対象領域情報は、入力画像I[i]から入力画像I[i+1]を得るために入力画像I[i]に設定された補正対象領域の位置、大きさ及び形状を特定する。例えば、入力画像700Aの画像ファイルに記録される補正対象領域情報は、入力画像700から入力画像700Aを得るために入力画像700に設定された補正対象領域721の位置、大きさ及び形状を特定する。入力画像I[i+1]が画像処理Pを2回以上経て得られたものである場合、画像処理Pごとの補正対象領域情報が画像ファイルFL[i+1]に記録される。つまり例えば、入力画像700Bの画像ファイルには、入力画像700から入力画像700Aを得るために入力画像700に設定された補正対象領域721の位置、大きさ及び形状を特定する補正対象領域情報と、入力画像700Aから入力画像700Bを得るために入力画像700Aに設定された補正対象領域722の位置、大きさ及び形状を特定する補正対象領域情報と、が記録される。補正対象領域721の位置、大きさ及び形状は、被写体711の位置、大きさ及び形状であると考えても良い(補正対象領域722等についても同様)。
加工画像の生成動作のフローチャートは、図9のそれと同様である。但し、加工処理が画像処理Pである場合には、ステップS13及びS14の処理が割愛される。
次に、サムネイル表示モードにおける撮像装置1の動作を説明する。図34の入力画像701と図10の入力画像402〜406を含む複数の入力画像の画像データが記録媒体16に記録されているものとする(図34では、便宜上、画像内の被写体の図示を割愛)。図34に示す如く、入力画像701に対応するサムネイル画像を記号TM701にて表し、入力画像701及びサムネイル画像TM701の画像データを格納した画像ファイルを記号FL701にて表す。そうすると、第1実施形態における入力画像401、サムネイル画像TM401、画像ファイルFL401及び画像処理Jを、入力画像701、サムネイル画像TM701、画像ファイルFL701及び画像処理Pと読み替えることで、第1実施形態におけるサムネイル表示モードの動作説明を全て第2実施形態に適用することができる。この適用内容には、当然、上述の特殊表示機能も含まれ、且つ、表示方法例α〜αを包含する表示方法α並びに表示方法例β及びβを包含する表示方法βも含まれる。第1実施形態で述べたように、特殊表示機能により、例えば、表示部15にてサムネイル画像TM701が表示される際、サムネイル画像TM701に対応する入力画像701が加工処理を経て得られた画像であるか否かが、表示部15を用いて視覚的に示される。
図11(a)に示す表示画面の表示領域DR[1]、DR[2]〜DR[6]に、夫々、サムネイル画像TM701、TM402〜TM406が同時表示されている状態を基準にして、特殊表示機能の実現方法につき幾つかの例を挙げる。入力画像701は、入力画像700、700A及び700Bの何れかであるものとする(図32(a)〜(d)参照)。従って、サムネイル画像TM701は、入力画像700、700A及び700Bの何れかに基づくサムネイル画像である。説明の便宜上、入力画像700、700A、700Bに基づくサムネイル画像TM701を、特に、夫々、記号TM701[700]、TM701[700A]、TM701[700B]によって表す(図35(a)〜(c)参照)。記号Qは、入力画像701を得るために成された加工処理(画像処理P)の実行回数を表す。入力画像701が入力画像700であるときQ=0であり、入力画像701が入力画像700AであるときQ=1であり、入力画像701が入力画像700BであるときQ=2である。
図36(a)〜(c)は、図19(a)〜(c)に対応する表示方法例αの第2実施形態への適用例を示している。画像750、751、752は、夫々、Q=0、Q=1、Q=2であるときにおいて、表示領域DR[1]に表示されるサムネイル画像の例である。画像750は、入力画像700に基づくサムネイル画像TM701[700]そのものであり、画像751は、入力画像700Aに基づくサムネイル画像TM701[700A]にアイコン450を1つだけ付与した画像であり、画像752は、入力画像700Bに基づくサムネイル画像TM701[700B]にアイコン450を2つだけ付与した画像である。Q≧3であるときも同様であり、サムネイル画像TM701にQ個のアイコン450を重畳表示することができる。
図37(a)〜(c)は、図24(a)〜(c)に対応する表示方法例βの第2実施形態への適用例を示している。画像760、761、762は、夫々、Q=0、Q=1、Q=2であるときにおいて、表示領域DR[1]に表示されるサムネイル画像の例である。画像760は、入力画像700に基づくサムネイル画像TM701[700]そのものである。画像761及び762は、入力画像700Aに基づくサムネイル画像TM701[700A]及び入力画像700Bに基づくサムネイル画像TM701[700B]に上述の画像処理Jβ1を施して得られた画像であり、第1実施形態で述べたように、画像処理Jβ1の処理内容は回数Qに応じて変化する(即ち、表示されるサムネイル画像TM701の変形状態は、回数Qに応じて変化する)。Q≧3であるときも同様である。
また、図38(a)〜(c)のような表示を成すこともできる。画像770、771、772は、夫々、Q=0、Q=1、Q=2であるときにおいて、表示領域DR[1]に表示されるサムネイル画像の例である。画像770は、入力画像700に基づくサムネイル画像TM701[700]そのものである。画像771は、入力画像700Aに基づくサムネイル画像TM701[700A]に斜線マーカ731を付与した画像であり、画像772は、入力画像700Bに基づくサムネイル画像TM701[700B]に斜線マーカ731及び732を付与した画像である。
表示制御部22又はサムネイル生成部54(図1又は図8参照)は、画像ファイルFL701から読み出した補正対象領域情報に基づき、斜線マーカ731及び732の位置、大きさ及び形状を決定する。具体的には例えば、表示制御部22又はサムネイル生成部54は、入力画像700(オリジナル画像)上の補正対象領域721の位置に対応する、サムネイル画像TM701[700A]上の位置に、斜線マーカ731を付与し(図32(a)及び図35(b)参照)、これよって図38(b)の画像771を生成する。同様に例えば、表示制御部22又はサムネイル生成部54は、入力画像700又は700A上の補正対象領域721及び722の位置に対応する、サムネイル画像TM701[700B]上の位置に、斜線マーカ731及び732を付与し(図32(a)及び図35(c)参照)、これよって図38(c)の画像772を生成する。斜線マーカ731の大きさ及び形状は、被写体711の大きさ及び形状(即ち、図32(a)の補正対象領域721の大きさ及び形状)に応じたものとする。斜線マーカ732についても同様である。
斜線マーカを見ることで、ユーザは、図38(b)又は(c)の画像771又は772に対応する入力画像が画像処理Pを経て得られた画像であることを容易に認識することができる。更に、斜線マーカを含むサムネイル画像の表示により、ユーザは、表示されたサムネイル画像上において補正対象領域の位置、大きさ及び形状を特定及び認識することができる。斜線マーカは映像情報Vの一種であると考えることができる。図38(a)〜(c)に示す表示方法と図36(a)〜(c)に示す表示方法を組み合わせて実行するようにしても良い。即ち、加工画像に対応するサムネイル画像にアイコン450及び斜線マーカの両方を付与し、付与後のサムネイル画像を表示するようにしても良い。
<<変形等>>
本発明の実施形態は、特許請求の範囲に示された技術的思想の範囲内において、適宜、種々の変更が可能である。以上の実施形態は、あくまでも、本発明の実施形態の例であって、本発明ないし各構成要件の用語の意義は、以上の実施形態に記載されたものに制限されるものではない。上述の説明文中に示した具体的な数値は、単なる例示であって、当然の如く、それらを様々な数値に変更することができる。上述の実施形態に適用可能な注釈事項として、以下に、注釈1〜注釈4を記す。各注釈に記載した内容は、矛盾なき限り、任意に組み合わせることが可能である。
[注釈1]
上述の第1及び第2実施形態では、処理対象画像から加工画像を得るための加工処理が合焦状態を調整するための画像処理J及び特定の画像領域を補正するための画像処理Pであることを主として想定しているが、処理対象画像を加工するための画像処理である限り、加工処理は、どのような画像処理でも良い。例えば、加工処理は、幾何学的変換、解像度変換、階調変換、色補正又はフィルタリング等の任意の画像処理を含みうる。
[注釈2]
上述の各実施形態では、入力画像が撮像装置1の撮影によって得た画像であることを想定しているが、入力画像は、撮像装置1の撮影によって得た画像でなくても良い。例えば、入力画像は、撮像装置1以外の撮像装置(不図示)にて撮影された画像であっても良いし、任意の記録媒体から撮像装置1に与えられたものであっても良いし、インターネット等の通信網を介して撮像装置1に与えられたものであっても良い。
[注釈3]
上述の特殊表示機能の実現に関与する部位(特に例えば、UI51と、表示制御部22、距離マップ生成部52、画像処理部53及びサムネイル生成部54を内包する主制御部13と、表示部15と、記録媒体16)は、撮像装置1以外の電子機器(不図示)に設けられていても良く、その電子機器上において上述の各動作を実現させても良い。電子機器は、例えば、パーソナルコンピュータ、携帯情報端末、携帯電話機である。尚、撮像装置1も、電子機器の一種である。
[注釈4]
撮像装置1及び電子機器を、ハードウェア、或いは、ハードウェアとソフトウェアの組み合わせによって構成することができる。ソフトウェアを用いて撮像装置1又は電子機器を構成する場合、ソフトウェアにて実現される部位についてのブロック図は、その部位の機能ブロック図を表すことになる。ソフトウェアを用いて実現される機能をプログラムとして記述し、該プログラムをプログラム実行装置(例えばコンピュータ)上で実行することによって、その機能を実現するようにしてもよい。
1 撮像装置
11 撮像部
15 表示部
16 記録媒体
51 ユーザインターフェース
52 距離マップ生成部
53 画像処理部
54 サムネイル生成部

Claims (8)

  1. 入力画像についてのサムネイル画像を表示する表示部と、
    加工処理の実行を指示する加工指示操作を受けるユーザインターフェースと、
    前記加工指示操作に従って前記入力画像又は前記入力画像の元になる画像に前記加工処理を実行する画像処理部と、を備えた電子機器において、
    前記表示部にて前記サムネイル画像が表示される際、前記入力画像が前記加工処理を経て得られた画像であるか否かが、前記表示部を用いて視覚的に示される
    ことを特徴とする電子機器。
  2. 前記表示部にて前記サムネイル画像が表示される場合において、前記入力画像が前記加工処理を経て得られた画像であるとき、前記入力画像が前記加工処理を経て得られた画像であることを示す映像情報も表示される
    ことを特徴とする請求項1に記載の電子機器。
  3. 前記入力画像が前記加工処理を経て得られた画像である場合、前記入力画像を得るために実行された前記加工処理の回数に応じて、前記映像情報は変化する
    ことを特徴とする請求項2に記載の電子機器。
  4. 前記表示部にて前記サムネイル画像が表示される場合において、前記入力画像が前記加工処理を経て得られた画像であるとき、表示される前記サムネイル画像は変形される
    ことを特徴とする請求項1に記載の電子機器。
  5. 前記入力画像が前記加工処理を経て得られた画像である場合、前記入力画像を得るために実行された前記加工処理の回数に応じて、表示される前記サムネイル画像の変形状態は変化する
    ことを特徴とする請求項4に記載の電子機器。
  6. 前記加工処理は、前記入力画像又は前記入力画像の元になる画像の合焦状態を変化させるための画像処理を含む
    ことを特徴とする請求項1〜請求項5の何れかに記載の電子機器。
  7. 前記加工処理は、前記入力画像又は前記入力画像の元になる画像に設定された補正対象領域を他の画像領域の画像データを用いて補正するための画像処理を含む
    ことを特徴とする請求項1〜請求項5の何れかに記載の電子機器。
  8. 前記加工処理は、前記入力画像又は前記入力画像の元になる画像に設定された補正対象領域を他の画像領域の画像データを用いて補正するための画像処理を含み、
    前記入力画像が前記加工処理を経て得られた画像であるとき、前記サムネイル画像上で前記補正対象領域の位置を特定可能なように前記映像情報が表示される
    ことを特徴とする請求項2又は請求項3に記載の電子機器。
JP2011281258A 2011-01-31 2011-12-22 電子機器 Pending JP2012178820A (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2011281258A JP2012178820A (ja) 2011-01-31 2011-12-22 電子機器
CN2012100190539A CN102685374A (zh) 2011-01-31 2012-01-20 电子设备
US13/362,498 US20120194544A1 (en) 2011-01-31 2012-01-31 Electronic equipment

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011018474 2011-01-31
JP2011018474 2011-01-31
JP2011281258A JP2012178820A (ja) 2011-01-31 2011-12-22 電子機器

Publications (1)

Publication Number Publication Date
JP2012178820A true JP2012178820A (ja) 2012-09-13

Family

ID=46576988

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011281258A Pending JP2012178820A (ja) 2011-01-31 2011-12-22 電子機器

Country Status (3)

Country Link
US (1) US20120194544A1 (ja)
JP (1) JP2012178820A (ja)
CN (1) CN102685374A (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018082239A (ja) * 2016-11-14 2018-05-24 キヤノン株式会社 画像処理装置、撮像装置および制御方法
WO2024042979A1 (ja) * 2022-08-24 2024-02-29 富士フイルム株式会社 画像ファイル作成方法、及び画像ファイル作成装置

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102101740B1 (ko) * 2013-07-08 2020-04-20 엘지전자 주식회사 이동 단말기 및 이의 제어방법
JP6346476B2 (ja) * 2014-03-17 2018-06-20 キヤノン株式会社 表示制御装置、制御方法、プログラム及び記録媒体
US10785413B2 (en) 2018-09-29 2020-09-22 Apple Inc. Devices, methods, and graphical user interfaces for depth-based annotation
US11227446B2 (en) 2019-09-27 2022-01-18 Apple Inc. Systems, methods, and graphical user interfaces for modeling, measuring, and drawing using augmented reality
US11727650B2 (en) 2020-03-17 2023-08-15 Apple Inc. Systems, methods, and graphical user interfaces for displaying and manipulating virtual objects in augmented reality environments
CN112686973A (zh) * 2020-12-24 2021-04-20 京东方科技集团股份有限公司 图像编辑方法及控制装置、存储介质、计算机设备
US11941764B2 (en) 2021-04-18 2024-03-26 Apple Inc. Systems, methods, and graphical user interfaces for adding effects in augmented reality environments

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4148117B2 (ja) * 2003-12-04 2008-09-10 ソニー株式会社 印刷システム及び印刷方法
KR101058025B1 (ko) * 2004-11-18 2011-08-19 삼성전자주식회사 이중 썸네일 모드를 이용한 이미지 디스플레이 장치 및 방법
CN101867679B (zh) * 2006-03-27 2013-07-10 三洋电机株式会社 缩略图生成装置及摄像装置
US8116537B2 (en) * 2007-04-04 2012-02-14 Sony Corporation Image recording device, player device, imaging device, player system, method of recording image, and computer program
JP5267149B2 (ja) * 2009-01-19 2013-08-21 ソニー株式会社 表示制御装置、表示制御方法及びプログラム
JP5299912B2 (ja) * 2009-04-20 2013-09-25 株式会社ザクティ 撮像装置及び画像ファイルのデータ構造
US8549404B2 (en) * 2009-04-30 2013-10-01 Apple Inc. Auditioning tools for a media editing application
KR101636714B1 (ko) * 2009-12-08 2016-07-20 엘지전자 주식회사 영상표시장치 및 그 동작방법
US8555170B2 (en) * 2010-08-10 2013-10-08 Apple Inc. Tool for presenting and editing a storyboard representation of a composite presentation

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018082239A (ja) * 2016-11-14 2018-05-24 キヤノン株式会社 画像処理装置、撮像装置および制御方法
WO2024042979A1 (ja) * 2022-08-24 2024-02-29 富士フイルム株式会社 画像ファイル作成方法、及び画像ファイル作成装置

Also Published As

Publication number Publication date
US20120194544A1 (en) 2012-08-02
CN102685374A (zh) 2012-09-19

Similar Documents

Publication Publication Date Title
JP2012178820A (ja) 電子機器
US9538085B2 (en) Method of providing panoramic image and imaging device thereof
JP4654887B2 (ja) 撮像装置
JP2010081002A (ja) 撮像装置
JP2012160863A (ja) 撮像装置、画像再生装置及び画像処理装置
JP5765590B2 (ja) 撮像装置、表示方法及びプログラム
JP2012160864A (ja) 撮像装置
US20120212640A1 (en) Electronic device
JP6786311B2 (ja) 画像処理装置、画像処理方法、コンピュータプログラムおよび記憶媒体
JP4640198B2 (ja) 電子カメラ、多数ポイント同時合焦枠表示方法、及びプログラム
KR20120002834A (ko) 참조 영상을 제공하는 촬상장치 및 그의 참조 영상 제공방법
JP6261205B2 (ja) 画像処理装置
JP2017011504A (ja) 撮像装置、画像処理方法及びプログラム
JP4792929B2 (ja) デジタルカメラ
JP2006345055A (ja) 画像撮像装置
JP5950755B2 (ja) 画像処理装置、制御方法、プログラム及び記憶媒体
JP2008294704A (ja) 表示装置および撮像装置
JP2009044329A (ja) プログラム、画像処理方法および画像処理装置
JP2007178735A (ja) 撮像装置、ズーム時の画角表示方法、およびプログラム
JP2011193066A (ja) 撮像装置
JP2016167767A (ja) 撮像装置、合成撮影方法及び合成撮影プログラム
JP5832078B2 (ja) 撮像装置及びその制御方法
JP4687619B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP5163333B2 (ja) カメラ装置、及びその画像表示方法と画像表示プログラム
JP5417920B2 (ja) 画像処理装置、画像処理方法、電子カメラおよび画像処理プログラム

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20130404

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20130612