JP5550431B2 - Display control apparatus and display control method - Google Patents

Display control apparatus and display control method Download PDF

Info

Publication number
JP5550431B2
JP5550431B2 JP2010094412A JP2010094412A JP5550431B2 JP 5550431 B2 JP5550431 B2 JP 5550431B2 JP 2010094412 A JP2010094412 A JP 2010094412A JP 2010094412 A JP2010094412 A JP 2010094412A JP 5550431 B2 JP5550431 B2 JP 5550431B2
Authority
JP
Japan
Prior art keywords
image
distance
focus position
display
display control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010094412A
Other languages
Japanese (ja)
Other versions
JP2011228814A5 (en
JP2011228814A (en
Inventor
芳和 柴宮
悟史 卯川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2010094412A priority Critical patent/JP5550431B2/en
Publication of JP2011228814A publication Critical patent/JP2011228814A/en
Publication of JP2011228814A5 publication Critical patent/JP2011228814A5/ja
Application granted granted Critical
Publication of JP5550431B2 publication Critical patent/JP5550431B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Transforming Electric Information Into Light Information (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は、連続表示される静止画像の表示制御技術に関する。   The present invention relates to a display control technique for continuously displayed still images.

デジタルカメラの進歩に伴い、所望の構図(画角)に対し、焦点深度を浅くして焦点調節状態を変化させながら連続撮影するマルチフォーカスフォト(以下、MFPという)機能の提供が容易に可能となった。焦点深度を浅くして撮影した各画像は、局所的に焦点の合った画像であることが多い。これら一連の画像を続表示(以下、MFP連続表示という)すると、ユーザは、所的に焦点の合った部分が移動するような様子を見ることができる。これにより、画像を1枚の静止画として表示する従来の方式とは異なり、ユーザは被写体の移動感、奥行き感等の表示効果を享受できる。 With the advancement of digital cameras, it is possible to easily provide a multi-focus photo (hereinafter referred to as MFP) function that continuously captures a desired composition (angle of view) while reducing the depth of focus and changing the focus adjustment state. became. Each image taken with a shallow depth of focus is often a locally focused image. These continuous displaying a series of images (hereinafter, MFP that a continuous display), the user is focus regions of the station plant basis can observe that move. Thereby, unlike the conventional method of displaying an image as a single still image, the user can enjoy display effects such as a sense of movement of the subject and a sense of depth.

一方、液晶ディスプレイやプラズマディスプレイ等の大画面テレビジョン装置の普及に伴い、デジタルカメラで撮影した画像を、ユーザが大型の表示装置で見る機会が多くなっている。   On the other hand, with the widespread use of large-screen television devices such as liquid crystal displays and plasma displays, there are increasing opportunities for users to view images taken with digital cameras on large display devices.

複数の静止画像を連続して示する場合の課題として、ユーザが画像内容を認識できないうちに次の画像に変化してしまうことが挙げられる。従来から知られている、いわゆるスライドショー表示と呼ばれる画像の連続表示により、この課題を解決する先行技術が特許文献1に提案されている。画像内に写っている人の数を検出し、人数が多いほどその画像の表示時間を長くするか、または中央部に居る人の数が多いほど表示時間を長くする制御が開示されている。 A plurality of still images as a problem when continuously Table Shimesuru include the user may change to the next image while it does not recognize the image content. Patent Document 1 proposes a prior art that solves this problem by continuously displaying images known as so-called slide show display. A control is disclosed in which the number of people in an image is detected and the display time of the image is lengthened as the number of people increases, or the display time is lengthened as the number of people in the center increases.

特開2006−245646号公報JP 2006-245646 A

MFP連続表示において、ユーザが局所的に合焦している画像を閲覧する際、その合焦位置にユーザの視線は自然と向かう。ここで別の画像へ変化すると、ユーザの視線は、別の画像の合焦位置に向かうことになる。この際、表示された画像の二次元平面上の合焦位置が1つ前の画像における二次元平面上の合焦位置から離れていると、ユーザがその合焦位置へと視線を移動させるのに時間がかかる。例えば、1つ前の画像の合焦位置が画像の左上側にあり、次の画像の合焦位置が画像の右下側にあると、ユーザは画像の変化に伴い、左上に向けていた視線を右下に移動させる必要がある。したがって、画像の表示時間が短い場合には、ユーザが変化後の画像を認識する前に、その次の画像に変わってしまうという問題が生じ得る。また、ユーザの視線は合焦位置を追いかけるように誘導されるので、画像の変化が速いと、これに伴い視線を速く動かす必要が生じる。これが繰り返されると、目の疲れを引き起こす虞がある。これらの問題は、表示装置の表示画面が大型化する傾向に伴い、視点移動が大きくなることで著しくなるものと予想される。こうした課題に対して、画像に写っている人物の数によって表示時間を変更するような技術では、人物以外の画像には対応することができない。   In the continuous MFP display, when viewing a locally focused image, the user's line of sight naturally goes to the focused position. Here, when the image changes to another image, the user's line of sight is directed to the in-focus position of the other image. At this time, if the focus position on the two-dimensional plane of the displayed image is away from the focus position on the two-dimensional plane in the previous image, the user moves the line of sight to the focus position. Takes time. For example, when the in-focus position of the previous image is on the upper left side of the image and the in-focus position of the next image is on the lower right side of the image, the user's line of sight directed toward the upper left as the image changes Needs to be moved to the lower right. Therefore, when the display time of the image is short, there is a problem that the user changes to the next image before recognizing the changed image. Further, since the user's line of sight is guided to follow the in-focus position, if the image changes quickly, it is necessary to move the line of sight quickly. If this is repeated, eye strain may occur. These problems are expected to become significant as the viewpoint movement increases as the display screen of the display device becomes larger. To deal with such a problem, a technique that changes the display time depending on the number of persons in the image cannot cope with images other than the person.

そこで本発明は、焦点調節状態を変化させながら連続撮影された複数の画像を続して表示部に表示する場合に、ユーザによる画像の視認をより確実なものとする表示制御装置及び表示制御方法を提供することを目的とする。 The present invention, when displaying on the display unit continuous to the plurality of images continuously photographed while changing the focusing state, a display control apparatus and a display control to be more reliable visual recognition of the image by the user It aims to provide a method.

本発明の一実施形態の表示制御装置は、焦点調節状態を変化させながら連続撮影された複数の画像を続して表示部に表示する制御を行う表示制御装置であって、表示対象である前記複数の画像の合焦位置を検出する検出手段と、前記検出手段で検出された、表示される第1画像の合焦位置と、当該画像の一つ後に表示される第2画像の合焦位置との間の距離を算出する距離算出手段と、前記距離算出手段が算出した合焦位置の距離が長いほど、前記第2画像を前記表示部に表示した場合の表示時間を長くする表示制御手段を備える。 The display control device according to an embodiment of the present invention is a display control device for controlling display on the display unit continuous to the plurality of images continuously photographed while changing the focusing state, it is displayed Detection means for detecting a focus position of the plurality of images, focus position of the displayed first image detected by the detection means, and focus of a second image displayed immediately after the image A distance calculation unit that calculates a distance to the position; and a display control that increases a display time when the second image is displayed on the display unit as the distance of the in-focus position calculated by the distance calculation unit is longer Means.

本発明によれば、焦点調節状態を変化させながら連続撮影された複数の画像を続して表示部に表示する場合に、ユーザによる画像の視認をより確実なものとすることができる。 According to the present invention, it may be to display on the display unit continuous to the plurality of images continuously photographed while changing the focusing state, be more reliable visual recognition of the image by the user.

本発明の一実施形態に係る装置の構成例を示す図である。It is a figure which shows the structural example of the apparatus which concerns on one Embodiment of this invention. 撮影時の合焦位置検出について説明する概略図である。It is the schematic explaining the focus position detection at the time of imaging | photography. MFP画像の画像ファイル構造を説明する図である。It is a figure explaining the image file structure of MFP image. 第1実施形態におけるMFP画像例を概略的に示す図である。FIG. 3 is a diagram schematically showing an example of an MFP image in the first embodiment. 要部の構成例を示す図である。It is a figure which shows the structural example of the principal part. 動作例を説明するフローチャートである。It is a flowchart explaining an operation example. 複数の合焦位置をもつMFP画像例を概略的に示す図である。FIG. 6 is a diagram schematically illustrating an example of an MFP image having a plurality of in-focus positions. 動作例を説明するフローチャートである。It is a flowchart explaining an operation example. 第2実施形態における、要部の構成例を示す図である。It is a figure which shows the structural example of the principal part in 2nd Embodiment. 動作例を説明するフローチャートである。It is a flowchart explaining an operation example.

以下、図面を参照しながら、本発明の一実施形態について説明する。以下に説明する実施形態は、デジタルカメラの画像を閲覧可能なデジタル放送受信装置(以下、DTV装置という)への適用例を示す。   Hereinafter, an embodiment of the present invention will be described with reference to the drawings. The embodiment described below shows an application example to a digital broadcast receiving apparatus (hereinafter referred to as a DTV apparatus) capable of browsing an image of a digital camera.

[第1実施形態]
図1(a)は静止画像の連続表示制御機能をもつDTV装置100の構成例を示すブロック図である。テレビジョン信号処理部(以下、TV部という)101は、TV放送電波を受信して選局し、映像及び音声データのデコードを行う。処理後の信号は音声出力部106、表示制御部107へ送出される。表示制御部107は、TV部101からの映像データと、後述の画像デコード部195からの画像データ、内部バス102からのグラフィックデータ(OSD、GUIデータ等)を受けとり、合成又は補正後の映像信号を表示部108に出力する。表示部108は、表示制御部107から映像信号を受けて画像を表示する。例えば、対角50インチ(約1.27メートル)の表示装置が使用される。
[First Embodiment]
FIG. 1A is a block diagram illustrating a configuration example of a DTV apparatus 100 having a still image continuous display control function. A television signal processing unit (hereinafter referred to as a TV unit) 101 receives a TV broadcast radio wave, selects a channel, and decodes video and audio data. The processed signal is sent to the audio output unit 106 and the display control unit 107. The display control unit 107 receives video data from the TV unit 101, image data from an image decoding unit 195 described later, and graphic data (OSD, GUI data, etc.) from the internal bus 102, and a synthesized or corrected video signal Is output to the display unit 108. The display unit 108 receives the video signal from the display control unit 107 and displays an image. For example, a display device having a diagonal size of 50 inches (about 1.27 meters) is used.

ユーザは図1(b)に示すリモートコントローラ(以下、リモコンと略称する)200を用いてDTV装置100に操作指示を送る。リモコン信号受信部191は、リモコン200から操作指示信号を受信し、システム制御部199に送る。画像入力部192は、デジタルカメラ等で撮影してメモリカード等の記憶媒体に保存した画像データを、DTV装置100に入力するためのインターフェース部である。蓄積部193は各種データを格納するメモリやHDD(ハードディスクドライブ)装置等の記憶装置であり、プログラムの実行に必要なワークエリアにも使用される。蓄積部193は、画像入力部192より入力したデジタル画像データ、リモコン200から伝送されるキーデータ、測距データ、プログラム、プログラム実行に必要な各種テーブルデータ等を記憶する。   The user sends an operation instruction to the DTV apparatus 100 using a remote controller (hereinafter abbreviated as a remote controller) 200 shown in FIG. The remote control signal receiving unit 191 receives an operation instruction signal from the remote control 200 and sends it to the system control unit 199. The image input unit 192 is an interface unit for inputting image data captured by a digital camera or the like and stored in a storage medium such as a memory card to the DTV device 100. The storage unit 193 is a storage device such as a memory for storing various data and an HDD (hard disk drive) device, and is also used as a work area necessary for executing the program. The storage unit 193 stores digital image data input from the image input unit 192, key data transmitted from the remote controller 200, distance measurement data, a program, various table data necessary for program execution, and the like.

システム制御部199はDTV装置100の各部を統括的に制御する。システム制御部199はCPU(中央演算処理装置)、主記憶部、バス制御部、プログラム及びパラメータの一次保存部、時計部、タイマ部を有し、以下の制御を行う。   A system control unit 199 comprehensively controls each unit of the DTV apparatus 100. The system control unit 199 includes a CPU (Central Processing Unit), a main storage unit, a bus control unit, a program and parameter primary storage unit, a clock unit, and a timer unit, and performs the following control.

TV受信において、システム制御部199は、TV部101を制御して選局動作を行う。また、システム制御部199は表示制御部107を制御し、表示部108に映像を表示させ、音声出力部106から音声を出力させる。デジタル画像表示においてシステム制御部199は、画像入力部192から画像データを取り込んで蓄積部193に格納する。画像内で検出した合焦位置と、リモコン200から受信した測距情報に基づいてシステム制御部199は画像ごとの表示時間を決定し、蓄積部193、表示制御部107を制御して表示部108に画像を表示させる。   In the TV reception, the system control unit 199 controls the TV unit 101 to perform a channel selection operation. In addition, the system control unit 199 controls the display control unit 107 to display an image on the display unit 108 and output audio from the audio output unit 106. In digital image display, the system control unit 199 takes in image data from the image input unit 192 and stores it in the storage unit 193. Based on the in-focus position detected in the image and the distance measurement information received from the remote controller 200, the system control unit 199 determines the display time for each image, and controls the storage unit 193 and the display control unit 107 to display the display unit 108. Display an image on.

図1(b)はリモコン200の構成例を示す。操作部201は操作キーを備え、その押下による操作指示の内容を制御部204が認識する。測距部202には測距センサが使用される。ユーザがリモコン200をDTV装置100に向けて、所定のキーを押下すると両装置間の測距動作が開始する。これによりユーザの閲覧位置とDTV装置100の表示部108との距離が計測され、最終的にDTV装置100は距離情報を得る。送信部203は制御部204により制御され、DTV装置100に対してデータを送信する。   FIG. 1B shows a configuration example of the remote controller 200. The operation unit 201 includes an operation key, and the control unit 204 recognizes the content of the operation instruction when the operation key is pressed. A distance measuring sensor is used for the distance measuring unit 202. When the user points the remote controller 200 at the DTV device 100 and presses a predetermined key, the distance measuring operation between both devices starts. Thereby, the distance between the user's viewing position and the display unit 108 of the DTV apparatus 100 is measured, and the DTV apparatus 100 finally obtains distance information. The transmission unit 203 is controlled by the control unit 204 and transmits data to the DTV device 100.

制御部204はリモコン200全体を制御し、操作部201にて押下されたキーに対応するキーコードの信号を発生させる。例えば画像閲覧アプリケーションに対応付けられたキーが押下されると、制御部204は測距部202を制御して距離計測を実施する。制御部204は、画像閲覧アプリケーションの起動キーに対応するキーコードの信号と共に測定した距離データを送信部203から送信する。   The control unit 204 controls the entire remote controller 200 and generates a key code signal corresponding to the key pressed by the operation unit 201. For example, when a key associated with an image browsing application is pressed, the control unit 204 controls the distance measuring unit 202 to perform distance measurement. The control unit 204 transmits distance data measured together with a key code signal corresponding to the activation key of the image browsing application from the transmission unit 203.

図2は、デジタルカメラでの撮影時における合焦位置検出を説明する図であり、撮影領域が写っているデジタルカメラのファインダ画像を表している。ファインダ内に示す小さな四角形枠は、撮影領域内の合焦検出センサ(AFセンサ)の位置を表す。該センサに対応する合焦検出領域はファインダ内に複数配置されており、各々の領域について合焦しているか否かを検出できる。あるフォーカス状態(焦点調節状態)で撮影した画像において合焦が検出されると、そのフォーカス状態と撮影領域内のAFセンサの位置を示すデータが、図3に示す画像ファイル301の撮影情報の1つとして保存される。   FIG. 2 is a diagram for explaining in-focus position detection at the time of shooting with a digital camera, and represents a finder image of the digital camera in which the shooting area is shown. A small square frame shown in the viewfinder represents the position of the focus detection sensor (AF sensor) in the shooting area. A plurality of focus detection areas corresponding to the sensor are arranged in the finder, and it is possible to detect whether or not each area is in focus. When focus is detected in an image photographed in a certain focus state (focus adjustment state), data indicating the focus state and the position of the AF sensor in the photographing region is one of the photographing information of the image file 301 shown in FIG. Saved as one.

図3は、MFP画像のファイル構造を例示する。MFP画像ファイル301は、ヘッダ302と、連続的に撮影した複数の個別画像ファイル303で構成される。ヘッダ302には、連続画像として撮影された枚数、代表画像の情報、各画像のインデックス等、画像全体に関わる情報が記述されている。システム制御部199は、この情報を参照して、画像ファイルがMFP画像のファイルであるか否かを判断する。   FIG. 3 illustrates the file structure of the MFP image. The MFP image file 301 includes a header 302 and a plurality of individual image files 303 photographed continuously. The header 302 describes information related to the entire image, such as the number of images taken as continuous images, information on representative images, and the index of each image. The system control unit 199 refers to this information to determine whether the image file is an MFP image file.

ヘッダ302の後には画像毎の個別画像ファイル303が続き、これは画像データとヘッダにより構成される。個別画像ファイル303のヘッダには撮影情報、カメラ機種名、シャッター速度、絞り、合焦距離と合焦位置情報、撮影感度等の情報が記述されている。その後、低解像度のサムネイル画像データが格納され、さらに画像データが格納されており、これが連続撮影の枚数分に亘って配置された構成となっている(図3にはn枚の個別画像ファイルを示す)。   Following the header 302 is an individual image file 303 for each image, which is composed of image data and a header. The header of the individual image file 303 describes information such as shooting information, camera model name, shutter speed, aperture, focus distance and focus position information, and shooting sensitivity. Thereafter, low-resolution thumbnail image data is stored, and further image data is stored, which is arranged over the number of continuous shots (FIG. 3 shows n individual image files). Show).

図4は、MFP撮影における一連の画像例を模式的に示す。図4(a)乃至(e)に示す5枚の画像は連続撮影されたMFP画像である。図4(a)の画像は、丸枠内に数字1を付した被写体に合焦した状態であり、該被写体を太線で区別して示している。図4(b)乃至(e)に示す画像は、それぞれ丸枠内に数字2乃至5を付した被写体に合焦した状態の画像であり、d1乃至4は画像内での合焦位置の移動距離を示す。つまり図4(b)に示すd1は、図4(a)から図4(b)へと表示する画像が変化した場合、中央の被写体(丸枠内の数字1参照)から左方の被写体(丸枠内の数字2参照)への合焦位置の移動距離を表すものである。同様に図4(c)乃至(e)にそれぞれ示すd2乃至d4は、1画像前の第1画像における合焦位置を基準として、現時点の画像(第2画像)における合焦位置までの移動距離を表す。この移動距離はデータ上のサイズ、つまり、画素数によって定まるサイズをベースとして決定される。例えば、表示する画像が1920画素×1080画素であり、ある画像の合焦位置が画像の左上を起点として(100,100)の位置にあり、別の画像の合焦位置が(1000,100)の位置にある場合、移動距離は900とすることができる。もちろん、この移動距離と表示部の物理的なサイズを用いて実際の表示上のサイズで算出してもよい。つまり、1画素の間隔(画素ピッチ)をデータ上のサイズに掛けることで表示部に表示された状態での移動距離を算定することができる。なお、θ1乃至4の意味については後述の第2実施形態にて説明する。   FIG. 4 schematically shows a series of image examples in MFP shooting. The five images shown in FIGS. 4A to 4E are MFP images taken continuously. The image shown in FIG. 4A is in a state in which a subject with a numeral 1 in a round frame is in focus, and the subject is distinguished by a bold line. The images shown in FIGS. 4B to 4E are images in a state of being focused on the subject with numbers 2 to 5 in a round frame, respectively, and d1 to 4 are movements of the in-focus position in the image. Indicates distance. That is, d1 shown in FIG. 4 (b) indicates that when the image displayed from FIG. 4 (a) is changed to FIG. This represents the movement distance of the in-focus position to the numeral 2 in the round frame). Similarly, d2 to d4 shown in FIGS. 4C to 4E are the movement distances to the in-focus position in the current image (second image) with reference to the in-focus position in the first image one image before. Represents. This moving distance is determined based on the data size, that is, the size determined by the number of pixels. For example, the image to be displayed is 1920 pixels × 1080 pixels, the in-focus position of an image is at the position (100, 100) starting from the upper left of the image, and the in-focus position of another image is (1000, 100). The movement distance can be 900. Of course, the actual display size may be calculated using the movement distance and the physical size of the display unit. That is, the moving distance in the state displayed on the display unit can be calculated by multiplying the size on the data by the interval (pixel pitch) of one pixel. The meanings of θ1 to 4 will be described in a second embodiment described later.

図5は、図1の構成と関連するDTV装置100内の機能ブロック図である。画像入力部192、蓄積部193、画像デコード部195、表示制御部107、表示部108は既述の通りである。画像ファイル301は、図3で説明したファイル構造を有し、焦点深度を浅くして焦点調節状態を変化させながら連続撮影した画像データを含む。システム制御部199内に示す合焦位置検出部1991、移動距離算出部1992、表示時間制御部1993の動作は、システム制御部199が制御する画像閲覧アプリケーションプログラムに従って行われる。   FIG. 5 is a functional block diagram in the DTV apparatus 100 related to the configuration of FIG. The image input unit 192, storage unit 193, image decoding unit 195, display control unit 107, and display unit 108 are as described above. The image file 301 has the file structure described with reference to FIG. 3 and includes image data continuously photographed while changing the focus adjustment state by reducing the depth of focus. The operations of the in-focus position detection unit 1991, the movement distance calculation unit 1992, and the display time control unit 1993 shown in the system control unit 199 are performed according to an image browsing application program controlled by the system control unit 199.

合焦位置検出部1991は、蓄積部193に蓄積されたMFP画像を続して表示する際、画像ファイル301から画像ごとの合焦位置を検出し、検出結果を移動距離算出部1992へ送る。移動距離算出部1992は、画像ごとの合焦位置のデータを一時的に保存し、1画像前の第1画像における合焦位置と、第1画像の次の第2画像における合焦位置との間の距離を算出する。算出後の距離情報は、合焦位置の移動距離情報として表示時間制御部1993へ送られる。 Focus position detection unit 1991, when displaying the MFP image stored in the storage unit 193 consecutive to detect the focus position of each image from the image file 301, and sends the detection result to the moving distance calculating unit 1992 . The movement distance calculation unit 1992 temporarily stores the data of the in-focus position for each image, and the in-focus position in the first image one image before and the in-focus position in the second image next to the first image. Calculate the distance between them. The calculated distance information is sent to the display time control unit 1993 as moving distance information of the in-focus position.

表示時間制御部1993は、合焦位置の移動距離に対して視点移動に必要な表示時間を決定するための参照テーブル(以下、移動距離/表示時間テーブルという)を有する。表示時間制御部1993は、このテーブルを用いて、移動距離算出部1992で算出した移動距離に応じた表示時間を決定する。表示時間制御部1993は、移動距離が長いほど表示時間が長くなるように蓄積部193と表示制御部107を制御し、表示部108に画像を表示させる。移動距離/表示時間テーブルの一例を表1に示す。   The display time control unit 1993 has a reference table (hereinafter referred to as a movement distance / display time table) for determining a display time required for viewpoint movement with respect to the movement distance of the in-focus position. The display time control unit 1993 uses this table to determine a display time corresponding to the movement distance calculated by the movement distance calculation unit 1992. The display time control unit 1993 controls the storage unit 193 and the display control unit 107 so that the display time becomes longer as the moving distance is longer, and causes the display unit 108 to display an image. An example of the movement distance / display time table is shown in Table 1.

Figure 0005550431
Figure 0005550431

表中の「ta」は、1つ前に表示されていた第1画像と次に表示された第2画像との間で、合焦位置の移動が生じなかった場合に、第2画像の内容を人間が把握するのに必要な時間として設定された時間である。この時間は経験値や実験での測定によって任意に定めることが出来る。「ti」は距離diに亘ってユーザが視点を移動するのに必要な時間として実験等に基づいて設定された時間である。これらより、画像1枚の表示時間は、taとtiを加算した時間であり、例えば、移動距離d4に対する表示時間は「ta+t4」である。図4に示す例で、「d3<d1<d4<d2」とすると、視点移動にかかる時間は「t3<t1<t4<t2」の関係を満たす。
次に、図6のフローチャートを用いて、本発明の第1実施形態における動作例1及び2について説明する。
“Ta” in the table indicates the content of the second image when the focus position does not move between the first image displayed immediately before and the second image displayed next. This is the time set as the time required for human beings to grasp. This time can be arbitrarily determined by empirical values or experimental measurements. “Ti” is a time set based on an experiment or the like as a time required for the user to move the viewpoint over the distance di. Accordingly, the display time for one image is a time obtained by adding ta and ti, and for example, the display time for the moving distance d4 is “ta + t4”. In the example illustrated in FIG. 4, when “d3 <d1 <d4 <d2”, the time required for viewpoint movement satisfies the relationship “t3 <t1 <t4 <t2”.
Next, operation examples 1 and 2 in the first embodiment of the present invention will be described using the flowchart of FIG.

(動作例1)
本例の動作は、図4に示すように、1つの位置に合焦している各MFP画像を、図4(a)から(e)の順に続して表示するものである。前提としてデジタルカメラの画像データはユーザの操作指示に従い、画像入力部192を経由して蓄積部193に読み込まれているものとする。
(Operation example 1)
Operation of the present embodiment, as shown in FIG. 4, each MFP image being focused at one location, and displays it to continue with the order of FIG. 4 (a) (e). It is assumed that the image data of the digital camera is read into the storage unit 193 via the image input unit 192 in accordance with a user operation instruction.

図6にてユーザは、画像閲覧を行うためにリモコン200を操作する。操作部201に設けた画像閲覧アプリケーションキーが押下される(S601)と、DTV装置100のリモコン信号受信部191はリモコン200からデータを受信し、システム制御部199は画像閲覧アプリケーションを起動させる。その後のユーザのリモコン操作指示に従い、システム制御部199はユーザによる画像選択、又はスライドショー表示の要求に応じて、蓄積部193に記憶された画像ファイル301のデータを読み出し、該ファイルを調べて表示画像を決定する(S602)。次に対象画像がMFP画像か否かの判定がなされ(S603)、MFP画像の場合、S604に進む。また対象画像がMFP画像でない場合、システム制御部199はMFP画像に対する表示制御以外の表示制御を行い(S611)、処理を終える。   In FIG. 6, the user operates the remote controller 200 in order to view an image. When an image browsing application key provided on the operation unit 201 is pressed (S601), the remote control signal receiving unit 191 of the DTV apparatus 100 receives data from the remote control 200, and the system control unit 199 activates the image browsing application. In accordance with the user's subsequent remote control operation instruction, the system control unit 199 reads the data of the image file 301 stored in the storage unit 193 in response to the user's request for image selection or slide show display, examines the file, and displays the displayed image. Is determined (S602). Next, it is determined whether the target image is an MFP image (S603). If the target image is an MFP image, the process proceeds to S604. If the target image is not an MFP image, the system control unit 199 performs display control other than display control for the MFP image (S611), and the process ends.

表示対象の画像がMFP画像と判定された場合、図5で説明した手順に従い、MFP画像を構成する各個別画像に係る表示時間の決定及びこれに基づく表示制御が行われる。まずシステム制御部199は、MFP画像から最初の個別画像を読み出し、合焦位置検出部1991が合焦位置を検出して検出結果を移動距離算出部1992へ送る(S604)。移動距離算出部1992は、最初の画像に係る合焦位置のデータをメモリに保存する。最初の画像については合焦位置の移動距離が算出不能であるため、移動距離算出部1992はその旨を示す情報を表示時間制御部1993へ送る。表示時間制御部1993は、移動距離が不明の場合、予め決められた初期時間(これを「t00」秒と記す)を設定する。この初期時間t00に亘って最初の画像を表示するように、表示時間制御部1993は蓄積部193、表示制御部107を制御する(S605)。表示部108に最初の画像を表示する初期時間t00の長さは、一様な画面にて画像が表示された際、ユーザが全画面を認識できる時間長に規定されている。   When the image to be displayed is determined to be an MFP image, the display time for each individual image constituting the MFP image is determined and display control based on this is performed according to the procedure described in FIG. First, the system control unit 199 reads the first individual image from the MFP image, the focus position detection unit 1991 detects the focus position, and sends the detection result to the movement distance calculation unit 1992 (S604). The movement distance calculation unit 1992 stores the data of the in-focus position related to the first image in the memory. Since the moving distance of the in-focus position cannot be calculated for the first image, the moving distance calculator 1992 sends information indicating that fact to the display time controller 1993. When the moving distance is unknown, the display time control unit 1993 sets a predetermined initial time (this is expressed as “t00” seconds). The display time control unit 1993 controls the storage unit 193 and the display control unit 107 to display the first image over the initial time t00 (S605). The length of the initial time t00 for displaying the first image on the display unit 108 is defined as the length of time that the user can recognize the entire screen when the image is displayed on a uniform screen.

次の個別画像(第2画像)のデータが蓄積部193より読み出される(S606)と、合焦位置検出部1991はその合焦位置を検出して検出結果を移動距離算出部1992へ送る。移動距離算出部1992は、検出された合焦位置のデータを保存すると共に、これを1つ前の第1画像(この場合、最初の画像)の合焦位置と比較し、合焦位置の移動距離を算出する(S607)。算出した移動距離情報は表示時間制御部1993へ送られる。表示時間制御部1993は、合焦位置の移動距離情報を受けて、前記移動距離/表示時間テーブルを参照し、第2画像の表示時間を決定する(S608)。表示時間制御部1993は決定した表示時間に従って蓄積部193と表示制御部107を制御し、第2画像を表示させる(S609)。   When data of the next individual image (second image) is read from the storage unit 193 (S606), the focus position detection unit 1991 detects the focus position and sends the detection result to the movement distance calculation unit 1992. The movement distance calculation unit 1992 stores the data of the detected focus position, compares this with the focus position of the previous first image (in this case, the first image), and moves the focus position. The distance is calculated (S607). The calculated travel distance information is sent to the display time control unit 1993. The display time control unit 1993 receives the movement distance information of the in-focus position, refers to the movement distance / display time table, and determines the display time of the second image (S608). The display time control unit 1993 controls the storage unit 193 and the display control unit 107 according to the determined display time to display the second image (S609).

システム制御部199はMFP画像ファイルのヘッダより、連続撮影した枚数分の画像のデータを読み取って表示制御を行い、MFP画像の表示が終了したか否かを判定する(S610)。画像表示の終了が判定された場合、MFP画像の表示が終了し、次の画像の表示処理が実行される。未終了と判定された場合、S606に戻り、その次の画像、つまり3枚目の個別画像の読み込みが行われ、以後、同様にS606乃至610の処理が繰り返される。以上の手順により、MFP画像の連続表示処理が行われる。   The system control unit 199 reads the image data for the number of continuously shot images from the header of the MFP image file, performs display control, and determines whether the display of the MFP image has ended (S610). If the end of image display is determined, the display of the MFP image ends, and the next image display process is executed. If it is determined that the processing has not been completed, the process returns to S606, and the next image, that is, the third individual image is read. Thereafter, the processing of S606 to S610 is repeated in the same manner. With the above procedure, the MFP image continuous display process is performed.

(動作例2)
次に、MFP画像の各個別画像において、複数の合焦位置をもつ画像が存在する場合に、画像の合焦位置の検出から表示時間の決定までの動作例について説明する。
(Operation example 2)
Next, an operation example from the detection of the in-focus position of the image to the determination of the display time when there is an image having a plurality of in-focus positions in each individual image of the MFP image will be described.

図7は、1つの個別画像内に複数の合焦位置がある場合を例示する。図7(a)の画像は、丸枠内に数字6を付して示す被写体に合焦している状態の画像例を示す。図7(b)は、変化後の画像中に複数の合焦位置がある場合を例示する。楕円枠内に7Aで示す被写体に合焦位置が存在する。そこから右方に離れた場所では、隣接した3つの被写体、つまり楕円枠内に7B1乃至3で示す各被写体に合焦した状態とされており、本例では合計で4つの合焦位置を有する画像を示す。図7(a)から図7(b)へと画像が変化した場合、合焦位置が1つの画像から、4つの合焦位置をもつ画像へと変わる。なお図7(b)に示すd7Aは、1画像前の第1画像における合焦位置(丸枠内の数字6参照)を基準とした場合の合焦位置7Aへの移動距離を表す。d7Bは、合焦位置7Aを基準とした場合に、7B1乃至3で示す被写体群の重心位置に設定した合焦位置(楕円枠内の7B参照)への移動距離を表す。   FIG. 7 illustrates a case where there are a plurality of in-focus positions in one individual image. The image in FIG. 7A shows an example of an image in a state in which a subject indicated by a numeral 6 in a round frame is in focus. FIG. 7B illustrates a case where there are a plurality of in-focus positions in the image after the change. The in-focus position exists in the subject indicated by 7A within the ellipse frame. In a place away from it to the right, the three adjacent subjects, that is, the subjects indicated by 7B1 to 3 in the ellipse frame are in focus, and in this example, there are a total of four in-focus positions. Images are shown. When the image changes from FIG. 7A to FIG. 7B, the in-focus position changes from one image to an image having four in-focus positions. In addition, d7A shown in FIG.7 (b) represents the movement distance to the focusing position 7A on the basis of the focusing position (refer the number 6 in a round frame) in the 1st image before 1 image. d7B represents the moving distance to the in-focus position (see 7B in the ellipse frame) set at the center of gravity of the subject group indicated by 7B1 to 3 when the in-focus position 7A is used as a reference.

図7(c)は、変化後の画像内に1つの合焦位置がある場合を示しており、この画像は丸枠内に数字8を付して示す被写体に合焦している状態の画像である。d8は1画像前の合焦位置(楕円枠内の7B参照)を基準とした場合の合焦位置の移動距離を表す。図7(b)から図7(c)へと画像が変化した場合、前記とは異なり、複数の合焦位置をもつ画像から合焦位置の数が1つの画像へと表示が変わる。   FIG. 7C shows a case where there is one in-focus position in the image after the change, and this image is in an in-focus state with the subject indicated by the numeral 8 in a round frame. It is. d8 represents the moving distance of the in-focus position with reference to the in-focus position of the previous image (see 7B in the ellipse frame). When the image changes from FIG. 7B to FIG. 7C, the display changes from an image having a plurality of in-focus positions to an image having one in-focus position unlike the above.

動作例2では最初の表示画像に関し、その合焦位置は、図7(a)に示すように1つとする。この場合、前記動作例1の場合と同様に、図6のS601乃至605のステップに示す処理が実行された後、S606にて次の画像を読み込む処理が行われる。そして図8のフローチャートに示す処理へと進み、合焦位置検出部1991は、次の画像の合焦位置の数を調べて、複数である否かを判定する(S801)。ここで合焦位置が1つしかないと判定された場合(S807)、図6のS607に進む。以降の処理は動作例1の場合と同じである。一方、複数の合焦位置が検出された場合には、それらが隣接した位置にあるか否かを合焦位置検出部1991が判定する(S802)。複数の合焦位置が隣接している(合焦したAFセンサの位置が隣り合っている)と判定された場合、その重心を1つの代表合焦位置として設定する処理が行われる(S803)。この合焦位置の情報は移動距離算出部1992へ送られる。 In the operation example 2, regarding the first display image, the focus position is one as shown in FIG. In this case, as in the case of the first operation example, after the processing shown in steps S601 to S605 in FIG. 6 is executed, processing for reading the next image is performed in S606. The process advances to the processing shown in the flowchart of FIG. 8, the focus position detection unit 1991 examines the number of in-focus position of the next image, and determines whether a plurality of (S801). If it is determined that there is only one in-focus position (S807), the process proceeds to S607 in FIG. The subsequent processing is the same as in the first operation example. On the other hand, when a plurality of in-focus positions are detected, the in-focus position detection unit 1991 determines whether or not they are in adjacent positions (S802). When it is determined that a plurality of in-focus positions are adjacent (the positions of the focused AF sensors are adjacent to each other), processing for setting the center of gravity as one representative in-focus position is performed (S803). Information about the in-focus position is sent to the movement distance calculation unit 1992.

図7(b)の画像には前記のように4つの合焦位置がある。そのうち、7B1、7B2、7B3に示す各合焦位置は互いに隣接した位置関係であるため、それらの重心位置が代表合焦位置(7B参照)となる。つまり、この位置と、ここから離れた合焦位置7Aとを含めた、合計2つの合焦位置を示すデータが移動距離算出部1992に送られる。移動距離算出部1992は、複数の合焦位置間の移動距離d7A、d7Bを算出する。   The image in FIG. 7B has four in-focus positions as described above. Among them, since the in-focus positions shown in 7B1, 7B2, and 7B3 are adjacent to each other, their center-of-gravity positions become representative in-focus positions (see 7B). That is, data indicating a total of two in-focus positions including this position and the in-focus position 7 A away from this position are sent to the movement distance calculation unit 1992. The movement distance calculation unit 1992 calculates movement distances d7A and d7B between a plurality of in-focus positions.

表示されている画像が次の画像に変化した際には、現在の合焦位置に一番近い合焦位置に視線が誘導される可能性が高い。そこで移動距離算出部1992は、現在の画像における合焦位置に一番近い合焦位置(次の画像における第1合焦位置であり、「合焦位置1」とする)についての移動距離を算出し、これを第1移動距離とする(S804)。図7(a)から図7(b)への画像変化において、図7(a)の画像での合焦位置(丸枠内の数字6参照)に一番近い図7(b)の画像の合焦位置は7Aである。よって移動距離算出部1992は、図7(b)に示すd7Aを第1移動距離として算出する。   When the displayed image changes to the next image, there is a high possibility that the line of sight is guided to the in-focus position closest to the current in-focus position. Accordingly, the movement distance calculation unit 1992 calculates the movement distance for the in-focus position closest to the in-focus position in the current image (the first in-focus position in the next image, which is “in-focus position 1”). This is the first movement distance (S804). In the image change from FIG. 7A to FIG. 7B, the image of FIG. 7B closest to the in-focus position in the image of FIG. 7A (see numeral 6 in the round frame). The in-focus position is 7A. Therefore, the movement distance calculation unit 1992 calculates d7A shown in FIG. 7B as the first movement distance.

次に、前記合焦位置1から一番近い、第2合焦位置(これを「合焦位置2」とする)に視線が誘導される可能性が高いため、移動距離算出部1992は合焦位置2を調べてその移動距離を算出し、これを第2移動距離とする(S805)。図7(a)から図7(b)への画像変化において、合焦位置7Aに一番近いのは合焦位置7Bである。よって移動距離算出部1992は、図7(b)のd7Bを第2移動距離として算出する。   Next, since there is a high possibility that the line of sight is guided to the second in-focus position that is closest to the in-focus position 1 (referred to as “in-focus position 2”), the movement distance calculation unit 1992 is in-focus. The position 2 is checked to calculate the moving distance, and this is set as the second moving distance (S805). In the image change from FIG. 7A to FIG. 7B, the focus position 7B is closest to the focus position 7A. Therefore, the movement distance calculation unit 1992 calculates d7B in FIG. 7B as the second movement distance.

移動距離算出部1992は、次の画像における残り全ての合焦位置についても同様に移動距離を算出し、最後の合焦位置まで移動距離を算出すると、これら算出した複数の移動距離を表示時間制御部1993へ送る。また、この最後の合焦位置のデータは対象画像における最終合焦位置を示す位置データとしてメモリに保存される。この最終合焦位置は、次の画像へ変化する際、現時点の合焦位置として使用される。図7(b)から図7(c)への画像変化がこれに該当し、この場合の最終合焦位置は合焦位置7Bである。   The movement distance calculation unit 1992 calculates the movement distance in the same manner for all the remaining in-focus positions in the next image, and calculates the movement distance to the last in-focus position. Part 1993. Further, the data of the last in-focus position is stored in the memory as position data indicating the final in-focus position in the target image. This final focus position is used as the current focus position when changing to the next image. The image change from FIG. 7B to FIG. 7C corresponds to this, and the final focus position in this case is the focus position 7B.

表示時間制御部1993は、移動距離算出部1992からの移動距離の総和(総距離)を計算し、合計移動量に対応する表示時間を、移動量/表示時間テーブルにより決定する(S806)。1つの画像内に複数の合焦位置が存在する場合、総距離は、各合焦位置を距離が短い順に全て結んだ第1の距離と、第1画像の合焦位置と該合焦位置に最も近い第2画像の合焦位置との間の第2の距離とを加算した距離である。表示時間制御部1993は決定した表示時間に従って蓄積部193、表示制御部107を制御し、複数の合焦位置を有する画像が表示される(図6のS609)。   The display time control unit 1993 calculates the sum (total distance) of the movement distances from the movement distance calculation unit 1992, and determines the display time corresponding to the total movement amount from the movement amount / display time table (S806). When there are a plurality of in-focus positions in one image, the total distance is the first distance obtained by connecting all the in-focus positions in order of increasing distance, the in-focus position of the first image, and the in-focus position. This is the distance obtained by adding the second distance to the in-focus position of the closest second image. The display time control unit 1993 controls the storage unit 193 and the display control unit 107 according to the determined display time, and an image having a plurality of in-focus positions is displayed (S609 in FIG. 6).

以上のステップに沿って、複数の合焦位置をもつ画像が処理され、被写体ごとに焦点の合った画像や、被写体群の重心位置に焦点の合った画像が表示される。その後、図7(b)から図7(c)へと画像が変化すると、図8のS801にて単一の合焦位置が判定されて動作例1と同様の処理が行われる。   In accordance with the above steps, an image having a plurality of in-focus positions is processed, and an image focused on each subject or an image focused on the center of gravity of the subject group is displayed. Thereafter, when the image changes from FIG. 7B to FIG. 7C, a single in-focus position is determined in S801 of FIG. 8, and the same processing as in the operation example 1 is performed.

第1実施形態によれば、焦位置の異なる複数の画像を続して表示部に表示する場合に、連続して表示する画像間の合焦位置の距離に応じて、画像の表示時間を可変としている。そのため、仮に現在表示されている画像の合焦位置から大きく離れた合焦位置を有する画像が次に表示されたとしても、当該画像の表示時間は合焦位置が比較的近い画像の表示時間に比べて長くなる。これにより、ユーザによる画像の視認をより確実なものとすることができる。 According to the first embodiment, when displaying on the display unit continuous to the plurality of different images of the in-focus position, depending on the distance of the focus position between the images to be displayed continuously, the display time of the image Is variable. Therefore, even if an image having a focus position far away from the focus position of the currently displayed image is displayed next, the display time of the image is the display time of an image whose focus position is relatively close. Longer than that. Thereby, the visual recognition of the image by a user can be made more reliable.

[第2実施形態]
次に、本発明の第2実施形態について説明する。第2実施形態では、表示画面において時間的に隣接する画像間での合焦位置の移動距離に加え、ユーザの視聴位置(閲覧位置)と表示画面の位置との距離に応じて画像の表示時間を決定する。
図9は、第2実施形態の要部に関わる機能ブロック図であり、以下、図5と相違する閲覧距離設定部1994、視線移動量算出部1995、表示時間制御部1996を説明する。
閲覧距離設定部1994は、ユーザの閲覧位置とDTV装置100の表示画面との間の距離(以下、閲覧位置−画面間距離という)を設定する。該設定部はユーザの操作指示に従い、GUI画面を表示させ、閲覧位置−画面間距離の設定処理を行って、該距離のデータをメモリに保存する。視線移動量算出部1995は、移動距離算出部1992から合焦位置の移動距離情報を受け取り、視線移動量(以下、これを角度θで表す)を下式によって算出する。
[Second Embodiment]
Next, a second embodiment of the present invention will be described. In the second embodiment, in addition to the moving distance of the in-focus position between temporally adjacent images on the display screen, the image display time depends on the distance between the user's viewing position (viewing position) and the display screen position. To decide.
FIG. 9 is a functional block diagram related to the main part of the second embodiment. Hereinafter, a viewing distance setting unit 1994, a line-of-sight movement calculation unit 1995, and a display time control unit 1996 different from FIG. 5 will be described.
The browsing distance setting unit 1994 sets a distance between the browsing position of the user and the display screen of the DTV device 100 (hereinafter referred to as a browsing position-inter-screen distance). The setting unit displays a GUI screen according to a user's operation instruction, performs a setting process of a browsing position-screen distance, and stores the data of the distance in a memory. The line-of-sight movement amount calculation unit 1995 receives the movement distance information of the in-focus position from the movement distance calculation unit 1992, and calculates the line-of-sight movement amount (hereinafter, this is represented by an angle θ) by the following equation.

Figure 0005550431
Figure 0005550431

ここで、dは合焦位置の移動距離を表し、Lは閲覧位置−画面間距離を表す。「arc tan」は逆正接関数を表す。なお、このdは、画像のデータ上の移動距離(画素を座標値とした場合の合焦位置の座標間距離)に対して表示部のサイズを反映させた値である。
図4(b)の画像例では、θ1が合焦位置の移動距離
d1に対応する視線移動量を表しており、下式により算出される。
Here, d represents the movement distance of the in-focus position, and L represents the browsing position-screen distance. “Arc tan” represents an arc tangent function. This d is a value reflecting the size of the display unit with respect to the moving distance on the image data (distance between coordinates of the in-focus position when pixels are used as coordinate values).
In the image example of FIG. 4B, θ1 represents the line-of-sight movement amount corresponding to the movement distance d1 of the in-focus position, and is calculated by the following equation.

Figure 0005550431
Figure 0005550431

図4(c)に示す視線移動量θ2は、数1式にd2を代入することで算出され、図4(d)のθ3や図4(e)のθ4も同様に算出される。視線移動量の算出結果は表示時間制御部1996に送られる。   The line-of-sight movement amount θ2 shown in FIG. 4C is calculated by substituting d2 into Equation 1, and θ3 in FIG. 4D and θ4 in FIG. The calculation result of the line-of-sight movement amount is sent to the display time control unit 1996.

表示時間制御部1996は、視線移動量に対して必要な表示時間を決定するための参照テーブル(以下、「視線移動量/表示時間テーブル」という)を有する。このテーブルを用いて、視線移動量算出部1995が算出した視線移動量に応じた表示時間が決定される。表示時間制御部1996は、視線移動量が大きいほど表示時間が長くなるように蓄積部193及び表示制御部107を制御し、表示部108に画像を表示させる。つまり、表示部上の合焦位置の差の距離が一定の場合、ユーザが表示部に近づくほど、視線移動量は増加することになる。視線移動量/表示時間テーブルの一例を表2に示す。   The display time control unit 1996 has a reference table (hereinafter referred to as “line-of-sight movement amount / display time table”) for determining a display time required for the line-of-sight movement amount. Using this table, the display time corresponding to the line-of-sight movement amount calculated by the line-of-sight movement calculation unit 1995 is determined. The display time control unit 1996 controls the storage unit 193 and the display control unit 107 so that the display time becomes longer as the line-of-sight movement amount increases, and causes the display unit 108 to display an image. That is, when the distance of the focus position difference on the display unit is constant, the line-of-sight movement amount increases as the user approaches the display unit. An example of the eye movement amount / display time table is shown in Table 2.

Figure 0005550431
Figure 0005550431

前記表1との相違点は移動距離が視線移動量に置き換わっていることである。「τi」は、標準的なユーザにとって、閲覧位置−画面間距離Lを考慮した視線移動量θiをもって視線が移動するのにかかる時間である。画像1枚の表示時間は前述したtaとτiの和であり、例えば、視線移動量θ4に対する表示時間は「ta+τ4」である。図4で「θ3<θ1<θ4<θ2」とすると、視線移動にかかる時間は「τ3<τ1<τ4<τ2」となる。   The difference from Table 1 is that the movement distance is replaced with the line-of-sight movement amount. “Τi” is the time taken for a standard user to move the line of sight with the line-of-sight movement amount θi in consideration of the viewing position-to-screen distance L. The display time for one image is the sum of ta and τi described above. For example, the display time for the line-of-sight movement amount θ4 is “ta + τ4”. Assuming that “θ3 <θ1 <θ4 <θ2” in FIG. 4, the time required for line-of-sight movement is “τ3 <τ1 <τ4 <τ2”.

図7(b)のように複数の合焦位置をもつ画像の場合、各合焦位置の移動距離から算出される視線移動量の総和が合計視線移動量として計算され、これに対応する表示時間が決定される。図7(b)の例では、2つの合焦位置に対して移動距離d7A、d7Bがそれぞれ算出され、下式のように視線移動量θ7Aとθ7Bの和が合計視線移動量(これを「θ(合計)」と記す)となる。   In the case of an image having a plurality of in-focus positions as shown in FIG. 7B, the total line-of-sight movement amount calculated from the movement distance of each in-focus position is calculated as the total line-of-sight movement amount, and the display time corresponding to this is calculated. Is determined. In the example of FIG. 7B, the movement distances d7A and d7B are calculated for the two in-focus positions, and the sum of the line-of-sight movement amounts θ7A and θ7B is calculated as the total line-of-sight movement amount (this is expressed as “θ (Total) ”).

Figure 0005550431
Figure 0005550431

表示時間制御部1996は、θ(合計)に対応する表示時間を決定し、該表示時間に亘って図7(b)の画像を表示させるように制御する。   The display time control unit 1996 determines a display time corresponding to θ (total), and controls to display the image of FIG. 7B over the display time.

(動作例3)
次に、図10のフローチャートを用いて、第2実施形態に係る動作例を説明する。これは前述した動作例1と同様に、図4のMFP画像を連続表示する場合の動作である。なお以下では、図6と相違するS1002、S1003、S1015、S1016を説明する。
(Operation example 3)
Next, an operation example according to the second embodiment will be described using the flowchart of FIG. This is an operation in the case of continuously displaying the MFP image of FIG. 4 as in the first operation example. In the following, S1002, S1003, S1015, and S1016, which are different from FIG. 6, will be described.

S601の後、DTV装置100のリモコン信号受信部191はリモコン200からデータを受信し、システム制御部199は画像閲覧アプリケーションを起動させる(S1002)。閲覧距離設定部1994は、閲覧位置−画面間距離の入力設定用GUI画面を表示させて、ユーザに提示する。ユーザはリモコン200の操作部201に設けられた所定のキーを操作し、閲覧位置−画面間距離の設定を指示する。閲覧距離設定部1994は、指示された閲覧位置―画面間距離を設定し、距離情報のデータをメモリに保存する(S1003)。そしてS602に進む。   After S601, the remote control signal receiving unit 191 of the DTV apparatus 100 receives data from the remote control 200, and the system control unit 199 activates the image browsing application (S1002). The browsing distance setting unit 1994 displays an input setting GUI screen for browsing distance-to-screen distance and presents it to the user. The user operates a predetermined key provided on the operation unit 201 of the remote controller 200 to instruct the setting of the browsing position-screen distance. The browsing distance setting unit 1994 sets the instructed browsing position-to-screen distance, and stores distance information data in the memory (S1003). Then, the process proceeds to S602.

S607の後、視線移動量算出部1995は、移動距離算出部1992から受け取った合焦位置の移動距離dと、前記S1003で保存した閲覧位置−画面間距離Lに基づいて、図9にて説明した方法により、視線移動量θを算出する(S1015)。視線移動量の算出結果は表示時間制御部1996に送られる。表示時間制御部1996は、視線移動量算出部1995からの視線移動量の情報を受けて、前記視線移動量/表示時間テーブルを参照し、次の個別画像の表示時間を決定する(S1016)。そしてS609に進む。なお、複数の合焦位置をもつ画像の場合には第1実施形態と同様に、移動距離算出部1992が複数の合焦位置についてそれぞれ移動距離を算出する。視線移動量算出部1995は、これらの移動距離及び閲覧位置−画面間距離の情報に基づいて各移動距離に対応する視線移動量を算出し、視線移動量の総和を計算する。表示時間制御部1996は視線移動量の総和に対応した表示時間を決定する。   After S607, the line-of-sight movement amount calculation unit 1995 will be described with reference to FIG. 9 based on the movement distance d of the in-focus position received from the movement distance calculation unit 1992 and the browsing position-screen distance L stored in S1003. The line-of-sight movement amount θ is calculated by the above method (S1015). The calculation result of the line-of-sight movement amount is sent to the display time control unit 1996. The display time control unit 1996 receives the information of the line-of-sight movement amount from the line-of-sight movement amount calculation unit 1995, refers to the line-of-sight movement amount / display time table, and determines the display time of the next individual image (S1016). Then, the process proceeds to S609. In the case of an image having a plurality of in-focus positions, the movement distance calculation unit 1992 calculates the movement distance for each of the plurality of in-focus positions, as in the first embodiment. The line-of-sight movement amount calculation unit 1995 calculates the line-of-sight movement amount corresponding to each movement distance based on the information on the movement distance and the browsing position-inter-screen distance, and calculates the sum of the line-of-sight movement amount. A display time control unit 1996 determines a display time corresponding to the total amount of eye movement.

第2実施形態によれば、合焦位置及びユーザの閲覧位置と表示画面までの距離から決まる視線移動量に応じて算出される表示時間に従ってMFP画像が表示されるので、第1実施形態よりもさらにユーザによる画像の視認を確実なものとすることができる。   According to the second embodiment, since the MFP image is displayed according to the display time calculated according to the focus position and the viewing position of the user and the line-of-sight movement amount determined from the distance to the display screen, the MFP image is displayed as compared with the first embodiment. Furthermore, it is possible to ensure visual recognition of the image by the user.

前記例では、閲覧位置−画面間距離を閲覧者の入力操作に従って設定したが、DTV装置100又はリモコン200に測距手段を搭載し、閲覧位置−画面間距離の設定を自動化してもよい。例えば、図1()に示すように、リモコン200が測距部202を備える場合、ユーザがリモコン200を操作するタイミングで測距動作がわれ、測距結果が送信部203からリモコン信号受信部191を介してシステム制御部199に通知される。つまり、この場合には図10のS601とS1003の処理が同時期に実行され、閲覧位置−画面間距離の入力操作が不要となる。
In the above example, the distance between the browsing position and the screen is set according to the input operation of the viewer. However, a distance measuring unit may be mounted on the DTV device 100 or the remote controller 200 to automate the setting of the distance between the browsing position and the screen. For example, as shown in FIG. 1 (b), if the remote controller 200 comprises a distance measuring unit 202, the distance measurement operation at the timing when the user operates the remote controller 200 is cracking line, remote control signal reception distance measurement result from the transmission unit 203 This is notified to the system control unit 199 via the unit 191. That is, in this case, the processing of S601 and S1003 in FIG. 10 is executed at the same time, and the input operation of the browsing position-screen distance becomes unnecessary.

「その他の実施形態」
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
"Other embodiments"
The present invention can also be realized by executing the following processing. That is, software (program) that realizes the functions of the above-described embodiments is supplied to a system or apparatus via a network or various storage media, and a computer (or CPU, MPU, or the like) of the system or apparatus reads the program. It is a process to be executed.

199 システム制御部
202 測距部
1991 合焦位置検出部
1992 移動距離算出部
1993,1996 表示時間制御部
1995 視線移動量算出部
199 System control unit 202 Distance measurement unit 1991 In-focus position detection unit 1992 Movement distance calculation unit 1993, 1996 Display time control unit 1995 Gaze movement amount calculation unit

Claims (12)

焦点調節状態を変化させながら連続撮影された複数の画像を続して表示部に表示する制御を行う表示制御装置であって、
表示対象である前記複数の画像の合焦位置を検出する検出手段と、
前記検出手段で検出された、表示される第1画像の合焦位置と、当該画像の一つ後に表示される第2画像の合焦位置との間の距離を算出する距離算出手段と、
前記距離算出手段が算出した合焦位置の距離が長いほど、前記第2画像を前記表示部に表示した場合の表示時間を長くする表示制御手段を備えることを特徴とする表示制御装置。
A display control apparatus for controlling display on continuous to display a plurality of images continuously photographed while changing the focus adjustment state,
Detecting means for detecting in-focus positions of the plurality of images to be displayed;
Distance calculating means for calculating the distance between the in-focus position of the displayed first image detected by the detecting means and the in-focus position of the second image displayed immediately after the image;
A display control apparatus comprising: a display control unit that increases a display time when the second image is displayed on the display unit as the distance of the in-focus position calculated by the distance calculation unit increases.
前記距離算出手段は、前記第2画像に複数の合焦位置が存在する場合、各合焦位置を距離が短い順に全て結んだ第1の距離と、前記第1画像の合焦位置と該合焦位置に最も近い前記第2画像の合焦位置との間の第2の距離を算出し、
前記表示制御手段は、前記距離算出手段が算出した前記第1の距離と前記第2の距離を加算した総距離を算出し、総距離を用いて前記第2画像を前記表示部に表示した場合の表示時間を決定することを特徴とする、請求項1に記載の表示制御装置。
When there are a plurality of in-focus positions in the second image, the distance calculation means includes a first distance obtained by connecting all the in-focus positions in the order of short distance, a focus position of the first image, and the in-focus position. Calculating a second distance between the in-focus position of the second image closest to the in-focus position;
The display control unit calculates a total distance obtained by adding the first distance and the second distance calculated by the distance calculation unit, and displays the second image on the display unit using the total distance. The display control apparatus according to claim 1, wherein the display time is determined.
前記検出手段は、前記第2画像内の、隣接する複数の合焦位置の重心を当該複数の合焦位置を代表する一つの合焦位置に設定する設定処理を実行し、
前記距離算出手段は、前記第1画像の合焦位置と、前記設定処理後の前記第2画像の合焦位置とに基づいて、前記第1の距離と前記第2の距離とを算出する
ことを特徴とする請求項2に記載の表示制御装置。
The detection means executes a setting process for setting the center of gravity of a plurality of adjacent focus positions in the second image to one focus position representing the plurality of focus positions,
The distance calculation means calculates the first distance and the second distance based on a focus position of the first image and a focus position of the second image after the setting process. The display control apparatus according to claim 2.
前記表示部とユーザとの間の距離を計測する距離計測手段を有し、
前記表示制御手段は、前記表示部とユーザとの間の距離が近いほど前記第2画像を前記表示部に表示した場合の表示時間を長くするように制御することを特徴とする、請求項1から3までのいずれか1項に記載の表示制御装置。
A distance measuring means for measuring a distance between the display unit and the user;
The display control means performs control so that a display time when the second image is displayed on the display unit becomes longer as a distance between the display unit and a user is shorter. 4. The display control device according to any one of items 1 to 3.
前記距離算出手段によって算出された前記第1画像の合焦位置と前記第2画像の合焦位置との間の距離と、前記距離計測手段によって計測された前記表示部とユーザとの間の距離とに基づいて、前記ユーザの視線移動量を算出する視線移動量算出手段を備え、
前記表示制御手段は、前記算出された視線移動量が大きいほど前記第2画像を前記表示部に表示した場合の表示時間を長くするように制御することを特徴とする、請求項4に記載の表示制御装置。
The distance between the in-focus position of the first image and the in-focus position of the second image calculated by the distance calculating means, and the distance between the display unit and the user measured by the distance measuring means And a line-of-sight movement amount calculating means for calculating the line-of-sight movement amount of the user based on
5. The display control unit according to claim 4, wherein the display control unit controls the display time when the second image is displayed on the display unit to be longer as the calculated amount of movement of the line of sight is larger. Display control device.
前記複数の画像は合焦位置の異なる複数の画像であることを特徴とする請求項1から5までのいずれか1項に記載の表示制御装置。 The display control apparatus according to claim 1 , wherein the plurality of images are a plurality of images having different in- focus positions. 焦点調節状態を変化させながら連続撮影された複数の画像を続して表示部に表示する制御を行う表示制御装置による表示制御方法であって、
表示対象である前記複数の画像の合焦位置を検出する検出ステップと、
前記検出ステップで検出された、表示される第1画像の合焦位置と、当該画像の一つ後に表示される第2画像の合焦位置との間の距離を算出する距離算出ステップと、
前記距離算出ステップで算出した合焦位置の距離が長いほど、前記第2画像を前記表示部に表示した場合の表示時間を長くする表示制御ステップを有することを特徴とする表示制御方法。
A display control method by the display control device the plurality of images continuously photographed while changing the focus adjustment state consecutive to perform control to display on the display unit,
A detection step of detecting focus positions of the plurality of images to be displayed;
A distance calculating step for calculating a distance between the in-focus position of the displayed first image detected in the detecting step and the in-focus position of the second image displayed immediately after the image;
A display control method comprising: a display control step of increasing a display time when the second image is displayed on the display unit as the distance of the in-focus position calculated in the distance calculating step is longer.
前記距離算出ステップでは、前記第2画像に複数の合焦位置が存在する場合、各合焦位置を距離が短い順に全て結んだ第1の距離と、前記第1画像の合焦位置と該合焦位置に最も近い前記第2画像の合焦位置との間の第2の距離を算出し、
前記表示制御ステップでは、前記距離算出ステップで算出した前記第1の距離と前記第2の距離を加算した総距離を算出し、総距離を用いて前記第2画像を前記表示部に表示した場合の表示時間を決定することを特徴とする、請求項7に記載の表示制御方法。
In the distance calculating step, when there are a plurality of in-focus positions in the second image, the first distance obtained by connecting all the in-focus positions in order of increasing distance, the in-focus position of the first image, and the in-focus position. Calculating a second distance between the in-focus position of the second image closest to the in-focus position;
In the display control step, a total distance obtained by adding the first distance and the second distance calculated in the distance calculation step is calculated, and the second image is displayed on the display unit using the total distance. The display control method according to claim 7, wherein the display time is determined.
前記検出ステップでは、前記第2画像内の、隣接する複数の合焦位置の重心を当該複数の合焦位置を代表する一つの合焦位置に設定する設定処理を実行し、
前記距離算出ステップでは、前記第1画像の合焦位置と、前記設定処理後の前記第2画像の合焦位置とに基づいて、前記第1の距離と前記第2の距離とを算出する
ことを特徴とする請求項8に記載の表示制御方法。
In the detection step, a setting process is performed in which the center of gravity of a plurality of adjacent focus positions in the second image is set to one focus position representative of the plurality of focus positions.
In the distance calculation step, the first distance and the second distance are calculated based on a focus position of the first image and a focus position of the second image after the setting process. The display control method according to claim 8.
前記表示部とユーザとの間の距離を計測する距離計測ステップを有し、
前記表示制御ステップでは、前記表示部とユーザとの間の距離が近いほど前記第2画像を前記表示部に表示した場合の表示時間を長くするように制御することを特徴とする、請求項7から9までのいずれか1項に記載の表示制御方法。
A distance measuring step for measuring a distance between the display unit and the user;
8. The display control step of controlling the display time to be longer when the second image is displayed on the display unit as the distance between the display unit and the user is shorter. 10. The display control method according to any one of items 9 to 9.
前記距離算出ステップによって算出された前記第1画像の合焦位置と前記第2画像の合焦位置との間の距離と、前記距離計測ステップによって計測された前記表示部とユーザとの間の距離とに基づいて、前記ユーザの視線移動量を算出する視線移動量算出ステップを有し、
前記表示制御ステップでは、前記算出された視線移動量が大きいほど前記第2画像を前記表示部に表示した場合の表示時間を長くするように制御することを特徴とする、請求項10に記載の表示制御方法。
The distance between the in-focus position of the first image and the in-focus position of the second image calculated by the distance calculating step, and the distance between the display unit and the user measured by the distance measuring step And a line-of-sight movement amount calculating step for calculating the line-of-sight movement amount of the user,
11. The display control step according to claim 10, wherein in the display control step, the display time when the second image is displayed on the display unit is controlled to be longer as the calculated line-of-sight movement amount is larger. Display control method.
前記複数の画像は合焦位置の異なる複数の画像であることを特徴とする請求項7から11までのいずれか1項に記載の表示制御方法。 The display control method according to claim 7 , wherein the plurality of images are a plurality of images having different in- focus positions.
JP2010094412A 2010-04-15 2010-04-15 Display control apparatus and display control method Expired - Fee Related JP5550431B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010094412A JP5550431B2 (en) 2010-04-15 2010-04-15 Display control apparatus and display control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010094412A JP5550431B2 (en) 2010-04-15 2010-04-15 Display control apparatus and display control method

Publications (3)

Publication Number Publication Date
JP2011228814A JP2011228814A (en) 2011-11-10
JP2011228814A5 JP2011228814A5 (en) 2013-05-23
JP5550431B2 true JP5550431B2 (en) 2014-07-16

Family

ID=45043691

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010094412A Expired - Fee Related JP5550431B2 (en) 2010-04-15 2010-04-15 Display control apparatus and display control method

Country Status (1)

Country Link
JP (1) JP5550431B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5854826B2 (en) * 2011-12-27 2016-02-09 キヤノン株式会社 Image browsing apparatus, control method thereof, and recording medium
JP6376058B2 (en) * 2015-07-06 2018-08-22 トヨタ自動車株式会社 Vehicle display device

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003132361A (en) * 2001-10-29 2003-05-09 Sharp Corp Object selecting device and method
JP2008042256A (en) * 2006-08-01 2008-02-21 Canon Inc Image display method, image display apparatus, and program
JP2009010564A (en) * 2007-06-27 2009-01-15 Seiko Epson Corp Image reproducing apparatus, image reproducing method, and program
JP5267149B2 (en) * 2009-01-19 2013-08-21 ソニー株式会社 Display control apparatus, display control method, and program

Also Published As

Publication number Publication date
JP2011228814A (en) 2011-11-10

Similar Documents

Publication Publication Date Title
KR101503333B1 (en) Image capturing apparatus and control method thereof
US10560625B2 (en) Image shooting apparatus for setting image shooting condition easily and method thereof
JP6226539B2 (en) Information processing apparatus, information processing apparatus control method, and program
US20120105590A1 (en) Electronic equipment
JP6226538B2 (en) Display control apparatus, display control method, and program
KR101739318B1 (en) Display control apparatus, imaging system, display control method, and recording medium
EP3451285B1 (en) Distance measurement device for motion picture camera focus applications
CN104601892A (en) Terminal and image shooting method and device
CN102724398B (en) Image data providing method, combination method thereof, and presentation method thereof
JP2019129410A (en) Monitoring camera, control method thereof, and program
TWI524258B (en) Electronic book display adjustment system and method
JP2019054369A (en) Imaging device, control method of imaging device, and program
TWI449408B (en) Method and apparatus for capturing three-dimensional image and apparatus for displaying three-dimensional image
JP2017135660A (en) Image processor, imaging apparatus, image processing method, and program
TWI693828B (en) Image-capturing device and method for operating the same
JP5646582B2 (en) Imaging device
JP4198536B2 (en) Object photographing apparatus, object photographing method and object photographing program
JP5550431B2 (en) Display control apparatus and display control method
JP6483661B2 (en) Imaging control apparatus, imaging control method, and program
JP2011186547A (en) Display control apparatus, control method of the same, program and storage medium
JP6494060B2 (en) Information processing apparatus, information processing method, and program
JP5509986B2 (en) Image processing apparatus, image processing system, and image processing program
JP7524762B2 (en) Information processing device, information processing method, and information processing program
JP2018125729A (en) Imaging controller, control method and program thereof, and recording medium
US20190246059A1 (en) Display-information generating apparatus, information processing apparatus, and imaging system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130410

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130410

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140128

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140304

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140331

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140422

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140520

R151 Written notification of patent or utility model registration

Ref document number: 5550431

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees