JP2009171176A - Reproduction apparatus, its control method, and program - Google Patents

Reproduction apparatus, its control method, and program Download PDF

Info

Publication number
JP2009171176A
JP2009171176A JP2008006513A JP2008006513A JP2009171176A JP 2009171176 A JP2009171176 A JP 2009171176A JP 2008006513 A JP2008006513 A JP 2008006513A JP 2008006513 A JP2008006513 A JP 2008006513A JP 2009171176 A JP2009171176 A JP 2009171176A
Authority
JP
Japan
Prior art keywords
image
person
playback
data
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008006513A
Other languages
Japanese (ja)
Other versions
JP4924442B2 (en
Inventor
Kazunori Suenaga
和徳 末永
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2008006513A priority Critical patent/JP4924442B2/en
Publication of JP2009171176A publication Critical patent/JP2009171176A/en
Application granted granted Critical
Publication of JP4924442B2 publication Critical patent/JP4924442B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To automatically reproduce favorite images and voices for each user with no troublesome operation, even if shared by a plurality of users. <P>SOLUTION: While a registration mode is being set with a mode setting button 40b, favorite image files and voice files selected by users are related to a face (feature value) extracted by facial recognition after photographing the user with a camera 32, and then registered in an internal memory 42. With a reproduction mode being set with the mode setting button 40b, if a face extracted by facial recognition, having been photographed with the camera 32, is determined to be that of a registered user, the favorite image files and voice files related and registered are set as reproduction files and the image and voice are reproduced based on the set reproduction file. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、再生装置およびその制御方法並びにプログラムに関し、詳しくは、画像データまたは音声データを記憶する記憶手段に接続され、前記記憶された画像データまたは音声データを再生する再生装置およびその制御方法並びに再生装置の制御方法の各ステップを１又は複数のコンピュータに実現させるためのプログラムに関する。   The present invention relates to a playback apparatus, a control method therefor, and a program, and more particularly, to a playback apparatus connected to storage means for storing image data or audio data and playing back the stored image data or audio data, and a control method therefor, and The present invention relates to a program for causing one or more computers to implement each step of a control method of a playback apparatus.

従来、再生装置としては、カードスロットに挿入されたカード型メモリに記憶されている観賞用画像を表示する電子写真立て（デジタルフォトフレーム）が提案されている（例えば、特許文献１参照）。この装置では、メモリ内に複数の画像が記憶されているときにユーザによるボタン操作により表示する画像を順次変更するフォトモードや、複数の画像を自動的に順次表示していくスライドショーモードなどの各種表示モードを有している。
特開２００１−６７００４号公報 Conventionally, as a playback device, an electronic photo frame (digital photo frame) that displays an ornamental image stored in a card-type memory inserted in a card slot has been proposed (see, for example, Patent Document 1). In this apparatus, when a plurality of images are stored in the memory, various modes such as a photo mode for sequentially changing images to be displayed by a button operation by a user and a slide show mode for automatically displaying a plurality of images sequentially Has a display mode.
JP 2001-67004 A

しかしながら、上述した再生装置では、複数のユーザにより共用される場合を考えると、ユーザ毎にお気に入りの画像が異なるのが通常であるから、使用するユーザが変わるたびにユーザは所望の画像をボタン操作によって呼び出さなければならない。   However, in the above-described playback device, considering the case of sharing by a plurality of users, the favorite image is usually different for each user, so that the user can operate the desired image every time the user to be used changes. Must be called by

本発明の再生装置およびその制御方法並びにプログラムは、面倒な操作を伴うことなくユーザ毎にお気に入りの画像や音声を自動再生することを主目的とする。   The main purpose of the playback apparatus, control method, and program of the present invention is to automatically play back favorite images and sounds for each user without troublesome operations.

本発明の再生装置およびその制御方法並びにプログラムは、上述の主目的を達成するために以下の手段を採った。   In order to achieve the above-mentioned main object, the playback apparatus, its control method, and program of the present invention employ the following means.

本発明の再生装置は、
画像データまたは音声データを記憶する記憶手段に接続され、前記記憶された画像データまたは音声データを再生する再生装置であって、
人物画像を撮像可能な撮像手段と、
該撮像手段により撮像された人物画像の顔を認識する顔認識手段と、
登録モードが設定されている状態で前記撮像手段により人物画像が撮像されたとき、前記顔認識手段により顔が認識された人物画像の人物を前記記憶手段に記憶された画像データまたは音声データのうちユーザにより選択された画像データまたは音声データに関連付けて登録する登録手段と、
再生モードが設定されている状態で前記撮像手段により人物画像が撮像されたとき、前記顔認識手段により顔が認識された人物画像の人物が前記登録手段により登録されている人物のときには前記関連付けられた画像データまたは音声データを再生する再生手段と
を備えることを要旨とする。 The playback device of the present invention
A playback device connected to storage means for storing image data or audio data, and for reproducing the stored image data or audio data,
Imaging means capable of capturing a person image;
Face recognition means for recognizing the face of the person image captured by the imaging means;
When a person image is picked up by the image pickup means in a state where the registration mode is set, the person of the person image whose face is recognized by the face recognition means is selected from the image data or the sound data stored in the storage means A registration means for registering in association with image data or audio data selected by the user;
When a person image is picked up by the image pickup means in a state where the reproduction mode is set, the person of the person image whose face is recognized by the face recognition means is a person registered by the registration means. And a reproducing means for reproducing the image data or the audio data.

この本発明の再生装置では、撮像手段により撮像された人物画像の顔を認識し、登録モードが設定されている状態で撮像手段により人物画像が撮像されたとき顔が認識された人物画像の人物を記憶手段に記憶されている画像データまたは音声データのうちユーザにより選択された画像データまたは音声データと関連付けて登録し、再生モードが設定されている状態で撮像手段により人物画像が撮像されたとき顔が認識された人物画像の人物が登録されている人物のときには関連付けられた画像データまたは音声データを再生する。したがって、複数のユーザが共用するときでも面倒な操作を伴うことなくユーザ毎にお気に入りの画像や音声を自動再生することができる。   In the reproducing apparatus of the present invention, the face of the person image captured by the imaging unit is recognized, and when the person image is captured by the imaging unit with the registration mode set, the person of the person image whose face is recognized Is registered in association with the image data or sound data selected by the user from the image data or sound data stored in the storage means, and a person image is picked up by the image pickup means with the playback mode set When the person of the person image whose face is recognized is a registered person, the associated image data or audio data is reproduced. Therefore, even when a plurality of users share, favorite images and sounds can be automatically reproduced for each user without accompanying troublesome operations.

こうした本発明の再生装置において、前記再生手段は、ユーザにより選択される複数の再生モードを備え、前記複数の再生モードは、前記記憶手段により記憶されているすべての画像データまたは音声データを再生する通常再生モードと、前記撮像手段により撮像された人物画像の人物に関連付けられた画像データまたは音声データを再生する撮像再生モードとを含むモードであるものとすることもできる。こうすれば、ユーザの選択によって撮像再生モードを実行することができる。   In such a playback apparatus of the present invention, the playback unit includes a plurality of playback modes selected by a user, and the plurality of playback modes play back all image data or audio data stored in the storage unit. The mode may include a normal playback mode and an imaging / playback mode for playing back image data or audio data associated with a person of the person image captured by the imaging unit. In this way, the imaging reproduction mode can be executed according to the user's selection.

また、本発明の再生装置において、前記再生手段は、前記画像データの再生の態様としてスライドショー表示を行なう手段であるものとすることもできる。   In the playback apparatus of the present invention, the playback means may be a means for performing a slide show display as a playback mode of the image data.

本発明の再生装置の制御方法は、
画像データまたは音声データを記憶する記憶手段と人物画像を撮像可能な撮像手段とに接続され、前記記憶された画像データまたは音声データを再生する再生装置の制御方法であって、
（ａ）該撮像手段により撮像された人物画像の顔を認識し、
（ｂ）登録モードが設定されている状態で前記撮像手段により人物画像が撮像されたとき、前記顔認識手段により顔が認識された人物画像の人物を前記記憶手段に記憶された画像データまたは音声データのうちユーザにより選択された画像データまたは音声データに関連付けて登録し、
（ｃ）再生モードが設定されている状態で前記撮像手段により人物画像が撮像されたとき、前記顔認識手段により顔が認識された人物画像の人物が前記登録手段により登録されている人物のときには前記関連付けられた画像データまたは音声データを再生する
ことを特徴とする。 The playback apparatus control method of the present invention includes:
A control method for a playback device connected to a storage means for storing image data or sound data and an image pickup means capable of capturing a person image, and for reproducing the stored image data or sound data,
(A) recognizing the face of a human image imaged by the imaging means;
(B) When a person image is picked up by the image pickup means in a state where the registration mode is set, the person of the person image whose face is recognized by the face recognition means is stored in the image data or sound stored in the storage means Register in association with the image data or audio data selected by the user among the data,
(C) When a person image is picked up by the image pickup means in a state in which the reproduction mode is set, and a person whose face is recognized by the face recognition means is a person registered by the registration means The associated image data or audio data is reproduced.

この本発明の再生装置の制御方法によれば、撮像手段により撮像された人物画像の顔を認識し、登録モードが設定されている状態で撮像手段により人物画像が撮像されたとき顔が認識された人物画像の人物を記憶手段に記憶されている画像データまたは音声データのうちユーザにより選択された画像データまたは音声データと関連付けて登録し、再生モードが設定されている状態で撮像手段により人物画像が撮像されたとき顔が認識された人物画像の人物が登録されている人物のときには関連付けられた画像データまたは音声データを再生する。したがって、複数のユーザが共用するときでも面倒な操作を伴うことなくユーザ毎にお気に入りの画像や音声を自動再生することができる。なお、この再生装置の制御方法において、上述した本発明の再生装置の種々の態様を採用してもよいし、   According to the control method of the playback apparatus of the present invention, the face of the person image captured by the imaging unit is recognized, and the face is recognized when the person image is captured by the imaging unit in a state where the registration mode is set. The person of the person image is registered in association with the image data or sound data selected by the user from the image data or sound data stored in the storage means, and the image is picked up by the image pickup means in a state where the reproduction mode is set. When the person of the person image whose face is recognized when is captured is a registered person, the associated image data or audio data is reproduced. Therefore, even when a plurality of users share, favorite images and sounds can be automatically reproduced for each user without accompanying troublesome operations. In this playback apparatus control method, various aspects of the playback apparatus of the present invention described above may be employed,

本発明のプログラムは、上述した再生装置の制御方法の各ステップを１又は複数のコンピュータに実現させるためのものである。このプログラムは、コンピュータが読み取り可能な記録媒体（例えばハードディスク、ＲＯＭ、ＦＤ、ＣＤ、ＤＶＤなど）に記録されていてもよいし、伝送媒体（インターネットやＬＡＮなどの通信網）を介してあるコンピュータから別のコンピュータへ配信されてもよいし、その他どのような形で授受されてもよい。このプログラムを一つのコンピュータに実行させるか又は複数のコンピュータに各ステップを分担して実行させれば、上述した再生装置の制御方法の各ステップが実行されるため、該制御方法と同様の作用効果が得られる。   The program of the present invention is for causing one or a plurality of computers to implement the steps of the above-described playback apparatus control method. This program may be recorded on a computer-readable recording medium (for example, hard disk, ROM, FD, CD, DVD, etc.), or from a computer via a transmission medium (communication network such as the Internet or LAN). It may be distributed to another computer, or may be exchanged in any other form. If this program is executed by a single computer or if each step is shared and executed by a plurality of computers, each step of the above-described playback apparatus control method is executed. Is obtained.

次に、本発明を実施するための最良の形態を図面を用いて説明する。図１は、本発明の一実施形態である再生装置としての電子写真立て２０の構成図および機能ブロック図である。本実施形態の電子写真立て２０は、画像ファイルや音声ファイルなどを保存しているメモリカード３５を差し込んで画像や音楽を再生する電子写真立てとして構成されており、図１に示すように、写真などの画像の表示や所定のメニュー画面を表示するための液晶表示装置としての表示パネル２２と、表示パネル２２の表示制御を司る表示コントローラ２４と、音楽などの音声を出力するスピーカ２６と、スピーカ２６の出力制御を司るスピーカコントローラ２８と、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）などの撮像素子を有し対象物からの光を受光して光電変換を行なうカメラ３２と、カメラ３２を駆動するカメラコントローラ３４と、メモリカードスロット３６に挿入されているメモリカード３５と画像データや音声データのやり取りを行なうためのメモリカードコントローラ３８と、背面側に配置されユーザにより各種操作を行なうための操作ボタン４０と、画像ファイルや音声ファイルを保存したりその他のデータを保存したりするための内蔵メモリ４２と、装置全体のコントローラを司るメインコントローラ５０とを備える。   Next, the best mode for carrying out the present invention will be described with reference to the drawings. FIG. 1 is a block diagram and a functional block diagram of an electrophotographic frame 20 as a playback apparatus according to an embodiment of the present invention. The electronic photo frame 20 of the present embodiment is configured as an electronic photo frame that inserts a memory card 35 that stores image files, audio files, and the like and reproduces images and music. As shown in FIG. A display panel 22 as a liquid crystal display device for displaying images such as images and a predetermined menu screen, a display controller 24 for controlling display of the display panel 22, a speaker 26 for outputting sound such as music, and a speaker A speaker controller 28 that controls the output of the camera 26; a camera 32 that has an image sensor such as a charge coupled device (CCD) and a complementary metal oxide semiconductor (CMOS); receives light from an object and performs photoelectric conversion; 32, a camera controller 34 for driving 32, a memory card 35 inserted in the memory card slot 36, and an image. A memory card controller 38 for exchanging data and audio data, an operation button 40 arranged on the back side for various operations by a user, an image file and an audio file, and other data. A built-in memory 42 and a main controller 50 that controls the controller of the entire apparatus.

メモリカードコントローラ３８は、メモリカードスロット３６に挿入されたメモリカード３５との間でデータの入出力を行うものである。このメモリカードコントローラ３８は、メモリカードスロット３６にメモリカード３５が接続されているとき、メモリカード３５に保存されているファイルを読み出してメインコントローラ５０に送信したりメインコントローラ５０からの命令を入力し該命令に基づいてメモリカード３５にデータを書き込んだりする。   The memory card controller 38 inputs and outputs data with the memory card 35 inserted into the memory card slot 36. When the memory card 35 is connected to the memory card slot 36, the memory card controller 38 reads a file stored in the memory card 35 and transmits it to the main controller 50 or inputs a command from the main controller 50. Data is written to the memory card 35 based on the command.

操作ボタン４０は、電源のオンオフを行なうための電源ボタン４０ａや各種再生モードを設定するためのモード設定ボタン４０ｂ，各種設定を行なうメニュー画面を呼び出すためのメニューボタン４０ｃ，各種設定を選択するための選択ボタン４０ｄ，選択ボタン４０ｄによって選択された設定を決定するための決定ボタン４０ｅとから構成されている。ここで、モード設定ボタン４０ｂによって設定される再生モードとしては、メモリカード３５や内蔵メモリ４２に保存されている画像を１枚だけ再生する通常再生モードやメモリカード３５や内蔵メモリ４２に保存されている画像を所定順（例えば、ファイル名の順序やファイル更新時間の順序など）或いはランダムで順次再生していくスライドショー再生モードなどがある。スライドショー再生モードでは、メモリカード３５や内蔵メモリ４２に保存されているすべての画像を再生する通常スライドショー再生やメモリカード３５や内蔵メモリ４２に保存されている画像の中からユーザ毎にお気に入りの画像を登録して登録したお気に入りの画像のみを再生するお気に入りスライドショー再生などがある。なお、いずれの再生モードでも画像の表示と共にメモリカード３５や内蔵メモリ４２に保存されている音声ファイルに基づく音声（音楽）の再生にも対応している。   The operation button 40 includes a power button 40a for turning on / off the power, a mode setting button 40b for setting various playback modes, a menu button 40c for calling a menu screen for performing various settings, and various settings. The selection button 40d includes a determination button 40e for determining the setting selected by the selection button 40d. Here, the playback mode set by the mode setting button 40b includes a normal playback mode in which only one image stored in the memory card 35 or the built-in memory 42 is played back, or a mode stored in the memory card 35 or the built-in memory 42. There is a slide show reproduction mode in which images are reproduced in a predetermined order (for example, the order of file names, the order of file update times, etc.) or randomly. In the slide show playback mode, a normal slide show playback for playing back all images stored in the memory card 35 or the built-in memory 42, or a favorite image for each user from images stored in the memory card 35 or the built-in memory 42. There is a favorite slideshow playback that plays back only registered favorite images. Note that, in any playback mode, playback of sound (music) based on an audio file stored in the memory card 35 or the built-in memory 42 as well as displaying images is supported.

メインコントローラ５０は、ＣＰＵ５２を中心としたマイクロプロセッサとして構成されており、ＣＰＵ５２の他に処理プログラムを記憶するＲＯＭ５４と、一時的にデータを記憶するＲＡＭ５６と、入出力ポート（図示せず）とを備える。このメインコントローラ５０には、カメラコントローラ３４からの画像信号や操作ボタン４０からの操作信号などが入力ポートを介して入力されており、メインコントローラ５０からは、表示コントローラ２４やスピーカコントローラ２８，カメラコントローラ３４，メモリカードコントローラ３８への制御信号などが出力ポートを介して出力されている。また、メインコントローラ５０は、メモリカードスロット３６に挿入されているメモリカード３５からメモリカードコントローラ３８を介してファイルを読み出して内蔵メモリ４２に保存したり、内蔵メモリ４２内のファイルを読み出すと共に読み出したファイルをメモリカードコントローラ３８を介してメモリカード３５に保存したりすることができるようになっている。   The main controller 50 is configured as a microprocessor centered on the CPU 52. In addition to the CPU 52, a ROM 54 that stores a processing program, a RAM 56 that temporarily stores data, and an input / output port (not shown). Prepare. An image signal from the camera controller 34, an operation signal from the operation button 40, and the like are input to the main controller 50 via an input port. From the main controller 50, the display controller 24, the speaker controller 28, and the camera controller are input. 34, a control signal to the memory card controller 38, etc. is output via the output port. The main controller 50 reads a file from the memory card 35 inserted in the memory card slot 36 via the memory card controller 38 and stores it in the built-in memory 42, or reads and reads a file in the built-in memory 42. A file can be stored in the memory card 35 via the memory card controller 38.

次に、こうして構成された本実施形態の電子写真立て２０の動作、特に、ユーザ毎にお気に入り画像を登録する際の動作と登録したお気に入り画像を再生する際の動作について説明する。図２は、メインコントローラ５０により実行される登録処理ルーチンの一例を示すフローチャートである。このルーチンは、ユーザによるモード設定ボタン４０ｂの操作により登録モードが設定されているときに実行される。   Next, the operation of the electronic photo frame 20 of the present embodiment configured as described above, particularly the operation when registering a favorite image for each user and the operation when reproducing the registered favorite image will be described. FIG. 2 is a flowchart showing an example of a registration processing routine executed by the main controller 50. This routine is executed when the registration mode is set by the user operating the mode setting button 40b.

登録処理ルーチンが実行されると、メインコントローラ５０のＣＰＵ５２は、まず、カメラコントローラ３４に制御指令を出力してカメラ３２により人物撮影を行ない（ステップＳ１００）、撮影された人物画像の顔を認識する顔認識処理を実行する（ステップＳ１１０）。ここで、顔認識処理は、人の生物学的な特徴を利用して個人を特定するためのものであり、例えば、カメラ３２で撮影された人物画像から両目や口，鼻などの位置を検出し、これらの特徴量を抽出することにより行なうことができる。なお、顔認識処理自体は周知の技術であるからこれ以上の詳細な説明は省略する。顔認識処理により人物画像の顔の特徴量を抽出すると、お気に入り画像ファイルや音声ファイルを選択する（ステップＳ１２０）。お気に入り画像ファイルや音声ファイルの選択は、本実施形態では、メニューボタン４０ｃによりメニュー画面を呼び出すと共に選択ボタン４０ｄを用いてメニュー画面から「お気に入り画像・音声を選択」の項目を選択して決定ボタン４０ｅを押下することにより表示される画像ファイルや音声ファイルの一覧の中から希望するファイルを選択ボタン４０ｄを用いて選択し決定ボタン４０ｅを押下することにより行なうことができる。こうしてお気に入り画像ファイルや音声ファイルを選択すると、選択したお気に入り画像ファイルや音声ファイルに関連付けて前述した顔認識処理により認識した顔（特徴量）を内蔵メモリ４２に登録して（ステップＳ１３０）、本ルーチンを終了する。   When the registration processing routine is executed, the CPU 52 of the main controller 50 first outputs a control command to the camera controller 34 and takes a picture of a person with the camera 32 (step S100), and recognizes the face of the photographed person image. Face recognition processing is executed (step S110). Here, the face recognition process is for identifying an individual using the biological characteristics of a person. For example, the positions of both eyes, mouth, nose and the like are detected from a person image taken by the camera 32. However, it can be performed by extracting these feature amounts. Since the face recognition process itself is a well-known technique, further detailed description is omitted. When the facial feature amount of the person image is extracted by the face recognition process, a favorite image file or an audio file is selected (step S120). In this embodiment, the favorite image file and the audio file are selected by calling the menu screen by the menu button 40c and selecting the “select favorite image / sound” item from the menu screen by using the selection button 40d. This can be done by selecting a desired file from the list of image files and audio files displayed by pressing using the selection button 40d and pressing the decision button 40e. When the favorite image file or sound file is selected in this way, the face (feature amount) recognized by the face recognition process described above in association with the selected favorite image file or sound file is registered in the internal memory 42 (step S130), and this routine is executed. Exit.

次に、再生モード時の動作について説明する。図３は、メインコントローラ５０により実行される再生処理ルーチンの一例を示すフローチャートである。このルーチンは、ユーザによるモード設定ボタン４０ｂの操作によりスライドショー再生モードが設定されているときに実行される。   Next, the operation in the playback mode will be described. FIG. 3 is a flowchart showing an example of a reproduction processing routine executed by the main controller 50. This routine is executed when the slide show reproduction mode is set by the user operating the mode setting button 40b.

再生処理ルーチンが実行されると、メインコントローラ５０のＣＰＵ５２は、まず、スライドショー再生モードの再生が通常スライドショー再生かお気に入りスライドショー再生かを調べ（ステップＳ２００）、通常スライドショー再生のときには、メモリカード３５や内蔵メモリ４２に保存されているすべての画像ファイルと音声ファイルが順次再生されるよう再生ファイルを設定し（ステップＳ２１０）、設定した再生ファイルに基づいて画像が再生されるよう表示コントローラ２４に制御信号を出力すると共に音声が再生されるようスピーカコントローラ２８に制御信号を出力して（ステップＳ２６０）、本ルーチンを終了する。一方、お気に入りスライドショー再生のときには、カメラコントローラ３４に制御信号を出力してカメラ３２により人物撮影を行ない（ステップＳ２２０）、撮影した人物画像の顔を認識する顔認識処理を実行し（ステップＳ２３０）、この顔認識処理により抽出した顔の特徴量と前述した図２の登録処理ルーチンにより事前に登録されている登録人物の顔の特徴量とを比較し（ステップＳ２４０）、顔の特徴量が一致（類似）するときには、カメラ３２で撮影された人物は登録者と判断し、登録人物に関連付けて登録されているお気に入り画像ファイルや音声ファイルを再生ファイルに設定し（ステップＳ２５０）、設定した再生ファイルに基づいて画像が再生されるよう表示コントローラ２４に制御信号を出力すると共に音声が再生されるようスピーカコントローラ２８に制御信号を出力して（ステップＳ２６０，Ｓ２７０）、本ルーチンを終了する。ステップＳ２４０で顔の特徴量が一致しない（登録している顔の特徴量のうち抽出した顔の特徴量と一致するものがない）ときには、登録者でないと判断し、前述したステップＳ２１０，Ｓ２６０，Ｓ２７０の処理を実行して本ルーチンを終了する。   When the playback processing routine is executed, the CPU 52 of the main controller 50 first checks whether playback in the slide show playback mode is normal slide show playback or favorite slide show playback (step S200). A reproduction file is set so that all image files and audio files stored in the memory 42 are sequentially reproduced (step S210), and a control signal is sent to the display controller 24 so that an image is reproduced based on the set reproduction file. At the same time, a control signal is output to the speaker controller 28 so that sound is reproduced (step S260), and this routine is terminated. On the other hand, at the time of favorite slide show playback, a control signal is output to the camera controller 34, and a person is photographed by the camera 32 (step S220), and a face recognition process for recognizing the face of the photographed person image is executed (step S230). The facial feature quantity extracted by this face recognition process is compared with the facial feature quantity of the registered person registered in advance by the registration processing routine of FIG. 2 described above (step S240), and the facial feature quantities match ( If the image is similar, the person photographed by the camera 32 is determined to be a registrant, and a favorite image file or audio file registered in association with the registered person is set as a playback file (step S250). Based on this, a control signal is output to the display controller 24 so that an image is reproduced, and sound is reproduced. Yo outputs a control signal to the speaker controller 28 (step S260, S270), and terminates this routine. If the facial feature values do not match in step S240 (there are no registered facial feature values that match the extracted facial feature values), it is determined that the person is not a registrant, and the aforementioned steps S210, S260, The process of S270 is executed and this routine is terminated.

ここで、本実施形態の構成要素と本発明の構成要素との対応関係を明らかにする。本実施形態のカメラ３２とカメラコントローラ３４と図２のステップＳ１００や図３のステップＳ２２０の処理を実行するメインコントローラ５０とが本発明の「撮像手段」に相当し、図２のステップＳ１１０や図３のステップＳ２３０の処理を実行するメインコントローラ５０が「顔認識手段」に相当し、図２のステップＳ１２０，１３０の処理を実行するメインコントローラ５０が「登録手段」に相当し、図３のステップＳ２５０，Ｓ２６０，Ｓ２７０の処理を実行するメインコントローラ５０が「再生手段」に相当する。なお、本実施形態では、電子写真立て２０の動作を説明することにより本発明の再生装置の制御方法の一例も明らかにしている。   Here, the correspondence between the components of the present embodiment and the components of the present invention will be clarified. The camera 32 and camera controller 34 of the present embodiment and the main controller 50 that executes the processing of step S100 of FIG. 2 and step S220 of FIG. 3 correspond to the “imaging means” of the present invention, and step S110 of FIG. 3 corresponds to the “face recognition means”, and the main controller 50 that executes the processes of steps S120 and S130 in FIG. 2 corresponds to “registration means”. The main controller 50 that executes the processes of S250, S260, and S270 corresponds to “reproducing means”. In the present embodiment, an example of the control method of the playback apparatus of the present invention is also clarified by describing the operation of the electrophotographic frame 20.

以上詳述した本実施形態の電子写真立て２０によれば、登録モードが設定されているときには、カメラ３２でユーザを人物撮影して顔認識に抽出された顔（特徴量）をユーザにより選択されたお気に入りの画像ファイルや音声ファイルに関連付けて登録し、再生モードが設定されているときにはカメラ３２で人物撮影して顔認識により抽出された顔が登録者のときにはこれに関連付けて登録されたお気に入りの画像ファイルや音声ファイルを再生ファイルとして設定すると共に設定した再生ファイルに基づいて画像や音声を再生するから、複数のユーザにより共用される場合でも、面倒な操作を伴うことなくユーザ毎にお気に入りの画像や音声を自動再生することができる。   According to the electronic photo frame 20 of this embodiment described in detail above, when the registration mode is set, the user selects a face (feature amount) extracted by the camera 32 by photographing the person with the camera 32 and performing face recognition. When the playback mode is set and the playback mode is set, the camera 32 captures a person and the face extracted by face recognition is the registered user. Since image and sound files are set as playback files and images and sound are played back based on the set playback files, even if shared by multiple users, favorite images can be created for each user without complicated operations. And audio can be played automatically.

本実施形態では、スライドショー再生モードとしてメモリカード３５や内蔵メモリ４２内のすべての画像ファイルや音声ファイルを再生する通常スライドショー再生と登録者のお気に入り画像ファイルや音声ファイルのみを再生するお気に入りスライドショー再生とを備え、これらをユーザにより選択可能とするものとしたが、お気に入りスライドショー再生のみの機能を備えるものとしてもよい。   In the present embodiment, as a slide show playback mode, normal slide show playback for playing back all image files and sound files in the memory card 35 and the built-in memory 42 and favorite slide show playback for playing back only the registrant's favorite image files and sound files are performed. These are made selectable by the user, but may be provided with a function only for favorite slide show reproduction.

本実施形態では、お気に入りスライドショー再生が設定されているときには、メモリカード３５や内蔵メモリ４２に保存されているお気に入りの音声ファイルを再生するものとしたが、これに限定されるものではなく、例えば、音声を録音するためのマイクロホンを備え、登録モードが設定されているときにマイクロホンにより録音して音声ファイルを作成すると共にカメラ３２により人物撮影して顔認識により抽出された顔を作成された音声ファイルに関連付けて内蔵メモリ４２に登録しておき、再生モードが設定されているときにカメラ３２で人物撮影して顔認識により抽出された顔が登録者のときにはこれに関連付けて登録した音声ファイルを再生ファイルに設定してこれを再生するものとしてもよい。この場合、音声ファイルを登録するユーザと音声ファイルを再生するユーザとは同一人物であってもよいし、異なる人物であってもよい。後者の場合、予めカメラ３２により人物撮影すると共に顔認識により抽出された顔（ユーザ）を登録しておき、音声を登録するユーザが予め登録されているユーザの中から音声ファイルを再生するユーザを指定することにより行なうことができる。これにより、例えば、他のユーザ向けに伝言メッセージを再生するなどの用途に利用することが可能となる。なお、こうした他のユーザに向けて再生するものは、音声ファイルに限られず、画像ファイルとしてもよい。   In this embodiment, when the favorite slide show playback is set, the favorite audio file stored in the memory card 35 or the built-in memory 42 is played back. However, the present invention is not limited to this. For example, A voice file that includes a microphone for recording voice, and that creates a voice file by recording with the microphone when the registration mode is set, and creates a face extracted by face recognition by photographing a person with the camera 32 When the playback mode is set, the camera 32 captures a person and the face extracted by face recognition is a registrant. A file may be set and played back. In this case, the user who registers the audio file and the user who reproduces the audio file may be the same person or different persons. In the latter case, a person who has photographed a person with the camera 32 in advance and has registered a face (user) extracted by face recognition, and a user who registers a voice selects a user who plays a sound file from among the registered users. This can be done by specifying. Thereby, for example, it becomes possible to use for the purpose of reproducing a message message for other users. In addition, what is reproduced toward such other users is not limited to an audio file, and may be an image file.

本実施形態では、メモリカード３５や内蔵メモリ４２に保存されている画像ファイルの再生の他に音声ファイルの再生にも対応するものとしたが、画像ファイルの再生だけに対応するものとしてもよい。   In this embodiment, in addition to the reproduction of the image file stored in the memory card 35 or the built-in memory 42, the reproduction of the audio file is also supported. However, the reproduction may be performed only for the reproduction of the image file.

本実施形態では、本発明の再生装置を電子写真立てに適用して説明したが、これに限定されるものではなく、撮像装置を搭載すると共に画像や音声を再生可能なものであれば、撮像装置が接続または内蔵された携帯電話やパーソナルコンピュータ，ＰＤＡ（Personal Digital Assistant）などの再生装置とするものとしたり、撮像装置を接続または内蔵するが画像を表示する機能を備えない音声再生装置とするなど、他の如何なる再生装置に適用するものとしても構わない。また、こうした再生装置の形態とするものの他、再生装置の制御方法の形態とするものとしてもよいし、こうした再生装置の制御方法を１又は複数のコンピュータで実現させるためのプログラムの形態とするものとしてもよい。   In the present embodiment, the playback device of the present invention has been described as applied to an electrophotographic frame. However, the present invention is not limited to this, and if an image pickup device is mounted and an image or sound can be played back, the image pickup device may be used. A playback device such as a mobile phone, a personal computer, or a PDA (Personal Digital Assistant) to which the device is connected or built-in, or a voice playback device that is connected or built-in but does not have an image display function. The present invention may be applied to any other reproducing apparatus. In addition to the form of such a playback apparatus, the form of a control method of the playback apparatus may be used, or the form of a program for realizing such a control method of the playback apparatus with one or a plurality of computers. It is good.

以上、本発明の実施形態について説明したが、本発明は上述した実施形態に何ら限定されることはなく、本発明の技術的範囲に属する限り種々の態様で実施し得ることは勿論である。   The embodiments of the present invention have been described above, but the present invention is not limited to the above-described embodiments, and can of course be implemented in various modes as long as they belong to the technical scope of the present invention.

本実施形態の電子写真立て２０の構成図および機能ブロック図。The block diagram and functional block diagram of the electrophotographic frame 20 of this embodiment. 登録処理ルーチンの一例を示すフローチャート。The flowchart which shows an example of a registration process routine. 再生処理ルーチンの一例を示すフローチャート。The flowchart which shows an example of a reproduction | regeneration processing routine.

符号の説明Explanation of symbols

２０ 再生装置、２２ 表示パネル、２４ 表示コントローラ、２６ スピーカ、２８ スピーカコントローラ、３２ カメラ、３４ カメラコントローラ、３５ メモリカード、３６ メモリカードスロット、３８ メモリカードコントローラ、４０ 操作ボタン、４０ａ 電源ボタン、４０ｂ モード設定ボタン、４０ｃ メニューボタン、４０ｄ 選択ボタン、４０ｅ 決定ボタン、４２ 内蔵メモリ、５０ メインコントローラ、５２ ＣＰＵ、５４ ＲＯＭ、５６ ＲＡＭ。   20 playback device, 22 display panel, 24 display controller, 26 speaker, 28 speaker controller, 32 camera, 34 camera controller, 35 memory card, 36 memory card slot, 38 memory card controller, 40 operation button, 40a power button, 40b mode Setting button, 40c menu button, 40d selection button, 40e determination button, 42 built-in memory, 50 main controller, 52 CPU, 54 ROM, 56 RAM.

Claims (5)

画像データまたは音声データを記憶する記憶手段に接続され、前記記憶された画像データまたは音声データを再生する再生装置であって、
人物画像を撮像可能な撮像手段と、
該撮像手段により撮像された人物画像の顔を認識する顔認識手段と、
登録モードが設定されている状態で前記撮像手段により人物画像が撮像されたとき、前記顔認識手段により顔が認識された人物画像の人物を前記記憶手段に記憶された画像データまたは音声データのうちユーザにより選択された画像データまたは音声データに関連付けて登録する登録手段と、
再生モードが設定されている状態で前記撮像手段により人物画像が撮像されたとき、前記顔認識手段により顔が認識された人物画像の人物が前記登録手段により登録されている人物のときには前記関連付けられた画像データまたは音声データを再生する再生手段と
を備える再生装置。 A playback device connected to storage means for storing image data or audio data, and for reproducing the stored image data or audio data,
Imaging means capable of capturing a person image;
Face recognition means for recognizing the face of the person image captured by the imaging means;
When a person image is picked up by the image pickup means in a state where the registration mode is set, the person of the person image whose face is recognized by the face recognition means is selected from the image data or the sound data stored in the storage means A registration means for registering in association with image data or audio data selected by the user;
When a person image is picked up by the image pickup means in a state where the reproduction mode is set, the person of the person image whose face is recognized by the face recognition means is a person registered by the registration means. A playback device comprising: playback means for playing back image data or audio data. 請求項１記載の再生装置であって、
前記再生手段は、ユーザにより選択される複数の再生モードを備え、
前記複数の再生モードは、前記記憶手段により記憶されているすべての画像データまたは音声データを再生する通常再生モードと、前記撮像手段により撮像された人物画像の人物に関連付けられた画像データまたは音声データを再生する撮像再生モードとを含むモードである
再生装置。 The playback device according to claim 1,
The playback means comprises a plurality of playback modes selected by the user,
The plurality of reproduction modes include a normal reproduction mode for reproducing all image data or audio data stored in the storage unit, and image data or audio data associated with a person of a human image captured by the imaging unit. A playback device that includes an imaging playback mode for playing back video. 前記再生手段は、前記画像データの再生の態様としてスライドショー表示を行なう手段である請求項２記載の再生装置。   3. A playback apparatus according to claim 2, wherein the playback means is means for performing a slide show display as a mode of playback of the image data. 画像データまたは音声データを記憶する記憶手段と人物画像を撮像可能な撮像手段とに接続され、前記記憶された画像データまたは音声データを再生する再生装置の制御方法であって、
（ａ）該撮像手段により撮像された人物画像の顔を認識し、
（ｂ）登録モードが設定されている状態で前記撮像手段により人物画像が撮像されたとき、前記顔認識手段により顔が認識された人物画像の人物を前記記憶手段に記憶された画像データまたは音声データのうちユーザにより選択された画像データまたは音声データに関連付けて登録し、
（ｃ）再生モードが設定されている状態で前記撮像手段により人物画像が撮像されたとき、前記顔認識手段により顔が認識された人物画像の人物が前記登録手段により登録されている人物のときには前記関連付けられた画像データまたは音声データを再生する
ことを特徴とする再生装置の制御方法。 A control method for a playback device connected to a storage means for storing image data or sound data and an image pickup means capable of capturing a person image, and for reproducing the stored image data or sound data,
(A) recognizing the face of a human image imaged by the imaging means;
(B) When a person image is picked up by the image pickup means in a state where the registration mode is set, the person of the person image whose face is recognized by the face recognition means is stored in the image data or sound stored in the storage means Register in association with the image data or audio data selected by the user among the data,
(C) When a person image is picked up by the image pickup means in a state in which the reproduction mode is set, and a person whose face is recognized by the face recognition means is a person registered by the registration means A method of controlling a playback apparatus, wherein the associated image data or audio data is played back. 請求項４に記載の再生装置の制御方法の各ステップを１又は複数のコンピュータに実現させるためのプログラム。   A program for causing one or more computers to realize each step of the method for controlling a playback apparatus according to claim 4.
JP2008006513A 2008-01-16 2008-01-16 Playback apparatus, control method thereof, and program Active JP4924442B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008006513A JP4924442B2 (en) 2008-01-16 2008-01-16 Playback apparatus, control method thereof, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008006513A JP4924442B2 (en) 2008-01-16 2008-01-16 Playback apparatus, control method thereof, and program

Publications (2)

Publication Number Publication Date
JP2009171176A true JP2009171176A (en) 2009-07-30
JP4924442B2 JP4924442B2 (en) 2012-04-25

Family

ID=40971876

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008006513A Active JP4924442B2 (en) 2008-01-16 2008-01-16 Playback apparatus, control method thereof, and program

Country Status (1)

Country Link
JP (1) JP4924442B2 (en)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010169954A (en) * 2009-01-23 2010-08-05 Nikon Corp Display device and imaging apparatus
US20110110564A1 (en) * 2009-11-06 2011-05-12 Kabushiki Kaisha Toshiba Electronic apparatus and image display
JP2011199906A (en) * 2011-06-13 2011-10-06 Toshiba Corp Electronic apparatus, image display method and program
JP2012010211A (en) * 2010-06-28 2012-01-12 Casio Comput Co Ltd Image display device, image storage method and program
JP2012015663A (en) * 2010-06-30 2012-01-19 Casio Comput Co Ltd Image display apparatus, image reproduction method and program
JP2012027611A (en) * 2010-07-21 2012-02-09 Casio Comput Co Ltd Image display device, image distribution system, browser state collection method, and program
JP2012089983A (en) * 2010-10-18 2012-05-10 Casio Comput Co Ltd Image display device and program
US8548232B2 (en) 2010-03-19 2013-10-01 Sony Corporation Image processing apparatus, method and program
JP2015052876A (en) * 2013-09-06 2015-03-19 カシオ計算機株式会社 Image display device and program
JP2018167029A (en) * 2018-04-23 2018-11-01 株式会社ドリコム Terminal device, game system, questioning method, and program

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005235296A (en) * 2004-02-19 2005-09-02 Yamaha Corp Content reproducing device
JP2005354210A (en) * 2004-06-08 2005-12-22 Olympus Corp Image reproduction system and image filling system
JP2006081021A (en) * 2004-09-10 2006-03-23 Fuji Photo Film Co Ltd Electronic album display system, electronic album display method, electronic album display program, image classification device, image classification method and image classification program

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005235296A (en) * 2004-02-19 2005-09-02 Yamaha Corp Content reproducing device
JP2005354210A (en) * 2004-06-08 2005-12-22 Olympus Corp Image reproduction system and image filling system
JP2006081021A (en) * 2004-09-10 2006-03-23 Fuji Photo Film Co Ltd Electronic album display system, electronic album display method, electronic album display program, image classification device, image classification method and image classification program

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010169954A (en) * 2009-01-23 2010-08-05 Nikon Corp Display device and imaging apparatus
US8244005B2 (en) 2009-11-06 2012-08-14 Kabushiki Kaisha Toshiba Electronic apparatus and image display method
US20110110564A1 (en) * 2009-11-06 2011-05-12 Kabushiki Kaisha Toshiba Electronic apparatus and image display
JP2011101251A (en) * 2009-11-06 2011-05-19 Toshiba Corp Electronic apparatus and image display method
US20120281888A1 (en) * 2009-11-06 2012-11-08 Kabushiki Kaisha Toshiba Electronic apparatus and image display method
US8548232B2 (en) 2010-03-19 2013-10-01 Sony Corporation Image processing apparatus, method and program
JP2012010211A (en) * 2010-06-28 2012-01-12 Casio Comput Co Ltd Image display device, image storage method and program
JP2012015663A (en) * 2010-06-30 2012-01-19 Casio Comput Co Ltd Image display apparatus, image reproduction method and program
JP2012027611A (en) * 2010-07-21 2012-02-09 Casio Comput Co Ltd Image display device, image distribution system, browser state collection method, and program
JP2012089983A (en) * 2010-10-18 2012-05-10 Casio Comput Co Ltd Image display device and program
JP2011199906A (en) * 2011-06-13 2011-10-06 Toshiba Corp Electronic apparatus, image display method and program
JP2015052876A (en) * 2013-09-06 2015-03-19 カシオ計算機株式会社 Image display device and program
JP2018167029A (en) * 2018-04-23 2018-11-01 株式会社ドリコム Terminal device, game system, questioning method, and program

Also Published As

Publication number Publication date
JP4924442B2 (en) 2012-04-25

Similar Documents

Publication Publication Date Title
JP4924442B2 (en) Playback apparatus, control method thereof, and program
EP1347455A2 (en) Contents recording/playback apparatus and contents edit method
KR100770637B1 (en) Digital camera
JP2010237761A (en) Electronic apparatus
JP5124994B2 (en) Image reproduction system, digital camera, and image reproduction apparatus
JP2012257112A (en) Imaging apparatus and program
JP2010200079A (en) Photography control device
JP2010021819A (en) Image display apparatus, image display method, and program
JP2009239349A (en) Photographing apparatus
JP4742912B2 (en) Image / audio recording apparatus, image / audio recording method, and image / audio recording control program
JP4047834B2 (en) Portable information terminal
JP2010187320A (en) Image recording device, image classifying device, image display device, and program
JP2010171849A (en) Image reproducing apparatus and electronic camera
JP6544147B2 (en) Singing animation creation device and singing animation creation system
JP2007266661A (en) Imaging apparatus, information processor, and imaging display system
JP4882525B2 (en) Image reproduction system, digital camera, and image reproduction apparatus
JPH10336576A (en) Image recording system
JP2002281376A (en) Camera apparatus
JP2004088518A (en) Imaging/recording apparatus, image reproducing apparatus, and image recording/reproducing control program
JP2012118286A (en) Karaoke system adaptive to user attribute
KR20110083095A (en) Image processing apparatus for creating and playing image linked with multimedia contents and method for controlling the apparatus
JP4485455B2 (en) Karaoke system, music setting method and photographing apparatus
US20090237522A1 (en) Method for controlling digital picture frame and digital picture frame thereof
JP6643081B2 (en) Album moving image generating apparatus, album moving image generating method, and program
JP4829012B2 (en) Human imaging device, control method thereof, and control program thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20101202

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111221

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120110

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120123

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150217

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4924442

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350