CN101989296A - 图像搜索设备、图像搜索方法和图像搜索程序 - Google Patents
图像搜索设备、图像搜索方法和图像搜索程序 Download PDFInfo
- Publication number
- CN101989296A CN101989296A CN2010102353438A CN201010235343A CN101989296A CN 101989296 A CN101989296 A CN 101989296A CN 2010102353438 A CN2010102353438 A CN 2010102353438A CN 201010235343 A CN201010235343 A CN 201010235343A CN 101989296 A CN101989296 A CN 101989296A
- Authority
- CN
- China
- Prior art keywords
- image
- search
- cpu
- face
- processing unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
- H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
- H04N23/635—Region indicators; Field of view indicators
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Library & Information Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Studio Devices (AREA)
- Television Signal Processing For Recording (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了图像搜索设备、图像搜索方法和图像搜索程序。图像搜索设备包括:拍摄单元,被配置为对被摄体进行摄影;显示单元;控制单元,被配置为在通过拍摄单元可摄影被摄体的拍摄模式时,根据拍摄状况来将用于图像搜索的搜索键显示在显示单元上;指定单元,该指定单元用于指定显示在显示单元上的搜索键;以及搜索单元,被配置为在搜索键经由指定单元被指定时,基于如此被指定的搜索键来搜索图像;其中,控制单元在图像被搜索单元搜索到时,将该搜索结果显示在显示单元上。
Description
技术领域
本发明涉及图像搜索设备、图像搜索方法和图像搜索程序,并且适合应用于例如数字照相机。
背景技术
根据相关技术的数字照相机记录通过对被摄体进行照片拍摄获得的多个照片图像,并且还记录每个类别的元数据,以便将多个类别的元数据与多个照片图像中的每个照片图像联系起来。
此外,如果用户为每个类别选择单个或多个元数据,则数字照相机基于该所选元数据,以与和该元数据相同的元数据相联系的方式来搜索照片图像。
然后,数字照相机将搜索到的多个照片图像显示在监视器上。因此,数字照相机允许用户搜索所需要的照片图像(例如,参见日本未实审专利申请公报No.2008-165424(第1、9和10页,图4、5和14))。
发明内容
顺便提及,利用如此配置的数字照相机,除了对被摄体进行照片拍摄的拍摄模式以外,还提供了再现照片图像的再现模式,并且这种再现模式允许用户搜索到目前为止摄取并累积的照片图像以观看所需照片图像。
然而,使用这种数字照相机的用户可能构想将被摄体和拍摄地点与所摄取并累积的照片图像相联系以便搜索和观看照片图像。
然而,利用该数字照相机,当在拍摄模式时请求搜索照片图像时,必须执行复杂的操作,例如到再现模式的模式切换操作,或者用于允许用户在顺序地切换类别时选择用于搜索的多个元数据的选择操作。
因此,该数字照相机包括这样的问题:其中,无论是以被摄体还是以拍摄地点作为触发(trigger)来请求搜索照片图像,这种照片图像搜索请求都不能被容易地处理。
已发现希望提供一种图像搜索设备、图像搜索方法和图像搜索程序,从而可以在拍摄模式时容易地处理图像搜索请求。
根据本发明的一个实施例,进行了这样的布置,其中,在拍摄单元可拍摄被摄体的拍摄模式时,根据拍摄状况来将用于图像搜索的搜索键显示在显示单元上,并且当搜索键经由用于指定显示在显示单元上的搜索键的指定单元而被指定时,基于该被指定的搜索键来搜索图像,并且该搜索结果被显示在显示单元上。
因此,利用本发明,在拍摄模式时无论是以被摄体作为触发还是以拍摄地点作为触发来请求图像搜索,都可以通过指定搜索键来搜索图像,而不用执行任何复杂的操作。
根据本发明的一个实施例,进行了这样的布置,其中,在被摄体可被拍摄单元拍摄的拍摄模式时,根据拍摄状况将用于图像搜索的搜索键显示在显示单元上,并且该搜索键经由用于指定显示在显示单元上的搜索键的指定单元被指定时,图像基于该被指定的搜索键被搜索,并且该搜索结果被显示在显示单元上。因此,在拍摄模式时无论是以被摄体还是以拍摄地点作为触发来请求图像搜索,都可以通过指定搜索键来搜索图像,而不用执行任何复杂的操作,因此,可以实现用于在拍摄模式时可容易地处理图像搜索请求的图像搜索设备、图像搜索方法和图像搜索程序。
附图说明
图1A和1B是图示出根据本发明的数字照相机的外部配置的实施例的示意图;
图2是图示出根据本发明的数字照相机的电路配置的实施例的框图;
图3是图示出搜索用数据库的配置的示意图;
图4是用于描述拍摄状态呈现图像上的图标布局图像(icon layout image)的显示的示意图;
图5是用于描述拍摄状态呈现图像上的相机位置图标的显示的示意图;
图6是用于描述拍摄状态呈现图像上的脸图标的显示的示意图;
图7是用于描述拍摄状态呈现图像上的脸图标的附加显示的示意图;
图8A和8B是用于描述搜索键(saerch key)图标的附加显示的示意图;
图9A和9B是用于描述搜索键图标的滚动显示的示意图;
图10是用于描述脸图标的排序的示意图;
图11是用于描述脸图标的另一种排序的示意图;
图12是用于描述拍摄状态呈现图像上的图标布局图像的另一显示的示意图;
图13是用于描述拍摄状态呈现图像上的相机位置图标的另一显示的示意图;
图14A和14B是用于描述与快门按钮的半按压操作和全按压操作相对应的图标呈现图像的消去的示意图;
图15A和15B是用于描述与快门按钮的半按压操作和全按压操作相对应的图标呈现图像的另一消去的示意图;
图16是图示出搜索用地图图像的配置的示意图;
图17是图示出事件搜索照片图像的配置的示意图;
图18是图示出脸搜索照片图像的配置的示意图;
图19是用于描述人物搜索的示意图;
图20是图示出人物呈现图像的配置的示意图;
图21是图示出另一人物搜索的示意图;
图22是图示出人物呈现图像的另一配置的示意图;
图23是图示出图像相关信息登记处理过程的流程图;
图24是图示出另外的图像相关信息登记处理过程的流程图;
图25是图示出搜索键呈现处理过程的流程图;
图26是图示出其它搜索键呈现处理过程的流程图;
图27是图示出图像搜索处理过程的流程图;
图28是图示出其它图像搜索处理过程的流程图;
图29是图示出另外的图像搜索处理过程的流程图;
图30是图示出另外的图像搜索处理过程的流程图;
图31是图示出另外的图像搜索处理过程的流程图;
图32是图示出另外的图像搜索处理过程的流程图;
图33是图示出另外的图像搜索处理过程的流程图;以及
图34是图示出另外的图像搜索处理过程的流程图。
具体实施方式
将参考附图描述用于实现本发明的最佳方式(下面也称为“实施例”)。现在,将以下面的顺序来进行描述。
1.实施例
2.修改
1.实施例
1-1.数字照相机的外部配置
在图1A和1B中,标号1表示适用本发明实施例的整体的数字照相机。这样的数字照相机1包括由可由单只手抓握的大小程度构成的略微扁平的矩形壳体2。
对于壳体2的前面2A,拍摄镜头3、自动聚焦(AF:Auto Focus)照明器4和闪光灯5被设置在其上面部分。顺便提及,自动聚焦照明器4还用作自拍定时灯(selftimer lamp)。
此外,镜头盖6被附接到前面2A以便向上或向下滑动。因此,进行了这样的布置,其中,如果镜头盖6被向下滑动,则壳体2露出拍摄镜头3、自动聚焦照明器4和闪光灯5。
此外,进行了这样的布置,其中,如果镜头盖6被向上滑动,则壳体2遮盖拍摄镜头3、自动聚焦照明器4和闪光灯5,从而从外面保护它们。顺便提及,还进行了这样的布置,其中,在电源关闭状态中镜头盖6被向下滑动的情况中,响应于此,数字照相机1自动地开启电源。
此外,触摸屏7被设置到壳体2的背面2B。这种触摸屏7被配置为例如使得触摸面板附着液晶面板的表面。因此,触摸屏7用作使得能够通过手指或尖笔等对液晶显示面板7进行触摸操作的显示设备。
此外,对于壳体2的上面2C,布置有变焦控制杆8、快门按钮9、再现按钮10和电源按钮11。顺便提及,再现按钮10是硬件键,用于将数字照相机1的操作模式切换到对照片图像进行再现以将其显示在触摸屏上的再现模式。
根据这样的配置,在镜头盖6被向下滑动时,或者电源按钮11被按压操作时,数字照相机1开启电源,并且在拍摄模式中被启动。
在拍摄模式时,数字照相机1经由拍摄镜头3连续拍摄被摄体以确定诸如拍摄范围、构图(composition)、聚焦等之类的拍摄状态以生成作为运动图像的拍摄状态呈现图像,并且将其显示在触摸屏7上。
此外,响应于对变焦控制杆8的倾斜操作或者对触摸屏7的触摸操作,数字照相机1执行变焦(TELE/WIDE)。因此,数字照相机1可以通过显示在触摸屏7上的拍摄状态呈现图像来允许用户确认被摄体的拍摄状态。
在此状态中,如果快门按钮9被按下,则数字照相机1经由拍摄镜头3摄取被摄体的图像以生成照片图像,并对其进行记录。
此外,如果再现按钮10被按下,则数字照相机1从拍摄模式进入再现模式。此时,数字照相机1例如将已经记录的照片图像之一显示在液晶面板上。然后,响应于对触摸屏7的触摸操作,数字照相机1切换显示在其上的照片图像。
以这种方式,数字照相机1被配置为允许用户通过对被摄体拍照来生成并记录照片图像,并且还允许用户再现并观看所记录的该照片图像。1-2.数字照相机1的电路配置
接下来,将参考图2描述数字照相机1的电路配置。对于该数字照相机1,中央处理单元(CPU)20预先读出存储在ROM(只读存储器)21中的各种程序,以将这些程序载入RAM(随机存取存储器)22。
然后,中央处理单元20根据载入RAM 22的各种程序来控制数字照相机1的整体。此外,中央处理单元20遵循载入RAM 22的各种程序,以根据将根据来自触摸屏7的触摸面板7A的触摸操作输入的输入信号来执行各种处理。
此外,中央处理单元20遵循载入RAM 22的各种程序,以根据将根据来自操作单元23的按压操作输入的输入信号来执行各种处理。
实际上,如果表面上的任意位置被手指等触摸,则触摸面板7A在手指等触摸在其上的时间期间以特定极短时间间隔检测该触摸位置的坐标。然后,触摸面板7A在手指等触摸在其上的时间期间,将表示检测到的触摸位置的坐标的输入信号发送给中央处理单元20。
如果从触摸面板7A提供来输入信号,则中央处理单元20基于该输入信号检测触摸位置是否存在移位并检测触摸的持续时间(下面又称为“触摸持续时间”)。然后,中央处理单元20基于对触摸位置是否存在移位以及触摸持续时间的检测结果,来确定触摸操作的类型。
作为其结果,当触摸位置几乎未移位并且触摸持续时间较短、等于或短于预定时间时,中央处理单元20判定此时的触摸操作是这样的触摸操作:例如手指等接触触摸面板7A的表面的一个任意点并且立即从其离开。
顺便提及,在下面的描述中,例如手指等接触触摸面板7A的表面的一个任意点并且立即从其离开这样的触摸操作也将称为“敲击操作”。注意,这种敲击操作是被执行来例如用于在显示在液晶面板7B上的图像内指定按钮或图标等以输入被指派给该按钮或图标等的命令的操作。
此外,当通过花费比预定时间更长的触摸持续时间来使触摸位置移位时,中央处理单元20判定此时的触摸操作是例如当将手指等接触在触摸面板7A的表面上的同时手指等被移动这样的触摸操作。
顺便提及,在下面的描述中,也将例如当将手指等接触在触摸面板7A的表面上的同时手指等被移动这样的触摸操作特定地称为“滑动操作”。注意,这种滑动操作是被执行来例如用于移动(即,拖动)显示在液晶面板7B上的图像内的图标等的操作。
此外,中央处理单元20通过将由此时的输入信号指示的触摸位置的坐标转换为显示在液晶面板7B上的图像内的坐标,来检测显示在液晶面板7B上的图像内的哪个位置被指定。
因此,当敲击操作作为此时的触摸操作被执行时,中央处理单元20检测图像内所指定的一点的位置。此外,当滑动操作作为此时的触摸操作被执行时,中央处理单元20检测图像内所指定位置的移动轨迹。
然后,在判定了触摸操作的类型并且还检测到图像内所指定的一点的位置或者所指定位置的移动轨迹之后,中央处理单元20根据判定结果和检测结果来确定此时的敲击操作或滑动操作的输入命令。接下来,因此,在确定了敲击操作或滑动操作的输入命令之后,中央处理单元20执行与所确定命令相对应的处理。
另一方面,操作单元23包括上面的变焦控制杆8、快门按钮9、再现按钮10和电源按钮11,并且将与它们中的每个的按下操作等相对应的输入信号发送给中央处理单元20。
如果从操作单元23提供来输入信号,则中央处理单元20判断变焦控制杆8、快门按钮9、再现按钮10和电源按钮11中的哪个***作。
此外,中央处理单元20根据其判断结果来确定由此时的按压操作等输入的命令。接下来,在确定了由按压操作等输入的命令之后,中央处理单元20执行与其所确定的命令相对应的处理。
以这种方式,例如,在操作单元23的电源按钮11被按压以开启电源之后,或者通过对触摸面板7A的敲击操作指定了将操作模式切换到拍摄模式之后,中央处理单元20在拍摄模式下操作。
对于包括光圈、聚焦透镜等以及上面的拍摄镜头3的镜头单元26,中央处理单元20通过在拍摄模式时使得致动器25经由马达驱动器24的驱动控制,来调节该光圈的开口量、该聚焦透镜的位置等。因此,中央处理单元20针对拍摄范围自动地调节曝光或聚焦。
在此状态中,中央处理单元20经由镜头单元26在成像设备27的光接收表面处接收来自包括被摄体的拍摄范围的成像光。顺便提及,成像设备27是由CCD(电荷耦合器件)图像传感器构成的。
此时,中央处理单元20控制定时生成器28以从该定时生成器28向成像设备27发送一定周期的定时信号。
因此,成像设备27在定时信号的输入定时处使得在光接收表面接收的成像光经过光电转换,以根据其成像光L1生成模拟光电转换信号,并且还将所生成的该光电转换信号发送给模拟处理单元29。
每当从成像设备27提供来光电转换信号时,模拟处理单元29在中央处理单元20的控制下,使该光电转换信号经过诸如放大处理之类的预定模拟处理以生成成像信号。
此外,每当生成了成像信号时,模拟处理单元29经由模/数转换单元30将所生成的该成像信号转换为数字成像数据,并且将其发送给数字处理单元31。
在中央处理单元20的控制下,每当从模/数转换单元30提供来成像数据时,数字处理单元31使该成像数据经过诸如降噪处理之类的预定数字处理。
因此,基于从模/数转换单元30顺序地提供来的成像数据,数字处理单元31生成构成了上面的拍摄状态呈现图像的临时单位图像的单位图像数据。
然后,每当该单位图像数据被生成时,中央处理单元20顺序地将所生成的该单位图像数据发送给液晶面板7B。因此,数字处理单元31通过顺序地切换单位图像,来基于多个时间上连续的单位图像数据将单位图像显示在液晶面板7B上作为拍摄状态呈现图像(即,运动图像)。
以这种方式,中央处理单元20可以通过连续地拍摄包括被摄体的拍摄范围来将拍摄状态呈现图像显示在液晶面板7B上,并且还允许用户通过拍摄状态呈现图像来确认被摄体的拍摄状态。
顺便提及,中央处理单元20生成用于呈现图标的图标呈现图像数据,并且将所生成的该图标呈现图像数据发送给数字处理单元31。相应地,如果从中央处理单元20提供来图标呈现图像数据,则数字处理单元31将该图标呈现图像数据与单位图像数据合成以生成合成的图像数据,并且将其发送给液晶面板7B。从而,数字处理单元31可以将拍摄状态呈现图像显示在液晶面板7B上,并且还以重叠在该拍摄状态呈现图像上的方式来显示图标。
如果通过用户半按压(half-press)快门按钮9而从操作单元23输入用于调节被摄体的拍摄条件的条件调节信号,则响应于此,中央处理单元20经由马达驱动器24使致动器25经受驱动控制。
因此,中央处理单元20通过调节镜头单元26处的光圈的孔径量、聚焦透镜的位置等来自动地调节针对拍摄范围内的被摄体(例如,人)的曝光或聚焦。
在此状态中,接下来,如果通过用户全按压快门按钮9而从操作单元23输入了释放信号,则中央处理单元20向数字处理单元31通知释放信号的输入,并且还根据释放信号的输入来控制数字处理单元31。
此时,在中央处理单元20的控制下,数字处理单元31在被通知了释放信号的输入时,使得从模/数转换单元30提供来的成像数据经过用于照片拍摄的预定数字处理,例如降噪处理、阴影校正处理等。
因此,基于在被通知释放信号的输入时从模/数转换单元30提供来的成像数据,数字处理单元31生成通过对被摄体(即,包括被摄体的拍摄范围)拍照获得的照片图像数据。
此外,数字处理单元31通过诸如JPEG(联合图像专家组)方法之类的预定压缩编码方法来使该照片图像数据经过压缩编码处理,以生成经压缩的图像数据。
另外,此时,数字处理单元31使该照片图像数据经过用于间拔(thin out)像素的缩小处理,以便还生成经缩小的照片图像(下面也称为“缩略图像”)的经缩小照片图像数据(下面也称为“缩略图像数据”)。接下来,数字处理单元31将经压缩的图像数据与该缩略图像数据一起发送给中央处理单元20。
如果从数字处理单元31提供来经压缩的图像数据和缩略图像数据,则中央处理单元20根据例如Exif(可交换图像文件格式)生成头部数据,其中存储了与照片图像有关的各种信息。然后,中央处理单元20通过将头部数据添加到经压缩图像数据的先头部分来生成图像文件。
顺便提及,如果从数字处理单元31提供来经压缩的图像数据,则中央处理单元20生成标识信息,由此,要基于该经压缩图像数据生成的图像文件可个体地被标识(例如,文件名)。顺便提及,在下面的描述中,也将用来个体地标识图像文件的标识信息称为“文件标识信息”。
此外,中央处理单元20被配置为通过经由GPS接收器32与用于GPS(全球定位***)的人造卫星通信,来检测数字相机1的位置(用经度和纬度表示的位置)。顺便提及,在下面的描述中,利用GPS检测到的数字照相机1的位置也称为“相机位置”。
顺便提及,在拍摄模式时,如果释放信号被输入,则中央处理单元20在输入释放信号时利用GPS来检测当前的相机位置,特定地作为对被摄体拍照时的拍摄位置。
此外,中央处理单元20通过内部定时器来对当前的日期计时。然后,如果释放信号被输入,则中央处理单元20检测输入释放信号时的日期,并且将检测到的该日期作为被摄体被拍照时的拍摄日期。
因此,当生成图像文件时,中央处理单元20将文件标识信息、表示拍摄位置的拍摄位置信息、表示拍摄日期的拍摄日期信息等作为与照片图像有关的各种信息存储在经压缩图像数据的头部部分的头部数据中。
因此,在生成图像文件之后,中央处理单元20将所生成的该图像文件与缩略图像数据一起发送给记录设备33,并且以相关联的方式将图像文件与缩略图像数据记录在该记录设备33中。因此,中央处理单元20允许用户对被摄体拍照,从而作为其结果获得的照片图像数据可被记录为图像文件。
顺便提及,记录设备33是约数千兆字节到数万兆字节的非易失性存储器,并且被预先装在数字照相机1中,或者可拆卸地被设置到数字照相机1,例如存储卡。
此外,除了记录设备33以外,诸如EEPROM(电可擦除可编程只读存储器)或MRAM(磁阻式随机存取存储器)等的非易失性存储器34被连接到中央处理单元20。
接下来,中央处理单元20将表示由用户设置的与各种设置项有关的设置内容的各种信息、在断电后必须保存的信息等存储在该非易失性存储器34中。
另一方面,当例如通过按下操作单元23的再现按钮10或者通过对触摸面板7A的敲击操作而指示将操作模式切换到再现模式时,则中央处理单元20在再现模式下操作。
在再现模式时,中央处理单元20例如从记录设备33中读出存储在其中的图像文件中的拍摄日期最近的图像文件。然后,中央处理单元20从该图像文件中取出经压缩图像数据,以将其发送给数字处理单元31。
此时,在中央处理单元20的控制下,数字处理单元31使从该中央处理单元20提供来的压缩图像数据经过解压缩解码处理以生成原始的照片图像数据。然后,数字处理单元31将该照片图像数据发送给液晶面板7B,从而基于照片图像数据将照片图像显示在该液晶面板7B上。
以这种方式,中央处理单元20将通过对被摄体拍照所生成的照片图像显示在液晶面板7B上,从而允许用户观看该照片图像。
顺便提及,此时,中央处理单元20生成用于呈现按钮和图标等的呈现图像数据,并且将所生成的该呈现图像数据发送给数字处理单元31。相应地,如果从中央处理单元20提供来呈现图像数据,则数字处理单元31将该呈现图像数据与照片图像数据进行合成以生成合成图像数据,并且将其发送给液晶面板7B。从而,数字处理单元31不仅可以在液晶面板7B上显示照片图像,而且可以以重叠在该照片图像上的方式来显示按钮或图标等。
此外,在再现模式时,如果例如通过对触摸面板7A的敲击操作而指示切换照片图像的显示,则中央处理单元20从记录设备33读出拍摄日期比当前显示的照片图像早的照片图像的图像文件。然后,中央处理单元20从该图像文件中取出压缩图像数据,以将其发送给数字处理单元31。
此时,在中央处理单元20的控制下,数字处理单元31以与上述相同的方式使压缩图像数据经过解压缩解码处理,以生成原始照片图像数据,并且将所生成的该照片图像数据发送给液晶面板7B。
从而,数字处理单元31切换要显示在液晶面板7B上的照片图像。从而,中央处理单元20通过切换要显示在液晶面板7B上的照片图像来使得用户观看照片图像。
1-3.将图像相关信息登记到搜索用数据库的处理
接下来,将描述图像相关信息登记处理,用于将与照片图像有关的图像相关信息登记在搜索用数据库中以便检测照片图像。
在拍摄模式时,当生成照片图像数据时,数字处理单元31以与上述相同的方式基于该照片图像生成压缩图像数据和缩略图像数据。然后,数字处理单元31将基于该照片图像数据生成的压缩图像数据和缩略图像数据发送给中央处理单元20。
然而,数字处理单元31保存通过预先分析大量脸的图像并基于其分析结果进行学习而获得的脸特征信息,其表示用于检测基准的脸的特征(脸的形状和颜色、眼睛、鼻子、嘴巴和眉毛的形状等)。顺便提及,在下面的描述中,用于检测基准的脸的特征也称为“基准脸特征”,并且表示基准脸特征的脸特征信息也称为“基准脸特征信息”。
因此,在生成了照片图像数据,随后基于该照片图像数据生成了压缩图像数据和缩略图像数据之后,数字处理单元31基于来照片图像数据使用基准脸特征信息来对照片图像执行脸检测处理。
作为其结果,在基于该照片图像数据检测到照片图像内的单个人的脸或多个人的脸之后,数字处理单元31检测在该照片图像内检测到的单个脸部或多个脸部(下面也称为“脸部”)的(一个或多个)大小和(一个或多个)位置。然后,数字处理单元31还将该照片图像数据以及表示单个脸部或多个脸部的(一个或多个)大小和(一个或多个)位置的脸检测信息发送给中央处理单元20。
在如上所述已经从数字处理单元31提供来压缩图像数据和缩略图像数据的情况中,中央处理单元20基于该压缩图像数据生成图像文件。然后,中央处理单元20以相关联的方式将该图像文件和缩略图像数据记录在记录设备33中。
此外,接下来,在已从数字处理单元31提供来照片图像数据和脸检测信息的情况中,基于该脸检测信息,中央处理单元20基于照片图像数据确定照片图像内的单个脸部或多个脸部,以分析所确定的这些(一个或多个)脸部。
因此,中央处理单元20检测在照片图像中反映出的单个脸或多个脸的特征(脸的形状和颜色、眼睛、鼻子、嘴巴和眉毛的形状等)以用于登记到搜索用数据库。
顺便提及,在下面的描述中,从反映在照片图像中的脸检测到的用于登记到搜索用数据库的特征也称为“所登记脸特征”,表示该所登记脸特征的脸特征信息也称为“所登记脸特征信息”。
如图3所示,中央处理单元20将所登记脸特征信息等作为图像相关信息例如登记到记录设备33中,以构建搜索用数据库DB以便检测照片图像。
因此,在检测到单个脸或多个脸的所登记脸部特征之后,中央处理单元20将表示检测到的所登记脸特征的所登记脸特征信息与已登记在搜索用数据库DB中的所登记脸特征信息相比较。
作为其结果,当表示此时检测到的所登记脸特征的所登记脸特征信息尚未被登记在搜索用数据库DB中时,中央处理单元20生成人物标识信息,从而该脸的人可个体地被标识。
顺便提及,人物标识信息不是用于确定人是谁的诸如姓名之类的信息,而是被生成来简单地区分该人与其它人,例如作为顺序地附接到各个人的数字。
此外,中央处理单元20从照片图像裁剪出该人的脸部,作为诸如圆形之类的预定形状的脸图像。此外,中央处理单元20使脸图像经过例如缩小处理(其中,对像素进行间拔)以生成表示该人的脸的图标(下面也称为“脸图标”)。
然后,中央处理单元20使得人物标识信息被记录在记录设备33中,从而将该人物标识信息登记在搜索用数据库DB中。此外,中央处理单元20使得脸图标、文件标识信息、拍摄日期信息和拍摄位置信息以及所登记脸特征信息被记录在记录设备33中,从而将这些以与人物标识信息相关联的方式登记在搜索用数据库DB中。
以这种方式,每当新的人被拍照摄取时,中央处理单元20将拍照摄取的该新的人作为人物标识信息登记在搜索用数据库DB中。此外,每当新的人被拍照摄取时,中央处理单元20将表示该人的所登记脸特征的所登记脸特征信息和表示该人的图标以与该人的人物标识信息相关联的方式登记在搜索用数据库DB中。
此外,每当新的人被拍照摄取时,中央处理单元20还将在该照片拍摄时生成的图像文件的文件标识信息以及表示该人的拍摄日期和拍摄地点的拍摄日期信息和拍摄位置信息以与人物标识信息相关联的方式登记在搜索用数据库DB中。顺便提及,此时,中央处理单元20将搜索用数据库DB中的一组文件标识信息、拍摄日期信息和拍摄位置信息相互联系起来。
另一方面,通过中央处理单元20,当此时检测到的所登记脸特征作为所登记脸特征信息已经被登记在搜索用数据库DB中时,与该所登记脸特征相对应的人物标识信息也已经被登记在搜索用数据库DB中。
此外,通过中央处理单元20,当此时检测到的所登记脸特征作为所登记脸特征信息已被登记在搜索用数据库DB中时,与该所登记脸特征相对应的脸图标也已经被登记在搜索用数据库DB中。
因此,当根据对脸的检测生成的所登记脸特征信息已经被登记在搜索用数据库DB中时,此时,中央处理单元20不会特定地生成该脸的人的人物标识信息。另外,此时,中央处理单元20不会特定地生成表示该人的脸的脸图标。
因此,中央处理单元20这次使得通过对该人拍照所生成的图像文件的文件标识信息被记录在记录设备33中,从而将该文件标识信息以另外地与该人的人物标识信息相联系的方式登记在搜索用数据库DB中
此外,中央处理单元20这次使得表示该人被拍照摄取时的拍摄日期的拍摄日期信息被记录在记录设备33中,从而将该拍摄日期信息以另外地与该人的人物标识信息相联系的方式登记在搜索用数据库DB中
另外,中央处理单元20这次使得表示该人被拍照摄取时的拍摄地点的拍摄位置信息被记录在记录设备33中,从而将该拍摄位置信息以另外地与该人的人物标识信息相联系的方式登记在搜索用数据库DB中。
因此,当同一人被拍照摄取两次或更多次时,在每次的情况中,中央处理单元20将图像文件的文件标识信息、表示拍摄日期和拍摄地点的拍摄日期信息和拍摄位置信息以与所登记人物标识信息相联系的方式登记在搜索用数据库DB中。
顺便提及,当同一人一再地被拍照摄取时,中央处理单元20针对每次照片拍摄将搜索用数据库DB中的一组文件标识信息、拍摄日期信息和拍摄位置信息相互联系起来。
此外,当在一张照片图像中反映出多个人的脸时,中央处理单元20将同一文件标识信息、拍摄日期信息和拍摄位置信息以与多人中的每个人的人物标识信息相联系的方式登记在搜索用数据库DB中。
顺便提及,当在一张照片图像中反映出多个人的脸时,中央处理单元20基于脸检测信息和脸部的分析结果来检测彼此脸的距离、彼此脸的方向、脸是否是笑脸等等。然后,基于其检测结果,中央处理单元20检测照片图像中所反映的多个人的亲密度。
实际上,对于中央处理单元20来说,照片图像中所反映的人的脸的距离越近,该人的亲密度越高,并且该距离越远,该人的亲密度越低。
此外,对于中央处理单元20来说,在照片图像中反映出的人的脸相互朝向伙伴的脸并且都是笑脸的情况中,该人的亲密度高。另一方面,对于中央处理单元20来说,即使在照片图像中反映出的人的脸相互朝向伙伴的脸的情况中,当仅一个人具有笑脸而另一人没有笑脸时,该人的亲密度低,并且当两人都没有笑脸时,亲密度甚至更低。
此外,对于中央处理单元20来说,即使在照片图像中反映出的人的脸之一朝向伙伴的脸的情况中,当另一脸朝向与伙伴不同的另一方向时,该人的亲密度低。此外,对于中央处理单元20来说,当照片图像中反映出的人的脸相互朝向与伙伴的脸不同的方向时,该人的亲密度甚至更低。
在基于多种检测基准检测到照片图像中所反映出的多个人的亲密度之后,中央处理单元20将该亲密度与预定阈值相比较。此外,基于其比较结果,中央处理单元20生成用于将具有等于或大于阈值的亲密度的人联系起来的亲密联系信息。顺便提及,中央处理单元20针对每个人生成亲密联系信息,该亲密联系信息表示了与该人具有高亲密度的伙伴的人物标识信息。
顺便提及,中央处理单元20将每个人的亲密联系信息记录在记录设备33中,从而将该亲密联系信息以与该人的人物标识信息相关联的方式登记在搜索用数据库DB中。
以这种方式,每当照片拍摄被执行时,中央处理单元20判断在该照片图像中是否反映了多个人的脸。然后,当在该照片图像中反映出多个人的脸时,中央处理单元20检测该人的亲密度,从而将搜索用数据库DB中具有高亲密度的人联系起来。
顺便提及,当基于照片图像数据未在照片图像中反映人的脸时,数字处理单元31仅将基于该照片图像数据生成的压缩图像数据和缩略图像数据发送给中央处理单元20。
因此,当仅从数字处理单元31提供来压缩图像数据和缩略图像数据时,中央处理单元20生成如上所述的图像文件,并且以关联方式将该图像文件和缩略图像数据记录在记录设备33中。
此外,此时,中央处理单元20将在此次照片拍摄时生成的图像文件的文件标识信息与表示此次照片拍摄的拍摄日期和拍摄地点的拍摄日期信息和拍摄位置信息一起,作为用于登记的信息记录在记录设备33中。因此,中央处理单元20以相互关联的方式将在此次照片拍摄时获得的一组文件标识信息、拍摄日期信息和拍摄位置信息登记在搜索用数据库DB中。
以这种方式,当人以外的被摄体被拍照时,中央处理单元20不将与人有关的人物标识信息和所登记脸特征信息等登记在搜索用数据库DB中,而登记此次照片拍摄获得的文件标识信息、拍摄日期信息和拍摄位置信息。
除此以外,当第一次执行照片拍摄时,不管该照片拍摄是否是被摄体(不管是人、风景等),中央处理单元20假设某种事件已被执行以生成事件标识信息,从而该事件可个体地被标识。
顺便提及,事件标识信息不是用于确定事件是什么的诸如事件名称之类的信息,而是被生成为例如顺序地附接到各个事件的数字,以简单地将该事件与其它事件相区分。
然后,中央处理单元20使得该事件标识信息被记录在记录设备33中,从而将该事件标识信息以与此次照片拍摄时获得的一组文件标识信息、拍摄日期信息和拍摄位置信息相关联的方式登记在搜索用数据库DB中。
此外,当完成了将事件标识信息登记在搜索用数据库DB中时,中央处理单元20将此次获得的拍摄日期信息、摄位置信息和事件标识信息记录在例如记录设备33中,不作为用于登记的信息而作为用于事件确定的信息。
在此状态中,当执行了第二次照片拍摄时,中央处理单元20从记录设备33中读出用于事件确定的信息(上次,即第一次照片拍摄时获得的拍摄日期信息、摄位置信息和事件标识信息)。
然后,基于此次照片拍摄的拍摄地点和上次照片拍摄的拍摄地点,中央处理单元20判断此次拍摄位置是否包括在以上次拍摄位置为中心并以预定的第一距离为半径的圆形区域中。
此外,基于此次照片拍摄的拍摄日期和上次照片拍摄的拍摄日期,中央处理单元20还判断从上次拍摄日期到此次拍摄日期经过的时间是否包括在预定的第一时间内。
顺便提及,在下面的描述中,以上次拍摄位置为中心并以预定的第一距离为半径的圆形区域也将称为上次拍摄区域。此外,在下面的描述中,从上次拍摄日期到此次拍摄日期经过的时间也将称为拍摄暂停经过时间。顺便提及,上面的第一时间是任意选择的,例如数分钟到数十分钟。
顺便提及,当在诸如室外河边位置、体育场等之类的周围几乎不存在扰乱与GPS人造卫星通信的障碍时,中央处理单元20可以高精度地检测相机位置和拍摄位置。
然而,当在诸如室内、高楼之间的狭谷之类的周围存在扰乱与GPS人造卫星通信的障碍时,在中央处理单元20中,相机位置和拍摄位置的检测精确度降低,因此,可能对该相机位置和拍摄位置造成大的误差。
因此,规定上次拍摄区域的上面的第一距离从数米到数十千米中任意选择,从而可以在上面的第一时间内步行地移动数字相机1。
即是说,在相机位置或拍摄位置改变了数字相机1在第一时间期间未能移动的距离,并且因此对此相机位置和拍摄位置产生了大的误差的情况中,第一距离被选择以便根据与第一时间的组合来确定这种情况。
当此次拍摄位置包括在上次拍摄区域中并且拍摄暂停经过时间也包括在第一时间中时,中央处理单元20判定此次照片拍摄是以与上次照片拍摄事件相同的事件被执行的。
此外,当此次拍摄位置未包括在上次拍摄区域中但拍摄暂停经过时间包括在第一时间中时,中央处理单元20假设对拍摄位置产生了误差,并且判定此次照片拍摄是以与上次照片拍摄事件相同的事件被执行的。
另一方面,当此次拍摄位置未包括在上次拍摄区域中并且拍摄暂停经过时间也比第一时间长时,中央处理单元20判定此次照片拍摄是以与上次照片拍摄事件不同的事件被执行的。
此外,当此次拍摄位置包括在上次拍摄区域中但是拍摄暂停经过时间比第一时间长时,此时,中央处理单元20也判定此次照片拍摄是以与上次照片拍摄事件不同的事件被执行的。
在判定此次照片拍摄是以与上次照片拍摄事件相同的事件被执行的之后,中央处理单元20将与上次照片拍摄相同的事件标识信息(此次从记录设备33读出的事件标识信息)记录在记录设备33中作为用于登记的信息。
因此,中央处理单元20将与上次照片拍摄相同的事件标识信息以与此次照片拍摄时获得的一组文件标识信息、拍摄日期信息和拍摄位置信息相关联的方式登记在搜索用数据库DB中。
当完成了将事件标识信息登记在搜索用数据库DB中之后,中央处理单元20把表示此次的拍摄日期和拍摄地点的拍摄日期信息和拍摄位置信息、以及此次的事件标识信息当作用于事件确定的新信息。
然后,中央处理单元20将用于事件确定的信息(此次的拍摄日期信息、拍摄位置信息和事件标识信息)发送给记录设备33,并且将以改写方式将其记录在所记录的用于事件确定的信息上。
另一方面,在判定此次照片拍摄是以与上次照片拍摄不同的事件被执行的之后,中央处理单元20生成新的事件标识信息,从而该新的事件可以个体地地被标识。
然后,中央处理单元20使得新生成的事件标识信息被记录在记录设备33中,从而将该事件标识信息以与在此次照片拍摄时获得的一组文件标识信息、拍摄日期信息和拍摄位置信息相关联的方式登记在搜索用数据库DB中。
此外,在完成了将事件标识信息登记到搜索用数据库DB之后,中央处理单元20将表示此次拍摄日期和拍摄地点的拍摄日期信息和拍摄位置信息以及新生成的事件标识信息当作新的用于事件确定的信息。
然后,中央处理单元20将该用于事件确定的信息(此次的拍摄日期信息和拍摄位置信息以及新生成的事件标识信息)发送给记录设备33,并且以改写的方式将其记录在已记录的用于事件确定的信息上。
当在第二次照片拍摄之后又执行了照片拍摄时,在每次的情况中,中央处理单元20以与第二次照片拍摄相同的方式从记录设备33读出上次记录的用于事件确定的信息(拍摄日期信息、拍摄位置信息以及事件标识信息)。
然后,基于此次照片拍摄的拍摄地点和拍摄日期,以及上次照片拍摄的拍摄地点和拍摄日期,中央处理单元20判断此次照片拍摄是否是以与上次照片拍摄相同的事件执行的。
作为其结果,在此次照片拍摄是以与上次照片拍摄相同的事件被执行的情况中,中央处理单元20将上次的事件标识信息当作此次的事件标识信息。然后,中央处理单元20将此次事件标识信息(实际上是上次的事件标识信息)以与在此次照片拍摄时获得的一组文件标识信息、拍摄日期信息和拍摄位置信息相关联的方式登记在搜索用数据库DB中。
此外,中央处理单元20将此次的拍摄日期信息和拍摄位置信息以及此次的事件标识信息记录在记录设备33中作为新的用于事件确定的信息,从而更新上次记录的用于事件确定的信息。
另一方面,在此次照片拍摄是以与上次照片拍摄不同的事件被执行的情况中,中央处理单元20生成新的事件标识信息。然后,中央处理单元20将新生成的该事件标识信息以与在此次照片拍摄时获得的一组文件标识信息、拍摄日期信息和拍摄位置信息相关联的方式登记在搜索用数据库DB中。
此外,中央处理单元20将此次的拍摄日期信息和拍摄位置信息以及新的事件标识信息记录在记录设备33中作为新的用于事件确定的信息,从而更新上次记录的用于事件确定的信息。
因此,中央处理单元20被配置为使得在执行照片拍摄时,登记在搜索用数据库DB中的照片图像可以被分类为各个事件,例如执行照片拍摄的聚会、运动会、在附近的散布等等。
顺便提及,当从拍摄模式进入另一模式之后又返回拍摄模式以执行照片拍摄之后,此时,中央处理单元20从记录设备33读出在上次时(在转换到另一模式之前在拍摄模式中的最后一次照片拍摄时)记录的用于事件确定的信息。顺便提及,另一模式是再现模式、用于设置拍摄条件的设置模式等。
现在,在从拍摄模式断电后再次打开电源以进入用于照片拍摄的拍摄模式之后,中央处理单元20也从记录设备33读出在上次时(在断电之前在拍摄模式中的最后一次照片拍摄时)记录的用于事件确定的信息。
然后,在由另一模式进入拍摄模式或打开电源,并且执行照片拍摄之后,中央处理单元20以与上述相同的方式利用其用于事件确定的信息来确定事件,并且另外地将事件标识信息登记在搜索用数据库DB中。
因此,如上所述,即使临时结束了拍摄模式,当在该结束之前和之后的照片拍摄是以同一事件被执行的时,中央处理单元20可以精确地判定该事件以便将在该结束之前和之后获得的照片图像分类到同一事件中。
以这种方式,每次执行照片拍摄时,中央处理单元20适当地将人物标识信息、所登记脸特征信息、脸图标和亲密联系信息作为图像相关信息登记在搜索用数据库DB中,以更新搜索用数据库DB的内容。
此外,每次执行照片拍摄时,中央处理单元20还将文件标识信息、拍摄日期信息、拍摄位置信息和事件标识信息作为图像相关信息登记在搜索用数据库DB中,以更新搜索用数据库DB的内容。
1-4.拍摄模式时的搜索键呈现处理
接下来,将描述搜索键呈现处理,用于实现在拍摄模式时根据拍摄状态来呈现用于照片图像搜索的搜索键的搜索键功能。尽管下面将描述细节,然而中央处理单元20被配置为在拍摄模式中时,根据相机位置来呈现拍摄状态呈现图像中所反映的人的脸以及用于照片图像搜索的搜索键。
实际上,中央处理单元20被配置为利用表示人脸的脸图标以及表示地图上的相机位置的相机位置图标来作为这种搜索键。然而,中央处理单元20允许用户在预定的设置画面上选择是否在拍摄模式时执行搜索键呈现处理,并且对此进行设置。
此外,在用户选择了在拍摄模式时执行搜索键呈现处理的情况中,中央处理单元20允许用户选择脸图标和相机位置图标中的至少一个作为实际上将呈现在设置画面上的搜索键,并对此进行设置。
因此,首先,下面描述在如下状态中将执行的搜索键呈现处理,在该状态中,在拍摄模式时搜索键呈现功能被设置为通过用于呈现脸图标和相机位置图标两者的第一设置内容来实现。
接下来,将描述在如下状态中执行搜索键呈现处理,在该状态中,在拍摄模式时搜索键呈现功能被设置为通过用于仅呈现脸图标而不呈现相机位置图标的第二设置内容来实现。
然后,将描述在如下状态中执行搜索键呈现处理,在该状态中,在拍摄模式时搜索键呈现功能被设置为通过用于仅呈现相机位置图标而不呈现脸图标的第三设置内容来实现。
首先,在搜索键呈现功能被设置为通过第一设置内容来实现的状态中在进入拍摄模式之后,中央处理单元20在拍摄模式期间根据该第一设置内容控制数字处理单元31。
此外,中央处理单元20执行第一相机位置检测处理,用于在进入拍摄模式时利用GPS检测相机位置。另外,中央处理单元20在拍摄模式期间还在第一相机位置检测流程之后定期地(例如,以五分钟间隔,而不管释放信号的输入定时如何)执行相机位置检测处理。
实际上,在执行了相机位置检测处理之后,中央处理单元20经由GPS接收器32与用于GPS的人造卫星通信,并且在短时间内以预定次数连续地检测相机位置。然后,中央处理单元20例如以循环方式来检测多次检测到的相机位置之间的距离。
作为其结果,当多个相机位置几乎相匹配时(即,多个相机位置之间的任一距离等于或短于预定第二距离),中央处理单元20判定已精确地检测到相机位置。在此情况中,中央处理单元20检测这些多个相机位置的中间位置作为数字照相机1的当前相机位置。
然而,当多个相机位置变化时(即,多个相机位置之间的距离中的至少一个距离长于第二距离时),中央处理单元20判定相机位置的检测精确度恶化,因此,未精确地检测到相机位置。在此情况中,中央处理单元20暂停相机位置检测处理(即,对当前相机位置的检测)。
以这种方式,中央处理单元20在拍摄模式期间定期执行相机位置检测处理,但是仅在相机位置的检测精确度较高时,检测当前相机位置。
在每次检测到了当前相机位置之后,中央处理单元20执行用于生成表示地图上的相机位置的相机位置图标的图标生成处理。在此情况中,当未生成相机位置图标时,中央处理单元20例如设置以此次检测到的当前相机位置为中心、具有预定面积的四边形搜寻区域。
顺便提及,对于该搜寻区域,例如,经过当前相机位置的对角线的长度是从大约数千米和数百千米之间任意选择的,并且宽度是基于对角线的长度来确定的。
然后,中央处理单元20将该搜寻区域与登记在搜索用数据库DB中的拍摄位置信息相比较。作为其结果,当从搜索用数据库DB中的所登记拍摄位置信息中检测到指示搜寻区域内的拍摄位置的拍摄位置信息时,中央处理单元20将该搜寻区域设置为可以根据当前相机位置检测到照片图像的搜索区域。
即是说,在可以检测到搜寻区域内的拍摄位置的情况中,通过在该搜寻区域内拍摄图像而获得的照片图像已经被登记在搜索用数据库DB中,并且照片图像可在该搜寻区域内检测到,因此,中央处理单元20将该搜寻区域设置为搜索区域。
现在,例如,地图图像的地图图像数据已经被存储在记录设备33中。因此,在设置搜索区域时,中央处理单元20读出地图图像数据内与搜索区域相当的一部分作为区域地图图像数据。
然后,中央处理单元20例如基于该区域地图图像数据,从搜索区域地图图像中裁剪出以当前相机位置为中心的圆形的部分地图图像。此外,中央处理单元20将该部分地图图像与指示当前相机位置的预定标记的图像进行合成,并且随后例如使其经过用于间拔像素的缩小处理。因此,中央处理单元20生成相机位置图标,该相机位置图标指示该部分地图图像上的当前相机位置,并且可被用作用于照片图像搜索的搜索键。
此外,在生成了相机位置图标之后,中央处理单元20将该相机位置图标、指示搜索区域的区域信息、区域地图图像数据以及指示当前相机位置的相机位置信息以相关联的方式记录在例如RAM 22中。
然而,在未在搜寻区域内检测到拍摄位置的情况中(即,指示搜寻区域内的拍摄位置的拍摄位置信息尚未被登记在搜索用数据库DB中),中央处理单元20暂停此时的图标生成处理。
因此,在相机位置图标未被生成的状态中执行图标生成处理之后,中央处理单元20根据对搜寻区域内的拍摄位置的检测来设置搜索区域,并且还生成相机位置图标。
顺便提及,当在相机位置图标已被生成的状态中执行图标生成处理之后,中央处理单元20从RAM 22中读出与相机位置图标等一起记录的相机位置信息(下面也称为“过去的相机位置信息”)。
然后,中央处理单元20检测此时检测到的当前相机位置与由过去的相机位置信息指示的相机位置(下面也称为“过去的相机位置)之间的相机移动距离,并且将检测到的此相机移动距离与预定第三距离相比较。顺便提及,第三距离例如是从大约数千米和数十千米之间任意选择的。
作为其结果,当相机移动距离等于或短于第三距离,并且当前相机位置离过去的相机位置不是很远时,中央处理单元20暂停图标生成处理。
另一方面,当相机移动距离长于第三距离,并且当前相机位置离过去的相机位置较远时,中央处理单元20以与上述相同的方式来设置以当前相机位置为中心的搜寻区域。
然后,中央处理单元20将该搜寻区域与搜索用数据库DB中所登记的拍摄位置信息相比较。作为其结果,当从搜索用数据库DB中的所登记拍摄位置信息中检测到指示搜寻区域内的拍摄位置的拍摄位置信息之后,中央处理单元20将此搜寻区域设置为新的搜索区域。
此外,中央处理单元20以与上述相同的方式从记录设备33中读出地图图像数据中与新的搜索区域相当的一部分来作为新的区域地图图像数据。然后,中央处理单元20以与上述相同的方式再次基于该新的区域地图图像数据来生成指示地图上的当前相机位置的相机位置图标。
此外,在再次生成了相机位置图标之后,中央处理单元20将该相机位置图标与此时获得的区域信息、区域地图图像数据和相机位置信息一起记录在RAM 22中。以这种方式,中央处理单元20将要记录在RAM 22中的相机位置图标、区域信息、区域地图图像数据和相机位置信息更新为最新的。
然而,在此情况中,同样,当未能在新的搜寻区域内检测到拍摄位置(即,指示搜寻区域内的拍摄位置的拍摄位置信息尚未被登记在搜索用数据库DB中)时,中央处理单元20暂停此时的图标生成处理。
因此,当在相机位置图标已被生成的状态中执行图标生成处理之后,中央处理单元20根据在新的搜寻区域内对拍摄位置的检测来更新搜索区域和相机位置图标。
另一方面,当进入拍摄模式时,在中央处理单元20的控制下,每当单位图像数据被生成时,数字处理单元31还利用基准脸特征信息来对该单位图像数据执行脸检测处理。
作为执行脸检测处理的结果,当在基于单位图像数据的单位图像内检测到单个人的脸部或多个人的脸部时,数字处理单元31还检测在该单位图像内检测到的单个人的脸部或多个人的脸部的(一个或多个)大小以及(一个或多个)位置。
然后,当检测到基于单位图像数据的单位图像内的单个人的脸部或多个人的脸部的(一个或多个)大小以及(一个或多个)位置之后,数字处理单元31将该单位图像数据与表示单个人的脸部或多个人的脸部的(一个或多个)大小以及(一个或多个)位置的脸检测信息一起发送给中央处理单元20。
中央处理单元20根据数字处理单元31的脸检测处理来执行用于检测脸图标的图标检测处理。因此,每当从数字处理单元31提供来脸检测信息和单位图像数据时,基于该脸检测信息,中央处理单元20确定基于单位图像数据的单位图像内的单个人的脸部或多个人的脸部,并且分析所确定的(一个或多个)脸部。
因此,中央处理单元20检测单位图像中所反映出的单个人的脸部或多个人的脸部的特征(脸的形状和颜色、眼睛、鼻子、嘴巴和眉毛的形状等)。此外,每当从数字处理单元31提供来脸检测信息和单位图像数据时,中央处理单元20顺序地比较检测到的单个人的脸或多个人的脸的特征。
作为其结果,当从在预定的第二时间期间连续的预定数目的单位图像中持续地检测到同一人的脸的特征之后,中央处理单元20将检测到的该脸的特征确定为用于与搜索用数据库DB内所登记的脸特征(即,所登记脸特征信息)相比较的特征。
顺便提及,第二时间例如是从十几秒到数十秒中任意选择的。此外,在下面的描述中,从在预定第二时间中连续的预定数目个单位图像持续地检测到的同一人的脸的特征(即,被确定为用于与所登记脸特征相比较的脸的特征)也称为比较脸特征。
即是说,被连续检测到脸的人例如是家人或熟人,并且较长时间地被反映在拍摄状态呈现图像中以确定构图等,并且具有较高可能性被拍照。此外,在被连续检测到脸的人具有较高可能性此次被拍照的情况中,被连续检测到脸的该人也具有如下的高可能性:他/她的照片在过去被摄取。
因此,中央处理单元20排除通过穿越拍摄范围等而被瞬时地反映在拍摄状态呈现图像中的人的脸,并且较长时间被反映在该拍摄状态呈现图像中的人的脸的比较脸特征被用于与所登记脸特征相比较。
当在图标检测处理中获得了第一比较脸特征之后,中央处理单元20将该比较脸特征与搜索用数据库DB内的所登记脸特征相比较。作为其结果,当从搜索用数据库DB内的所登记脸特征中检测到与比较脸特征相匹配的所登记脸特征之后,中央处理单元20将比较脸特征设置为搜索用脸特征,从而照片图像可被检测。
即是说,当检测到与比较脸特征相匹配的所登记脸特征之后,中央处理单元20已经将通过以拍照方式摄取具有比较脸特征的脸的人获得的照片图像登记在搜索用数据库DB中,从而可以通过比较脸特征来搜索照片图像。因此,中央处理单元20将比较脸特征设置为用于照片图像搜索的搜索用脸特征。
在将比较脸特征设置为搜索用脸特征之后,中央处理单元20检测搜索用数据库DB内与搜索用脸特征相匹配的所登记脸特征多对应的人物标识信息和脸图标。此外,中央处理单元20从搜索用数据库DB(记录设备33)中读出检测到的该脸图标来作为用于照片图像搜索的搜索键。
即是说,中央处理单元20从搜索用数据库DB(记录设备33)中读出指示被反映在此时显示的拍摄状态呈现图像中较长时间的人的脸的脸图标,来作为用于照片图像搜索的搜索键。
而且,此时,中央处理单元20还从搜索用数据库DB(记录设备33)中读出与脸图标一起检测到的人物标识信息。然后,中央处理单元20将表示搜索用脸特征的搜索用脸特征信息、脸图标和人物标识信息以相关联的方式记录在例如RAM 22中。
然而,在尽管获得了比较脸特征但是不存在与该比较脸特征相匹配的所登记脸特征(表示与比较脸特征相匹配的所登记脸特征的所登记脸特征信息未被登记在搜索用数据库DB中)的情况中,中央处理单元20不将该比较脸特征设置为搜索用脸特征。然后,中央处理单元20不执行该比较脸特征应当被用作搜索用脸特征的后续处理。
此外,当在图标检测处理中检测到第二比较脸特征之后,中央处理单元20将第二比较脸特征与由记录在RAM 22中的搜索用脸特征信息指示的搜索用脸特征相比较。
作为其结果,当第二比较脸特征与由记录在RAM 22中的搜索用脸特征信息指示的搜索用脸特征不同时,中央处理单元20随后执行与上面的第一比较脸特征被检测到的情况相同的处理。
另一方面,当第二比较脸特征与由记录在RAM 22中的搜索用脸特征信息指示的搜索用脸特征相匹配时,中央处理单元20不将该第二比较脸特征设置为搜索用脸特征。然后,中央处理单元20不执行该第二比较脸特征应当被用作搜索用脸特征的后续处理。
此外,在每次检测到第二比较脸特征之后进一步检测到若干个比较脸特征时,中央处理单元20将检测到的该比较脸特征与该时间点时记录在RAM 22中的所有搜索用脸特征信息所指示的搜索用脸特征相比较。
作为其结果,当在检测到第二比较脸特征之后进一步检测到的比较脸特征与记录在RAM 22中的搜索用脸特征信息之一所指示的搜索用脸特征不同时,中央处理单元20随后执行与上面的第一比较脸特征被检测到的情况相同的处理。
另一方面,当在检测到第二比较脸特征之后进一步检测到的比较脸特征与记录在RAM 22中的搜索用脸特征信息之一所指示的搜索用脸特征相匹配时,中央处理单元20不将进一步检测到的比较脸特征作为搜索用脸特征。然后,中央处理单元20不执行在检测到第二比较脸特征之后进一步检测到的比较脸特征应当被用作搜索用脸特征的后续处理。
以这种方式,中央处理单元20根据被反映在拍摄状态呈现图像中较长时间的人的脸的比较脸特征的检测,来将这些比较脸特征适当地设置为搜索用脸特征,并且还将指示该脸的脸图标检测作为用于照片图像搜索的搜索键。
顺便提及,成为用于呈现相机位置图标以及脸图标的图标呈现图像数据的来源的图标布局图像的图标布局图像数据被预先记录在非易失性存储器34中,从而相机位置图标可与脸图标一起被布置。
因此,在进入拍摄模式之后,直到相机位置图标或脸图标被获得作为如上所述的搜索键,中央处理单元20才从非易失性存储器34中读出图标布局图像数据。然后,中央处理单元20将该图标布局图像数据发送给数字处理单元31。
在进入拍摄模式并且从中央处理单元20提供来图标布局图像数据的情况中,每当基于拍摄数据生成了单位图像数据时,数字处理单元31将所生成的该单位图像数据与图标布局图像数据进行合成以生成合成图像数据。
然后,数字处理单元31顺序地将合成图像数据发送给液晶面板7B。从而,如图4所示,数字处理单元31将拍摄状态呈现图像40显示在液晶面板7B上,并且还例如以重叠在该拍摄状态呈现图像40的图像水平方向上的右边部分上的方式来在图像的垂直方向上显示长条形图标布局图像41。
顺便提及,图标布局图像41被生成为使得作为背景的拍摄状态呈现图像40的右边部分可透过例如以单色(例如白色或灰色)绘制的网眼图案或圆点花纹图案而被看到。
因此,中央处理单元20以重叠在拍摄状态呈现图像40上的方式来显示图标布局图像41,但是通过尽可能地显示该拍摄状态呈现图像40中的图标布局图像41的重叠部分来防止拍摄状态不能被确认。
在例如生成了用作搜索键的相机位置图标之后仅图标布局图像41显示在拍摄状态呈现图像40上的状态中,中央处理单元20将相机位置图标与图标布局图像数据进行合成以生成图标呈现图像数据。然后,中央处理单元20将图标呈现图像数据发送给数字处理单元31。
在从中央处理单元20提供来图标呈现图像数据的情况中,随后,每当单位图像数据被生成时,数字处理单元31用该单位图像数据取代图标布局图像数据来与图标呈现图像数据合成以生成合成图像数据。然后,数字处理单元31将该合成图像数据发送给液晶面板7B。
因此,如图5所示,数字处理单元31将拍摄状态呈现图像40显示在液晶面板7B上,并且还以重叠在该拍摄状态呈现图像40上的方式来显示图标呈现图像42。
在此情况中,图标呈现图像42包括以重叠在拍摄状态呈现图像40的右边部分上的方式显示的图标布局图像41,并且用作用于照片图像搜索的搜索键的相机位置图标43被布置并显示在该图标布局图像41上。
此外,在生成了新的相机位置图标之后,中央处理单元20将该新的相机位置图标与图标布局图像数据进行合成以再次生成图标呈现图像数据。
以这种方式,在更新了图标呈现图像数据的内容之后,中央处理单元20将内容已被更新的图标呈现图像数据发送给数字处理单元31。
当从中央处理单元20提供来内容已被更新的图标呈现图像数据时,数字处理单元31将用于生成合成图像数据的图标呈现图像数据从更新前的切换为更新后的。
即是说,在图标呈现图像数据已被更新的情况中,随后,每当单位图像数据被生成时,数字处理单元31用更新后的图标呈现图像数据来取代更新前的图标呈现图像数据来与该单位图像数据合成,以生成新的合成图像数据。然后,数字处理单元31顺序将其新的合成图像数据发送给液晶面板7B。
从而,数字处理单元31将拍摄状态呈现图像40显示在液晶面板7B上,并且还将图标呈现图像42重叠在该拍摄状态呈现图像40上,将图标布局图像41上的相机位置图标43改变为新的相机位置图标。
以这种方式,每当新的相机位置图标被生成时,在图标呈现图像42中,中央处理单元20将要被布置在图标布局图像41上的相机位置图标43更新为新的相机位置图标。
然后,当将相机位置图标43与拍摄状态呈现图像40一起显示在液晶面板7B上时,中央处理单元20被配置为允许用户通过敲击操作来指定该相机位置图标43作为用于照片图像搜索的搜索键。
此外,例如,当在生成了相机位置图标之后检测到了用作搜索键的第一脸图标时,中央处理单元20将相机位置图标和该第一脸图标一起与图标布局图像数据相合成,以再次生成图标呈现图像数据。
因此,在根据对脸图标的检测更新了图标呈现图像数据的内容之后,中央处理单元20将内容已被更新的图标呈现图像数据发送给数字处理单元31。
当从中央处理单元20提供来根据对脸图标的检测更新了其内容的图标呈现图像数据时,数字处理单元31将用于生成合成图像数据的图标呈现图像数据从更新前的切换为更新后的。
因此,在更新了图标呈现图像数据之后,每当单位图像数据被生成时,数字处理单元31用更新后的图标呈现图像数据来取代更新前的图标呈现图像数据来与该单位图像数据合成,以生成新的合成图像数据。然后,数字处理单元31顺序地将该新的合成图像数据发送给液晶面板7B。
因此,如图6所示,数字处理单元31将拍摄状态呈现图像40显示在液晶面板7B上,并且还将图标呈现图像42重叠在其上,将用作用于照片图像搜索的搜索键的相机位置图标43显示在图标布局图像41上。另外,此时,在图标呈现图像42中,数字处理单元31还将用作用于照片图像搜索的搜索键的脸图标44布置并显示在图标布局图像41上。
此外,在检测到第二脸图标之后,中央处理单元20将第一和第二脸图标与相机位置图标一起来和图标布局图像数据相合成,以生成图标呈现图像数据。
以这种方式,中央处理单元20根据对第二脸图标的检测来更新图标呈现图像数据的内容,并且将内容已被更新的该图标呈现图像数据发送给数字处理单元31。
当从中央处理单元20提供来进一步更新了其内容的图标呈现图像数据时,数字处理单元31再次将用于生成合成图像数据的图标呈现图像数据从更新前的切换为更新后的最新图标呈现图像数据。
因此,在更新了图标呈现图像数据之后,每当单位图像数据被生成时,数字处理单元31用更新后的图标呈现图像数据来取代更新前的图标呈现图像数据来与该单位图像数据合成,以生成新的合成图像数据。然后,数字处理单元31顺序地将该新的合成图像数据发送给液晶面板7B。
因此,如图7所示,数字处理单元31将拍摄状态呈现图像40显示在液晶面板7B上,并且还利用图标呈现图像42,另外将第二脸图标45显示在图标布局图像41上。
以这种方式,每当指示持续地被反映在拍摄状态呈现图像40中的人的脸的脸图标44和45被检测到时,中央处理单元20顺序地并且另外地将检测到的脸图标44和45显示在图标布局图像41上。
然后,在将脸图标44和45与拍摄状态呈现图像40一起显示在液晶面板7B上的情况中,中央处理单元20被配置为允许用户通过敲击操作来指定脸图标44和45作为用于照片图像搜索的搜索键。
顺便提及,每当如上所述单位图像数据被生成时,作为脸检测处理的结果,在检测与人的脸一起的脸部的大小和位置时,数字处理单元31根据该脸部的大小来生成例如四边形的框图像的框图像数据,该四边形框图像包围该脸部。
此时,数字处理单元31还根据脸部的位置来将框图像数据合成到单位图像数据,并且还合成如上所述的图标布局图像数据和图标呈现图像数据以生成合成图像数据。然后,数字处理单元31将该合成图像数据发送给液晶面板7B。
因此,如图4至图7所示,数字处理单元31以重叠在液晶面板7B上所显示的拍摄状态呈现图像40上以包围人的脸(在单位图像内检测到的脸)的方式来显示框图像46。
顺便提及,要以重叠在拍摄状态呈现图像40上的方式显示的框图像46例如是以诸如绿色之类的预定初始设置颜色来绘制的,并且用于在照片拍摄时向用户通知对人脸的检测、用于聚焦在该脸上等等。
然而,如果比较脸特征被设置为搜索用脸特征,例如后面描述的,则中央处理单元20利用被反映在拍摄状态呈现图像40中的搜索用脸特征的脸,作为被反映在拍摄状态呈现图像40中的状态中的用于照片图像搜索的搜索键。顺便提及,在下面的描述中,搜索用脸特征的脸也称为“搜索利用脸”。
因此,如果比较脸特征被设置为搜索用脸特征,响应于此,中央处理单元20控制数字处理单元31将以重叠在拍摄状态呈现图像40上的方式显示的包围搜索利用脸的框图像46改变为例如与初始设置颜色不同的颜色。
此外,即使在比较脸特征被设置为搜索用脸特征之后,每当从单位图像检测到脸特征时,中央处理单元20将检测到的脸特征与记录在RAM 22中的搜索用脸特征信息相比较。
因此,中央处理单元20检测搜索利用脸是否被反映在拍摄状态呈现图像40中,并且当该搜索利用脸再次被反映时,改变包围该搜索利用脸的框图像46的颜色。
因此,当搜索利用脸被反映在拍摄状态呈现图像40中时,中央处理单元20可以通过包围该搜索利用脸的框图像46的颜色来向用户通知该搜索利用脸可被用作搜索键。
顺便提及,在如上所述进入拍摄模式之后,中央处理单元20立即执行第一相机位置检测处理,并且此后定期执行相机位置检测处理。然后,当执行了相机位置检测处理之后,在检测到当前相机位置时,中央处理单元20随后执行图标生成处理。
此外,在进入拍摄模式之后,中央处理单元20立即使得数字处理单元31开始脸检测处理,并且当持续检测到同一人的脸特征时,执行图标检测处理。
因此,在第一相机检测处理中检测到当前相机位置,并且在随后执行的图标生成处理中生成了相机位置图标之后,中央处理单元20首先以与上面图4至图7的情况相同的方式显示相机位置图标43。在显示了相机位置图标43之后,中央处理单元20再显示脸图标44和45。
然而,例如,当在第一相机位置检测处理中不能检测到当前相机位置时,中央处理单元20可以在生成相机位置图标43之前生成脸图标44和45。
即是说,例如,取决于相机位置检测处理的执行情形,与上面针对图4至图7描述的情况不同,处理单元20可以首先显示脸图标44和45,然后再显示相机位置图标43。
因此,在下面的描述中,在不必特别地区分脸图标44和45以及相机位置图标43的情况中,也将这些脸图标44和45以及相机位置图标43总地称为搜索键图标。
实际上,在生成了相机位置图标43之后,例如图5至图7所示的,在图标布局图像41中,例如,中央处理单元20将相机位置图标43布置并显示在图像垂直方向上的下边部分上。
此外,在检测到脸图标44和45之后,在图标布局图像41中,中央处理单元20将脸图标44和45布置并显示在图像垂直方向上的上边部分上。
据此,中央处理单元20通过逐步地依次降低已经布置并显示在图标布局图像41上的脸图标44和45以及相机位置图标43在图像垂直方向上的较下边部分侧中的所在位置,来显示这些图标。
以这种方式,如图8A和8B所示,中央处理单元20将纵列上最多三个搜索键图标47至49与图标布局图像41一起来布置,并且将这些在液晶面板7B上总地显示为图标呈现图像42。
此外,在获得了超过可全体显示的数目的搜索键图标50之后,中央处理单元20将搜索键图标50添加到图标布局图像41上以使得图标布局图像41在图像垂直方向上被延展。
然而,此时,中央处理单元20从液晶面板7B上消去图标布局图像41的下边部分侧以及布置在该下边部分侧上的搜索键图标47。即是说,此时,中央处理单元20在图像垂直方向上延展图标布局图像41,以便将下边部分侧与布置在该下边部分侧上的搜索键图标47一起消去,就好像允许搜索键图标47退出到拍摄状态呈现图像40外面。
然后,如果所有的搜索键图标47至50不能被全体地显示,则中央处理单元20将图标布局图像41的颜色改变为与原始颜色不同的颜色(例如,浅蓝)。因此,如果所有的搜索键图标47至50不能被全体地显示,则中央处理单元20可以通过改变图标布局图像41的颜色来向用户通知存在不可显示的搜索键图标47。
此外,如图9A和9B所示,当用户在图标布局图像41上在图像垂直方向上执行了滑动操作,则响应于此,中央处理单元20将搜索键图标51至56与图标布局图像41一起在图像垂直方向上滚动。
因此,中央处理单元20将已显示的搜索键图标51至56与图标布局图像41的已显示部分一起移动到拍摄状态呈现图像40的外面。
据此,中央处理单元20将到目前为止尚未被显示的搜索键图标51至56与图标布局图像41中到目前为止尚未被显示的部分一起移动到拍摄状态呈现图像40中。
因此,尽管搜索键图标51至56的数目大于可全体地显示的数目,中央处理单元20也允许用户观看搜索键图标51至56以及图标布局图像41,并且通过敲击操作将这些指定为用于搜索的对象。
顺便提及,中央处理单元20利用通过执行脸图标检测处理而与搜索用脸特征信息一起记录在RAM 22中的脸图标57至60来管理将被布置在图标布局图像41上的脸图标57至60的排列顺序。
例如,中央处理单元20跨越图标布局图像41的上边部分至下边部分来向脸图标57至60指派排列顺序,以使得将图标布局图像41的上边部分当作脸图标57至60的排列顺序的先头,并且将其下边部分当作后尾。
实际上,在通过脸图标检测处理将第一脸图标57至60记录在RAM22中之后,中央处理单元20将脸图标57至60当作先头(即,布置在图标布局图像41的上边部分上)。
此外,在通过脸图标检测处理将第二脸图标57至60记录在RAM 22中之后,中央处理单元20将第二脸图标57至60当作先头。据此,中央处理单元20依次地下移先前记录在RAM 22中的第一脸图标57至60的排列顺序(这在此后也同样适用)。
因此,每当脸图标57至60被记录在RAM 22中时,中央处理单元20将最近的脸图标57至60当作先头,并且依次下移上次记录的脸图标57至60的排列顺序。
然而,在脸图标检测处理中,当检测到的比较脸特征与已经记录在RAM 22中的搜索用脸特征信息所指示的搜索用脸特征相匹配时,中央处理单元20确定与匹配的搜索用脸特征相对应的脸图标60。
然后,中央处理单元20检测所确定的脸图标60的排列顺序。作为其结果,在所确定脸图标60的排列顺序为先头的情况中,中央处理单元20不改变该脸图标60的排列顺序。
另一方面,在所确定的脸图标57至59的排列顺序在先头之后的情况中,中央处理单元20改变脸图标57至59的排列顺序。此外,中央处理单元20通过朝末尾依次下移位于比所确定脸图标57至59的排列顺序更靠前的其它脸图标58至60的排列顺序,来改变脸图标57至59的排列顺序。
然后,在改变了脸图标57至59的排列顺序之后,响应于此,中央处理单元20控制数字处理单元31改变脸图标57至60在图标布局图像41上的显示位置,以便与排列顺序的该改变相一致。
如图10所示,实际上,在当改变脸图标57至59的排列顺序时,图标布局图像41的上边部分被显示的情况中,中央处理单元20仅改变脸图标57至60的显示位置,而不改变图标布局图像41的显示部分。
此外,如图11所示,在当改变脸图标57至59的排列顺序时,图标布局图像41的上边部分未被显示的情况中,中央处理单元20自动地滚动图标布局图像41。
因此,中央处理单元20改变图标布局图像41的显示部分以便显示上边部分。此外,中央处理单元20还改变脸图标57至60的显示位置。
因此,每当被连续地反映在拍摄状态呈现图像40中的人的脸被检测作为比较脸特征时,中央处理单元20将表示此人的脸的脸图标57至60与图标布局图像41的上边部分一起显示。
因此,中央处理单元20允许用户容易地将表示被连续地反映在拍摄状态呈现图像40中的人的脸的脸图标57至60指定为用于照片图像搜索的搜索键。
此外,在进入拍摄模式以利用第二设置内容来实现搜索键呈现功能之后,中央处理单元20在拍摄模式期间根据该第二设置内容来控制数字处理单元31。
在此情况中,每当以与上述相同的方式生成了单位图像数据时,数字处理单元31利用基准脸特征信息来对单位图像数据执行脸检测处理。然后,在检测到基于单位图像数据的单位图像内的单个或多个人的(一个或多个)脸,并且还检测到其(一个或多个)脸部的(一个或多个)大小和(一个或多个)位置之后,数字处理单元31以重叠在液晶面板7B上所显示的拍摄状态呈现图像40上以便包围(一个或多个)人的(一个或多个)脸的方式来显示框图像46。
此外,当检测到基于单位图像数据的单位图像内的单个或多个人的(一个或多个)脸部和(一个或多个)位置之后,数字处理单元31将表示单个或多个人的(一个或多个)大小和(一个或多个)位置的脸检测信息以及该单位图像数据发送给中央处理单元20。
中央处理单元20以与上述相同的方式执行脸图标检测处理。因此,每当从数字处理单元31提供来脸检测信息和单位图像数据时,中央处理单元20检测脸图标以便检测脸特征。
然后,中央处理单元20将拍摄状态呈现图像40显示在液晶面板7B上,并且还将脸图标和具有与上述相同配置的图标布局图像41一起显示为图标呈现图像42。
以这种方式,中央处理单元20通过与拍摄状态呈现图像40一起显示在液晶面板7B上的图标呈现图像42,来将表示被连续地反映在拍摄状态呈现图像40中的人的脸的脸图标呈现为用于照片图像搜索的搜索键。
顺便提及,在此情况中,同样,当在脸图标检测处理中比较脸特征已被设置为搜索用脸特征时,中央处理单元20以与上述相同的方式来改变包围搜索用脸特征的搜索利用脸的框图像46的颜色。
因此,当搜索利用脸被反映在拍摄状态呈现图像40中时,中央处理单元20通过包围该搜索利用脸的框图像46的颜色来向用户通知搜索利用脸可被用作搜索键。
此外,当在搜索键呈现功能已被设置为利用第三设置内容来实现的状态中进入拍摄模式之后,中央处理单元20在拍摄模式期间根据该第三设置内容来控制数字处理单元31。
而且,在拍摄模式期间,中央处理单元20以与上述相同的方式定期执行相机位置检测处理,并且还根据执行结果来适当地执行图标生成处理以生成相机位置图标。
顺便提及,除了上面的图标布局图像数据以外,用于单独布置相机位置图标的图标布局图像数据也被保存在非易失性存储器34中。
因此,当进入拍摄模式时,中央处理单元20从非易失性存储器34读出用于相机位置图标的图标布局图像数据。然后,直到如上所述获得了用作搜索键的相机位置图标,中央处理单元20才将该图标布局图像数据不加改变地发送给数字处理单元31。
在进入拍摄模式并且从中央处理单元20提供来图标布局图像数据的情况中,每当基于拍摄数据生成了单位图像数据时,数字处理单元31将所生成的单位图像数据与图标布局图像数据相合成以生成合成图像数据。
然后,数字处理单元31顺序地将合成图像数据发送给液晶面板7B。因此,如图12所示,数字处理单元31将拍摄状态呈现图像40显示在液晶面板7B上,并且还以例如重叠在该拍摄状态呈现图像40的图像水平方向上的右下角上的方式来显示四边形图标布局图像61。
顺便提及,图标布局图像61是以与上面的图标布局图像41相同的方式生成的,以使得用作背景的拍摄状态呈现图像40的右下角部分可以透过例如以单色(例如白色或灰色)绘制的网眼图案或圆点花纹图案被看到。
因此,中央处理单元20以重叠在拍摄状态呈现图像40上的方式来显示图标布局图像61,但是通过尽可能地显示该拍摄状态呈现图像40中的图标布局图像61的重叠部分来防止拍摄状态不能被确认。
此外,当在图标布局图像61以重叠在拍摄状态呈现图像40上的方式被显示的状态中生成了相机位置图标时,中央处理单元20将图标布局图像数据与该相机位置图标相合成以生成图标呈现图像数据。然后,中央处理单元20将该图标呈现图像数据发送给数字处理单元31。
在从中央处理单元20提供来了图标呈现图像数据的情况中,然后,每当单位图像数据被生成时,数字处理单元31用该图标呈现图像数据取代图标布局图像数据来与该单位图像数据相合成,以生成合成图像数据。然后,数字处理单元31顺序地将该合成图像数据发送给液晶面板7B。
因此,如图13所示,数字处理单元31将拍摄状态呈现图像40显示在液晶面板7B上,并且还以重叠在该拍摄状态呈现图像40上的方式来显示图标呈现图像62。
在此情况中,图标呈现图像62包括以重叠在拍摄状态呈现图像40的右下角部分上的方式显示的图标布局图像61,并且用作用于照片图像搜索的搜索键的相机位置图标63被布置并显示在该图标布局图像61上。
此外,在每次生成了新的相机位置图标之后,中央处理单元20更新图标呈现图像数据的内容以将其发送给数字处理单元31。然后,在每次从中央处理单元20提供来内容已被更新的图标呈现图像数据的情况中,数字处理单元31以与上述相同的方式将要用于生成合成图像数据的图标呈现图像数据从更新前的切换为更新后的。
因此,中央处理单元20将液晶面板7B上所显示的图标呈现图像62中的图标布局图像61上所显示的相机位置图标63更新为新的相机位置图标。
以这种方式,中央处理单元20通过与拍摄状态呈现图像40一起显示在液晶面板7B上的图标呈现图像62来将相机位置图标63呈现为用于照片图像搜索的搜索键。
顺便提及,此时,同样,每当以与上述相同的方式生成了单位图像数据时,数字处理单元31利用基准脸特征信息来对单位图像数据执行脸特征检测处理。然后,当在基于单位图像数据的单位图像内检测到单个人或多个人的(一个或多个)脸并且还检测到其(一个或多个)脸部的(一个或多个)大小和(一个或多个)位置之后,数字处理单元31以重叠在液晶面板7B所显示的拍摄状态呈现图像40上以包围(一个或多个)人的(一个或多个)脸的方式来显示框图像46。
而且,当在基于单位图像数据的单位图像内检测到单个人或多个人的(一个或多个)脸部的大小和位置之后,数字处理单元31将表示单个人或多个人的(一个或多个)脸的(一个或多个)大小和(一个或多个)位置的脸检测信息、以及该单位图像数据发送给中央处理单元20。
以与上面的图标检测处理相同的方式,每当从数字处理单元31提供来脸检测信息和单位图像数据时,基于该脸检测信息,中央处理单元20基于该脸检测信息确定单位图像内的单个人的脸部或多个人的脸部,并且分析所确定的(一个或多个)脸部。因此,中央处理单元20检测反映在单位图像中的单个人的脸或多个人的脸的特征。
而且,以与上面的图标检测处理相同的方式,每当从数字处理单元31提供来脸检测信息和单位图像数据时,中央处理单元20顺序地比较从单位图像数据检测到的单个人的脸或多个人的脸的特征。然后,当从在预定的第二时间期间连续的预定数目个单位图像中连续检测到同一人的脸的特征之后,中央处理单元20将检测到的该脸的特征确定为比较脸特征。
以这种方式,在获得了第一比较脸特征之后,中央处理单元20将该比较脸特征与搜索用数据库DB内的所登记脸特征相比较。作为其结果,当从搜索用数据库DB内的所登记脸特征中检测到与比较脸特征相匹配的所登记脸特征之后,中央处理单元20将比较脸特征设置为搜索用脸特征。
而且,中央处理单元20从搜索用数据库DB(记录设备33)中读出与所述搜索用脸特征所匹配的所登记脸特征相关的人物标识信息。然后,中央处理单元20将表示搜索用脸特征的搜索用脸特征信息以及人物标识信息以相关联的方式记录在例如RAM 22中。
然而,在尽管已获得比较脸特征但是不存在与所述比较脸特征相匹配的所登记脸特征的情况中(表示与比较脸特征相匹配的所登记脸特征的所登记脸特征信息未被登记在搜索用数据库DB中),中央处理单元20不将所述比较脸特征设置为搜索用脸特征。然后,中央处理单元20不执行所述比较脸特征应当被用作搜索用脸特征的后续处理。
此外,当检测到第二比较脸特征之后,中央处理单元20将第二比较脸特征与由记录在RAM 22中的搜索用脸特征信息指示的搜索用脸特征相比较。作为其结果,当第二比较脸特征与由记录在RAM 22中的搜索用脸特征信息指示的搜索用脸特征不同时,中央处理单元20随后执行与上面的第一比较脸特征被检测到的情况相同的处理。
另一方面,当第二比较脸特征与由记录在RAM 22中的搜索用脸特征信息指示的搜索用脸特征相匹配时,中央处理单元20不将所述第二比较脸特征设置为搜索用脸特征。然后,中央处理单元20不执行所述第二比较脸特征应当被用作搜索用脸特征的后续处理。
此外,在每次检测到第二比较脸特征之后进一步检测到若干个比较脸特征时,中央处理单元20将检测到的所述比较脸特征与该时间点时记录在RAM 22中的所有搜索用脸特征信息所指示的搜索用脸特征相比较。
作为其结果,当在检测到第二比较脸特征之后进一步检测到的比较脸特征与记录在RAM 22中的搜索用脸特征信息之一所指示的搜索用脸特征不同时,中央处理单元20随后执行与上面的第一比较脸特征被检测到的情况相同的处理。
以这种方式,中央处理单元20根据被反映在拍摄状态呈现图像40中较长时间的人的脸的比较脸特征的检测,来将这些比较脸特征适当地设置为搜索用脸特征。
此外,在如此地将比较脸特征设置为搜索用脸特征之后,中央处理单元20以与上述相同的方式控制数字处理单元31改变包围搜索利用脸的框图像46的颜色。因此,当搜索利用脸被反映在拍摄状态呈现图像40中时,中央处理单元20通过包围该搜索利用脸的框图像46的颜色来向用户通知该搜索利用脸可被用作搜索键。
现在,如图14A和14B所示,当搜索键呈现功能被设置为利用第一设置内容或第二设置内容来实现时,如上所述,中央处理单元20将图标呈现图像42与拍摄状态呈现图像40一起显示在液晶面板7B上。
然而,包括在图标呈现图像42中的搜索键图标(脸图标和相机位置图标)被生成为使得其图片图案可被明显地与拍摄状态呈现图像40的图片图案区分开来,并且该拍摄状态呈现图像40不被看透。
因此,在快门按钮9被半按下并且条件调节信号被输入时,响应于此,中央处理单元20控制数字处理单元31从液晶面板7B消去图标呈现图像42。
类似地,在快门按钮9被全按下并且释放信号被输入时,响应于此,中央处理单元20也控制数字处理单元31从液晶面板7B消去图标呈现图像42。
顺便提及,如针对图4所描述的,即使在图标布局图像41与拍摄状态呈现图像40一起被显示在液晶面板7B上的状态中快门按钮9被半按下,中央处理单元20也从液晶面板7B消去该图标布局图像41。
此外,如针对图4所描述的,即使在图标布局图像41与拍摄状态呈现图像40一起被显示在液晶面板7B上的状态中快门按钮9被全按下,中央处理单元20也从液晶面板7B消去该图标布局图像41。
以这种方式,当快门按钮9被半按下或全按下时,中央处理单元20控制数字处理单元31将拍摄状态呈现图像40单独显示在液晶面板7B上。
因此,当快门按钮9被半按下或全按下以用于照片拍摄时,中央处理单元20允许用户观看拍摄状态呈现图像40的整体,并准确地确认被摄体的拍摄状态。
此外,如图15A和15B所示,即使搜索键呈现功能是根据第三设置内容来设置的,当快门按钮9被半按下或全按下时,中央处理单元20将拍摄状态呈现图像40单独显示在液晶面板7B上。
因此,在搜索键呈现功能是根据第三设置内容被设置的情况中,同样,当快门按钮9被半按下或全按下时,中央处理单元20允许用户观看拍摄状态呈现图像40的整体,并准确地确认被摄体的拍摄状态。
1-5.拍摄模式时对照片图像的图像搜索处理
接下来,将描述用于在拍摄模式时根据搜索键图标的指定进搜索照片图像的图像搜索处理。然而,首先,下面将描述在拍摄模式时响应于显示在液晶面板7B上的用作搜索键的相机位置图标被指定而执行的图像搜索处理。
接下来,将描述在拍摄模式时响应于显示在液晶面板7B上的用作搜索键的脸图标被指定而执行的图像搜索处理。然后,将描述在拍摄模式时响应于液晶面板7B上所显示的拍摄状态呈现图像40内的脸部与框图像46一起被指定而执行的图像搜索处理。
当在相机位置图标被显示在液晶面板7B上作为图标呈现图像42(62)的状态中用户通过敲击操作指定了该相机位置图标时,中央处理单元20从RAM 22读出区域信息和区域地图图像数据。
此外,中央处理单元20将由区域信息指示的搜索区域与搜索用数据库DB中所登记的拍摄位置信息相比较,以从该拍摄位置信息中搜索出表示搜索区域内的拍摄位置的拍摄位置信息。
顺便提及,在下面的描述中,基于搜索区域搜索到的拍摄位置信息(即,表示搜索区域内的拍摄位置的拍摄位置信息)也称为搜索拍摄位置信息,并且与该搜索拍摄位置信息指示的拍摄位置也称为搜索拍摄位置。
此外,基于搜索用数据库DB内与搜索拍摄位置信息相关的事件标识信息,中央处理单元20通过照片拍摄事件来对该搜索拍摄位置信息分类。
此外,对于根据搜索拍摄位置信息分类得到的每个事件,中央处理单元20例如从搜索用数据库DB内与搜索拍摄位置信息相关的拍摄日期信息中,检测指示在该事件中第一次执行照片拍摄时的拍摄日期的拍摄日期信息。
顺便提及,在下面的描述中,在根据搜索拍摄位置信息分类得到的事件之一中检测到的在第一次执行照片拍摄时的拍摄日期也称为初始拍摄日期,并且指示该初始拍摄日期的拍摄日期信息也称为初始拍摄日期信息。
然后,对于根据搜索拍摄位置信息分类得到的每个事件,中央处理单元20从其搜索拍摄位置信息中,检测表示初始拍摄日期的搜索拍摄位置的搜索拍摄位置信息来作为表示照片拍摄被执行的该事件的事件位置的事件位置信息。
而且,对于根据搜索拍摄位置信息分类得到的每个事件,中央处理单元20基于初始拍摄日期来确定在该事件中执行了今天和过去(即今天之前)的照片拍摄中的哪一个。
然后,基于其确定结果,中央处理单元20将用作用于搜索此次事件中的照片图像的搜索键的事件位置图标与区域地图图像数据相合成,事件位置图标指示在今天或过去执行了照片拍摄的事件以及其事件位置。
因此,基于区域地图图像数据,中央处理单元20将事件位置图标布置在区域地图图像上,以生成用于搜索搜索用地图图像(将用于搜索照片图像)的地图图像数据。
顺便提及,指示在今天执行照片拍摄的事件以及其事件位置的事件位置图标被生成为具有与指示在过去执行照片拍摄的事件以及其事件位置的事件图标不同的形状、大小等。
然而,在下面的描述中,在不必区分今天的事件的事件位置图标和过去的事件的事件位置图标的情况中,这些事件位置图标也被总地称为搜索键图标。
顺便提及,如上所述,当在拍摄模式时生成了相机位置图标时,响应于此,中央处理单元20将该相机位置图标和表示其相机位置的相机位置信息以相关联的方式记录在RAM 22中。
然而,与将相机位置信息记录到RAM 22分开地,中央处理单元20将从拍摄模式的转变时间点到相机位置图标的指示时间点检测到的所有相机位置记录在RAM 22中,作为表示其检测历史的位置检测历史信息。
因此,此时,基于记录在RAM 22中的位置检测历史信息,中央处理单元20从拍摄模式的转变时间点到相机位置图标的指示时间点时相机位置在搜索用地图图像上的位移。
当相机位置沿着在搜索用地图图像上绘制的路径位移时,中央处理单元20处理搜索用地图图像数据,以使得在追踪该相机位置的位移的路径中,与位移的起始点和结束点之间相当的部分被改变为与其它部分不同的颜色。此外,当相机位置大致停在搜索用地图图像上的一点处时,此时,中央处理单元20不对搜索用地图图像数据进行处理。
以这种方式,当生成了搜索用地图图像数据时,中央处理单元20将该搜索用地图图像数据发送给数字处理单元31。此外,此时,中央处理单元20将表示根据搜索拍摄位置信息分类得到的事件的事件标识信息、表示该事件的事件位置的事件位置信息以及搜索键图标以相关联的方式记录在RAM 22中。
当从中央处理单元20提供来搜索用地图图像数据时,数字处理单元31在中央处理单元20的控制下,取代从该时间点起的单位图像数据,将搜索用地图图像数据发送给液晶面板7B。因此,基于搜索用地图图像数据,数字处理单元31例如将如图16所示的搜索用地图图像65显示在液晶面板7B上。
在该搜索用地图图像65中,今天的事件的事件位置图标67阳和过去事件的事件位置图标68被布置在原始区域地图图像66的事件位置上作为用于照片图像搜索的搜索键。此外,在搜索用地图图像65中,在追踪相机位置的位移的路径69中,与该位移的起始点和终点相当的部分69A被涂上了与其它部分不同的颜色。
因此,中央处理单元20允许用户通过事件位置图标67和68在呈现给用户的搜索用地图图像65上确认在今天或过去执行照片拍摄的事件以及其事件位置。
此外,当用户今天适当地移动并且在不同事件中执行照片拍摄时,中央处理单元20还允许用户通过路径69的部分颜色差异来确认其移动路线。即是说,中央处理单元20允许用户确认他/她正经过哪条移动路线移动并执行照片拍摄。
当在搜索用地图图像65被显示在液晶面板7B上的状态中用户通过敲击操作指定了搜索键图标时,中央处理单元20在RAM 22中检测由该被指定的搜索键图标指示的事件位置信息。此外,中央处理单元20从RAM22中读出与检测到的事件位置信息相对应的事件标识信息和搜索键图标。
此外,基于从RAM 22读出的事件标识信息,中央处理单元20从搜索用数据库DB(即,记录设备33)读出与该事件标识信息相关的所有文件标识信息。
此外,中央处理单元20从记录设备33读出与搜索到的该文件标识信息相对应的缩略图像数据。然后,基于缩略图像数据和搜索键图标,中央处理单元20根据由用户指定的搜索键图标来生成用于呈现在该搜索键图标所指示的事件位置的事件中搜索到的照片图像的事件搜索照片图像数据。此外,中央处理单元20将该事件搜索照片图像数据发送给数字处理单元31。
因此,当从中央处理单元20提供来事件搜索照片图像数据时,数字处理单元31取代搜索用地图图像数据,将该事件搜索照片图像数据发送给液晶面板7B。因此,数字处理单元31基于事件搜索照片图像数据将如图17所示的事件搜索照片图像70显示在液晶面板7B上。
在该事件搜索照片图像70中,图标显示区域70A和缩略图像显示区域70B被设置为使得这些区域在整体上在图像垂直方向上分为两部分。此外,在事件搜索照片图像70的图标显示区域70A中,布置了用户所指定的搜索键图标(即,事件位置图标67(68))。
此外,在事件搜索照片图像70的缩略图像显示区域70B中,通过在由用户指定的搜索键图标所指示的事件位置的事件中进行照片拍摄生成的照片图像的缩略图像71以矩阵方式被布置。此外,在缩略图像显示区域70B中,在图像垂直方向上滑动的滚动条72被设置在图像水平方向上的右边缘部分。
因此,在将事件搜索照片图像70显示在液晶面板7B上之后,中央处理单元20允许用户经由该事件搜索照片图像70来观看在用户指定的时间位置的事件中搜索到的作为缩略图像71的照片图像。
此外,当在事件搜索照片图像70被显示在液晶面板7B上的状态中用户滑动滚动条72以在图像垂直方向上移动时,响应于此,中央处理单元20控制数字处理单元31以进行滚动显示。
因此,中央处理单元20在事件搜索照片图像70的缩略图像显示区域70B内在图像垂直方向上滚动缩略图像71。因此,即使在事件中搜索到的照片图像的缩略图像71未被全体地布置在事件搜索照片图像70的缩略图像显示区域70B内的情况中,中央处理单元20也允许用户通过适当地切换并布置缩略图像71来观看其缩略图像71。
此外,当在事件搜索照片图像70被显示在液晶面板7B上的状态中用户通过敲击操作指定缩略图像71时,中央处理单元20确定与所指定的缩略图像71相对应的文件标识信息。
然后,基于该所确定的文件标识信息,中央处理单元20从记录设备33读出根据该文件标识信息标识出的图像文件。此外,中央处理单元20从该图像文件读出压缩图像数据以将其发送给数字处理单元31。
因此,当从中央处理单元20提供来压缩图像数据时,数字处理单元31使该压缩图像数据经过解压缩解码处理,以生成原始照片图像数据。然后,数字处理单元31取代事件搜索照片图像数据,将该照片图像数据发送给液晶面板7B。因此,数字处理单元31将基于照片图像数据的照片图像显示在液晶面板7B的整个画面上来取代事件搜索照片图像70。
以这种方式,当用户指定事件搜索照片图像70上的缩略图像71时,中央处理单元20单独地将作为被指定缩略图像71的来源的照片图像显示在液晶面板7B上以允许用户观看它。
顺便提及,当在照片图像被显示在液晶面板7B上的状态中用户通过连续两次敲击操作指定了触摸面板7A的任意位置时,响应于此,中央处理单元20控制数字处理单元31返回到液晶面板7B的显示。
因此,数字处理单元31将取代照片图像数据的事件搜索照片图像数据发送给液晶面板7B,并且再次显示事件搜索照片图像70来取代照片图像。
以这种方式,尽管照片图像被显示在液晶面板7B上,中央处理单元20也可以通过简单的操作使该照片图像的显示返回到事件搜索照片图像70的显示。然后,在使照片图像的显示返回到事件搜索照片图像70的显示之后,中央处理单元20允许用户再次指定缩略图像71以显示所希望的照片图像。
此外,当在事件搜索照片图像70被显示在液晶面板7B上的状态中用户通过敲击操作指定了搜索键图标时,响应于此,中央处理单元20控制数字处理单元31返回到液晶面板7B的显示。
因此,数字处理单元31将取代事件搜索照片图像数据的搜索用地图图像数据发送给液晶面板7B,以显示搜索用地图图像65来取代事件搜索照片图像70。
以这种方式,在事件搜索照片图像70被显示在液晶面板7B上的情况中,同样,中央处理单元20可以通过简单操作使对该事件搜索照片图像70的显示返回到搜索用地图图像65的显示。
然后,在使对该事件搜索照片图像70的显示返回到搜索用地图图像65的显示之后,中央处理单元20允许用户再次指定表示用于检测照片图像的所需事件位置的搜索键图标。
此外,当在搜索用地图图像65被显示的状态中用户通过连续两次敲击操作指定了与触摸面板7A的搜索键图标相对的部分以外的部分时,响应于此,中央处理单元20控制数字处理单元31返回到液晶面板7B的显示。
此时,数字处理单元31基于单位图像数据而非搜索用地图图像数据来生成合成图像数据,以将其发送给液晶面板7B。因此,数字处理单元31将拍摄状态呈现图像40和图标呈现图像42(62)显示在液晶面板7B上来取代搜索用地图图像65。
以这种方式,即使在将搜索用地图图像65显示在液晶面板7B上之后,中央处理单元20也可以通过容易的操作使该搜索用地图图像65的显示返回到拍摄状态呈现图像40和图标呈现图像42(62)的显示。
然后,在使该搜索用地图图像65的显示返回到拍摄状态呈现图像40和图标呈现图像42(62)的显示之后,中央处理单元20允许用户再次执行对被摄体的照片拍摄,并且在相机位置位移之后,允许用户再次指定相机位置图标。
注意,在本实施例的情况中,在使该搜索用地图图像65的显示返回到拍摄状态呈现图像40和图标呈现图像42(62)的显示之后,中央处理单元20再次执行在搜索用地图图像65的显示之前执行的处理。
因此,中央处理单元20定期地再次执行相机位置检测处理,并且还根据其执行结果,适当地执行图标生成处理以更新将被显示为图标呈现图像42和62的相机位置图标。
另一方面,当在脸图标被显示在液晶面板7B上作为图标呈现图像42的状态中用户通过敲击操作指定了该脸图标时,中央处理单元20从RAM22中读出该脸图标以及与此相对应的人物标识信息。
此外,基于从RAM 22读出的人物标识信息,中央处理单元20从搜索用数据库DB(即,记录设备33)搜索并读出与该人物标识信息相关的所有文件标识信息。
此外,中央处理单元20从记录设备33读出与搜索到的文件标识信息相对应的缩略图像数据。然后,基于缩略图像数据和脸图标,中央处理单元20生成脸搜索照片图像数据,用于呈现根据用户指定的脸图标搜索到的照片图像。此外,中央处理单元20将该脸搜索照片图像数据发送给数字处理单元31。
因此,当从中央处理单元20提供来脸搜索照片图像数据时,数字处理单元31取代合成图像数据,将该脸搜索照片图像数据发送给液晶面板7B。因此,基于脸搜索照片图像数据,数字处理单元31将如图18所示的脸搜索照片图像75显示在液晶面板7B上。
在该脸搜索照片图像75中,图标显示区域75A和缩略图像显示区域75B被设置为使得这些区域在整体上在图像垂直方向上划分为两部分。在脸搜索照片图像75的图标显示区域75A中,布置了用户指定的脸图标76。
此外,在脸搜索照片图像75的缩略图像显示区域75B中,通过用户所指定的脸图标76搜索到的照片图像的缩略图像77(即,其中反映了由脸图标76指示的脸的人的照片图像)以矩阵方式被布置。此外,在缩略图像显示区域75B中,在图像垂直方向上滑动的滚动条72被设置在图像水平方向上的右边缘部分上。
因此,当将脸搜索照片图像75显示在液晶面板7B上之后,中央处理单元20允许用户经由该脸搜索照片图像75观看通过用户指定的脸图标76搜索到的作为缩略图像77的照片图像。
此外,当在将脸搜索照片图像75被显示在液晶面板7B上的状态中用户滑动滚动条72以在图像垂直方向上移动时,响应于此,中央处理单元20控制数字处理单元31以进行滚动显示。
因此,中央处理单元20在脸搜索照片图像75的缩略图像显示区域75B内在图像垂直方向上滚动缩略图像77。因此,即使通过脸图标76搜索到的照片图像的缩略图像77未被全体地布置在脸搜索照片图像75的缩略图像显示区域75B内的情况中,中央处理单元20也允许用户通过适当地切换并布置缩略图像77来观看其缩略图像77。
此外,当在脸搜索照片图像75被显示在液晶面板7B上的状态中用户通过敲击操作指定缩略图像77时,中央处理单元20确定与所指定的缩略图像71相对应的文件标识信息。
然后,基于该所确定的文件标识信息,中央处理单元20从记录设备33读出根据该文件标识信息标识出的图像文件。此外,中央处理单元20从该图像文件读出压缩图像数据以将其发送给数字处理单元31。
因此,当从中央处理单元20提供来压缩图像数据时,数字处理单元31使该压缩图像数据经过解压缩解码处理,以生成原始照片图像数据。然后,数字处理单元31取代脸搜索照片图像数据,将该照片图像数据发送给液晶面板7B。因此,数字处理单元31将基于照片图像数据的照片图像显示在液晶面板7B的整个画面上来取代脸搜索照片图像75。
以这种方式,当用户指定脸搜索照片图像75上的缩略图像77时,中央处理单元20单独地将作为被指定缩略图像77的来源的照片图像显示在液晶面板7B上以允许用户观看它。
顺便提及,当在照片图像被显示在液晶面板7B上的状态中用户以与上述相同的方式通过连续两次敲击操作指定了触摸面板7A的任意位置时,响应于此,中央处理单元20控制数字处理单元31返回到液晶面板7B的显示。
因此,数字处理单元31取代照片图像数据,将脸搜索照片图像数据发送给液晶面板7B,并且再次显示脸搜索照片图像75来取代照片图像。
以这种方式,尽管照片图像被显示在液晶面板7B上,中央处理单元20也可以通过简单的操作使该照片图像的显示返回到脸搜索照片图像75的显示。然后,在使照片图像的显示返回到脸搜索照片图像75的显示之后,中央处理单元20允许用户再次指定缩略图像77以显示所希望的照片图像。
此外,当在脸搜索照片图像75被显示在液晶面板7B上的状态中用户通过敲击操作指定了脸图标76时,响应于此,中央处理单元20控制数字处理单元31返回到液晶面板7B的显示。
因此,数字处理单元31再次基于单位图像数据而非脸搜索照片图像数据来生成合成图像数据,以将其发送给液晶面板7B。因此,数字处理单元31再次将拍摄状态呈现图像40和图标呈现图像42显示在液晶面板7B上来取代脸搜索照片图像75。
以这种方式,即使脸搜索照片图像75被显示在液晶面板7B上,中央处理单元20也可以通过简单操作使对该脸搜索照片图像75的显示返回到拍摄状态呈现图像40和图标呈现图像42的显示。
然后,在使该脸搜索照片图像75的显示返回到拍摄状态呈现图像40和图标呈现图像42的显示之后,中央处理单元20允许用户再次执行对被摄体的照片拍摄,并且指定脸图标。
除此以外,如图19所示,当在脸图标44和45被显示在液晶面板7B上的状态中用户以脸图标44作为起点向图像的右侧执行滑动操作时,中央处理单元20认识到对人的搜索被请求。
此时,中央处理单元20从RAM 22读出与被指定为用户进行的滑动操作的起点的脸图标44相对应的人物标识信息(在下面,特定地,也称为“基准人物标识信息”)。
此外,中央处理单元20判断搜索用数据库DB内该基准人物标识信息是否被与亲密联系信息相关联。作为其结果,当该基准人物标识信息已经与亲密联系信息相关联时,中央处理单元20从搜索用数据库DB(即,记录设备33)中读出通过该亲密联系信息确定的单个人或多个人的人物标识信息。此外,中央处理单元20还从搜索用数据库DB读出与该人物标识信息相关联的脸图标。
具体地,中央处理单元20通过被指定为用户的滑动操作的起点的脸图标44所指示的人,来搜索具有高亲密度的单个人或多个人。然后,中央处理单元20从搜索用数据库DB(即,记录设备33)中读出可以标识搜索到的(一个或多个)人的人物标识信息以及指示该搜索到的人的脸的脸图标。
顺便提及,在下面的描述中,由被指定为用户的滑动操作的起点的脸图标所指示的人也被称为“基准人”,并且与该基准人亲密的、基于该基准人被搜索的人也称为“搜索人”。
顺便提及,如上所述,人的亲密度是基于通过对人拍照而生成的照片图像而被检测到的。因此,在检测到搜索人之后,基于与基准人和搜索人相对应的拍摄日期信息和拍摄位置信息,中央处理单元20检测被一起拍照的基准人和搜索人的拍摄日期和拍摄位置。
此外,例如,基于该检测到的拍摄日期,中央处理单元20在以相同方式检测到的拍摄位置中,检测在最近的拍摄日期执行了照片拍摄的拍摄位置。此外,在检测到拍摄位置之后,中央处理单元20从记录设备33中读出地图图像数据内与以该拍摄位置为中心的预定圆形区域相当的一部分作为部分地图图像数据。
此外,中央处理单元20将部分地图图像数据与表示该拍摄位置的预定标记的图像相合成,然后例如使其经过用于间拔像素的缩小处理。
因此,基于该部分地图图像数据,中央处理单元20指示出地图上的该拍摄位置,以生成可用作用于照片图像搜索的搜索键的拍摄位置图标。以这种方式,中央处理单元20生成指示基准人和单个或多个搜索人一起被拍照的拍摄位置的单个或多个拍摄位置图标。
此外,在检测到多个(两个或更多个)搜索人之后,基于与多个搜索人的人物标识信息相关联的亲密联系信息,中央处理单元20从搜索用数据库DB中检测是否存在与多个搜索人亲密的人。此外,当存在亲密搜索人时,在此情况中,同样,基于那些搜索人以与上述相同方式被一起拍照时的拍摄日期,中央处理单元20在被一起拍照的拍摄位置中检测出在最近的拍摄日期中被拍照的拍摄位置。
此外,当检测到拍摄位置时,以与上述相同的方式,中央处理单元20指示出地图上的该拍摄位置,以生成可被用作用于照片图像搜索的搜索键的拍摄位置图标。以这种方式,中央处理单元20还生成表示搜索人被一起拍照的拍摄位置的单个或多个拍摄位置图标。
然后,中央处理单元20将人物标识信息及其脸图标以相关联的方式记录在RAM 22中。此外,中央处理单元20还将拍摄位置图标、以及表示被检测用于生成该拍摄位置图标的拍摄位置的拍摄位置信息以相关联的方式记录在RAM 22中。
此外,基于表示基准人和搜索人的脸的多个脸图标、拍摄位置图标和表示基准人与搜索人(亲密的人)之间的关系的信息,中央处理单元20生成用于呈现与基准人亲密的搜索人的人物呈现图像数据。然后,中央处理单元20将该人物呈现图像数据发送给数字处理单元31。
在从中央处理单元20提供来人物呈现图像数据的情况中,每当单位图像数据被生成时,数字处理单元31将该单位图像数据与人物呈现图像数据相合成以生成合成图像数据。
然后,数字处理单元31顺序地将该合成图像数据发送给液晶面板7B。因此,如图20所示,数字处理单元31显示拍摄状态呈现图像40,并且还将人物呈现图标80显示在该拍摄状态呈现图像40之上。
该人物呈现图标80包括覆盖拍摄状态呈现图像40整体的图标布局图像81。此外,表示基准人的脸的脸图标44,以及表示搜索人的脸的脸图标82至84被相互分离地布置在图标布局图像81之上。此外,在图标布局图像81之上,拍摄位置图标85至87被相互分离,并且还与各个脸图标44以及82至84相分离地被布置。
此外,在图标布局图像81之上,还布置有连接线图像88,用于将亲密的人(基准人和搜索人、多个搜索人)的脸图标44以及82至84连接起来。此外,在图标布局图像81之上,还布置了连接线图像89,用于将被一起拍照的人(基准人和搜索人、多个搜索人)的脸图标44以及82至84与表示该照片拍摄的拍摄位置的拍摄位置图标85至87连接起来。
在此情况中,图标布局图像81被生成为使得用作背景的拍摄状态呈现图像40的整体可透过例如以单色(例如白色或灰色)绘制的精细网眼图案或圆点花纹图案而被看到。
因此,当通过图标布局图像81允许用户在一定程度上看到拍摄状态呈现图像40的整体时,中央处理单元20允许用户观看到脸图标44、82至84,以及拍摄位置图标85至87等,以从拍摄状态呈现图像40中清晰地辨别出来。
而且,用于将脸图标44、82至84相连的连接线图像88被生成为使得其线型和颜色等与用于将脸图标44、82至84与拍摄位置图标85至87连接起来的连接线图像89的不同。
因此,中央处理单元20被配置为允许用户以清晰地辨别的方式通过连接线图像88和89来自动地识别亲密的人以及一起被拍照的人。
以这种方式,中央处理单元20可以通过将人物呈现图像80显示在液晶面板7B上,来向用户通知被用户指定为脸图标44的人(基准人)以及利用这些人的脸(脸图标)的亲密的人(搜索人)。
此外,中央处理单元20可以利用该人物呈现图像80来向用户通知一起被拍照的两个人(基准人和搜索人),以及其照片拍摄的拍摄位置(拍摄位置图标)。
在人物呈现图像80被显示在液晶面板7B上的情况中,中央处理单元20允许用户通过敲击操作来指定人物呈现图像80内的脸图标44、82至84,以及拍摄位置图标85至87作为用于照片图像搜索的搜索键。
此外,如图21所示,当在人物呈现图像80被显示在液晶面板7B上的状态中用户以表示搜索人的脸的脸图标84为起点执行了滑动操作时,中央处理单元20认识到对人的搜索再次被请求。
此时,中央处理单元20从RAM 22读出与被用户指定为滑动操作的起点的脸图标84相对应的人物标识信息。此外,中央处理单元20还从RAM 22读出基准人物标识信息以及其它搜索人的人物标识信息。
顺便提及,在下面的描述中,与被用户指定为滑动操作的起点的脸图标84相对应的人物标识信息也将特定地被称为指定人物标识信息,并且由被指定脸图标84指示的脸的搜索人也将特定地被称为指定人。此外,在下面的描述中,除指定人以外的搜索人也将称为其它搜索人,并且其它搜索人的人物标识信息也将特定地称为其它人物标识信息。
然后,中央处理单元20判断在搜索用数据库DB中指定人物标识信息是否被与指示基准人物标识信息以外的其它人物标识信息的亲密联系信息相关联。
当指定人物标识信息被与指示基准人物标识信息以外的其它人物标识信息的亲密联系信息相关联时,中央处理单元20从搜索用数据库DB中读出由亲密联系信息确定的除基准人和其它搜索人以外的新的搜索人的人物标识信息。而且,中央处理单元20还从搜索用数据库DB中读出与该新的搜索人的人物标识信息相关联的脸图标。
即是说,中央处理单元20还搜索被用户指定为滑动操作的起点的脸图标84所指示的指定人,以及与该指定人具有高亲密度的单个人或多个人。
而且,利用搜索用数据库DB,中央处理单元20以与上述相同的方式基于基准人、到此时间点为止搜索到的所有搜索人(包括指定人和其它搜索人)的拍摄位置信息和拍摄日期信息来生成拍摄位置图标。
此外,在搜索用数据库DB中,中央处理单元20还检测是否存在到此时间点为止搜索到的所有搜索人(包括指定人和其它搜索人)的亲密人。
此外,当存在到此时间点为止搜索到的所有搜索人(包括指定人和其它搜索人)的亲密人时,中央处理单元20还生成拍摄位置图标。
然后,中央处理单元20将人物标识信息与新的搜索人的脸图标以相关联的方式记录在RAM 22中。此外,中央处理单元20还另外地将新生成的拍摄位置图标,以及表示被检测用于生成该拍摄位置图标的拍摄位置的拍摄位置信息以相关联的方式记录在RAM 22中。
此外,中央处理单元20再次生成人物呈现图像数据,以添加新搜索人的脸图标、新生成的拍摄位置图标以及基准人与搜索人(包括指定人和其它搜索人)的关系。然后,中央处理单元20将内容已如此被更新的人物呈现图像数据发送给数字处理单元31。
在从中央处理单元20提供来内容已被更新的人物呈现图像数据的情况中,每当单位图像数据被生成时,数字处理单元31将该单位图像数据与更新后的人物呈现图像数据而非更新前的人物呈现图像数据相合成,以生成合成图像数据。
然后,数字处理单元31顺序地将合成图像数据发送给液晶面板7B。因此,如图22所示,在图22中,相同的标号被附于与图20中相对应的部分,数字处理单元31显示拍摄状态呈现图像40,并且还将人物呈现图像90显示在该拍摄状态呈现图像40之上。
该人物呈现图像90具有基本上与上面的人物呈现图像80相同的配置,在人物呈现图像90中,被添加了新的脸图标91和92以及拍摄位置图标93。
因此,当在液晶面板7B上所显示的人物呈现图像80上指定了搜索人并且对人的搜索被请求时,响应于此,基于被指定的搜索人,中央处理单元20可以进一步搜索并呈现人。
然后,在人物呈现图像90被显示在液晶面板7B上的情况中,中央处理单元20允许用户通过敲击操作在该人物呈现图像90内指定新的脸图标91和92以及新的拍摄位置图标93,来作为用于照片图像搜索的搜索键。
实际上,当在人物呈现图像80(90)被显示在液晶面板7B上的状态中用户通过敲击操作指定了脸图标44(82至84、91、92)时,以与上述相同的方式,中央处理单元20生成脸搜索照片图像以将其显示在液晶面板7B上。
此外,在将脸搜索照片图像显示在液晶面板7B上之后,中央处理单元20可以以与上述相同的方式根据敲击操作将显示切换为照片图像,并且还可以从照片图像返回到脸搜索照片图像的显示。
此外,在将脸搜索照片图像显示在液晶面板7B上之后,以与上述相同的方式,当用户通过敲击操作指定了脸图标时,中央处理单元20将拍摄状态呈现图像40以及人物呈现图像80(90)显示在液晶面板7B上来取代脸搜索照片图像。
以这种方式,中央处理单元20允许用户指定作为脸图标44的基准人以观看该被指定的基准人的照片图像。此外,中央处理单元20还允许用户指定基于作为脸图标82(至84、91、92)的基准人搜索到的搜索人,从而允许用户适当地观看被指定搜索人的照片图像。
另一方面,当用户通过敲击操作指定了人物呈现图像80(90)内的拍摄位置图标85(86、87、93)时,中央处理单元20从RAM 22中读出与该被指定的拍摄位置图标85(86、87、93)相对应的拍摄位置信息。
此时,中央处理单元20设置与以拍摄位置信息所指示的拍摄位置为中心的上面的搜索区域相同的搜索区域。此外,中央处理单元20以与上述相同的方式搜索表示该搜索区域内的拍摄位置的拍摄位置信息来作为搜索拍摄位置信息,并且还通过事件来对该搜索到的搜索拍摄位置信息进行分类。此外,中央处理单元20检测根据搜索拍摄位置信息进行分类的每个事件的事件位置。
此外,中央处理单元20从记录设备33读出地图图像数据内与搜索区域相当的一部分作为区域地图图像数据。然后,中央处理单元20以与上述相同的方式生成搜索用地图图像数据,以便将该区域地图图像数据与事件位置图标相合成,并且将所生成的搜索用地图图像数据发送给数字处理单元31。
因此,中央处理单元20经由数字处理单元31将具有与上面针对图16描述的搜索用地图图像65相同配置的搜索用地图图像显示在液晶面板7B上。顺便提及,此时,中央处理单元20将表示根据搜索拍摄位置信息分类得到的事件的事件标识信息、表示该事件的事件位置的事件位置信息以及搜索键图标以相关联的方式记录在RAM 22中。
在将搜索用地图图像显示在液晶面板7B上之后,中央处理单元20可以以与上述相同的方式根据敲击操作将显示切换为事件搜索照片图像,或者可以将显示从事件搜索照片图像返回到搜索用地图图像。
此外,在将事件搜索照片图像显示在液晶面板7B上之后,中央处理单元20可以以与上述相同的方式根据敲击操作将显示切换为照片图像,或者可以将显示从照片图像返回到事件搜索照片图像。
此外,即使在将事件搜索照片图像显示在液晶面板7B上之后,以与上述相同的方式,当用户通过敲击操作指定了搜索键图标时,中央处理单元20再次显示拍摄状态呈现图像40和人物呈现图像80(90)来取代事件搜索照片图像。
以这种方式,中央处理单元20允许用户适当地指定拍摄位置作为搜索键图标,并且允许用户观看在指定拍摄位置处一起被拍照的基准人和搜索人或者多个搜索人的照片图像。
此外,中央处理单元20不仅适当地允许用户观看一起被拍照的基准人和搜索人或者多个搜索人的照片图像,而且允许用户观看在该照片拍摄被执行的事件中进行拍照并生成的其它照片图像。
顺便提及,当在人物呈现图像80(90)被显示的状态中用户对与触摸面板7A的搜索键图标相对的部分以外的部分连续地执行了两次敲击操作时,中央处理单元20控制数字处理单元31返回到液晶面板7B的显示。
在中央处理单元20的控制下,每当单位图像数据被生成时,数字处理单元31将该单位图像数据与图标呈现图像数据而非人物呈现图像数据相合成以生成合成图像数据,并且将其发送给液晶面板7B。因此,数字处理单元31将拍摄状态呈现图像40和图标呈现图像42(62)显示在液晶面板7B上来取代拍摄状态呈现图像40和人物呈现图像80(90)。
以这种方式,即使在将拍摄状态呈现图像40和人物呈现图像80(90)显示在液晶面板7B上之后,中央处理单元20也允许用户通过简单操作将该显示返回到拍摄状态呈现图像40和图标呈现图像42(62)的显示。
顺便提及,作为如上所述的对基准人物标识信息是否与亲密联系信息相关联的判断结果,当基准人物标识信息不与亲密联系信息相关联时,中央处理单元20不生成人物呈现图像80。
此外,即使在生成了人物呈现图像80之后,当指定人物标识信息不与指示基准人物标识信息以外的其它人物标识信息的亲密联系信息相关联时,中央处理单元20不更新该人物呈现图像80的内容。
注意,在本实施例的情况中,在将拍摄状态呈现图像40和人物呈现图像80(90)的显示返回到拍摄状态呈现图像40和图标呈现图像42(62)的显示之后,中央处理单元20再次执行图标生成处理、图标检测处理等。
此外,当在拍摄状态呈现图像40与图标呈现图像42(62)等一起被显示在液晶面板7B上的状态中用户以搜索利用脸作为起点执行了滑动操作时,此时,同样地,中央处理单元20认识到对人的搜索被请求。
此时,中央处理单元20从RAM 22中读出与被用户指定为滑动操作的起点的搜索利用脸相对应的人物标识信息,作为基准人物标识信息。然后,中央处理单元20以该搜索利用脸的人作为基准人,以与上述相同的方式基于基准人物标识信息,来搜索与该基准人具有高亲密度的单个人和多个人。
此外,中央处理单元20通过检测基准人和搜索人被一起拍照的拍摄位置,或者多个搜索人被一起拍照的拍摄位置,来生成拍摄位置图标。
然后,基于表示基准人和搜索人的脸的多个脸图标、拍摄位置图标,以及表示基准人与搜索人(亲密人)之间的关系的信息,中央处理单元20生成具有与上述相同配置的人呈现图像数据,以将其发送给数字处理单元31。
因此,中央处理单元20以与上面关于图20描述的相同方式,将拍摄状态呈现图像40显示在液晶面板7B上,并且还将人呈现图像显示在该拍摄状态呈现图像40之上。
然后,在将人呈现图像显示在液晶面板7B上之后,中央处理单元20适当地以与上述相同的方式,更新该人呈现图像,并且将显示切换为脸搜索照片图像、搜索用地图图像或者照片图像。
注意,在本实施例的情况中,在将拍摄状态呈现图像40与人呈现图像的显示返回到拍摄状态呈现图像40与图标呈现图像42(62)的显示之后,中央处理单元20执行图标生成处理、图标检测处理等。
1-6.图像相关信息登记处理过程
接下来,将参考图23和24描述每当执行对被摄体的照片拍摄时中央处理单元20根据图像相关信息登记程序执行的图像相关信息登记处理过程RT1。
在将根据对被摄体的照片拍摄所生成的图像文件记录在记录设备33中之后,中央处理单元20根据预先存储在ROM 21中的图像相关信息登记程序来开始图23和24所示的图像相关信息登记处理过程RT1。
在开始了图像相关信息登记处理过程RT1之后,在步骤SP1中,中央处理单元20判断在基于通过此时对被摄体拍照生成的照片图像数据的照片图像内是否检测到人的脸。
当在步骤SP1中获得了肯定结果时,这意味着此次作为被摄体的单个人或多个人被拍照,并且照片图像数据和脸检测信息从数字处理单元31被提供。当在SP1中获得了肯定结果时,中央处理单元20前进到下一步骤SP2。
在步骤SP2,中央处理单元20基于脸检测信息来确定并分析照片图像内的脸部,从而检测该脸的特征作为用于登记到搜索用数据库DB中的所登记脸特征,并且前进到下一步骤SP3。
在步骤SP3,中央处理单元20判断此时检测到的所登记脸特征是否已被登记在搜索用数据库DB中。当在该步骤SP3中获得了肯定结果时,这意味着具有此时被检测到的所登记脸特征的脸的人在数字照相机1处第一次被拍照,并且因此,所登记脸特征尚未被登记在搜索用数据库DB中。当在步骤SP3中获得了肯定结果时,中央处理单元20前进到下一步骤SP4。
在步骤SP4,中央处理单元20生成具有此时检测到的所登记脸特征的脸的人的人物标识信息,并且前进到下一步骤SP5。在步骤SP5,中央处理单元20从照片图像中裁剪出该人的脸部作为脸图像,基于该脸图像生成脸图标,并且前进到下一步骤SP6。
然后,在步骤SP6,中央处理单元20将人物标识信息登记者搜索用数据库DB中,并且前进到下一步骤SP7。此外,在步骤SP7,中央处理单元20将所登记脸特征信息、脸图标、文件标识信息、拍摄日期信息和拍摄位置信息以与人物标识信息相关联的方式登记在搜索用数据库DB中,并且前进到下一步骤SP8。
在步骤SP8,中央处理单元20判断在照片图像内检测到的所有脸的所登记脸特征是否被检测到。作为其结果,此时在照片图像内检测到的所有脸的所登记脸特征尚未被检测到,因此,当获得否定结果时,中央处理单元20返回步骤SP2。
此外,当在上面的步骤SP3中获得了否定结果时,这意味着具有此时检测到的所登记脸特征的脸的人在数字照相机1处已经被拍照,因此,所登记脸特征已经被登记在搜索用数据库DB中。当在步骤SP3中获得这样的否定结果时,中央处理单元20前进到步骤SP9。
在步骤SP9,中央处理单元20确定搜索用数据库DB中与此时检测到的所登记脸特征相对应的人物标识信息,并且前进到下一步骤SP10。
在步骤SP10,中央处理单元20将文件标识信息、拍摄日期信息和拍摄位置信息以与所确定的人物标识信息相关联的方式登记在搜索用数据库DB中,并且前进到步骤SP8。
当在照片图像内检测到的脸的数目为一个时,中央处理单元20执行步骤SP2至SP8的处理与步骤SP2、SP3、SP9、SP10和SP8的处理中的一者。
此外,当在照片图像内检测到的脸的数目大于一个时,中央处理单元20适当地重复执行步骤SP2至SP8中的处理,以及步骤SP2、SP3、SP9、SP10和SP8的处理与脸的数目相当的次数。
以这种方式,中央处理单元20针对在照片图像内检测到的每个脸,将人物标识信息、所登记脸特征信息、脸图标、文件标识信息、拍摄日期信息和拍摄位置信息或者文件标识信息、拍摄日期信息和拍摄位置信息登记在搜索用数据库DB中。
在步骤SP8,中央处理单元20已检测到在照片图像内检测到的所有脸的所登记脸特征,因此,对文件标识信息、拍摄日期信息和拍摄位置信息等的登记已完成,因此,当获得了肯定结果时,中央处理单元20前进到步骤SP11。
在步骤SP11,中央处理单元20判断在照片图像内检测到的脸的数目是否大于一个。当在步骤SP11中获得了肯定结果时,这意味着此次多个人被一起拍照。当在步骤SP11中获得了这样的肯定结果时,中央处理单元20前进到下一步骤SP12。
在步骤SP12,中央处理单元20基于脸检测信息以及与在照片图像内检测到的多个人有关的脸部的分析结果,确定此次被一起拍照的人的亲密度,并且前进到步骤SP13。
在步骤SP13,中央处理单元20判断此次被一起拍照的多个人中是否存在具有高亲密度的人。当在步骤SP13获得肯定结果时,这意味着亲密的人已被一起拍照。当在步骤SP13获得肯定结果时,中央处理单元20前进到下一步骤SP14。
在步骤SP14,中央处理单元20将用于将具有高亲密度的人相互联系起来的亲密度联系信息以与具有高亲密度的这些人的人物标识信息相关联的方式登记在搜索用数据库DB中,并且前进到步骤SP15。
顺便提及,当在上面的步骤SP1中获得否定结果时,这意味着人以外的风景、建筑、动物等作为此次的被摄体被拍照。当在步骤SP1中获得这样的否定结果时,中央处理单元20前进到步骤SP16。
然后,在步骤SP16中,中央处理单元20将文件标识信息、拍摄日期信息和拍摄位置信息以相互关联的方式登记在搜索用数据库DB中,并且前进到步骤SP15。
在步骤SP15,中央处理单元20基于过去的和此次的照片拍摄的拍摄日期和拍摄位置,确定此次执行照片拍摄的事件,并进行到下一步骤SP17。
在步骤SP17,中央处理单元20将所确定事件的时间标识信息以与此次登记的文件标识信息、拍摄日期信息和拍摄位置信息相关联的方式登记在搜索用数据库DB中。然后,当完成了该登记时,中央处理单元20前进到下一步骤SP18,并且结束图像相关信息登记处理过程RT1。
1-7.搜索键呈现处理过程
接下来,将参考图25和26描述中央处理单元20在拍摄模式中例如根据作为图像搜索程序的一部分的搜索键呈现程序执行的搜索键呈现处理过程RT2。
当在搜索键呈现功能被设置为将被实现的状态中进入拍摄模式之后,中央处理单元20根据预先存储在ROM 21中的搜索键呈现程序来开始图25和26所示的搜索键呈现处理过程RT2。
当开始了搜索键呈现处理过程RT2时,在步骤SP21,中央处理单元20基于用于呈现搜索键的设置内容,来确定要呈现给用户的搜索键的类型,并且前进到下一步骤SP22。
在步骤SP22,中央处理单元20根据所确定的搜索键的类型,以重叠在液晶面板7B上所显示的拍摄状态呈现图像40上的方式来显示上面的两类图标布局图像41和61中的一个。
然后,当相机位置图标和脸图标都被设置以便被呈现为搜索键时,中央处理单元20执行用于呈现相机位置图标的从步骤SP23起的处理,以及用于呈现脸图标的从步骤SP31起的处理。
此外,当仅相机位置图标被设置以便被呈现为搜索键时,中央处理单元20执行用于呈现相机位置图标的从步骤SP23起的处理。此外,当仅脸图标都被设置以便被呈现为搜索键时,中央处理单元20执行用于呈现脸图标的从步骤SP31起的处理。
在呈现相机位置图标的情况中,在步骤SP23,中央处理单元20利用GPS连续地检测相机位置多次,并且前进到下一步骤SP24。
在步骤SP24,中央处理单元20判断是否已精确地检测到相机位置。当在步骤SP24获得了肯定结果时,这意味着连续被检测多次的相机位置具有极小的不规律性,并且因此,已精确地检测到相机位置。
当在步骤SP24获得这样的肯定结果时,中央处理单元20取连续多次检测到的相机位置中的中间位置作为数字照相机1的当前相机位置,并且前进到下一步骤SP25。
在步骤SP25,中央处理单元20判断当前相机位置是否被用于搜索拍摄位置。当在步骤SP25获得肯定结果时,这意味着在此拍摄模式中当前相机位置已第一次被检测用于搜索拍摄位置。
此外,这样的肯定结果表示上次被确定用于检测拍摄位置的相机位置离当前相机位置较远,并且上次确定的相机位置必须被改变为当前相机位置以将当前相机位置反映到对拍摄位置的搜索中。因此,当在步骤SP25中获得了这样的肯定结果时,中央处理单元20前进到下一步骤SP26。
在步骤SP26,中央处理单元20判断在以当前相机位置为中心的搜寻区域内的拍摄位置是否已经被登记在搜索用数据库DB中。
当在步骤SP26获得肯定结果时,这意味着可从登记在搜索用数据库DB中的拍摄位置中搜索到在以当前相机位置为中心的搜寻区域内的拍摄位置。
因此,当在步骤SP26中获得了这样的肯定结果时,中央处理单元20将该搜寻区域设置为可以搜索到拍摄位置和照片图像的搜索区域,并且前进到下一步骤SP27。
在步骤SP27中,中央处理单元20从区域地图图像中裁剪出与搜索区域相当的以当前相机位置为中心的预定部分作为部分地图图像,基于该部分地图图像生成相机位置图标,并且前进到下一步骤SP28。
在步骤SP28,中央处理单元20判断此时生成的相机位置图标是否是将首先被布置到图标布局图像41(61)之上的相机位置图标。
当在步骤SP28获得肯定结果时,这意味着此时生成的相机位置图标在此拍摄模式中首先被生成。当在步骤SP28获得了这样的肯定结果时,中央处理单元20前进到下一步骤SP29。在步骤SP29,中央处理单元20将相机位置图标布置在与拍摄状态呈现图像40一起显示的图标布局图像41(61)之上,并且返回步骤SP23。
此外,当在步骤SP28获得否定结果时,这意味着在相机位置图标已经被生成并显示的状态中,相机位置图标此时再次被生成。当在步骤SP28获得了这样的否定结果时,中央处理单元20前进到步骤SP30。
在步骤SP30,中央处理单元20将已经被布置在与拍摄状态呈现图像40一起显示的图标布局图像41(61)之上的相机位置图标更新为此时生成的相机位置图标,并且返回步骤SP23。
顺便提及,当在上面的步骤SP24中获得了否定结果时,这意味着连续多次被检测到的相机位置的不规律性较显著,因此,相机位置的检测精确度恶化。当在步骤SP24中获得这样的否定结果时,中央处理单元20丢弃连续多次检测到的相机位置,并且返回步骤SP23。
此外,当在上面的步骤SP25中获得否定结果时,这意味着当前相机位置离上次确定的相机位置本身不远,因此,即使采用上次确定的相机位置也将获得与当前相机位置大致相同的搜索结果。因此,当在步骤SP25中获得这样的否定结果时,中央处理单元20取消使用此时检测到的当前相机位置,并且返回步骤SP23。
另外,当在上面的步骤SP26中获得否定结果时,这意味着以当前相机位置为中心的搜寻区域内的拍摄位置未被登记在搜索用数据库DB中所登记的拍摄位置中。因此,当在步骤SP26获得这样的否定结果时,中央处理单元20取消使用此时检测到的当前相机位置,并且返回步骤SP23。
以这种方式,中央处理单元20在拍摄模式期间重置执行步骤SP23至SP30中的处理,并且在定期检测到相机位置时适当地更新图标布局图像41(61)之上的相机位置图标。在拍摄模式结束时,中央处理单元20也结束步骤SP23至SP30中的处理。
在步骤SP31中呈现脸图标的情况中,中央处理单元20等待由数字处理单元31检测被反映在单位图像中的人的脸。然后,当在单位图像内检测到单个脸或多个脸并且从数字处理单元31提供来单位图像数据和脸检测信息时,中央处理单元20前进到下一步骤SP32。
在步骤SP32,中央处理单元20通过基于脸检测信息确定并分析单位图像内的单个脸部或多个脸部来检测单个脸或多个脸的特征,并且前进到下一步骤SP33。
在步骤SP33,中央处理单元20判断此时检测到的脸特征是否包括与已被设置用于搜索照片图像的搜索用脸特征相匹配的脸特征。
当在步骤SP33中获得肯定结果时,这意味着已被设置用于搜索照片图像的搜索用脸特征的脸在该设置之后随后已被拍照,或者在某个其它时间已被摄取,并且已被反映在单位图像中。当在步骤SP33中获得这样的肯定结果时,中央处理单元20前进到下一步骤SP34。
在步骤SP34,中央处理单元20改变拍摄状态呈现图像40中包围搜索用脸特征的脸的框图像46的颜色以与原始颜色不同,并前进到步骤SP35。
顺便提及,当在步骤SP33中获得否定结果时,这意味着与搜索用脸特征的脸的人不同的人此时被拍照。当在步骤SP33中获得这样的否定结果时,中央处理单元20前进到步骤SP35而不执行步骤SP34中的处理。
在步骤SP35,中央处理单元20判断在给定长度的时间是否连续检测到相同特征。当在步骤SP35中获得肯定结果时,这意味着在给定长度的时间同一人的脸被连续拍照。当在步骤SP35中获得这样的肯定结果时,中央处理单元20前进到下一步骤SP36。
在步骤SP36,中央处理单元20判断在给定长度的时间连续检测到的特征是否已经被登记在搜索用数据库DB中作为所登记脸特征。当在步骤SP36获得肯定结果时,这意味着在给定长度的时间连续检测到的特征是已经被拍照的人的脸特征,并且可用于搜索照片图像。当在步骤SP36中获得这样的肯定结果时,中央处理单元20前进到下一步骤SP37。
在步骤SP37,中央处理单元20判断指示在给定长度的时间连续检测到的特征的脸的脸图标是否被布置在图标布局图像41之上。当在步骤SP37获得肯定结果时,这意味着在给定长度的时间连续检测到的特征在此拍摄模式中尚未被设置为搜索用脸特征,并且因此,指示这些特征的脸的脸图标尚未被显示。
当在步骤SP37中获得这样的肯定结果时,中央处理单元20将在给定长度的时间连续检测到的特征设置为可用来搜索照片图像的搜索用脸特征,并且前进到下一步骤SP38。
在步骤SP38,中央处理单元20从搜索用数据库DB读出指示被设置用于此时搜索照片图像的搜索用脸特征的脸的脸图标,并且前进到下一步骤SP39。
在步骤SP39,中央处理单元20将指示被设置用于此时搜索照片图像的搜索用脸特征的脸的脸图标布置在与拍摄状态呈现图像40一起显示的图标布局图像41之上,并且返回步骤SP31。
此外,当在步骤SP37中获得否定结果时,这意味着在给定长时间再次连续检测到搜索用脸特征,因此,与这些搜索用脸特征相对应的脸图标也已经被布置在图标布局图像41之上。当在步骤SP37获得这样的否定结果时,中央处理单元20前进到步骤SP40。
在步骤SP40,中央处理单元20判断是否重新排列已经布置在与拍摄状态呈现图像40一起显示的图标布局图像41之上的脸图标。
当在步骤SP40获得肯定结果时,这意味着与在给定长时间连续检测到的搜索用脸特征相对应的脸图标的排列顺序已经根据图标布局图像41之上的另一脸图标的增加放置而从先头被下移。
换言之,该肯定结果表示:即使用户已看到设想用于搜索照片图像的、连续反映在拍摄状态呈现图像40中的脸,指示该脸的脸图标由于下移了排列顺序而未被显示,因此,用户不能指定该脸图标。因此,当在步骤SP40中获得这样的肯定结果时,中央处理单元20前进到下一步骤SP41。
然后,在步骤SP41,中央处理单元20改变图标布局图像41之上的脸图标的排列顺序,以便将与在给定长时间被连续检测到的搜索用脸特征相对应的脸图标再次布置在先头处,并且返回步骤SP31。
顺便提及,当在步骤SP40中获得否定结果时,这意味着当与在给定长时间被连续检测到的搜索用脸特征相对应的脸图标再次被布置在图标布局图像41之上的先头处之后,未另外地布置另一脸图标。因此,当在步骤SP40中获得这样的否定结果时,中央处理单元20返回步骤SP31而不改变脸图标的排列顺序。
此外,当在上面的步骤SP35中获得否定结果时,这意味着人的脸临时被拍照,因此,该脸的特征未在给定长时间被连续检测到。因此,当在步骤SP35中获得这样的否定结果时,中央处理单元20返回步骤SP31。
此外,当在上面的步骤SP36中获得否定结果时,这意味着在给定长时间被连续检测到的特征是尚未在数字照相机1处被拍照的人的脸特征,并且不能用于搜索照片图像。当在步骤SP36中获得这样的否定结果时,中央处理单元20返回步骤SP31。
以这种方式,在拍摄模式期间,中央处理单元20重复执行步骤SP31至SP41的处理,并且根据人的拍摄状况,将该人的脸特征设置为搜索用脸特征,并且还显示指示该脸的脸图标。此外,在拍摄模式结束时,中央处理单元20也结束步骤SP31至SP41的处理。
1-8.图像搜索处理过程
接下来,将参考图27至34描述中央处理单元20在拍摄模式中根据图像搜索程序执行的图像搜索处理过程RT3。
当在搜索键呈现处理功能被设置以便被实现的状态中进入拍摄模式之后,中央处理单元20根据预先存储在ROM 21中的图像搜索程序来开始图27至34所示的图像搜索处理过程RT3。
当开始了图像搜索处理过程RT3后,在步骤SP51,中央处理单元20判断用户是否通过敲击操作指定了与拍摄状态呈现图像40一起显示的图标布局图像41(61)之上的用于搜索照片图像的相机位置图标。
当在步骤SP51获得否定结果时,这意味着用户正在利用用于照片拍摄的拍摄状态呈现图像40确认被摄体的拍摄状态,或者正在选择将被指定用于搜索照片图像的搜索键,等等。当在步骤SP51获得这样的否定结果时,中央处理单元20前进到步骤SP52。
在步骤SP52,中央处理单元20判断用户是否通过敲击操作指定了与拍摄状态呈现图像40一起显示的图标布局图像41之上的用于搜索照片图像的脸图标。
当在步骤SP52获得否定结果时,这意味着用户正在利用用于照片拍摄的拍摄状态呈现图像40确认被摄体的拍摄状态,或者正在选择将被指定用于搜索照片图像的搜索键,等等。当在步骤SP52获得这样的否定结果时,中央处理单元20前进到步骤SP53。
在步骤SP53,中央处理单元20判断用户是否通过滑动操作指定了与拍摄状态呈现图像40一起显示的图标布局图像41之上的用于搜索照片图像的脸图标。
当在步骤SP53中获得否定结果时,这意味着用户正在利用用于照片拍摄的拍摄状态呈现图像40确认被摄体的拍摄状态,或者正在选择将被指定用于搜索照片图像的搜索键,等等。当在步骤SP53获得这样的否定结果时,中央处理单元20前进到步骤SP54。
在步骤SP54,中央处理单元20判断用户是否通过滑动操作指定了拍摄状态呈现图像40内的用于搜索照片图像的脸(即,反映在拍摄状态呈现图像40中的搜索利用脸)。
当在步骤SP54获得否定结果时,这意味着用户正在利用用于照片拍摄的拍摄状态呈现图像40确认被摄体的拍摄状态,或者正在选择将被指定用于搜索照片图像的搜索键,等等。当在步骤SP54获得这样的否定结果时,中央处理单元20前进到步骤SP55。
在步骤SP55,中央处理单元20判断是否结束拍摄模式。当在步骤SP55中获得否定结果时,这意味着诸如断电、切换到再现模式等之类的事情未被请求。当在步骤SP55中获得这样的否定结果时,中央处理单元20返回步骤SP51。
以这种方式,中央处理单元20以循环方式重复执行步骤SP51至SP55的处理,直到在步骤SP51至SP55之一中获得肯定结果为止。
因此,中央处理单元20等待用户指定图标布局图像41(61)之上的用于搜索照片图像的相机位置图标或脸图标,以及拍摄状态呈现图像40内的脸(搜索利用脸)。
顺便提及,当在步骤SP51中获得肯定结果时,这意味着用户请求利用相机位置搜索照片图像,并且作为其结果,图标布局图像41(61)之上的相机位置图标通过敲击操作被指定。当在步骤SP51获得这样的肯定结果时,中央处理单元20前进到下一步骤SP56。
在步骤SP56,中央处理单元20从搜索用数据库DB中所登记的拍摄位置中搜索以相机位置图标所指示的相机位置为中心的搜索区域内的拍摄位置,并且前进到下一步骤SP57。
在步骤SP57,中央处理单元20基于以与搜索到的拍摄位置相关联的方式被登记在搜索用数据库DB中的事件标识信息,来通过照片拍摄被执行的事件对搜索到的该拍摄位置进行分类,并且前进到下一步骤SP58。
在步骤SP58,中央处理单元20基于搜索到的拍摄位置以及通过该拍摄位置的事件进行的分类,来生成作为布置有事件和指示事件位置的事件位置图标的区域地图图像的搜索用地图图像,并且前进到下一步骤SP59。在步骤SP59,中央处理单元20将搜索用地图图像65显示在液晶面板7B上来取代拍摄状态呈现图像40,并且前进到下一步骤SP60。
在步骤SP60,中央处理单元20判断用户是否通过敲击操作指定了搜索用地图图像65内的事件位置图标。当在步骤SP60中获得否定结果时,这意味着用户正在选择事件位置图标以缩窄要搜索的照片图像。当在步骤SP60中获得这样的否定结果时,中央处理单元20前进到步骤SP61。
在步骤SP61,中央处理单元20判断是否将液晶面板7B上搜索用地图图像65的显示返回到拍摄状态呈现图像40和图标呈现图像42(62)的显示。
当在步骤SP61中获得否定结果时,这意味着用户仍然正在选择事件位置图标以缩窄要搜索的照片图像。当在步骤SP61中获得这样的否定结果时,中央处理单元20返回步骤SP60。
以这种方式,然后,中央处理单元20重复执行步骤SP60和SP61的处理,直到在步骤SP60和SP61之一中获得肯定结果为止。因此,中央处理单元20等待用户指定用于搜索照片图像的所希望的事件位置图标。
顺便提及,当在步骤SP60中获得肯定结果时,这意味着用户选择了事件位置图标以用于缩窄要搜索的照片图像。当在步骤SP60中获得这样的肯定结果时,中央处理单元20前进到下一步骤SP62。
在步骤SP62中,中央处理单元20基于用户所指定的事件位置图标从搜索用数据库DB中所登记的文件标识信息中搜索作为文件标识信息的照片图像,并且前进到下一步骤SP63。
在步骤SP63,中央处理单元20基于搜索到的照片图像的文件标识信息从记录设备33中读出搜索到的照片图像的缩略图像。然后,中央处理单元20使用该缩略图像生成事件搜索照片图像70,并且前进到下一步骤SP64。在步骤SP64,中央处理单元20将事件搜索照片图像70显示在液晶面板7B上来取代搜索用地图图像65,并且前进到下一步骤SP65。
在步骤SP65,中央处理单元20判断用户是否通过敲击操作指定了事件搜索照片图像70内的任何缩略图像。当在步骤SP65中获得否定结果时,这意味着用户正在利用缩略图像选择将显示在液晶面板7B上的照片图像。当在步骤SP65中获得这样的否定结果时,中央处理单元20前进到步骤SP66。
在步骤SP66中,中央处理单元20判断是否将液晶面板7B上的事件搜索照片图像70的显示返回到搜索用地图图像65的显示。该步骤SP66中的否定结果意味着用户正在选择将显示在液晶面板7B上的照片图像。当在步骤SP66中获得这样的否定结果时,中央处理单元20返回步骤SP65。
以这种方式,然后,中央处理单元20重复执行这些步骤SP65和SP66中的处理,直到在步骤SP65和SP66之一中获得了肯定结果为止。这样,中央处理单元210等待用户已经选择了要被显示在液晶面板7B上的照片图像。
顺便提及,当在步骤SP65中获得肯定结果时,这意味着用户选择了将显示在液晶面板7B上的照片图像。当在步骤SP65中获得了这样的肯定结果时,中央处理单元20前进到下一步骤SP67。
在步骤SP67,中央处理单元20从记录设备33读出用户所指定的照片图像的图像文件。此外,基于该图像文件,中央处理单元20将用户选择的照片图像显示在液晶面板7B上来取代事件搜索照片图像70,并且前进到下一步骤SP68。
在步骤SP68,中央处理单元20等待用户指示将显示在液晶面板7B上的照片图像返回到事件搜索照片图像70的显示。然后,当用户指示了将液晶面板7B的显示从照片图像返回到事件搜索照片图像70时,中央处理单元20返回步骤SP64。
因此,当要显示的照片图像作为事件搜索照片图像70之上的缩略图像被选择时,中央处理单元20显示所选照片图像以允许用户观看它。
顺便提及,当在步骤SP66中获得肯定结果时,这意味着用户完成了对通过事件被缩窄并被检测的照片图像的观看,并且已指示再次在液晶面板7B上显示搜索用地图图像65。当在步骤SP66中获得这样的肯定结果时,中央处理单元20返回步骤SP59。
因此,中央处理单元20允许用户再次选择搜索用地图图像65之上的用于缩窄要搜索的照片图像的事件位置图标。因此,中央处理单元20允许用户在适当地切换事件的同时搜索并观看不同的照片图像。
此外,当在步骤SP61中获得肯定结果时,这意味着用户已指示再次将拍摄状态呈现图像40和图标呈现图像42(62)显示在液晶面板7B上以用于通过另一搜索键来搜索照片图像或者进行照片拍摄。当在步骤SP61中获得这样的肯定结果时,中央处理单元20返回步骤SP51。
顺便提及,当在步骤SP52中获得肯定结果时,这意味着用户请求利用人的脸来搜索照片图像,并且作为其结果,已通过敲击操作指定了图标布局图像41之上的脸图标。当在步骤SP52中获得这样的肯定结果时,中央处理单元20前进到下一步骤SP69。
在步骤SP69,中央处理单元20基于用户指定的文件图标从搜索用数据库DB中所登记的文件标识信息中搜索作为文件标识信息的照片图像。
即是说,中央处理单元20搜索反映了用户指定的人的脸的、作为文件标识信息的照片图像,并且前进到下一步骤SP70。
在步骤SP70中,中央处理单元20基于搜索到的照片图像的文件标识信息从记录设备33读出搜索到的照片图像的缩略图像。然后,中央处理单元20使用该缩略图像来生成脸搜索照片图像75,并且前进到下一步骤SP71。
然后,在步骤SP71,中央处理单元20将脸搜索照片图像75显示在液晶面板7B上来取代拍摄状态呈现图像40和图标呈现图像42,并且前进到下一步骤SP72。
在步骤SP72中,中央处理单元20判断用户是否通过敲击操作指定了脸搜索照片图像75内的任何缩略图像。当在步骤SP72中获得否定结果时,这意味着用户正在利用缩略图像选择将显示在液晶面板7B上的照片图像。当在步骤SP72中获得这样的否定结果时,中央处理单元20前进到步骤SP73。
在步骤SP73中,中央处理单元20判断是否将液晶面板7B上脸搜索照片图像75的显示返回到拍摄状态呈现图像40和图标呈现图像42的显示。
当在步骤SP73中获得否定结果时,这意味着用户正在选择将显示在液晶面板7B上的照片图像。当在步骤SP73中获得这样的否定结果时,中央处理单元20返回到步骤SP72。
以这种方式,然后,中央处理单元20重复执行步骤SP72和SP73的处理直到在步骤SP72和SP73之一中获得了肯定结果为止。因此,中央处理单元20等待用户选择将显示在液晶面板7B上的照片图像。
顺便提及,当在步骤SP72中获得肯定结果时,这意味着用户已选择了将显示在液晶面板7B上的照片图像。当在步骤SP72中获得这样的肯定结果时,中央处理单元20前进到下一步骤SP74。
在步骤SP74,中央处理单元20从记录设备33读出用户指定的照片图像的图像文件。此外,中央处理单元20基于该图像文件将用户选择的照片图像显示在液晶面板7B上来取代脸搜索照片图像75,并且前进到下一步骤SP75。
在步骤SP75中,中央处理单元20等待用户指示将显示在液晶面板7B上的照片图像返回到脸搜索照片图像75的显示。然后,当用户已指示将显示在液晶面板7B上的照片图像返回到脸搜索照片图像75的显示时,中央处理单元20返回步骤SP71。
以这种方式,当要显示的照片图像作为脸搜索照片图像75之上的缩略图像被选择时,中央处理单元20显示所选照片图像以允许用户观看它。
顺便提及,当在步骤SP73中获得肯定结果时,这意味着用户完成了对通过人的脸搜索到的照片图像的观看,并且已指示再次在液晶面板7B上显示拍摄状态呈现图像40和图标呈现图像42。当在步骤SP73中获得这样的肯定结果时,中央处理单元20返回步骤SP51。
顺便提及,当在步骤SP53中获得肯定结果时,这意味着用户利用与任意选择的基准人亲密的人来请求搜索照片图像,并且已通过滑动操作指定了图标布局图像41之上的脸图标。
换言之,这样的肯定结果表示用户已基于被指定为图标布局图像41之上的脸图标的基准人来请求搜索反映了与该基准人亲密的人的照片图像。当在步骤SP53中获得了这样的肯定结果时,中央处理单元20前进到下一步骤SP76。
在步骤SP76中,中央处理单元20利用搜索用数据库DB来判断在数字照相机1处被拍照的人中是否存在与被用户指定为脸图标的基准人亲密的人。
当在步骤SP76中获得否定结果时,这意味着与用户指定的基准人亲密的人尚未在数字照相机1处被拍照。当在步骤SP76中获得这样的否定结果时,中央处理单元20返回步骤SP51。
另一方面,当在步骤SP76获得肯定结果时,这意味着与用户指定的基准人亲密的人已被数字照相机1拍照。当在步骤SP76中获得这样的肯定结果时,中央处理单元20前进到步骤SP77。
在步骤SP77,中央处理单元20基于与基准人的人物标识信息相关联的登记的亲密联系信息,来从搜索用数据库DB读出与该基准人具有亲密关系的人的脸图标,并且前进到下一步骤SP78。
在步骤SP78,中央处理单元20使用搜索用数据库DB来搜索基准人以及与该基准人亲密的人一起被拍照的拍摄位置,并且前进到下一步骤SP79。
在步骤SP79,中央处理单元20基于包括检测到的拍摄位置的部分地图图像来生成指示该拍摄位置的拍摄位置图标,并且前进到下一步骤SP80。
在步骤SP80,中央处理单元20使用脸图标和拍摄位置图标生成人物呈现图像80,并且前进到下一步骤SP81。然后,在步骤SP81,中央处理单元20以重叠在液晶面板7B上所显示的拍摄状态呈现图像40之上的方式来显示人物呈现图像80,并且前进到下一步骤SP82。
在步骤SP82,中央处理单元20判断用户是否通过滑动操作指定了人物呈现图像80内的脸图标。当在步骤SP82中获得否定结果时,这意味着用户正在选择将用于搜索照片图像的人或拍摄位置。当在步骤SP82中获得这样的否定结果时,中央处理单元20前进到步骤SP83。
在步骤SP83,中央处理单元20判断用户是否通过敲击操作指定了人物呈现图像80内的脸图标。当在步骤SP83中获得否定结果时,这也表示用户正在选择将用于搜索照片图像的人或拍摄位置。当在步骤SP83中获得这样的否定结果时,中央处理单元20前进到步骤SP84。
在步骤SP84,中央处理单元20判断用户是否通过敲击操作指定了人物呈现图像80内的拍摄位置图标。当在步骤SP84获得否定结果时,这也表示用户正在选择将用于搜索照片图像的人或拍摄位置。当在步骤SP84中获得这样的否定结果时,中央处理单元20前进到步骤SP85。
在步骤SP85,中央处理单元20判断是否将液晶面板7B上的拍摄状态呈现图像40与人物呈现图像80的显示返回到拍摄状态呈现图像40与图标呈现图像42的显示。
当在步骤SP85中获得否定结果时,这也表示用户正在选择将用于搜索照片图像的人或拍摄位置。当在步骤SP85中获得这样的否定结果时,中央处理单元20前进到步骤SP82。
以这种方式,然后,中央处理单元20重复执行步骤SP82至SP85的处理直到在步骤SP82至SP85之一中获得了肯定结果为止。因此,中央处理单元20等待用户指定人物呈现图像80内的脸图标或拍摄位置图标。
顺便提及,当在步骤SP82中获得肯定结果时,这意味着用户已通过滑动操作指定了人物呈现图像80内的基准人以外的人的脸图标,以增加可用于搜索照片图像的人的数目。
换言之,该肯定结果表示用户已基于新被指定为图标布局图像41之上的脸图标的被指定人,请求搜索反映了与该被指定人亲密的新人的照片图像。当在步骤SP82获得了这样的肯定结果时,中央处理单元20前进到下一步骤SP86。
在步骤SP86,中央处理单元20使用搜索用数据库DB来判断在数字照相机1处拍照的人中是否存在与被用户指定为脸图标的被指定人亲密的人。
当在步骤SP86中获得否定结果时,这意味着与用户指定的被指定人亲密的人尚未在数字照相机1处被拍照。当在步骤SP86中获得这样的否定结果时,中央处理单元20返回步骤SP82。
另一方面,当在步骤SP86获得肯定结果时,这意味着与用户指定的被指定人亲密的人已被数字照相机1拍照。当在步骤SP86中获得这样的肯定结果时,中央处理单元20前进到步骤SP87。
在步骤SP87,中央处理单元20基于与被指定人的人物标识信息相关联的登记的亲密联系信息,来从搜索用数据库DB读出与被指定人具有亲密关系的新人的脸图标,并且前进到下一步骤SP88。
在步骤SP88,中央处理单元20使用搜索用数据库DB来检测被指定人以及与该被指定人亲密的人一起被拍照的拍摄位置,并且前进到下一步骤SP89。
在步骤SP89,中央处理单元20基于包括检测到的拍摄位置的部分地图图像来生成指示该拍摄位置的拍摄位置图标,并且前进到下一步骤SP90。
在步骤SP90,中央处理单元20使用新获得的脸图标和拍摄位置图标来更新人物呈现图像80,并且前进到下一步骤SP91。然后,在步骤SP91,中央处理单元20以重叠在液晶面板7B上所显示的拍摄状态呈现图像40之上的方式来显示更新之后的人物呈现图像90以取代更新之前的人物呈现图像80,并且前进到下一步骤SP92。
在步骤SP92,中央处理单元20判断用户是否通过敲击操作指定了人物呈现图像90内的脸图标。当在步骤SP92中获得否定结果时,这意味着用户正在选择将用于搜索照片图像的人或拍摄位置。当在步骤SP92中获得这样的否定结果时,中央处理单元20前进到步骤SP93。
在步骤SP93,中央处理单元20判断用户是否通过敲击操作指定了人物呈现图像90内的拍摄位置图标。当在步骤SP93中获得否定结果时,这也表示用户正在选择将用于搜索照片图像的人或拍摄位置。当在步骤SP93中获得这样的否定结果时,中央处理单元20前进到步骤SP94。
在步骤SP94,中央处理单元20判断是否将针对液晶面板7B的拍摄状态呈现图像40与人物呈现图像90的显示返回到拍摄状态呈现图像40与图标呈现图像42的显示。
当在步骤SP94获得否定结果时,这也表示用户正在选择将用于搜索照片图像的人或拍摄位置。当在步骤SP94中获得这样的否定结果时,中央处理单元20前进到步骤SP92。
以这种方式,然后,中央处理单元20重复执行这些步骤SP92和SP94的处理,直到在步骤SP92和SP94之一中获得肯定结果为止。因此,中央处理单元20等待用户指定人物呈现图像90内的脸图标或拍摄位置图标。
顺便提及,当在步骤SP92中获得肯定结果时,这意味着用户利用人的脸请求搜索照片图像,并且作为其结果,已通过敲击操作指定了人物呈现图像90内的脸图标。当在步骤SP92中获得这样的肯定结果时,中央处理单元20前进到下一步骤SP95。
在步骤SP95,中央处理单元20基于用户指定的脸图标来从登记在搜索用数据库DB中的文件标识信息中搜索作为文件标识信息的照片图像。
即是说,中央处理单元20搜索其中反映了用户指定的脸图标所指示的脸的人的、作为文件标识信息的照片图像,并且前进到下一步骤SP96。
在步骤SP96中,中央处理单元20基于搜索到的照片图像的文件标识信息从记录设备33读出该搜索到的照片图像的缩略图像。然后,中央处理单元20使用该缩略图像来生成与上述相同的脸搜索照片图像,并且前进到下一步骤SP97。
然后,在步骤SP97,中央处理单元20将脸搜索照片图像显示在液晶面板7B上来取代拍摄状态呈现图像40和人物呈现图像90,并且前进到下一步骤SP98。
在步骤SP98,中央处理单元20判断用户是否通过敲击操作指定了脸搜索照片图像内的任何缩略图像。当在步骤SP98中获得否定结果时,这意味着用户正在利用缩略图像选择将显示在液晶面板7B上的照片图像。当在步骤SP98中获得这样的否定结果时,中央处理单元20前进到步骤SP99。
在步骤SP99中,中央处理单元20判断是否将液晶面板7B上脸搜索照片图像的显示返回到拍摄状态呈现图像40和人物呈现图像90的显示。
当在步骤SP99中获得否定结果时,这意味着用户正在选择将显示在液晶面板7B上的照片图像。当在步骤SP99中获得这样的否定结果时,中央处理单元20返回到步骤SP98。
以这种方式,然后,中央处理单元20重复执行这些步骤SP98和SP99的处理直到在步骤SP98和SP99之一中获得了肯定结果为止。因此,中央处理单元20等待用户选择将显示在液晶面板7B上的照片图像。
顺便提及,当在步骤SP98中获得肯定结果时,这意味着用户已选择了将显示在液晶面板7B上的照片图像。当在步骤SP98中获得这样的肯定结果时,中央处理单元20前进到下一步骤SP100。
在步骤SP100,中央处理单元20从记录设备33读出用户指定的照片图像的图像文件。此外,中央处理单元20基于该图像文件将用户选择的照片图像显示在液晶面板7B上来取代脸搜索照片图像,并且前进到下一步骤SP101。
在步骤SP101中,中央处理单元20等待用户指示将显示在液晶面板7B上的照片图像返回到脸搜索照片图像的显示。然后,当用户已指示将液晶面板7B的显示从照片图像返回到脸搜索照片图像时,中央处理单元20返回步骤SP97。
以这种方式,当要显示的照片图像作为脸搜索照片图像之上的缩略图像被选择时,中央处理单元20将所选择的照片图像显示在液晶面板7B上以供用户观看。
顺便提及,当在步骤SP99中获得肯定结果时,这意味着用户完成了对通过任意选择的一个人的脸搜索到的照片图像的观看,并且已指示再次在液晶面板7B上显示拍摄状态呈现图像40和人物呈现图像90。当在步骤SP99中获得这样的肯定结果时,中央处理单元20返回步骤SP91。
顺便提及,当在步骤SP93中获得肯定结果时,这意味着用户利用拍摄位置请求搜索照片图像,并且作为其结果,已通过敲击操作指定了人物布局图像90内的拍摄位置图标。当在步骤SP93中获得了这样的肯定结果时,中央处理单元20前进到下一步骤SP102。
在步骤SP102中,中央处理单元20从搜索用数据库DB中所登记的拍摄位置中搜索在以拍摄位置图标所指示的拍摄位置为中心的搜索区域内的另一拍摄位置,并且前进到下一步骤SP103。
在步骤SP103,中央处理单元20基于以与该搜索到的拍摄位置相关联的方式登记在搜索用数据库DB中的事件标识信息,来通过照片拍摄被执行的事件对该搜索到的拍摄位置进行分类,并且前进到下一步骤SP104。
在步骤SP104,中央处理单元20基于搜索到的拍摄位置以及通过该拍摄位置的事件进行的分类,来生成作为布置有事件和指示事件位置的事件位置图标的区域地图图像的搜索用地图图像。
然后,中央处理单元20前进到下一步骤SP105,从而在该步骤SP105中将搜索用地图图像显示在液晶面板7B上来取代人物呈现图像90,并且前进到下一步骤SP106。
在步骤SP106,中央处理单元20判断用户是否通过敲击操作指定了搜索用地图图像内的事件位置图标。当在步骤SP106中获得否定结果时,这意味着用户正在选择事件位置图标以缩窄要搜索的照片图像。当在步骤SP106中获得这样的否定结果时,中央处理单元20前进到步骤SP107。
在步骤SP107,中央处理单元20判断是否将液晶面板7B上搜索用地图图像的显示返回到拍摄状态呈现图像40和人物呈现图像90的显示。
当在步骤SP107中获得否定结果时,这意味着用户仍然正在选择事件位置图标以缩窄要搜索的照片图像。当在步骤SP107中获得这样的否定结果时,中央处理单元20返回步骤SP106。
以这种方式,然后,中央处理单元20重复执行步骤SP106和SP107的处理,直到在步骤SP106和SP107之一中获得肯定结果为止。因此,中央处理单元20等待用户指定用于搜索照片图像的所希望的事件位置图标。
顺便提及,当在步骤SP106中获得肯定结果时,这意味着用户选择了事件位置图标以用于缩窄要搜索的照片图像。当在步骤SP106中获得这样的肯定结果时,中央处理单元20前进到下一步骤SP108。
在步骤SP108中,中央处理单元20基于用户所指定的事件位置图标从搜索用数据库DB中所登记的文件标识信息中搜索作为文件标识信息的照片图像,并且前进到下一步骤SP109。
在步骤SP109,中央处理单元20基于搜索到的照片图像的文件标识信息从记录设备33中读出搜索到的照片图像的缩略图像。然后,中央处理单元20使用该缩略图像生成事件搜索照片图像,并且前进到下一步骤SP110。在步骤SP110,中央处理单元20将事件搜索照片图像显示在液晶面板7B上来取代搜索用地图图像,并且前进到下一步骤SP111。
在步骤SP111,中央处理单元20判断用户是否通过敲击操作指定了事件搜索照片图像内的任何缩略图像。当在步骤SP111中获得否定结果时,这意味着用户正在利用缩略图像选择将显示在液晶面板7B上的照片图像。当在步骤SP111中获得这样的否定结果时,中央处理单元20前进到步骤SP112。
在步骤SP112中,中央处理单元20判断是否将液晶面板7B上的事件搜索照片图像的显示返回到搜索用地图图像的显示。当在该步骤SP112中获得否定结果时,这意味着用户正在选择将显示在液晶面板7B上的照片图像。当在步骤SP112中获得这样的否定结果时,中央处理单元20返回步骤SP111。
以这种方式,然后,中央处理单元20重复执行这些步骤SP111和SP112中的处理,直到在步骤SP111和SP112之一中获得了肯定结果为止。因此,中央处理单元20等待用户选择将显示在液晶面板7B上的照片图像。
顺便提及,当在步骤SP111中获得肯定结果时,这意味着用户选择了将显示在液晶面板7B上的照片图像。当在步骤SP111中获得了这样的肯定结果时,中央处理单元20前进到下一步骤SP113。
在步骤SP113,中央处理单元20从记录设备33读出用户所选择的照片图像的图像文件。此外,基于该图像文件,中央处理单元20将用户选择的照片图像显示在液晶面板7B上来取代事件搜索照片图像,并且前进到下一步骤SP114。
在步骤SP114,中央处理单元20等待用户指示将显示在液晶面板7B上的照片图像返回到事件搜索照片图像的显示。然后,当用户指示了将液晶面板7B的显示从照片图像返回到事件搜索照片图像时,中央处理单元20返回步骤SP110。
因此,当要显示的照片图像作为事件搜索照片图像之上的缩略图像被选择时,中央处理单元中央处理单元20将该所选择的照片图像显示在液晶面板7B上以供用户观看。
顺便提及,当在步骤SP112中获得肯定结果时,这意味着用户完成了对通过事件被缩窄并被检测到的照片图像的观看,并且已指示再次在液晶面板7B上显示搜索用地图图像。当在步骤SP112中获得这样的肯定结果时,中央处理单元20返回步骤SP105。
因此,中央处理单元20允许用户再次选择搜索用地图图像之上的用于缩窄要搜索的照片图像的事件位置图标。因此,中央处理单元20允许用户在适当地切换事件的同时搜索并观看不同的照片图像。
此外,当在步骤SP107中获得肯定结果时,这意味着用户已指示将搜索用地图图像的显示返回到人物呈现图像90的显示,以搜索与基准人或被指定人亲密的或者在另一拍摄位置的人的照片图像。当在步骤SP107中获得这样的肯定结果时,中央处理单元20返回步骤SP91。
顺便提及,当在步骤SP83中获得肯定结果时,这意味着用户请求利用人的脸来搜索照片图像,并且作为其结果,已通过敲击操作指定了人物呈现图像80内的脸图标。当在步骤SP83中获得这样的肯定结果时,中央处理单元20前进到下一步骤SP95。
此外,当在步骤SP84中获得肯定结果时,这意味着用户已经请求利用拍摄位置来搜索照片图像,并且作为其结果,已通过敲击操作指定了人物呈现图像80内的拍摄位置图标。当在步骤SP84中获得了这样的肯定结果时,中央处理单元20前进到步骤SP102。
即是说,当利用更新之前的人物呈现图像80和更新之后的人物呈现图像80中的一者来搜索照片图像时,中央处理单元20基本上执行相同的处理。然而,当利用更新之前的人物呈现图像90来促进用于搜索照片图像的处理,并且将显示从脸搜索照片图像或搜索用地图图像被显示的状态返回到人物呈现图像的显示时,中央处理单元20返回步骤SP81。
顺便提及,当在步骤SP54中获得肯定结果时,这意味着用户请求利用与任意选择的人亲密的人来搜索照片图像,并且作为其结果,已通过滑动操作指定了拍摄状态呈现图像40内的脸(搜索利用脸)。
换言之,这样的肯定结果表示,基于被指定为反映在拍摄状态呈现图像40中的脸的人,用户请求搜索反映了与该人亲密的人的照片图像。当在步骤SP54中获得这样的肯定结果时,中央处理单元20前进到下一步骤SP115。
在步骤SP115,中央处理单元20使用搜索用数据库DB来判断在被数字照相机1拍照的人中是否存在与被用户指定为拍摄状态呈现图像40内的脸的人亲密的人。
当在步骤SP115中获得否定结果时,这意味着与用户所指定的人亲密的人尚未被数字照相机1拍照。当在步骤SP115中获得这样的否定结果时,中央处理单元20返回步骤SP51。
另一方面,当在步骤SP115中获得肯定结果时,这意味着与用户所指定的人亲密的人已被数字照相机1拍照。当在步骤SP115中获得这样的肯定结果时,中央处理单元20前进到步骤SP77。
此外,当在上面的步骤SP55中获得肯定结果时,这意味着用户请求断电或切换到再现模式等以结束拍摄模式。当在步骤SP55中获得这样的肯定结果时,中央处理单元20前进到步骤SP116,以结束图像搜索处理过程RT3。
1-9.实施例的操作和优点
在上面的配置中,在拍摄模式时,数字照相机1的中央处理单元20连续地摄取被摄体的图像以生成拍摄状态呈现图像40,并且将其显示在液晶面板7B上。此外,数字照相机1的中央处理单元20根据诸如何种被摄体正被连续摄取之类的拍摄状况来将用于照片图像搜索的搜索键与拍摄状态呈现图像40一起显示在液晶面板7B上。
在此状态中,当用户指定了与拍摄状态呈现图像40一起显示在液晶面板7B上的搜索键时,数字照相机1的中央处理单元20基于该被指定的搜索键来搜索照片图像。然后,数字照相机1的中央处理单元20将照片图像的搜索结果显示在液晶面板7B上来取代拍摄状态呈现图像40。
即是说,1在拍摄模式时根据拍摄状况自动地呈现搜索键,并且当用户指定了该搜索键时,根据此来搜索照片图像。
因此,在拍摄模式时,即使当以被摄体或拍摄地点为触发来请求搜索照片图像,数字照相机1也允许用户执行对照片图像的搜索而无需用户执行复杂的操作(例如模式切换操作或针对每个类别的元数据选择操作)。
根据上面的配置,当在拍摄模式中时,数字照相机1在连续地拍照摄取被摄体的图像以生成拍摄状态呈现图像40并将其显示在液晶面板7B上的同时,根据被摄体的拍摄状况来将用于照片图像搜索的搜索键与拍摄状态呈现图像40一起显示在液晶面板7B上。因此,在拍摄模式时即使以被摄体或拍摄地点为触发来请求搜索照片图像,数字照相机1也允许用户指定用于搜索照片图像的搜索键而无需用户执行复杂的操作。因此,即使在拍摄模式时请求搜索照片图像,数字照相机1也可以容易地处理该搜索请求。
实际上,当连续摄取作为被摄体的人的图像时,数字照相机1从拍摄状态呈现图像40检测该人的脸,并且将指示该脸的脸图标或者反映在拍摄状态呈现图像40中的该脸呈现作为搜索键。
因此,即使用户看到了将被拍照的人并且已请求搜索照片图像,数字照相机1也可以通过允许用户指定脸图标或反映在拍摄状态呈现图像40中的脸以用于该搜索键,从而搜索反映了将被拍照的该人的照片图像。
此外,在数字照相机1中,敲击操作和与敲击操作不同的滑动操作被准备作为用于指定脸图标或反映在拍摄状态呈现图像40中的脸的方法。当用户通过敲击操作指定了脸图标时,数字照相机1仅搜索反映了具有该脸图标所指示的脸的人的照片图像。
此外,当用户通过滑动操作指定了脸图标或者反映在拍摄状态呈现图像40中的脸时,数字照相机1搜索反映了与要被拍照的人亲密的人的照片图像。
因此,无论反映了要被拍照的人的照片图像如何,即使以要被拍照的人作为触发,因与该人亲密的人已被记住,因此数字照相机1可以容易地应对此,并且还可以允许用户搜索反映了该亲密人的照片图像。
此外,数字照相机1检测当前相机位置以将拍摄地点确定为被摄体的拍摄状况,并且将指示该相机位置的相机位置图标呈现为搜索键。
因此,即使以拍摄地点作为触发请求搜索照片图像,数字照相机1也允许用户指定相机位置图标作为搜索键,从而可以搜索到在当前相机位置附近摄取并累积的照片图像。
此外,数字照相机1由此可以处理以拍摄地点作为触发的照片图像搜索请求,并且因此不仅可以容易地搜索反映了作为被摄体的人的照片图像,而且可以搜索反映了人以外的风景、建筑、动物等的照片图像。
此外,数字照相机1被配置为在用于拍照摄取物体的图像的拍摄模式中执行对照片图像的搜索。因此,即使在被摄体被拍照并且立即观看通过该照片拍摄获得的照片图像的请求被作出的情况中,数字照相机1也可以搜索该照片图像以允许用户观看它,而无需用户执行模式切换操作。
2.修改
2-1.修改1
注意,在上面的实施例中,描述了在拍摄模式时适当地更新相机位置图标的情况。然而,本实施例不限于此,并且可以进行这样的布置,其中,以与脸图标相同的方式,每当相机位置图标被生成时,所生成的相机位置图标被附加地显示到图标布局图像之上。
因此,在本发明中,在顺序地改变拍摄地点的同时执行照片拍摄的情况中,即使在改变了拍摄地点之后基于改变之前的拍摄端点来请求搜索照片图像,也可以通过允许用户指定与改变之前的拍摄地点相对应的相机位置图标来搜索照片图像。
此外,在本发明中,对于脸图标,除了根据对被拍照的人的脸的检测来顺序地添加脸图标之外,还可以进行这样的布置,其中,设置了添加的上限,即使在获得了脸图标之后,该脸图标被添加/更新以便不超过该上限。
2-2.修改2
此外,在上面的实施例中,描述了脸图标与所登记脸信息一起被登记在搜索用数据库DB中的情况。然而,本发明不限于此,还可以进行这样的布置,其中,脸图标被登记在搜索用数据库DB中,并且每当检测到的脸的特征被设置为搜索用脸特征时,指示该脸的脸图标被生成。
2-3.修改3
此外,在上面的实施例中,描述了是否在拍摄模式中呈现搜索键、要呈现的搜索键的类型被选择性的设置的情况。然而,本发明不限于此,并且可以进行这样的布置,其中,设置开关,从而可以在任意定时处选择是否呈现搜索键或者要呈现的搜索键的类型。
因此,在本发明中,在拍摄模式时,根据被摄体的拍摄状况,可以当场选择性地切换是否呈现搜索键或者要呈现的搜索键的类型,因此,可以提高易用性。
2-4.修改4
此外,在上面的实施例中,描述了拍摄静态3被设置在数字照相机1的壳体2的整个表面2A。然而,本发明不限于此,并且拍摄镜头还可以被设置到数字照相机1的壳体2的背面2B。因此,在本发明中,例如,用户他/她自己可以在连续地单独拍照他/她或者连续地拍照他/她以及他人时,指定搜索键以执行对照片图像的搜索。
2-5.修改5
此外,在上面的实施例中,描述了搜索设置给数字照相机1的记录设备33中所记录的照片图像的情况。然而,本发明不限于此,并且可以向数字照相机1设置能够通过网络与服务器通信的通信功能。
然后,在本发明中,尽管搜索用数据库被建立在数字照相机1的记录设备33中,登记在该搜索用数据库中的照片图像也可以通过网络保存在服务器中。因此,在本发明中,用户可以从更多照片图像中搜索所需要的照片图像。
此外,在本发明中,用于生成搜索用地图图像的地图图像数据、相机位置图标和拍摄位置图标可以在该生成时通过网络从服务器获取。
2-6.修改6
此外,在上面的实施例中,描述了反映在拍摄状态呈现图像40中的脸(搜索利用脸)被用作用于搜索亲密人的搜索键的情况。
然而,本发明不限于此,反映在拍摄状态呈现图像40中的脸(搜索利用脸)可被用作用于单独搜索反映了该脸的人的照片图像的搜索键。
此外,在本发明中,可以通过改变指定方法,来将反映在拍摄状态呈现图像40中的脸(搜索利用脸)用作用于单独搜索反映了该脸的人的照片图像的搜索键或者用于搜索亲密人的搜索键。
然后,在本发明中,可以通过将反映在拍摄状态呈现图像40中的脸(搜索利用脸)用作两种类型的搜索键,从而不显示脸图标(即,脸图标不用于搜索照片图像)。因此,在本发明中,可以防止因脸图标的显示而使拍摄状态呈现图像40的可视性恶化。
此外,在本发明中,可以进行这样的布置,其中,脸图标可被用作两种类型的搜索键,并且反映在拍摄状态呈现图像40中的脸(搜索利用脸)不被用作搜索键(即,不被设置为搜索键)。
此外,在本发明中,脸图标和反映在拍摄状态呈现图像40中的脸(搜索利用脸)之一被用作用于仅搜索反映了具有该脸的人的照片图像的搜索键。
此外,在本发明中,脸图标和反映在拍摄状态呈现图像40中的脸(搜索利用脸)中的另一个被用作用于搜索反映了与具有该脸的人亲密的人的照片图像的搜索键。
以这种方式,在本发明中,脸图标和反映在拍摄状态呈现图像40中的脸(搜索利用脸)可被用作具有不同功能的搜索键。因此,在本发明中,脸图标和反映在拍摄状态呈现图像40中的脸(搜索利用脸)可以以同一方式来指定(例如通过敲击操作),并且可以与将指定方法减少为一种相当地来使操作得到简化。
2-7.修改7
此外,在上面的实施例中,描述了在拍摄模式时通过被连续拍照的被摄体来生成拍摄状态呈现图像40并将其显示在液晶面板7B上的情况。
然而,本发明不限于此,并且可以进行这样的布置,其中,在拍摄模式时,平常搜索键图标单独被显示在液晶面板7B上,并且根据对快门按钮9的半按压操作或全按压操作,拍摄状态呈现图像40仅在半按压操作或全按压操作期间取代搜索键被显示在液晶面板7B上。
在这样配置的情况中,在本发明中,在拍摄模式时,平常可以将更多的搜索键图标显示在液晶面板7B上,并且还可以与不显示拍摄状态呈现图像40相当地提高搜索键图标的可视性。
2-8.修改8
此外,在上面的实施例中,描述了当脸图标或反映在拍摄状态呈现图像40中的脸(搜索利用脸)通过滑动操作被指定时,用于搜索亲密人的脸图标被另外地显示的情况。
然而,本发明不限于此,并且可以进行这样的布置,其中,当反映在拍摄状态呈现图像40中的脸(搜索利用脸)与指示该脸的脸图标一起被检测到时,指示亲密人的脸的脸图标被获得,并且这些按常规被显示在液晶面板7B上。
2-9.修改9
此外,在上面的实施例中,描述了根据本发明的图像搜索设备被应用于上面针对图1至图34描述的数字照相机1的情况。然而,本发明不限于此,并且可被应用于具有照片拍摄和运动图像拍摄中的至少一种拍摄功能的诸如计算机、蜂窝电话、PDA(个人数字助理)、便携式游戏机等之类的信息处理设备。
此外,本发明可被应用于具有上面的配置以外的各种类型的配置的图像搜索设备,例如具有照片拍摄和运动图像拍摄中的至少一种拍摄功能的数字照相机、摄像机等。
2-10.修改10
此外,在上面的实施例中,根据本发明的图像搜索程序被应用于上面针对图1至34描述的预先存储在ROM 21中的图像搜索程序。然后,描述了中央处理单元20根据该图像搜索程序来执行上面针对图25和26描述的搜索键呈现处理过程RT2并且执行上面针对图27至34描述的图像搜索处理过程RT3的情况。
然而,本发明不限于此,并且数字照相机1可以通过记录了图像搜索程序的计算机可读记录介质来安装图像搜索程序。然后,中央处理单元20可以根据所安装的该图像搜索程序来执行搜索键呈现处理过程RT2和图像搜索处理过程RT3。
此外,数字照相机1可以利用诸如局域网、因特网、数字卫星广播等之类的电缆或无线通信介质来从外部安装图像搜索程序。
用于使得图像搜索程序被安装在数字照相机1中并且可被执行的计算机可读记录介质可以通过诸如软盘之类的封装介质来实现。
此外,用于使得图像搜索程序被安装在数字照相机1中并且可被执行的计算机可读记录介质可以通过诸如CD-ROM(致密盘只读存储器)之类的封装介质来实现。
此外,用于使得图像搜索程序被安装在数字照相机1中并且可被执行的计算机可读记录介质可以通过诸如DVD(数字通用盘)等之类的封装介质来实现。
此外,这样的计算机可读记录介质不仅可以通过封装介质来实现,而且可以通过临时地或永久地记录各种类型的程序的半导体存储器或磁盘等来实现。
此外,诸如局域网、因特网、数字卫星广播等之类的电缆或无线通信介质可被用作用于将图像搜索程序记录在这些计算机可读记录介质中的单元。此外,通过用于将图像搜索程序记录在计算机可读记录介质中的单元,图像搜索程序可以经由诸如路由器或调制解调器等之类的各种类型的通信接口来记录。
2-11.修改11
此外,在上面的实施例中,描述了上面针对图1至34描述的镜头单元26和成像设备27被用作用于拍摄被摄体的拍摄单元的情况。
然而,本发明不限于此,并且例如,包括镜头单元和由CMOS(互补金属氧化物半导体)图像传感器构成的成像设备的成像单元,以及除此以外的具有各种类型的配置的成像单元可被广泛采用。
2-12.修改12
此外,在上面的实施例中,描述了上面针对图1至34描述的构成触摸屏7的液晶面板7B被用作显示单元的情况。然而,本发明不限于此,并且例如有机EL(电致发光)显示装置,以及除此以外的各种类型的显示单元可被广泛采用。
2-13.修改13
此外,在上面的实施例中,描述了如下情况:其中,在可用来通过拍摄单元对被摄体拍照的拍摄模式时,根据拍摄状况,上面针对图1至34描述的中央处理单元20被用作用于将用于图像搜索的搜索键显示在显示单元上的控制单元。然而,本发明不限于此,并且例如微处理器、DSP(数字信号处理器)等,以及除这些以外的具有各种配置的控制单元可被广泛采用。
2-14.修改14
此外,在上面的实施例中,描述了这样的情况,其中,在拍摄模式时,作为用于将用于图像搜索的搜索键显示在显示单元上的拍摄状况,采用了上面针对图1至34描述的拍摄地点以及被连续拍照的被摄体。
然而,本发明不限于此,并且例如拍摄时间(季节、年末和年初、暑假、寒假等)、拍摄时区、天气等,以及除这些以外的各种类型的拍摄状况可被采用。
在本发明中,因此,当根据各种类型的拍摄状况来显示用于图像搜索的搜索键时,除了脸图标和相机位置图标之后,指示拍摄时间、拍摄时区、天气等的图标可被显示为该搜索键。
2-15.修改15
此外,在上面的实施例中,描述了上面针对图1至图34描述的照片图像被用作通过搜索键搜索的图像。然而,本发明不限于此,并且例如在用户指定的任意时间通过数字摄像机对拍摄体连续拍摄而获得的运动图像、影片、音乐剪辑等,以及除这些以外的各种图像可被广泛采用。
2-16.修改16
此外,在上面的实施例中,描述了这样的情况,其中,当经由指定单元指定了搜索键时,上面针对图1至34描述的中央处理单元20被用作基于该指定的搜索键来搜索图像的搜索单元。然而,本发明不限于此,并且例如微处理器、DSP(数字信号处理器)等,以及除这些以外的具有各种配置的搜索单元都可被广泛采用。
2-17.修改17
此外,在上面的实施例中,描述了这样的情况,其中,上面针对图1至34描述的被附接到液晶面板7B的触摸面板7A被用作用于指定显示在显示单元上的搜索键的指定单元。然而,本发明不限于此,并且例如集成在液晶面板内的触摸传感器、用于移动液晶面板7B上的指针的十字键等,以及除这些以外的具有各种配置的指定单元可被广泛采用。
2-18.修改18
此外,在上面的实施例中,描述了这样的情况,其中,上面针对图1至34描述的数字处理单元31被用作用于从通过拍摄单元连续对被摄体拍照获得的拍摄状态呈现图像中检测被反映在该拍摄状态呈现图像中的人的脸的脸检测单元。然而,本发明不限于此,并且例如微处理器、DSP等,以及除这些以外的具有各种配置的脸检测单元可被广泛采用。
2-19.修改19
此外,在上面的实施例中,描述了这样的情况,其中,上面针对图1至34描述的中央处理单元20被用作用于检测与具有由脸检测单元检测到的脸的人具有高亲密度的另一人的人检测单元。然而,本发明不限于此,并且除这些以外,诸如微处理器、DSP等之类的具有各种配置的人检测单元可被广泛采用。
2-20.修改20
此外,在上面的实施例中,描述了这样的情况,其中,上面针对图1至34描述的中央处理单元20和GPS接收器32被用作用于在拍摄模式时检测本设备的设备位置的设备位置检测单元。然而,本发明不限于此,并且例如微处理器、DSP、GPS接收器32等,以及除这些以外的具有各种配置的设备位置检测单元可被广泛采用。
本申请包含与2009年7月29日向日本特许厅提交的日本优先专利申请JP 2009-176700中公开的主题有关的主题,该申请的全部内容通过引用结合于此。
本领域的技术人员应当明白,可以根据设计要求和其它因素进行各种修改、组合、子组合和变更,只要它们在所附权利要求或其等同物的范围之内。
Claims (9)
1.一种图像搜索设备,包括:
拍摄单元,被配置为对被摄体进行摄影;
显示单元;
控制单元,被配置为在通过所述拍摄单元可摄影所述被摄体的拍摄模式时,根据拍摄状况,将用于图像搜索的搜索键显示在所述显示单元上;
指定单元,用于指定显示在所述显示单元上的所述搜索键;以及
搜索单元,被配置为在所述搜索键经由所述指定单元被指定时,基于如此被指定的所述搜索键来搜索图像;
其中,所述控制单元在所述图像被所述搜索单元搜索到时,将搜索结果显示在所述显示单元上。
2.根据权利要求1所述的图像搜索设备,其中,所述控制单元将所述用于图像搜索的搜索键与拍摄状态呈现图像一同显示在所述显示单元上,所述拍摄状态呈现图像用于确认拍摄状态并且是通过由所述拍摄单元连续地拍摄所述被摄体获得的。
3.根据权利要求2所述的图像搜索设备,还包括:
脸检测单元,被配置为从通过由所述拍摄单元连续地拍摄所述被摄体获得的所述拍摄状态呈现图像中,检测被反映在该拍摄状态呈现图像中的人的脸;
其中,所述控制单元在所述拍摄模式时,将由所述脸检测单元检测到的所述脸作为用于所述图像搜索的所述搜索键,与所述拍摄状态呈现图像一同显示在所述显示单元上。
4.根据权利要求3所述的图像搜索设备,其中,所述控制单元在所述拍摄模式时,将由所述脸检测单元检测到的所述脸作为用于所述图像搜索的所述搜索键显示在所述显示单元上,作为反映了该脸的所述拍摄状态呈现图像。
5.根据权利要求3所述的图像搜索设备,其中,所述控制单元在所述拍摄模式时,将表示由所述脸检测单元检测到的脸的脸图标作为用于所述图像搜索的所述搜索键,与所述拍摄状态呈现图像一同显示在所述显示单元上。
6.根据权利要求5所述的图像搜索设备,还包括:
人检测单元,被配置为检测与具有由所述脸检测单元检测到的脸的人具有高亲密度的其他人;
其中,所述控制单元在所述拍摄模式时,将表示由所述脸检测单元检测到的脸的脸图标以及表示由所述人检测单元检测到的所述其他人的脸的脸图标作为用于所述图像搜索的所述搜索键,与所述拍摄状态呈现图像一同显示在所述显示单元上。
7.根据权利要求3所述的图像搜索设备,还包括:
设备位置检测单元,被配置为在所述拍摄模式时检测本设备的设备位置;
其中,所述控制单元在所述拍摄模式时,将表示由所述设备位置检测单元检测到的所述设备位置的设备位置图标作为用于所述图像搜索的所述搜索键,与所述拍摄状态呈现图像一同显示在所述显示单元上。
8.一种图像搜索方法,包括以下步骤:
在通过拍摄单元可摄影被摄体的拍摄模式时,根据拍摄状况,将用于图像搜索的搜索键显示在显示单元上;
当所述搜索键经由用于指定显示在所述显示单元上的搜索键的指定单元被指定时,基于如此被指定的所述搜索键来搜索图像;以及
将基于所述搜索键对所述图像的搜索结果显示在所述显示单元上。
9.一种使得计算机执行以下步骤的图像搜索程序:
在通过拍摄单元可摄影被摄体的拍摄模式时,根据拍摄状况,将用于图像搜索的搜索键显示在显示单元上;
当所述搜索键经由用于指定显示在所述显示单元上的搜索键的指定单元被指定时,基于如此被指定的所述搜索键来搜索图像;以及
将基于所述搜索键对所述图像的搜索结果显示在所述显示单元上。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009-176700 | 2009-07-29 | ||
JP2009176700A JP5471124B2 (ja) | 2009-07-29 | 2009-07-29 | 画像検索装置、画像検索方法及び画像検索プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101989296A true CN101989296A (zh) | 2011-03-23 |
CN101989296B CN101989296B (zh) | 2015-05-13 |
Family
ID=42797021
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201010235343.8A Expired - Fee Related CN101989296B (zh) | 2009-07-29 | 2010-07-22 | 图像搜索设备、图像搜索方法和图像搜索程序 |
Country Status (5)
Country | Link |
---|---|
US (2) | US8643729B2 (zh) |
EP (2) | EP2447863B1 (zh) |
JP (1) | JP5471124B2 (zh) |
CN (1) | CN101989296B (zh) |
AT (1) | ATE552561T1 (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103389780A (zh) * | 2013-08-09 | 2013-11-13 | 昆山市佰奥自动化设备科技有限公司 | 人机界面操作界面*** |
CN104536990A (zh) * | 2014-12-10 | 2015-04-22 | 广东欧珀移动通信有限公司 | 一种图片显示方法及终端 |
CN105721778A (zh) * | 2016-03-25 | 2016-06-29 | 宇龙计算机通信科技(深圳)有限公司 | 拍摄数据的处理方法、拍摄数据的处理装置和终端 |
CN105791536A (zh) * | 2015-01-14 | 2016-07-20 | Lg电子株式会社 | 移动终端及其控制方法 |
CN106294329A (zh) * | 2015-05-08 | 2017-01-04 | 北京智谷睿拓技术服务有限公司 | 信息处理方法和设备 |
CN106851088A (zh) * | 2012-02-07 | 2017-06-13 | 奥林巴斯株式会社 | 摄像装置、摄像方法 |
CN107924586A (zh) * | 2015-08-13 | 2018-04-17 | 诺基亚技术有限公司 | 搜索图像内容 |
Families Citing this family (48)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4433327B2 (ja) * | 2007-12-11 | 2010-03-17 | ソニー株式会社 | 情報処理装置および方法、並びにプログラム |
JP5116513B2 (ja) * | 2008-03-10 | 2013-01-09 | キヤノン株式会社 | 画像表示装置及びその制御方法 |
JP2011028560A (ja) * | 2009-07-27 | 2011-02-10 | Sony Corp | 情報処理装置、表示方法及び表示プログラム |
JP5471124B2 (ja) | 2009-07-29 | 2014-04-16 | ソニー株式会社 | 画像検索装置、画像検索方法及び画像検索プログラム |
JP5356162B2 (ja) * | 2009-09-07 | 2013-12-04 | 株式会社ザクティ | 物体像探索装置 |
JP5013282B2 (ja) * | 2010-08-31 | 2012-08-29 | カシオ計算機株式会社 | 撮像装置、及びプログラム |
JP2012065263A (ja) * | 2010-09-17 | 2012-03-29 | Olympus Imaging Corp | 撮影機器 |
JP5833822B2 (ja) * | 2010-11-25 | 2015-12-16 | パナソニックIpマネジメント株式会社 | 電子機器 |
JP2012231291A (ja) * | 2011-04-26 | 2012-11-22 | Toshiba Corp | 動画編集装置、動画編集方法およびプログラム |
JP2013003648A (ja) * | 2011-06-13 | 2013-01-07 | Sony Corp | コンテンツ抽出装置、コンテンツ抽出方法、及びプログラム |
EP2573759A3 (en) * | 2011-09-20 | 2013-09-25 | Samsung Electronics Co., Ltd. | Display apparatus and method |
JP5889005B2 (ja) * | 2012-01-30 | 2016-03-22 | キヤノン株式会社 | 表示制御装置およびその制御方法 |
US20130215140A1 (en) * | 2012-02-16 | 2013-08-22 | Yat Wai Edwin Kwong | Photo frames for displaying pictures that are related to time zone management |
WO2013136484A1 (ja) * | 2012-03-15 | 2013-09-19 | Necディスプレイソリューションズ株式会社 | 画像表示装置及び画像表示方法 |
JP5970937B2 (ja) * | 2012-04-25 | 2016-08-17 | ソニー株式会社 | 表示制御装置および表示制御方法 |
US8605189B2 (en) | 2012-05-01 | 2013-12-10 | Xerox Corporation | Product identification using mobile device |
JP2014026596A (ja) * | 2012-07-30 | 2014-02-06 | Canon Inc | 画像処理装置、その制御方法、および制御プログラム |
KR101935039B1 (ko) * | 2012-09-11 | 2019-01-03 | 엘지전자 주식회사 | 이동 단말기 및 이동 단말기의 제어 방법 |
US20160180883A1 (en) * | 2012-12-12 | 2016-06-23 | Crowdflik, Inc. | Method and system for capturing, synchronizing, and editing video from a plurality of cameras in three-dimensional space |
US20140214863A1 (en) * | 2013-01-31 | 2014-07-31 | Hewlett-Packard Development Company, L.P. | Selecting data items for display that are associated with entities that have representations placed in a selected state |
US9696874B2 (en) * | 2013-05-14 | 2017-07-04 | Google Inc. | Providing media to a user based on a triggering event |
US9076241B2 (en) | 2013-08-15 | 2015-07-07 | Xerox Corporation | Methods and systems for detecting patch panel ports from an image having perspective distortion |
US10152495B2 (en) | 2013-08-19 | 2018-12-11 | Qualcomm Incorporated | Visual search in real world using optical see-through head mounted display with augmented reality and user interaction tracking |
JP6403368B2 (ja) * | 2013-09-13 | 2018-10-10 | 京セラ株式会社 | 携帯端末、画像検索プログラムおよび画像検索方法 |
KR102065416B1 (ko) * | 2013-09-23 | 2020-01-13 | 엘지전자 주식회사 | 이동단말기 및 그 제어방법 |
KR102126868B1 (ko) * | 2013-11-15 | 2020-06-25 | 한화테크윈 주식회사 | 영상 처리 장치 및 방법 |
JP6450070B2 (ja) * | 2013-12-04 | 2019-01-09 | 株式会社Nttドコモ | 撮影装置及び撮影方法 |
USD812634S1 (en) * | 2014-09-18 | 2018-03-13 | Aetna Inc. | Display screen with graphical user interface |
USD810107S1 (en) | 2014-09-18 | 2018-02-13 | Aetna Inc. | Display screen with graphical user interface |
USD810108S1 (en) | 2014-09-18 | 2018-02-13 | Aetna Inc. | Display screen with graphical user interface |
USD840422S1 (en) | 2014-09-18 | 2019-02-12 | Aetna Inc. | Display screen with graphical user interface |
USD863328S1 (en) | 2014-09-18 | 2019-10-15 | Aetna Inc. | Display screen with graphical user interface |
USD810768S1 (en) | 2014-09-18 | 2018-02-20 | Aetna Inc. | Display screen with graphical user interface |
USD839289S1 (en) | 2014-09-18 | 2019-01-29 | Aetna Inc. | Display screen with graphical user interface |
USD813893S1 (en) | 2014-09-18 | 2018-03-27 | Aetna Inc. | Display screen with graphical user interface |
JP6435779B2 (ja) * | 2014-10-30 | 2018-12-12 | 富士ゼロックス株式会社 | 情報処理装置及び情報処理プログラム |
CN104794220A (zh) * | 2015-04-28 | 2015-07-22 | 百度在线网络技术(北京)有限公司 | 信息搜索方法和信息搜索装置 |
CN105260100B (zh) | 2015-09-29 | 2017-05-17 | 腾讯科技(深圳)有限公司 | 一种信息处理方法和终端 |
JP6685695B2 (ja) * | 2015-10-30 | 2020-04-22 | キヤノン株式会社 | 端末及び撮像装置 |
CN107015998A (zh) * | 2016-01-28 | 2017-08-04 | 阿里巴巴集团控股有限公司 | 一种图片处理方法、装置和智能终端 |
WO2018012355A1 (ja) * | 2016-07-13 | 2018-01-18 | ソニー株式会社 | サーバ装置、サーバ装置の送信処理方法、クライアント装置、クライアント装置の受信処理方法およびサーバシステム |
CN106570195A (zh) * | 2016-11-18 | 2017-04-19 | 广东小天才科技有限公司 | 一种基于位置的照片搜索方法及装置、用户设备 |
KR20180058019A (ko) * | 2016-11-23 | 2018-05-31 | 한화에어로스페이스 주식회사 | 영상 검색 장치, 데이터 저장 방법 및 데이터 저장 장치 |
US11169661B2 (en) | 2017-05-31 | 2021-11-09 | International Business Machines Corporation | Thumbnail generation for digital images |
JP7265822B2 (ja) * | 2018-08-27 | 2023-04-27 | キヤノン株式会社 | 表示制御装置および表示制御方法、並びにプログラム |
TWD203276S (zh) * | 2018-12-25 | 2020-03-11 | 大陸商上海奇碼數字信息有限公司 | 顯示螢幕之圖形化使用者介面 |
JP7129383B2 (ja) * | 2019-07-03 | 2022-09-01 | 富士フイルム株式会社 | 画像処理装置,画像処理方法,画像処理プログラムおよびそのプログラムを格納した記録媒体 |
JP2023140747A (ja) * | 2022-03-23 | 2023-10-05 | 富士フイルム株式会社 | 情報処理装置、情報処理方法、プログラム、及び記録媒体 |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040008258A1 (en) * | 2002-07-10 | 2004-01-15 | Aas Eric F. | Face recognition in a digital imaging system accessing a database of people |
US20050110634A1 (en) * | 2003-11-20 | 2005-05-26 | Salcedo David M. | Portable security platform |
CN1744667A (zh) * | 2004-09-01 | 2006-03-08 | 佳能株式会社 | 图像摄取装置及图像摄取装置的控制方法 |
US20060050634A1 (en) * | 2004-09-09 | 2006-03-09 | Gous Alan T | Methods and systems to perform traffic engineering in a metric-routed network |
US20060251292A1 (en) * | 2005-05-09 | 2006-11-09 | Salih Burak Gokturk | System and method for recognizing objects from images and identifying relevancy amongst images and information |
CN101025764A (zh) * | 2006-02-24 | 2007-08-29 | 佳能株式会社 | 图像处理设备、图像处理方法以及服务器及其控制方法 |
US20070201767A1 (en) * | 2006-02-24 | 2007-08-30 | Shunji Fujita | Image processing apparatus, image processing method, and server and control method of the same |
EP1860853A1 (en) * | 2006-05-22 | 2007-11-28 | Sony Ericsson Mobile Communications Japan, Inc. | Information processing apparatus, information processing method, information processing program, and mobile terminal device |
CN101142818A (zh) * | 2005-03-16 | 2008-03-12 | 富士胶片株式会社 | 图像拍摄设备,图像拍摄方法,影集创建设备,影集创建方法,影集创建***及程序 |
US20080146274A1 (en) * | 2006-12-18 | 2008-06-19 | Samsung Electronics Co., Ltd. | Method and apparatus for storing image file in mobile terminal |
WO2008109622A1 (en) * | 2007-03-05 | 2008-09-12 | Fotonation Vision Limited | Face categorization and annotation of a mobile phone contact list |
US7440594B2 (en) * | 2002-07-30 | 2008-10-21 | Omron Corporation | Face identification device and face identification method |
CN101382437A (zh) * | 2007-09-04 | 2009-03-11 | 索尼株式会社 | 地图信息显示装置、地图信息显示方法和程序 |
CN101393557A (zh) * | 2005-01-28 | 2009-03-25 | 佳能株式会社 | 信息搜索装置及方法 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3149309B2 (ja) * | 1994-04-21 | 2001-03-26 | キヤノン株式会社 | 情報機器 |
US6504571B1 (en) * | 1998-05-18 | 2003-01-07 | International Business Machines Corporation | System and methods for querying digital image archives using recorded parameters |
JP4433236B2 (ja) * | 1999-12-03 | 2010-03-17 | ソニー株式会社 | 情報処理装置および情報処理方法、並びにプログラム記録媒体 |
JP2004266636A (ja) * | 2003-03-03 | 2004-09-24 | Seiko Epson Corp | 画像管理装置およびこれに用いられるプログラム並びに画像管理方法 |
JP2006079220A (ja) * | 2004-09-08 | 2006-03-23 | Fuji Photo Film Co Ltd | 画像検索装置および方法 |
JP2006079458A (ja) * | 2004-09-10 | 2006-03-23 | Fuji Photo Film Co Ltd | 画像伝送システム、画像伝送方法、及び画像伝送プログラム |
JP2007102575A (ja) * | 2005-10-05 | 2007-04-19 | Fujifilm Corp | 撮影システム |
JP4914778B2 (ja) * | 2006-09-14 | 2012-04-11 | オリンパスイメージング株式会社 | カメラ |
JP5136819B2 (ja) * | 2006-09-14 | 2013-02-06 | カシオ計算機株式会社 | 画像分類装置、画像分類方法及びプログラム |
JP2008165424A (ja) | 2006-12-27 | 2008-07-17 | Sony Corp | 画像検索装置および方法、撮像装置、並びにプログラム |
JP2008294704A (ja) * | 2007-05-24 | 2008-12-04 | Nikon Corp | 表示装置および撮像装置 |
US8041076B1 (en) * | 2007-08-09 | 2011-10-18 | Adobe Systems Incorporated | Generation and usage of attractiveness scores |
JP2009176700A (ja) | 2007-12-28 | 2009-08-06 | Seiko Epson Corp | 有機el素子の製造方法、有機el素子、有機el装置、電子機器 |
JP2011028560A (ja) * | 2009-07-27 | 2011-02-10 | Sony Corp | 情報処理装置、表示方法及び表示プログラム |
JP5471124B2 (ja) | 2009-07-29 | 2014-04-16 | ソニー株式会社 | 画像検索装置、画像検索方法及び画像検索プログラム |
-
2009
- 2009-07-29 JP JP2009176700A patent/JP5471124B2/ja not_active Expired - Fee Related
-
2010
- 2010-06-15 EP EP12152754.3A patent/EP2447863B1/en not_active Not-in-force
- 2010-06-15 EP EP10166029A patent/EP2290566B1/en not_active Not-in-force
- 2010-06-15 AT AT10166029T patent/ATE552561T1/de active
- 2010-07-21 US US12/840,762 patent/US8643729B2/en not_active Expired - Fee Related
- 2010-07-22 CN CN201010235343.8A patent/CN101989296B/zh not_active Expired - Fee Related
-
2013
- 2013-12-18 US US14/132,659 patent/US9154690B2/en not_active Expired - Fee Related
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040008258A1 (en) * | 2002-07-10 | 2004-01-15 | Aas Eric F. | Face recognition in a digital imaging system accessing a database of people |
US7440594B2 (en) * | 2002-07-30 | 2008-10-21 | Omron Corporation | Face identification device and face identification method |
US20050110634A1 (en) * | 2003-11-20 | 2005-05-26 | Salcedo David M. | Portable security platform |
CN1744667A (zh) * | 2004-09-01 | 2006-03-08 | 佳能株式会社 | 图像摄取装置及图像摄取装置的控制方法 |
US20060050634A1 (en) * | 2004-09-09 | 2006-03-09 | Gous Alan T | Methods and systems to perform traffic engineering in a metric-routed network |
CN101393557A (zh) * | 2005-01-28 | 2009-03-25 | 佳能株式会社 | 信息搜索装置及方法 |
CN101142818A (zh) * | 2005-03-16 | 2008-03-12 | 富士胶片株式会社 | 图像拍摄设备,图像拍摄方法,影集创建设备,影集创建方法,影集创建***及程序 |
US20060251292A1 (en) * | 2005-05-09 | 2006-11-09 | Salih Burak Gokturk | System and method for recognizing objects from images and identifying relevancy amongst images and information |
US20070201767A1 (en) * | 2006-02-24 | 2007-08-30 | Shunji Fujita | Image processing apparatus, image processing method, and server and control method of the same |
CN101025764A (zh) * | 2006-02-24 | 2007-08-29 | 佳能株式会社 | 图像处理设备、图像处理方法以及服务器及其控制方法 |
EP1860853A1 (en) * | 2006-05-22 | 2007-11-28 | Sony Ericsson Mobile Communications Japan, Inc. | Information processing apparatus, information processing method, information processing program, and mobile terminal device |
US20080146274A1 (en) * | 2006-12-18 | 2008-06-19 | Samsung Electronics Co., Ltd. | Method and apparatus for storing image file in mobile terminal |
WO2008109622A1 (en) * | 2007-03-05 | 2008-09-12 | Fotonation Vision Limited | Face categorization and annotation of a mobile phone contact list |
CN101382437A (zh) * | 2007-09-04 | 2009-03-11 | 索尼株式会社 | 地图信息显示装置、地图信息显示方法和程序 |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106851088A (zh) * | 2012-02-07 | 2017-06-13 | 奥林巴斯株式会社 | 摄像装置、摄像方法 |
CN103389780A (zh) * | 2013-08-09 | 2013-11-13 | 昆山市佰奥自动化设备科技有限公司 | 人机界面操作界面*** |
CN103389780B (zh) * | 2013-08-09 | 2017-02-15 | 昆山市佰奥自动化设备科技有限公司 | 人机界面操作界面*** |
CN104536990A (zh) * | 2014-12-10 | 2015-04-22 | 广东欧珀移动通信有限公司 | 一种图片显示方法及终端 |
CN105791536A (zh) * | 2015-01-14 | 2016-07-20 | Lg电子株式会社 | 移动终端及其控制方法 |
CN106294329A (zh) * | 2015-05-08 | 2017-01-04 | 北京智谷睿拓技术服务有限公司 | 信息处理方法和设备 |
CN106294329B (zh) * | 2015-05-08 | 2019-12-06 | 北京智谷睿拓技术服务有限公司 | 信息处理方法和设备 |
CN107924586A (zh) * | 2015-08-13 | 2018-04-17 | 诺基亚技术有限公司 | 搜索图像内容 |
CN107924586B (zh) * | 2015-08-13 | 2021-04-06 | 诺基亚技术有限公司 | 搜索图像内容的方法、装置以及计算机可读存储介质 |
CN105721778A (zh) * | 2016-03-25 | 2016-06-29 | 宇龙计算机通信科技(深圳)有限公司 | 拍摄数据的处理方法、拍摄数据的处理装置和终端 |
Also Published As
Publication number | Publication date |
---|---|
EP2290566B1 (en) | 2012-04-04 |
US20110025873A1 (en) | 2011-02-03 |
EP2290566A1 (en) | 2011-03-02 |
ATE552561T1 (de) | 2012-04-15 |
EP2447863A1 (en) | 2012-05-02 |
EP2447863B1 (en) | 2016-11-30 |
CN101989296B (zh) | 2015-05-13 |
JP2011034127A (ja) | 2011-02-17 |
JP5471124B2 (ja) | 2014-04-16 |
US9154690B2 (en) | 2015-10-06 |
US20140104456A1 (en) | 2014-04-17 |
US8643729B2 (en) | 2014-02-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101989296B (zh) | 图像搜索设备、图像搜索方法和图像搜索程序 | |
JP5402409B2 (ja) | 撮影条件設定装置、撮影条件設定方法及び撮影条件設定プログラム | |
JP5268595B2 (ja) | 画像処理装置、画像表示方法及び画像表示プログラム | |
US9621749B2 (en) | Capturing selected image objects | |
JP4752897B2 (ja) | 画像処理装置、画像表示方法および画像表示プログラム | |
US9277089B2 (en) | Method to control image processing apparatus, image processing apparatus, and image file | |
JP4735995B2 (ja) | 画像処理装置、画像表示方法および画像表示プログラム | |
US20080043108A1 (en) | Capturing selected image objects | |
US20070109411A1 (en) | Composite image selectivity | |
JPWO2007126096A1 (ja) | 画像処理装置及び画像処理方法 | |
JP2011028534A (ja) | 表示処理装置、表示処理方法および表示処理プログラム | |
US20130100329A1 (en) | Image pickup apparatus | |
CN110266983A (zh) | 一种图像处理方法、设备及存储介质 | |
JP2003058867A (ja) | 電子アルバム装置 | |
JP2007528056A (ja) | コンテンツに関連するリンクを自動的に含む方法 | |
JP3913033B2 (ja) | 画像記録装置、画像記録方法及び画像記録システム | |
US20090009620A1 (en) | Video camera and event recording method | |
JP6418796B2 (ja) | 電子機器、制御方法およびプログラム | |
JP6871458B2 (ja) | 撮像表示方法 | |
JP2001216325A (ja) | 検索用データベース生成装置及びその方法 | |
JP2010183565A (ja) | 撮像装置、画像検索装置およびプログラム | |
JP2017228828A (ja) | 撮像装置、表示装置、及び撮像表示システム | |
JP2009060340A (ja) | 電子カメラ、情報再生装置 | |
JP5262695B2 (ja) | 情報処理装置、および情報処理方法、並びにプログラム | |
JP2009100215A (ja) | 撮像装置及び撮像方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20150513 Termination date: 20210722 |