具体实施方式
以下,参照附图对本发明的实施方式进行详细说明。
(第1实施方式)
图1是示出本发明的第1实施方式的摄影设备的电路结构的框图。在本实施方式中,取得与用户摄影得到的主图像中的任意的位置或对象物关联的子图像(子信息),将主图像和子图像(子信息)关联地进行记录。例如,子图像通过用户的摄影操作而取得。
图2至图5是用于说明主图像和子图像的摄影和记录的说明图。
图2示出用户通过摄影取得主图像的状况。如图2所示,用户21在用右手21a把持收纳有图1所示的摄影设备10的电路块的壳体22的状态下,对被摄体即人物31进行摄影。人物31以山脉32作为背景,站在人物31所在的刻有Δ高原的名称33a的石碑33附近。在摄影设备10的壳体22的背面侧设置有显示画面23,在该显示画面23上显示有摄像中的图像即实时取景图像24。图2示出在摄影范围内显示有包含人物31、山脉32和石碑33的摄像图像作为实时取景图像24。
在该状态下用户21用右手21a按下快门按钮22a,从而记录作为实时取景图像24所显示的摄像图像。现在,假定例如用户21将该记录的摄像图像作为主图像。
在本实施方式中,能够在将主图像和子图像(子信息)关联地进行记录的关联模式中进行动作。在关联模式中,用户21可以指定与图像中的哪个位置(以下称为关联位置)或对象物(以下称为关联对象物)关联地对子图像进行摄影。图2示出在关联模式时,用户21进行了用左手的手指21b触摸与实时取景图像24中的石碑33对应的图像25的动作。通过该触摸操作,将与主图像中的石碑33对应的图像25的位置设定为关联位置。这样,能够使图像的位置具有意义,以摄影图像为基础而从该图像上的位置读出别的信息。由此,图像欣赏不是停留于表面上,而是成为进一步的信息读出的关键,可以使欣赏者的随后体验更加丰富。例如,在好奇无法看清的告示牌或邮筒上书写的内容的情况下,如果对其进行触摸,就可以再现进一步的信息,从而满足好奇心。如下附加满足该好奇心的信息。
图3示出关联模式中的子图像的摄影状况。用户21在用右手21a把持摄影设备10的壳体22的状态下,进行与通过触摸操作指定为关联对象的石碑33对应的子图像的摄影。既可以在指定后进行摄影,也可以在指定的同时进行摄影。在指定后进行摄影时,如图3所示,例如,用户21进行变焦操作,或者变更摄影位置,以石碑33在显示画面23的整个显示范围内被摄影的方式,进行视场角的调整。图3示出该状态,与石碑33对应的图像43显示在整个显示范围内。并且,在显示画面23的上部显示有表示是关联模式中的子图像的摄影中的“关联摄影中”的显示44。该显示是重要的,这是因为,如果没有该显示,则用户无法知道是作为照片作品对主图像进行摄影、还是作为信息图像进行摄影。并且,在作品摄影时,自然度、调色、灰度表现等是重要的,但是,在信息摄影时对文字等进行摄影的情况下,能够读取文字是重要的,可以是黑白,也可以将对比度提高到不自然而容易读取。尽管包含曝光控制或光圈控制等进行摄影控制,然而可以使其与主摄影时不同,可以成为容易读取文字、或者抑制模糊的摄影。并且,黑白化或边缘增强等是图像处理,可以进行摄影控制和图像处理中的任一方或者双方,使作为辅助信息的表现变为主图像。不仅在记录时,在实时取景图像显示时也可以将这样的控制变为主图像。在该状态下,用户21按下快门按钮22a,从而仍将作为实时取景图像24显示的摄像图像记录为子图像。在该摄影之前,可以在主摄影时引导显示欣赏者具有好奇心的部分。例如,可以将脸或文字、以背景的风景为特征的山等在图像判定中判定为再摄影候选,建议显示成取得该部分相关的信息。例如,可以是,当在摄影确认图像中用手指指定了该部分时,该部分成为实时取景图像状态,在该部分中进一步显示需要信息,同时,一边观察该实时取景图像一边进行摄影。可以在进行指定的同时进行摄影,以上所述是这种摄影方法。
图4A和图4B是用于说明在关联模式时所记录的图像文件的说明图。图4A是说明仅记录有主图像的状态的图,图4B是说明记录有主图像和子图像的状态的图。
如图4A和图4B所示,图像文件包含主图像的图像数据45和作为辅助数据的标签信息46。在标签信息46内包含有与主图像相关的信息和与主图像的摄影相关的信息等、例如被摄体脸信息、摄影场所、摄影时间的信息等。并且,在本实施方式中,在标签信息内还包含有子图像假定信息,该子图像假定信息是表示在使用关联模式的摄影中是否已经将与该主图像关联的子图像关联地记录或者预定了记录的信息。并且,在本实施方式中,在图像文件内还包含有在关联模式中所记录的子信息47。
图5是示出子信息的一例的说明图。图5是与图2和图3的摄影对应的图。在本实施方式中,子信息是按用户指定的各关联位置或各关联对象物而登记的。在图5的例子中示出将画面分为中央、右上、右下、左上、左下的5个区域、并在各区域内登记了子信息的例子。与画面中央的区域对应地登记有的人名。该子信息表示与在摄影范围的大致中央所拍摄的人物(图2和图3的人物31)的姓名相关的信息。并且,在图5中示出与画面的左下对应地记录有通过图3所示的摄影所取得的子图像。并且,在图5中示出还记录有通过对该子图像中的字符串的文字识别所取得的“Δ高原”的文字信息。为了进行这样的文字识别,子图像摄影进行与主图像摄影不同的(还包含图像处理)控制。
在图1中,摄影设备10具有由CCD或CMOS传感器等摄像元件构成的摄像部11。摄像部11对被摄体进行摄影,输出摄影图像。摄像图像被提供给关联部20。关联部20的关联控制部14由未图示的CPU和存储器等构成,依据存储在存储器内的程序进行照相机控制。关联控制部14控制摄像部11(省略图示),并对摄像部11输出的摄影图像进行规定的信号处理、例如颜色调整处理、矩阵变换处理、噪声去除处理、其它各种信号处理。
并且,关联控制部14可以执行与显示相关的各种处理。关联控制部14可以将信号处理后的摄影图像提供给显示和操作部17。显示和操作部17具有LCD等显示画面,显示从关联控制部14被提供的图像。并且,关联控制部14还可以将各种菜单显示等显示在显示和操作部17的显示画面23(参照图2)上。
并且,显示和操作部17具有受理用户操作的未图示的操作部。作为该操作部,显示和操作部17可以具有例如在显示画面23上构成的触摸面板。触摸面板可以产生与用户用手指指示的显示画面上的位置对应的操作信号。该操作信号被供给关联控制部14。由此,在用户在显示画面上触摸或者滑动的情况下,关联控制部14可以检测用户的触摸位置、使手指闭合分离的操作(捏合操作)、滑动操作、或者通过滑动操作而达到的位置、滑动方向、触摸期间等各种操作,可以执行与用户操作对应的处理。
记录再现控制部12可以进行与摄像图像的记录和再现相关的处理。例如,记录再现控制部12可以对信号处理后的摄影图像进行压缩处理,将压缩后的图像提供给记录部16进行记录。作为记录部16,可以采用例如卡接口,记录部16能够在存储卡等记录介质内记录图像信息和声音信息等。
记录再现控制部12可以读出记录在记录部16内的摄像图像并进行解压缩处理。记录再现控制部12通过将解压缩处理后的摄像图像提供给显示和操作部17,能够进行记录图像的再现。
另外,显示和操作部17的显示画面23配设成占据摄影设备10的例如背面的大致全部区域,摄影者可以在摄影时确认显示在显示和操作部17的显示画面23上的实时取景图像,还可以在确认实时取景图像的同时进行摄影操作。
在本实施方式中,关联控制部14在关联模式时,可以取得主图像和子信息,并记录在记录部16内。当通过显示和操作部17的操作、例如对触摸面板的触摸操作指定了图像中的位置时,位置和对象判定部13将该位置设定为关联位置。并且,当通过显示和操作部17的操作、例如对触摸面板的触摸操作指定了图像中的对象物时,位置和对象判定部13将该对象物设定为关联对象物。另外,位置和对象判定部13不仅针对来自摄像部11的摄像图像,而且还能够针对从记录部16所再现的再现图像,设定关联位置和关联对象物。作为对象判定功能,有使用图像的图案的脸检测、文字检测等,由于风景等是远距离的,因而可以反映距离信息等,根据颜色判定天空、根据形状判定山等来判定对象物。可以这样判定是考虑到用户也具有兴趣,可以对所判定的部分进行提示再摄影的建议。
在关联信息存储部15内记录子信息。记录在关联信息存储部15内的子信息包括:已指定了关联位置或关联对象物的信息、和还未指定关联位置或关联对象物的信息。
关联控制部14在关联模式时,将来自摄像部11的摄像图像作为主图像进行处理或者作为子图像进行处理。有时该子图像被记录在关联信息存储部内并用作子信息。并且,关联控制部14还可以将从来自摄像部11的摄像图像中取得的各种信息、例如文字信息作为子信息来取得。有时关联控制部14将所取得的子信息记录在关联信息存储部15内。
关联控制部14可以按主图像的各关联位置或各关联对象物分配子信息,通过记录再现控制部12记录在记录部16内。
下面,参照图6和图7对这样构成的实施方式的动作进行说明。图6是用于说明实施方式的动作的流程图。图6示出照相机控制。
在图6的步骤S1中,关联控制部14判定是否是摄影模式。现在,假定指示了摄影模式。在该情况下,关联控制部14在步骤S2中,控制摄像部11开始摄像,取入来自摄像部11的摄影图像。关联控制部14进行所取入的摄像图像中的被摄体的判定。
关联控制部14在下一步骤S3中,判定是否是关联模式。在不是关联模式的情况下,关联控制部14进行通常模式的摄影动作。即,关联控制部14在步骤S4中显示实时取景图像,在步骤S5中判定是否进行了摄影。当用户按下了快门按钮22a时,关联控制部14在步骤S6中进行摄影,对来自摄像部11的摄像图像实施规定的信号处理,之后通过记录再现控制部12将摄像图像记录在记录部16内。
现在,假定通过用户操作指定了关联模式。在该情况下,关联控制部14在步骤S11中,判定是指定了主图像的摄影还是指定了子图像的摄影。在本实施方式中,可以先对主图像进行摄影,也可以先对子图像进行摄影。
即,在本实施方式中,以下模式是能够实现的:已摄影记录有主图像,按各关联位置或各关联对象物将子图像与所记录的主图像关联地进行记录的模式(以下,称为主-子关联模式);以及已摄影记录有子图像,将所记录的子图像按所摄影的主图像的各关联位置或各关联对象物关联地进行记录的模式(以下,称为子-主关联模式)。图6的步骤S23~S30表示主-子关联模式的动作,步骤S12~S20、S31~S37表示子-主关联模式的动作。
现在,假定用户指定主子关联模式。即,假定已摄影记录了主图像,用户指定子图像的摄影,以使子图像与所记录的主图像关联。在该情况下,关联控制部14使处理从步骤S11转移到步骤S21,从记录部16读出已记录的主图像,提供给显示和操作部17进行规定时间的缩略图显示。关联控制部14在下一步骤S22中,判定是否选择操作了主图像。
关联控制部14在即使经过规定时间也未选择主图像的情况下,判定为要进行子-主关联模式中的子图像的摄影、即用户不与主图像关联而进行子图像的摄影,使处理从步骤S22移动到步骤S31。
现在,由于用户要使子图像与已记录的主图像关联,因而用户进行主图像的选择操作。关联控制部14在步骤S23中受理触摸位置的指定操作。例如,用户触摸图2的图像25的显示位置。由此,位置和对象判定部13将例如画面左下设定为关联位置。然后,关联控制部14在摄像部11中使当前摄像中的摄像图像以实时取景图像方式显示在显示和操作部17的显示画面上(步骤S24)。用户以使主图像中的关联位置或关联对象物收在视野范围内的方式,进行摄影位置或变焦操作,进行摄影。
关联控制部14在步骤S25中判定是否进行了子图像的摄影操作。当进行了摄影操作时,关联控制部14控制摄像部11进行摄影(步骤S26)。这也可以表示为作品摄影,自然度、调色、灰度表现等是重要的。在后述的子摄影中,在信息摄影时对文字等进行摄影的情况下,可读取文字等是重要的,然而这里,硬跳过曝光、或者更换颜色、反映了用户喜好的摄影是重要的。当然,为了进行文字识别等,可以设置在实时取景图像时或刚刚摄影之后、判定哪个部分是特征性的步骤。不仅在记录时,而且在S24的实时取景图像时,都可以将这样的控制改变为后述的子图像。然后,关联控制部14在步骤S27中判定是否能够识别摄像图像的关联位置内的文字。在能够识别的情况下,为了将该文字记录为子信息,关联控制部14进行文字信息的读取(步骤S28),使所读取的文字进行子信息化(步骤S29)。
然后,关联控制部14将由所摄影的子图像和所读取的文字构成的子信息与关联位置、关联对象物的信息一起记录在所选择的主图像的图像文件内(步骤S30)。可以不是仅记录关联位置和关联对象物中的一方,而是判定关联位置和其位置的关联对象物,记录关联位置和关联对象物的双方。例如,设定画面中央作为关联位置,并且记录为该位置的对象物是实物的脸。这样,在记录部16内记录有图4B所示的图像文件。
子-主关联模式中的子图像的摄影处理在步骤S31~S37中进行。步骤S31~S36的处理除了未指定关联位置或关联对象物以外,与步骤S24~S29相同。关联控制部14在步骤S37中,将所摄影的子图像记录在关联信息存储部15内。
接着,假定在子-主关联模式中,进行主图像的摄影。在该情况下,关联控制部14使处理从步骤S11转移到步骤S12。用户为了对主图像进行摄影,在执行了视场角设定后进行摄影。例如,在已将图3的石碑33作为子图像进行了摄影的情况下,例如,如图2所示,以包含该石碑33的视场角对主图像进行摄影。
关联控制部14在步骤S13中判定是否进行了主图像的摄影操作。当进行了摄影操作时,关联控制部14控制摄像部11进行摄影(步骤S14)。该摄影相比在主摄影(作品摄影)时重要的自然度、调色、灰度表现等,容易读取文字等、容易检测脸等是重要的,可以是黑白,也可以提高对比度。尽管包含曝光控制或光圈控制等而进行摄影控制,然而可以使其与主摄影时不同,可以成为容易读取文字、或者抑制模糊的摄影。并且,黑白化或边缘增强等是图像处理,可以进行摄影控制和图像处理中的任一方或者双方,使作为辅助信息的表现变为主图像。当然,可以不仅在记录时,而且还在S12的实时取景图像时,都将这样的控制改变为主图像。然后,关联控制部14在步骤S15中,使所摄影的图像的确认显示(记录浏览)显示在显示画面23上,受理关联位置或关联对象物的指定(步骤S16)。此时,如上所述,可以对具有特定特征的图像的部分进行增强显示。也就是说,作为检测技术得到发展的脸识别和文字识别是用户关注的识别的代表,显示判定了这样的部分,作为再摄影候选,用框围住,或者改变颜色,或者用箭头指示,对用户进行建议显示。并且,在能够取得距离数据的情况下,也可以检测背景、判定天空和山等,以对话型方式取得山是哪里的山等信息。此时,除了路标、目的地显示板以外,还可以对手持的地图等进行摄影,也可以对引导书等进行摄影,能够对仅该地方进行信息显示。用户有时想不起来对引导书进行摄影等,可以显示建议:“对手持的地图或引导书进行摄影”等。这样的显示信息可以记录在记录部16内。用户可以指定将与现在所拍摄的主图像关联的子图像拍在主图像中的哪个位置。例如,在子图像是图3的石碑33的图像43的情况下,在对图2所示的主图像进行了摄像的情况下,用户触摸画面的左下位置。由此,关联控制部14进行关联位置或关联对象物的指定。
关联控制部14在步骤S17中,使表示存储在关联信息存储部15内的子信息的一览的图标显示在显示和操作部17的显示画面23上。用户通过参照该显示,指定子信息。
关联控制部14在步骤S18中,判定是否指定了子信息。在已指定的情况下,关联控制部14在步骤S19中,对主图像的图像文件附加记录子信息。并且,在规定时间内未指定子信息的情况下,仅记录进行了关联位置或关联对象物的指定的主图像(步骤S20)。
图7是用于说明再现模式中的动作的流程图。
关联控制部14在图7的步骤S41中,判定是否指定了再现模式。关联控制部14在指定了再现模式的情况下,在步骤S42中,从记录部16读出已记录的主图像,提供给显示和操作部17进行规定时间的一览显示。关联控制部14在下一步骤S43中,判定是否对图像进行了选择操作。当进行了图像选择时,关联控制部14在步骤S44中,将所选择的图像显示在整个画面上(放大显示)。
在本实施方式中,关联控制部14在步骤S45中,判定是否变更为关联摄影。在本实施方式中,即使在再现模式时,也可以进行子图像的摄影。当由用户指示了关联摄影时,关联控制部14使处理转移到步骤S46,判定是否有触摸位置的指定。步骤S46的判定是与图6的步骤S23的判定相同的判定,以后,处理转移到图6的步骤S24。
这样,在本实施方式中,即使在主图像的再现模式时,也能够指定关联位置或关联对象物,对子图像进行重新摄影并保存。
在未指示向关联摄影变更的情况下,关联控制部14使处理从步骤S45转移到步骤S51,判定用户是否进行了从再现模式回到其他模式的处理。
然后,如果在再现模式时未进行向关联摄影的变更,则关联控制部14在步骤S52中,判定是否进行了指定关联位置或关联对象物的触摸操作。当进行了触摸操作时,从关联信息存储部15读出与通过该触摸操作所指定的关联位置或关联对象物相关的子信息,提供给显示和操作部17进行显示。
这样,用户可以在显示和操作部17的显示画面23上,针对主图像中的关联位置或关联对象物显示子信息。并且,如图5的例子所示,有时关于规定的关联位置或关联对象物记录有多个子信息。在该情况下,用户可以删除判断为不需要的子信息。关联控制部14在步骤S54中,受理要删除的子信息的选择。当指定了要删除的子信息时,关联控制部14从关联信息存储部15删除与该删除操作对应的子信息。
这样在本实施方式中,可以指定主图像中的关联位置或关联对象物,分配子信息进行记录。作为子信息,可以记录拍摄到的摄像图像或从摄像图像取得的信息,可以在主图像中以用户期望的方式附加用户期望的信息进行记录。
(第2实施方式)
图8是示出本发明的第2实施方式的框图。并且,图9是示出第2实施方式的摄影设备的外观的说明图。
本实施方式应用于安装有镜头型照相机的平板PC(个人计算机)。可以采用智能电话或便携电话而取代平板PC。在平板PC61的显示部68上,如后所述,显示有使用镜头型照相机51得到的摄像图像。
在图8中,在平板PC61内设置有照相机用通信部62,在镜头型照相机51内设置有通信部55,平板PC61和镜头型照相机51构成为经由这些通信部62、55可相互通信。
如图9所示,在平板PC61的壳体61a内拆装自如地安装有安装器具71,在安装器具71上设置有用于安装镜头型照相机51的安装部72。镜头型照相机51在基端侧设置有安装部51b,将该安装部51b通过嵌入或旋入等安装在安装器具71的安装部72内。
另外,在本实施方式中,平板PC61具有控制镜头型照相机51并控制主图像和子图像的摄影和记录的功能,然而关于该功能,可以将一部分或全部的功能设置在镜头型照相机51侧。
在镜头型照相机51内设置有具有光学***52a的摄像部52。在摄像部52内设置有由CCD或CMOS传感器等构成的未图示的摄像元件,通过光学***52a将被摄体像引导到摄像元件的摄像面。光学***52a具有为了在镜筒51a内通过对焦设定为对焦状态而可动的对焦镜头和在对焦状态下进行变焦的变焦镜头等。并且,光学***52a具有驱动这些镜头和光圈的未图示的机构部。控制部53控制光学***52a的机构部,对这些对焦镜头、变焦镜头和光圈进行驱动控制。
在镜头型照相机51内设置有操作环54a等操作部54,用于与用户进行的摄影相关的参数、例如与对焦、变焦和光圈相关的参数的设定操作。控制部53检测对操作部54的用户操作并进行基于检测结果的控制。控制部53由CPU等构成,根据对操作部54的用户操作和来自后述的平板PC61的信号,控制镜头型照相机51的各部。
摄影控制部53c产生对焦信号、变焦信号和光圈控制信号,对光学***52a的对焦、变焦和光圈进行驱动控制。并且,摄影控制部53c将驱动信号供给到摄像元件,控制被摄体的摄像。
图像处理部53b可以被提供来自摄像元件的摄像图像,实施规定的图像信号处理、例如颜色调整处理、矩阵变换处理、噪声去除处理、其它各种信号处理,之后提供给记录部56进行记录。作为记录部56可以采用例如IC存储器。并且,图像处理部53b可以将摄像图像经由通信部55转发到平板PC61。
镜头信息处理部53a可以取得变焦镜头、对焦镜头等的镜头状态、光圈状态等的镜头相关信息,经由通信部55转发到平板PC61。在镜头相关信息内包含有对焦位置、拍摄视场深度的范围等光轴方向的距离的信息。
通信部55能够与设置于平板PC61内的照相机用通信部62之间经由规定的传送路径进行通信。作为传送路径,可以采用使用有线和无线的各种传送路径、例如USB(Universal Serial Bus,通用串行总线)缆线、Wifi(Wireless Fidelity,无线保真)等无线LAN的传送路径等。控制部53在与平板PC61之间建立了通信时,可以依据平板PC61的控制部65被控制摄影,并可以将摄像图像和镜头相关信息转发到平板PC61。
平板PC61的控制部65由例如CPU等构成并控制平板PC61的各部。控制部65输出用于驱动镜头型照相机51的摄像部52的信号,并接收来自镜头型照相机51的摄像图像。控制部65对接收到的摄像图像进行规定的信号处理、例如颜色调整处理、矩阵变换处理、噪声去除处理、其它各种信号处理。
在平板PC61内还配设有操作部66。操作部66由设置在平板PC61内的未图示的开关、键、软件键盘等各种操作部构成,产生基于用户操作的操作信号,输出到控制部65。控制部65根据操作信号控制各部。
控制部65可以进行摄像图像的记录和再现相关的处理。例如,控制部65可以对信号处理后的摄影图像进行压缩处理,将压缩后的图像提供给记录部64进行记录。作为记录部64,可以采用例如IC存储器等各种记录介质,记录部64能够在记录介质内记录图像信息和声音信息等。
显示控制部67执行与显示相关的各种处理。显示控制部67可以从控制部65被提供信号处理后的摄影图像,提供给显示部68。显示部68具有LCD等显示画面68a(参照图1),显示从显示控制部67被提供的图像。并且,显示控制部67还可以将各种菜单显示等显示在显示部68的显示画面68a上。控制部65可以读出记录在记录部64内的摄像图像并进行解压缩处理。显示控制部67通过将解压缩处理后的摄像图像提供给显示部68,能够进行记录图像的再现。
在显示部68的显示画面68a上设置有未图示的触摸面板。触摸面板可以产生与用户用手指指示的显示画面68a上的位置对应的操作信号。该操作信号被供给到控制部65。由此,在用户在显示画面68a上触摸或者滑动的情况下,控制部65可以检测用户的触摸位置、使手指闭合分离的操作(捏合操作)、滑动操作、或者通过滑动操作而达到的位置、滑动方向、触摸期间等的各种操作,可以执行与用户操作对应的处理。通过该触摸面板,能够进行关联位置或关联对象物的指定。
另外,显示部68配设成占据平板PC61的例如前表面的大致全部区域,用户可以在使用镜头型照相机51的摄影时确认显示在显示部68的显示画面68a上的摄像图像,可以在确认摄像图像的同时进行摄影操作。
并且,在本实施方式中,平板PC61具有网络连接部63。网络连接部63由控制部65控制,能够通过无线或有线与未图示的互联网线路连接。网络连接部63能够根据操作部66的用户操作对站点进行访问,进行与用户操作对应的数据收发并进行用户期望的数据的下载。在本实施方式中,要下载的数据不仅可以由用户直接指定,还可以通过控制部65自动取得。
控制部65具有与第1实施方式中的位置和对象判定部13以及关联控制部14的双方相同的功能,能够进行在关联模式中的动作。例如,控制部65可以根据用户的触摸操作设定关联位置或关联对象物,并可以对应于所设定的关联位置或关联对象物,与第1实施方式同样地,从镜头型照相机51的摄像图像取得子信息。
并且,在本实施方式中,有时在记录部64内记录有用户登记的住所登记的信息,控制部65可以将该住所登记的信息和其它记录在记录部64内的信息用作子信息。
并且,在本实施方式中,控制部65还可以将通过网络连接部63所取得的数据作为子信息而与关联位置或关联对象物关联地记录在记录部64内。
图10和图11是用于说明从互联网下载子信息的例子的说明图。
图10示出用户通过摄影而取得主图像的状况。如图10所示,用户81在使用右手81a把持了收纳有图8的平板PC61的电路模块的壳体61a的状态下,通过镜头型照相机51对被摄体即人物91进行摄影。人物91以壁92作为背景,站在显示为“演奏会”的告示板93附近。在壳体61a的背面侧设置有显示画面68a,在该显示画面68a上显示有摄像中的图像即实时取景图像85。图10示出在摄影范围内显示有包含人物91、壁92和告示板93在内的摄像图像作为实时取景图像85。
在该状态下用户81用右手81a按下快门按钮61b,从而记录作为实时取景图像85所显示的摄像图像。现在,假定例如用户81将该记录的摄像图像作为主图像。
在本实施方式中,能够进行在将主图像和子图像关联地记录的关联模式中的动作。在关联模式中,用户81可以在图像中指定关联位置或关联对象物,指定对子图像进行摄影。并且,如上所述,还能够在关联模式中,经由互联网线路取得与图像中所设定的关联位置或关联对象物对应的子信息。
现在,假定用户81在关联模式时从互联网线路取得子信息。例如,假定用户81进行使用左手81b触摸与告示板93对应的实时取景图像85中的图像87的操作。通过该触摸操作,将主图像中的与告示板93对应的图像87的位置设定为关联位置,转移到取得与该关联位置相关的子信息的子信息取得模式。
图11示出关联模式中的子信息取得的状况。在子信息取得模式中,通过对关联位置的图像的文字识别处理等取得关联位置的文字信息。并且,在子信息取得模式中,进行与互联网线路的连接,在显示画面68a上显示信息取得画面95。用户81用左手81b把持平板PC61,通过右手81a的触摸操作触摸显示在信息取得画面95上的检索按钮96。由此,进行以从关联位置所取得的文字信息作为关键字的检索,取得与该文字信息关联的信息。
例如,在作为文字信息而取得了演奏者的姓名的情况下,可以将与该演奏者相关的轮廓(profile)信息作为子信息来取得。并且,在作为文字信息取得了演奏曲名的情况下,可以将该演奏曲名的声音数据等作为子信息来取得。
图12是用于说明在关联模式时所记录的图像文件的说明图。如图12所示,图像文件包含主图像的图像数据45和作为辅助数据的标签信息46。在标签信息46内包含有与主图像相关的信息和与主图像的摄影相关的信息等、例如被摄体脸信息、摄影场所、摄影时间的信息等。在标签信息内还包含有子图像假定信息,该子图像假定信息是表示在关联模式的摄影中是否已经将与该主图像关联的子图像关联地记录了或者预定了记录的信息。并且,在图像文件内还包含有在关联模式中所记录的子信息47。记录与关联位置或关联对象物对应的各所信息作为子信息47。例如,包含有基于从关联位置或关联对象物所取得的文字信息等的URL信息、关联文件名等的信息。
图13是示出子信息的一例的说明图。图13是与图10和图11对应的图。在本实施方式中,子信息是按用户指定的各关联位置或各关联对象物而登记的。图13的例子示出针对画面上的对象物即被摄体按各人物、各人物的脸和各文字登记了子信息的例子。针对人物登记有人名,并且,关于人物的脸,登记有URL信息和文件名等。并且,关于文字,记录有声音信息、URL信息和文件名等。文件名用于指定记录在记录部64中的声音文件。该声音文件可以预先记录在记录部64内,并且也可以在上述的子信息取得模式中取得。
用户在主图像的再现时,通过触摸关联位置,能够提示子信息。图14是用于说明该状况的说明图。如图14所示,例如,在记录部64内记录有图13所示的子信息的情况下,用户81通过触摸显示在显示画面68a上的再现图像97中的告示板的图像98的位置,能够再现以告示板的图像97的位置作为关联位置的作为子信息的声音数据。图14示出输出基于该声音数据的声音输出99。
下面,参照图15对这样构成的实施方式的动作进行说明。图15是用于说明第2实施方式的动作的流程图。在图15中对与图6相同的步骤附上相同标号并省略说明。
图15的步骤S23、S71~S77表示主-子关联模式的动作,步骤S12~S20、S81~S87表示子-主关联模式的动作。
现在,假定用户指定主-子关联模式。即,假定已摄影记录了主图像,用户指定子信息的取得,以使子信息与所记录的主图像关联。在该情况下,控制部65使处理从步骤S11转移到步骤S21,从记录部16读出已记录的主图像,提供给显示和操作部17进行规定时间的缩略图显示。控制部65在下一步骤S22中,判定是否选择操作了主图像。
控制部65在即使经过规定时间也未选择主图像的情况下,判定为要进行子-主关联模式中的子信息的取得、即用户不与主图像关联而要进行子信息的取得,使处理从步骤S22移动到步骤S81。
现在,由于假设用户要使子信息与已记录的主图像关联,因而用户进行主图像的选择操作。控制部65在步骤S23中受理触摸位置的指定操作。例如,用户触摸图10的图像87的显示位置。由此,控制部65将告示板的图像87设定为关联对象物。然后,控制部65判定是否指定了子信息取得模式(步骤S71)。控制部65在指定了子信息取得模式的情况下,在步骤S72中显示图11所示的信息取得画面95。
用户通过操作信息取得画面95上的检索按钮96进行检索。检索关键字可以由用户自己输入,也可以由控制部65使用从关联对象物的图像所取得的文字串来设定。控制部65在步骤S73中判定是否发生了检索输入,当有检索输入时,进行与该检索输入对应的内容或URL的取得(步骤S74)。即,控制部65控制网络连接部63而与互联网线路连接,从相应的站点下载信息。控制部65将所取得的子信息与关联位置、关联对象物的信息一起记录在所选择的主图像的图像文件内(步骤S77)。
并且,控制部65在步骤S73中,在未发生网络输入的情况下,取得子图像作为子信息,使来自镜头型照相机51的摄像图像以实时取景图像方式进行显示(步骤S75),在步骤S76中进行摄影等的处理。在该子图像摄影中,在信息摄影时对文字等进行摄影等情况下,能够读取文字是重要的,可以是黑白,对比度也可以提高到不自然而容易读取。尽管包含曝光控制或光圈控制等而进行摄影控制,然而可以使其与主摄影时不同,可以成为容易读取文字、或者抑制模糊的摄影。并且,黑白化或边缘增强等是图像处理,最好进行摄影控制和图像处理中的任一方或者双方,使作为辅助信息的表现变为主图像。不仅在记录时,而且在S75的实时取景图像时,都可以将这样的控制改变为主图像。这样,在该情况下,控制部65将所取得的子图像与关联位置、关联对象物的信息一起记录在所选择的主图像的图像文件内(步骤S77)。
子-主关联模式中的子信息的取得处理在步骤S81~S87中进行。步骤S81~S86的处理与步骤S71~S76相同。控制部65在步骤S87中,将所取得的子信息记录在记录部64内。
其它作用与第1实施方式相同。在该实施例中,在取得子信息时,由于不限于图像信息,因而可以记录音乐,或者可以记录地名,或者可以建议显示依据了图像判定的信息取得。在图像中进行了文字识别的结果,只要是“音乐会”或者“演奏会”,就可以督促音乐记录。这实际上上可以录音,也可以下载。在检测出风景部独特的山川、海洋的形状或颜色、或者波浪的运动等的情况下,可以将子信息设为地名。在地名的情况下,只要取得与GPS协作的地图信息即可。关于花和动物等,可以以与图鉴协作的方式进行建议。在这些情况下,以文本形式显示在显示部上,或者用声音传递进行建议。
这样在本实施方式中能够取得与第1实施方式相同的效果,并且可以不仅将要摄影的图像或已记录的信息作为子信息,而且能够将从互联网线路取得的信息作为子信息,能够进行更有效的信息记录。
而且,在本发明的各实施方式中,作为摄影用的设备,使用数字照相机作了说明,然而作为照相机,可以是镜头型照相机、数字单眼反射照相机、小型数字照相机,也可以是摄像机、摄影机那样的动态图像用的照相机,而且当然也可以是内置于便携电话、智能电话等便携信息终端(PDA:Personal Digital Assist,个人数字助理)等中照相机。并且,可以是内窥镜、显微镜那样的产业用、医疗用的光学设备,也可以是监视照相机、车载用照相机、固定型的照相机、例如安装在电视接收机、个人计算机等内的照相机。
本发明并不限定于上述各实施方式,可以在实施阶段中在不背离本发明主旨的范围内对构成要素进行变形来具体化。并且,通过将上述各实施方式公开的多个构成要素适当组合,可形成各种发明。例如,可以从实施方式所示的全部构成要素中删除若干构成要素。而且,可以将不同实施方式中的构成要素适当组合。
另外,关于权利要求的范围、说明书和附图中的动作流程,为了方便起见使用“首先”、“然后”等作了说明,然而并不意味着必须按该顺序实施。并且,构成这些动作流程的各步骤针对不影响发明本质的部分,当然可以适当省略。
并且,这里说明的技术中、主要在流程图中说明的控制和功能大多能够通过程序来设定,通过由计算机取得执行该程序,可以实现上述的控制和功能。该程序可以将其整体或者一部分记录或者存储在以下的计算机程序产品、即、软盘、CD-ROM等、非易失性存储器等的可移动介质、硬盘、易失性存储器等的存储介质内,能够在产品发货时或者经由可移动介质或通信线路进行流通或提供。利用者经由通信网络下载该程序并安装到计算机内,或者从记录介质安装到计算机内,从而可以容易实现本实施方式的摄影设备。