CN107851129A - 信息处理装置、信息处理方法和程序 - Google Patents

信息处理装置、信息处理方法和程序 Download PDF

Info

Publication number
CN107851129A
CN107851129A CN201680045581.8A CN201680045581A CN107851129A CN 107851129 A CN107851129 A CN 107851129A CN 201680045581 A CN201680045581 A CN 201680045581A CN 107851129 A CN107851129 A CN 107851129A
Authority
CN
China
Prior art keywords
radio wave
search
image
information
seizure
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680045581.8A
Other languages
English (en)
Other versions
CN107851129B (zh
Inventor
井原圭吾
盐野崎敦
宫岛靖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN107851129A publication Critical patent/CN107851129A/zh
Application granted granted Critical
Publication of CN107851129B publication Critical patent/CN107851129B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/432Query formulation
    • G06F16/434Query formulation using image data, e.g. images, photos, pictures taken by a user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/489Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using time information
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7837Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content
    • G06F16/784Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content the detected or recognised objects being people
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Mathematical Physics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

[问题]希望易于从多个捕捉图像中搜索已经在捕捉图像中出现过一次的待成像对象再次在其中出现的捕捉图像。[解决方案]根据本公开的一种信息处理装置包括:读取单元,其被配置成从被配置成相互关联地记录关于无线电波的无线电波信息、捕捉图像以及拍摄捕捉图像的时间的记录单元中读取无线电波信息;以及搜索单元,其被配置成基于被包括在所读取的无线电波信息中的无线电波的数量和无线电波的强度中的至少一个从记录在记录单元中的多个捕捉图像中搜索满足搜索条件的捕捉图像。

Description

信息处理装置、信息处理方法和程序
技术领域
本公开涉及一种信息处理装置、一种信息处理方法,以及一种程序。
背景技术
存在拍摄纪念性照片的服务,照片中出现处于某一设施处的游客,并将照片提供给游客,诸如例如,在娱乐设施中拍摄纪念性照片的服务。在这种服务中,为了易于将许多游客和许多已拍摄的纪念性照片相关联,提出了一种用于提前为游客发布电子标签并且利用电子标签执行与所生成照片的关联的技术(例如,参阅以下专利文献1)。
引用列表
专利文献
专利文献1:JP 2002-41703A
发明内容
技术问题
然而,以上专利文献1中所公开的技术是一种因为已经提前为可能出现在照片中的人(即,游客)发布了电子标签而有效的技术。例如,在要从诸如监控相机的成像装置拍摄的数量庞大的捕捉图像的记录中寻找出现了任何人(诸如例如嫌疑人)的图像的这样一种情况下,不可使用如以上专利文献1中所公开的技术。
因此,使用在某一捕捉图像中出现过一次的一个或多个人作为搜索目标,从诸如监控相机的成像装置生成的数量庞大的捕捉图像的记录中寻找再次出现相同的人的捕捉图像需要付出异常巨大的努力。
当进行如上所述捕捉图像的搜索时,被认为是利用将作为搜索目标的人的图像通过图像分析处理来搜索期望的捕捉图像。然而,即使是在使用图像分析处理的情况下,分析速度可能根据所利用的图像而降低,从而导致恰当提取期望图像的失败。
因此,需要一种能够容易地从多个捕捉图像中搜索已经在捕捉图像中出现过一次的人再次在其中出现的捕捉图像的技术。
因此,本公开提出了能够容易地从多个捕捉图像中搜索已经在捕捉图像中出现过一次的待成像对象再次在其中出现的捕捉图像的一种信息处理装置、一种信息处理方法,以及一种程序。
问题的解决方案
根据本公开,提供了一种信息处理装置,包括:存储单元,由安装在预定位置的成像装置生成的捕捉图像和由通信设备发射的与通过和成像装置提前关联的通信设备检测的无线电波相关的无线电波信息各自与时间戳相关联地记录在其中;搜索单元,其使用所检测的无线电波的强度和数量中的至少一个作为搜索条件,根据搜索条件在存储单元中记录的多个捕捉图像中搜索捕捉图像;以及显示控制单元,其执行显示控制,以用于将搜索单元找到的捕捉图像显示在显示屏上。无线电波包括由位于成像装置的视场中的待成像对象所持或所包括的电子设备或通信设备发射的无线电波。
另外,根据本公开,提供了一种信息处理方法,包括:与时间戳相关联地记录由安装在预定位置的成像装置生成的捕捉图像和由通信设备发射的与通过和成像装置提前关联的通信设备检测的无线电波相关的无线电波信息;使用所检测的无线电波的强度和数量中的至少一个作为搜索条件;根据搜索条件在多个所记录的捕捉图像中搜索捕捉图像;以及执行显示控制,以用于使所找到的捕捉图像显示在显示屏上。无线电波包括由位于成像装置的视场中的待成像对象所持或所包括的电子设备或通信设备发射的无线电波。
另外,根据本公开,提供了一种用于使计算机实施以下各项的程序:与时间戳相关联地记录由安装在预定位置的成像装置生成的捕捉图像和由通信设备发射的与通过和成像装置提前关联的通信设备检测的无线电波相关的无线电波信息的存储功能;使用所检测的无线电波的强度和数量中的至少一个作为搜索条件,根据搜索条件在多个所记录的捕捉图像中搜索捕捉图像的搜索功能;以及执行显示控制以用于使通过搜索功能找到的捕捉图像显示在显示屏上的显示控制功能。无线电波包括由位于成像装置的视场中的待成像对象所持或所包括的电子设备或通信设备发射的无线电波。
根据本公开,应注意,由位于成像装置的视场中的待成像对象所持或所包括的电子设备或通信设备发射的无线电波、由安装在预定位置的成像装置生成的捕捉图像,以及由通信设备发射的、与通过和成像装置提前关联的通信设备检测的无线电波相关的无线电波信息各自与时间戳相关联地被记录;并且使用所检测的无线电波的强度和数量中的至少一个作为搜索条件,根据搜索条件在多个所记录的捕捉图像中搜索捕捉图像;并且执行显示控制,以用于使所找到的捕捉图像显示在显示屏上。
本公开的有益效果如下:
如上所述,根据本公开,可以容易地从多个捕捉图像中搜索已经在捕捉图像中出现过一次的待成像对象再次在其中出现的捕捉图像。
应注意,上述效果不必为限制性的。伴随或代替以上效果,可实现本说明书所述的效果或可由本说明书掌握的其他效果中的任一个。
附图说明
[图1]图1为用于描述根据本公开的第一实施例的信息处理装置的说明图。
[图2]图2为用于描述根据该实施例的信息处理装置的说明图。
[图3]图3为示出根据该实施例的信息处理装置的示例性配置的框图。
[图4]图4为示出存储在根据该实施例的信息处理装置的存储单元中的数据的数据结构的实例的说明图。
[图5]图5为示出存储在根据该实施例的信息处理装置的存储单元中的数据的数据结构的实例的说明图。
[图6]图6为示出存储在根据该实施例的信息处理装置的存储单元中的数据的数据结构的实例的说明图。
[图7]图7为示出存储在根据该实施例的信息处理装置的存储单元中的数据的数据结构的实例的说明图。
[图8]图8为用于描述在根据该实施例的信息处理装置中执行的图像搜索处理的说明图。
[图9]图9为示意性地示出根据该实施例的信息处理装置的显示屏的实例的说明图。
[图10]图10为示意性地示出根据该实施例的信息处理装置的显示屏的实例的说明图。
[图11]图11为示意性地示出根据该实施例的信息处理装置的显示屏的实例的说明图。
[图12]图12为示意性地示出根据该实施例的信息处理装置的显示屏的实例的说明图。
[图13]图13为示意性地示出根据该实施例的信息处理装置的显示屏的实例的说明图。
[图14]图14为示意性地示出根据该实施例的信息处理装置的显示屏的实例的说明图。
[图15]图15为示意性地示出根据该实施例的信息处理装置的显示屏的实例的说明图。
[图16]图16为示出根据该实施例的信息处理方法的流程的实例的流程图。
[图17]图17为根据本公开的实施例的信息处理装置的硬件配置的实例的框图。
具体实施方式
下文将参考附图详细描述本公开的一个或多个优选实施例。应注意,在本说明书和附图中,具有基本上相同的功能和结构的结构元件用相同的参考标号进行标记,并且省略了这些结构元件的重复说明。
现在将按以下顺序进行描述。
1.第一实施例
1.1.关于信息处理装置
1.1.1.关于信息处理装置和另一设备之间的关系
1.1.2.关于信息处理装置的配置
1.1.3.关于捕捉图像搜索处理的细节和显示屏的实例
1.2.关于信息处理方法
2.关于硬件配置
(第一实施例)
<关于信息处理装置>
[关于信息处理装置和另一设备之间的关系]
首先,参考图1和图2,将着重于与另一设备之间的关系详细描述根据本公开的第一实施例的信息处理装置。图1和图2是用于描述根据本实施例的信息处理装置的说明图。
根据本实施例的信息处理装置10是存储由提供于任何位置的监控相机1拍摄的捕捉图像和存储由与监控相机关联的无线电波监测节点3发送的无线电波信息的装置,如下文将详细描述的。在此,由无线电波监测节点3发送的无线电波信息包括与通过无线电波监测节点3观测到的各种无线电波(例如,用于各种类型的无线通信的无线电波,包括无线LAN通信等,例如Wi-Fi或蓝牙(注册商标))相关的各种类型的信息。另外,根据本实施例的信息处理装置10具有根据用户操作再现任何存储的捕捉图像并且从多个存储的捕捉图像中搜索与搜索条件相匹配的捕捉图像的功能。
具有如上所述功能的信息处理装置10获取与由安装在任何位置(例如,图1中的位置A、位置B和位置C)的监控相机1A、1B和1C生成的相应的捕捉图像相关的图像数据,并且将获取的图像数据存储在提供于信息处理装置10内部或信息处理装置10外部的各种存储装置中,如图1中示意性地示出。信息处理装置10还获取与通过安装在位置A、位置B和位置C的无线电波监测节点3A、3B和3C观测到的无线电波相关的无线电波信息,并且将获取的无线电波信息存储在提供于信息处理装置10内部或信息处理装置10外部的各种存储装置中。
应注意,图1示出其中与信息处理装置10相互通信的监控相机1的数量和无线电波监测节点3的数量中的每一个分别为3,同时毋庸置疑,与信息处理装置10相互通信的监控相机1的数量和无线电波监测节点3的数量可以各自为1或2,或可各自为4或更多。
在此,如图2中示意性地示出,提供于任何位置的监控相机1是对位于成像视场中的各种待成像对象进行成像的成像装置的实例,并且是可以生成关于待成像对象的静态图像或动态图像的设备。监控相机1不受具体限制,而是可根据需要利用各种成像装置。另外,提供于任何位置的无线电波监测节点3是观测在无线电波监测节点3周围存在的各种无线电波并且产生与所观测的无线电波相关的无线电波信息的装置。该无线电波监测节点3也不受具体限制,而是可根据需要利用可获取特定识别信息的各种无线电波监测装置,诸如无线LAN监测节点。
在此,假设提供于某一位置的监控相机1和无线电波监测节点3已经提前相互关联,并且指示存在于哪个位置的监控相机1对应于哪个无线电波监测节点3的信息已经提前存储在信息处理装置10中。另外,假设在某一位置提供的监控相机1和无线电波监测节点3已经提前设定,以便在时间上彼此同步。
在对位于成像视场中的待成像对象成像以生成包括静态图像或视频的捕捉图像时,监控相机1在任何时间将捕捉图像的图像数据(成像图像数据)和代表捕捉图像数据生成时的时间的时间戳输出至信息处理装置10。另外,在检测存在于无线电波监测节点3周围的无线电波时,无线电波监测节点3观测表征无线电波的各种特征值(诸如,例如对于无线电波和电场强度特定的识别信息),并且假定它们为无线电波信息,在任何时间将关于无线电波信息的数据(无线电波信息数据)和表示无线电波信息生成时的时间的时间戳输出至信息处理装置10。
应注意,优选地,监控相机1所生成的捕捉图像数据与生成捕捉图像数据的监控相机1的特定识别信息(ID信息)相关联,并且优选地,无线电波监测节点3所生成的无线电波信息数据与生成无线电波信息数据的无线电波监测节点3的特定识别信息(ID信息)相关联。这使得已经获取这些数据段的信息处理装置10容易地掌握已经发送获取数据的监控相机1和无线电波监测节点3被提供于哪个位置。
随着近年来信息通信技术的发展,人们常常持有具有无线通信功能的电子设备或通信设备,诸如移动电话、智能手机、便捷式游戏机、平板终端或可佩戴终端。另外,还存在很多包括/包含诸如移动电话、智能手机、便捷式游戏机、平板终端、可佩戴终端或汽车导航***的设备的物品(例如,各种类型的运输装置,诸如车辆,其中持有如上所述设备的人在所述运输装置上或在所述运输装置上安装了如上所述的设备)。因此,可以说通过无线电波监测节点3观测到的无线电波很有可能也包括来自持有或包括具有如上所述的无线通信功能的电子设备或通信设备并且已经通过监控相机1成像的待成像对象的无线电波。
根据本实施例的信息处理装置10将由每个位置的监控相机1发送的捕捉图像数据与一起发送的时间戳相关联地记录,并且将由每个位置的电波监测节点3发送的无线电波信息数据与一起发送的时间戳相关联地记录。在此,由于监控相机1和无线电波监测节点3已经提前相互关联,并且已经如前文所述被设置成在时间上彼此同步,因此信息处理装置10能够通过时间戳的方式将通过监控相机1成像的捕捉图像数据和由无线电波监测节点3生成的无线电波信息相互关联。
根据本实施例的信息处理装置10与另一设备之间的关系已经参考图1和图2在上文详细描述。
[关于信息处理装置的配置]
接下来,参考图3至图7,将详细描述具有如上所述功能的信息处理装置10的配置的实例。图3为示出根据本实施例的信息处理装置的配置的实例的框图。图4至图7为各自示出存储在根据本实施例的信息处理装置的存储单元中的数据的数据结构的实例的说明图。
根据本实施例的信息处理装置10主要包括数据获取单元101、数据记录单元103、存储单元105、捕捉图像再现单元107、图像搜索单元109以及显示控制单元111,如图3所示。
应注意,下文将参考根据本实施例的信息处理装置10的内部具有存储捕捉图像数据和无线电波信息数据的存储装置的情况作为实例进行描述,但是毋庸置疑的是,存储捕捉图像数据和无线电波信息数据的存储装置可提供于信息处理装置10的外部。另外,将在下文详细描述的数据获取单元101、数据记录单元103、存储单元105、捕捉图像再现单元107、图像搜索单元109以及显示控制单元111的提供方式是分配给存在于各种网络诸如因特网上的多个信息处理装置,并且多个信息处理装置可以相互协作以实施根据本实施例的信息处理装置10的功能。
数据获取单元101通过例如中央处理单元(CPU)、只读存储器(ROM)、随机存取存储器(RAM)、通信装置等实施。数据获取单元101获取从每个监控相机1发送的捕捉图像数据和时间戳,并获取从每个无线电波监测节点3发送的无线电波信息数据和时间戳。也就是说,数据获取单元101用作通信单元,其实施监控相机1与信息处理装置10之间的通信以及无线电波监测节点3与信息处理装置10之间的通信中的每一个。已经获取的捕捉图像数据和时间戳以及无线电波信息数据和时间戳被传输至将在下文描述的数据记录单元103。
数据记录单元103通过例如CPU、ROM、RAM等实施。数据记录单元103将从数据获取单元101中传输的捕捉图像数据和时间戳相互关联起来,然后将捕捉图像数据和时间戳存储在将在下文描述的存储单元105中的预定位置。数据记录单元103也将从数据获取单元101中传输的无线电波信息数据和时间戳相互关联起来,然后将无线电波信息数据和时间戳存储在将在下文描述的存储单元105的预定位置。因此,在将在下文描述的存储单元105中,累积了在任何时间从每个监控相机1输出的捕捉图像数据和在任何时间从每个无线电波监测节点3输出的无线电波信息数据。在此,在从多个监控相机1和多个无线电波监测节点3向信息处理装置10发送各种类型的数据的情况中,优选的是,数据记录单元103将监控相机1和无线电波监测节点3的特定ID信息与上述数据进一步关联起来,以便可以容易地辨别哪个数据是从哪个位置的设备发送的。
存储单元105通过例如包括在根据本实施例的信息处理装置10中的RAM、存储装置等实施。根据本实施例的信息处理装置10执行一些处理时需要保存的各种参数、处理进程等,或各种数据库、程序等根据需要记录在存储单元105中。
诸如,在该存储单元105中,已经记录了指示信息处理装置10从其中获取捕捉图像数据的一个或多个监控相机1和与一个或多个监控相机1相关联的一个或多个无线电波监测节点3之间的对应关系的数据库。指示对应关系的数据库(在下文也简称为“关联数据库(DB)”)的数据结构的实例在图4中示意性地示出。如图4中示意性地示出,在关联DB中,已经相互关联地记录了监控相机1的特定ID信息以及与这些监控相机1相关联的无线电波监测节点3的特定ID信息。通过参考该关联DB,信息处理装置10的相应的处理单元(具体地讲,将在下文描述的的图像搜索单元109)可以容易地掌握监控相机1中的哪一个和无线电波监测节点3中的哪一个相关联。
应注意,记录在如上所述的关联DB中的ID信息的类型和ID信息描述方法不受具体限制,而是可根据需要利用众所周知的任何类型和任何描述方法。
另外,在存储单元105中,由监控相机1中的每一个生成的捕捉图像数据和由无线电波监测节点3中的每一个生成的无线电波信息数据已经通过数据记录单元103各自与时间戳相关联地被记录。关于捕捉图像数据的数据库(在下文也简称为“捕捉图像数据库(DB)”)的数据结构的实例在图5中示意性地示出,并且关于无线电波信息数据的数据库(在下文也简称为“无线电波信息数据库(DB)”)的数据结构的实例在图6中示出。
如图5中示意性地示出,在捕捉图像DB中,已经与指示捕捉图像数据生成的日期和时间的时间戳相关联地记录了由某个监控相机1成像的捕捉图像数据(或指示捕捉图像数据的存储位置的信息)。另外,优选的是,在捕捉图像DB中,已经进一步关联了关于已生成捕捉图像数据的监控相机的ID信息。另外,如图6中示意性地示出,在无线电波信息DB中,已经与指示无线电波信息数据生成的日期和时间的时间戳相关联地记录了由某个无线电波监测节点3生成的无线电波信息数据(或指示无线电波信息数据的存储位置的信息)。另外,优选的是,在无线电波信息DB中,已经进一步关联了关于已生成无线电波信息数据的无线电波监测节点的ID信息。
应注意,记录在图5所示的捕捉图像DB中的信息和记录在图6中所示的无线电波信息DB中的信息不限于图5和图6中所示的那些,任何关于捕捉图像数据和无线电波信息数据的信息均可添加到这些DB中。另外,图5和图6所示的描述时间戳的方法不受具体限制,而是可根据需要利用任何描述方法来表述时间戳。
应注意,存储在存储单元105中的无线电波信息数据可具有任何数据结构,只要描述了表征所观测到的无线电波的特征值(诸如对于所观测到的无线电波特定的ID信息和电场强度)即可。无线电波信息数据的数据结构的实例在图7中示意性地示出。识别信息诸如MAC地址(其为对于每个所观测到的无线电波特定的信息)、无线电波的电场强度等已经描述于由无线电波监测节点3生成的无线电波信息中,并且存储在存储单元105中,如图7中示意性地示出。另外,除了这些特征数据之外,可描述表征所观测到的无线电波的任何特征值。另外,在某个无线电波监测节点3一次观测到多个无线电波的情况下,如上所述的信息记录在关于每个所观测到的无线电波的无线电波信息中。
在已经存储了此类各种类型的信息的存储单元105中,数据获取单元101、数据记录单元103、捕捉图像再现单元107、图像搜索单元109、显示控制单元111等均能够自由地执行数据读取/写入处理。
捕捉图像再现单元107通过例如CPU、ROM、RAM等实施。根据在信息处理装置10上进行的用户操作,捕捉图像再现单元107执行从存储单元105中记录的多个捕捉图像中使用户指定的捕捉图像再现的处理。通过用户进行的待再现的捕捉图像的选择通过捕捉图像再现单元107与将在下文描述的显示控制单元111相互协作地在信息处理装置10的显示屏上执行适当的显示来进行。另外,通过捕捉图像再现单元107再现的捕捉图像在将在下文描述的显示控制单元111的控制下在任何时间显示在显示屏上的适当区域。这允许用户在信息处理装置10的显示屏上查看期望的捕捉图像。
图像搜索单元109通过例如CPU、ROM、RAM等实施。图像搜索单元109读取各种类型的数据,诸如记录在存储单元105中的无线电波信息,并使用通过用户操作指定的捕捉图像作为用作搜索基础的捕捉图像,关于在用作搜索基础的指定的捕捉图像中出现的待成像对象,从记录在存储单元105中的多个捕捉图像中搜索出现待成像对象的另一个捕捉图像。在这种情况下,图像搜索单元109不通过所谓的图像分析处理搜索在用作搜索基础的捕捉图像中出现的待成像对象,而是利用与用作搜索基础的捕捉图像一起生成的无线电波信息搜索期望的捕捉图像。
也就是说,如前文参考图2所描述的,当今,待成像的目标对象很有可能持有或包括发射各种无线电波诸如例如用于无线通信的无线电波的电子设备或通信设备。因此,根据本实施例的图像搜索单元109注意到与用作搜索基础的捕捉图像一起生成的无线电波信息,并利用包括在无线电波信息中的信息生成搜索条件。然后,根据本实施例的图像搜索单元109提取与关于无线电波的搜索条件匹配的无线电波信息,并且指定与提取的无线电波信息相对应的捕捉图像。
在进行如上文所述的图像搜索处理时,在根据本实施例的信息处理装置10中,可以容易地从多个捕捉图像中搜索出已经在成像图像中出现过一次的待成像对象再次在其中出现的捕捉图像。
应注意,下文将再次详细地描述在图像搜索单元109中执行的图像搜索处理。
显示控制单元111通过例如CPU、ROM、RAM、输出装置、通信装置等实施。当在诸如包括在信息处理装置10中的显示器的输出装置或提供于信息处理装置10外部的输出装置等上显示通过捕捉图像再现单元107再现的捕捉图像或通过图像搜索单元109找到的捕捉图像时,显示控制单元111执行显示控制。另外,当在预定的输出装置等上显示用于在用户指定要查看的捕捉图像时使用的显示屏或在搜索捕捉图像时使用的显示屏时,显示控制单元111也执行显示控制。这允许信息处理装置10的用户当场查看期望的捕捉图像。
应注意,下文将同时引用特定实例另外详细描述通过显示控制单元111执行的显示屏的显示控制的处理。
上文阐述了根据本实施例的信息处理装置10的功能的实例。以上结构元件中的每一个可使用通用构件或电路实现,但是也可使用专用于各结构元件的功能的硬件实现。另外,各结构元件的功能也可通过CPU等完全实现。因此,可以在实施本实施例时根据技术水平适当地修改待使用的配置。
应注意,还可以创建用于实现如上文所论述的根据本实施例的信息处理装置的相应功能的计算机程序,并且在个人计算机等上实施计算机程序。另外,还可提供具有存储于其中的这一计算机程序的计算机可读记录介质。记录介质为例如磁盘、光盘、磁光盘、闪存等。此外,以上计算机程序还可例如通过网络传输,而不需要使用记录介质。
[关于捕捉图像搜索处理的细节和显示屏的实例]
接下来,将参考图8至图15具体描述在根据本实施例的信息处理装置10中执行的捕捉图像搜索处理和显示屏的显示控制的处理。图8是用于描述在根据本实施例的信息处理装置中执行的图像搜索处理的说明图。图9至图15为各自示意性地示出根据本实施例的信息处理装置的显示屏的实例的说明图。
○捕捉图像搜索处理的一般流程
首先,将参考图8描述在根据本实施例的信息处理装置10的图像搜索单元109中执行的捕捉图像搜索处理的一般流程。
在通过用户操作将某个捕捉图像指定为搜索目标图像的情况下,根据本实施例的图像搜索单元109利用无线电波信息,而不是所谓的图像分析处理来搜索期望的捕捉图像。
更详细地讲,图像搜索单元109根据用户操作,参考记录在存储单元105等中的捕捉图像DB指定与已经成为搜索目标图像的捕捉图像相关联的时间戳。如前文所述,生成捕捉图像的监控相机1和生成无线电波信息的无线电波监测节点3被设置成在时间上彼此同步。因此,如图8顶部所示,图像搜索单元109可利用捕捉图像的指定时间戳搜索记录在存储单元105中的无线电波信息DB以指定具有相同时间的时间戳的无线电波信息。
然后,利用通过指定的无线电波信息所示的无线电波模式(通过示意性地示出无线电波信息中所包括的每个无线电波的电场强度的程度获得),图像搜索单元109搜索与对应于搜索目标图像的无线电波模式类似的无线电波模式。搜索无线电波模式可通过参考记录在存储单元105等中的无线电波信息DB,在通过所记录的无线电波信息所示的无线电波模式与对应于搜索目标图像的无线电波模式之间进行模式匹配来进行。在此,模式匹配中利用的相似度不受具体限制,但是可以利用众所周知的相似度,诸如例如互相关系数。
在已经检测到与对应于搜索目标图像的无线电波模式的相似度达到预定阈值或更高的无线电波模式的情况下,图像搜索单元109利用包括所找到的无线电波模式的无线电波信息指定相对应的监控相机1的ID和时间戳。也就是说,图像搜索单元109参考记录在存储单元105等中的无线电波信息DB,指定已生成目标无线电波信息的无线电波监测节点3的ID和时间戳。此后,图像搜索单元109参考记录在存储单元105等中的关联DB指定与指定的无线电波监测节点3相关联的监控相机1的ID。
随后,图像搜索单元109可通过基于已经获得的监控相机1的ID和时间戳搜索记录在存储单元105等中的捕捉图像DB来提取与找到的无线电波信息相对应的捕捉图像。
此处,由于待成像对象所持有或所包括的电子设备或通信设备不一定以规律的间隔发射无线电波信号,因此还可考虑到生成的无线电波信息与捕捉图像之间出现的时间差异。因此,除了与指定的时间戳相对应的捕捉图像之外,优选的是,图像搜索单元109选择在该指定的捕捉图像前后的预定时间段期间(例如前后约几秒到几十秒)拍摄的捕捉图像。因此,即使在所生成的无线电波信息与捕捉图像之间发生了由以规律的间隔发射无线电波信号的失败导致的时间差异的情况下,也可以提取期望的待成像对象在其中出现的另一个捕捉图像。
此外,还可以考虑到由于搜索期望的待成像对象在其中出现的另一个捕捉图像而检测到多个捕捉图像的情况。在这种情况下,图像搜索单元109可按照与捕捉图像相关联的时间戳的顺序向用户呈现作为搜索结果的捕捉图像,或者搜索结果的显示顺序可根据用于搜索的无线电波模式的相似度进行控制。在根据相似度控制搜索结果的显示顺序的情况下,优选的是,例如按照相似度的降序来显示搜索结果。因此可以进一步提高用户便利性。
另外,图像搜索单元109可例如基于如上所述的无线电波信息对搜索结果应用众所周知的图像分析处理,诸如静态图像分析处理或视频分析处理。在这种情况下,在待成像的对象的移动不包括在作为搜索结果的捕捉图像中的情况下,在没有人作为待成像对象出现的情况下等,图像搜索单元109可通过突出捕捉图像、降低显示顺序的优先权等执行搜索结果提交处理,诸如提醒用户注意或优先显示被赋予更高优先权的搜索结果。
图像搜索单元109与显示控制单元111相互协作地使以前述方式指定的捕捉图像显示在信息处理装置10的显示屏上。这允许信息处理装置10的用户通过显示在显示屏上的用户界面选择与获得的搜索结果相对应的捕捉图像并检查内容。
○用户界面的具体实例
接下来,将参考图9至图15具体描述在根据本实施例的信息处理装置10中执行的捕捉图像搜索处理中的用户界面。
在根据本实施例的信息处理装置10中,捕捉图像再现单元107和显示控制单元111相互协作,以使如图9中示意性地示出的显示屏500显示在输出装置诸如显示器上,同时执行捕捉图像再现的处理。
在该显示屏500上,在其中显示通过用户操作指定的捕捉图像的捕捉图像显示区域501和用于指定通过用户操作指定的捕捉图像的再现状态的再现状态指定对象503由显示控制单元111提供,如图9中示意性地示出。用户可通过操作未示出的指向对象操作再现状态指定对象503来使期望的捕捉图像在捕捉图像显示区域501中再现。
另外,在显示屏500上,通过显示控制单元111提供了用于使捕捉图像搜索模式操作的搜索处理开始对象505和搜索条件设定区域507。当通过用户操作来操作搜索处理开始对象505时,在搜索条件设定区域507中,与显示在捕捉图像显示区域501中的捕捉图像相对应的无线电波信息在搜索处理开始对象505操作时显示在搜索条件设定区域507中。此外,在此搜索条件设定区域507中,除了与显示在捕捉图像显示区域501中的捕捉图像相对应的无线电波信息之外,还显示了用于指定无线电波的强度和数量中的至少一个的对象。根据此搜索条件设定区域507上的用户操作,设定了用于捕捉图像搜索处理的搜索条件。
当通过搜索条件设定区域507上的用户操作设定搜索条件并且通过图像搜索单元109执行如上所述的搜索处理时,关于搜索结果的信息从图像搜索单元109输出至显示控制单元111。显示控制单元111基于所获取的关于搜索结果的信息使如图10所示的显示屏500显示。
在此情况下,搜索结果显示区域509提供在显示屏500上,并且关于已经找到的一个或多个捕捉图像(诸如例如所找到的捕捉图像的缩略图像)的信息在该搜索结果显示区域509中显示。当通过用户操作选择在搜索结果显示区域509中显示的搜索结果中的一个时,通过指向对象513选择的捕捉图像在提供于显示屏500上的搜索结果细节显示区域511中显示。在这种情况下,如前文所提到的,优选根据用于搜索的无线电波模式的相似度,按照相似度的降序显示搜索结果。
应注意,图10示出其中由图像搜索单元109获得的搜索结果通过利用了缩略图像的列表显示的方式显示的情况,然而显示搜索结果的方法不限于图10所示的实例。例如,如图11中示意性地示出,作为搜索结果的捕捉图像可利用与作为搜索结果的捕捉图像相关联的时间戳在时间线中显示。
在这种情况下,显示控制单元111可使代表检测到无线电波的时间位置的无线电波检测点指示对象515与作为搜索结果显示的缩略图像一起显示。通过使这些无线电波检测点指示对象515显示,用户可易于掌握在时间线上的什么时间检测到与作为搜索结果的捕捉图像相对应的无线电波信息。
此外,在如图11所示的时间线上,显示控制单元111可使代表再现位置的再现位置指导对象517与通过用户操作选择且在搜索结果细节显示区域511中再现的捕捉图像一起显示。这使得用户易于掌握当前察看的捕捉图像在时间轴上对应的位置。
接下来将参考图12至图15具体描述在搜索条件设定区域507中显示的内容。
如图12中示意性地示出,在例如其中出现多个人的捕捉图像被指定为搜索目标图像的情况或类似情况下,各个无线电波很有可能从相应的人发射。因此,在与搜索目标图像相对应的无线电波信息中很有可能观测到多个强无线电波。因此,图像搜索单元109与显示控制单元111相互协作地使为示出无线电波强度模式(电场强度模式)的对象的无线电波模式显示对象519显示在搜索条件设定区域507中,如图12中所示。图12所示的实例示出其中关于七个无线电波(即无线电波A至无线电波G)的信息被包括在与搜索目标图像相对应的无线电波信息中并且无线电波B、无线电波D和无线电波F具有相对较强的电场强度的情况。
以此方式,在关于多个强无线电波的信息被包括在无线电波信息中的情况下,图像搜索单元109可使例如用于指定用于搜索的无线电波的数量的数量指定对象521显示在搜索条件设定区域507中。当通过用户操作将用于搜索的无线电波的数量输入数量指定对象521中时,图像搜索单元109使用与搜索目标图像相对应的无线电波模式中的指定数量的或更多的无线电波模式匹配作为搜索条件从多个无线电波信息段中搜索无线电波信息。此外,在尚未通过用户操作将数量输入数量指定对象521的情况下,图像搜索单元109基于已经在其中观测到预定阈值或更高的电场强度的无线电波模式在多个无线电波信息段中搜索无线电波信息。
应注意,具有相对较小的电场强度但是无线电波模式(在图12的情况中为通过条柱给出的形状,其示出七个无线电波的电场强度)的形状相似的无线电波信息也可被包括在作为搜索结果提取的无线电波信息中。因此,图像搜索单元109优选提取无线电波模式的形状相似并且其中每个无线电波的电场强度为预定阈值或更高的无线电波信息段作为搜索结果。
图像搜索单元109可使获得的搜索结果以如图11所示的时间线显示的方式显示,或以如图10所示的列表显示的方式显示。在使搜索结果以列表显示的方式显示的情况下,图像搜索单元109优选地例如使与搜索结果相对应的缩略图像按照匹配的无线电波模式的数量的降序显示。
近年来,一个人通常拥有多个具有无线通信功能的电子设备或通信设备。在其中出现这个人的捕捉图像被指定为搜索目标图像的情况下,即使在仅出现一个人的情况下,也可考虑观测到具有强电场强度的多个无线电波,如图13中示意性地示出。在这种情况下,图像搜索单元109可使如图12所示的无线电波模式显示对象519和数量指定对象521在搜索条件设定区域507中显示,但是也可使如下文将描述的对象被显示。
也就是说,如图13所示,图像搜索单元109可与显示控制单元111配合地使组合指定对象523与无线电波模式显示对象519一起显示,以便指定用于组合用于搜索的无线电波的条件。图13示出用于指定和/或作为组合指定对象523的按钮状对象,然而毋庸置疑的是,组合指定对象523不限于图13所示的那些,而是可利用发挥类似作用的另一个对象。在此,图像搜索单元109和显示控制单元111可使具有最强电场强度的无线电波的组合作为默认显示格式显示。
与图12所示的情况类似,图像搜索单元109根据指定组合的无线电波的无线电波模式,从多个无线电波信息段中搜索与预定阈值或更高的相似度相匹配的无线电波信息段。在这种情况下,图像搜索单元109优选提取在组合的无线电波模式的形状上相似且其中每个无线电波的电场强度为预定阈值或更高的无线电波信息段作为搜索结果。
同样类似于图13所示的情况,图像搜索单元109还可使获得的搜索结果以如图11所示的时间线显示的方式显示,或以图10所示的列表显示的方式显示。
此外,如图14所示,例如,在由于出现多个人而观测到多个无线电波的情况或类似情况下,也可使用无线电波的相对强度作为搜索条件。也就是说,当无线电波监测节点3与人所持有的电子设备或通信设备之间的分隔距离减小时,无线电波监测节点3检测到的电场强度增大,而当分隔距离增加时,无线电波监测节点3检测到的电场强度减小。在此情况下,人们认为当分隔距离减小时,捕捉图像中待成像对象的显示尺寸增大,而当分隔距离增加时,捕捉图像中待成像对象的显示尺寸减小。因此,通过指定关于电场强度的相对阈值(换句话说,也是与无线电波监测节点3的相对分隔距离的阈值,以及捕捉图像中待成像对象的相对显示尺寸的阈值),可以从多个观测到的无线电波中选择期望的无线电波。
因此,图像搜索单元109可与显示控制单元111相互协作地使用于指定如上所述的相对阈值的阈值指定对象525显示于搜索条件设定区域507中。阈值指定对象525的具体实例不受具体限制,而可以是如图14所示的滑块状对象,或者可以是发挥类似作用的另一对象。
在阈值指定对象525位于该阈值指定对象525的可选范围中心的情况下,图像搜索单元109可以搜索具有与和搜索目标图像相对应的无线电波模式相同程度的电场强度的无线电波信息。另外,在阈值指定对象525位于可选范围中心左侧的情况下(即,在“近”侧上的部分),图像搜索单元109可以集中于比与搜索目标图像相对应的无线电波模式的电场强度更强的电场强度搜索无线电波信息。类似的,在阈值指定对象525位于可选范围中心右侧的情况下(即,在“远”侧上的部分),图像搜索单元109可另外集中于比与搜索目标图像相对应的无线电波模式的电场强度更弱的电场强度搜索无线电波信息。
通过利用这样的阈值指定对象525,可容易地从多个捕捉图像中提取仅在出现在搜索目标图像中的搜索目标对象,例如,存在于无线电波监测节点3或监控相机1附近的情况下获得的捕捉图像。
类似地,同样在图14所示的情况中,图像搜索单元109可使获得的搜索结果以如图11所示的时间线显示的方式显示,或以如图10所示的列表显示的方式显示。
此外,图像搜索单元109可例如与显示控制单元111相互协作地使无线电波模式显示对象519和组合/阈值指定对象527显示于搜索条件设定区域507中,如图15所示。组合/阈值指定对象527同时具有图13所示的组合指定对象523的功能和图14所示的阈值指定对象525的功能的对象。例如,在组合/阈值指定对象527中选择了最高强度(图15中与“0”相对应的位置)的情况下,图像搜索单元109可根据对应无线电波的存在/不存在进行搜索,而不考虑指定的无线电波强度。此外,在组合/阈值指定对象527中选择了最低强度(图15中与“-100”相对应的位置)的情况下,图像搜索单元109可以在不使用用于搜索的指定无线电波的情况下进行搜索。此外,在组合/阈值指定对象527中选择了最高强度与最低强度之间位置的情况下,可以考虑到每个无线电波的强度阈值,类似于阈值指定对象525。
通过利用这样的组合/阈值指定对象527,可容易地从多个捕捉图像中提取仅在待搜索的在搜索目标图像中出现的对象,例如,存在于无线电波监测节点3或监控相机1附近的情况下获得的捕捉图像。
类似地,同样在图15所示的情况中,图像搜索单元109可使获得的搜索结果以如图11所示的时间线显示的方式显示,或以如图10所示的列表显示的方式显示。
上文已经参考图9至图15具体描述了在根据本实施例的信息处理装置10中执行的捕捉图像搜索处理中的用户界面。
<关于信息处理方法>
接下来将参考图16简要描述在根据本实施例的信息处理装置10中执行的信息处理方法的流程的实例。图16为示出根据本实施例的信息处理方法的流程的实例的流程图。
捕捉图像和无线电波信息在任何时间分别从相互关联的监控相机1和无线电波监测节点3发送至根据本实施例的信息处理装置10。在获取所发送的捕捉图像和无线电波信息时,信息处理装置10的数据获取单元101将这些所获取的数据段输出至数据记录单元103。数据记录单元103将关于所获取的捕捉图像的数据与时间戳相关联地存储在存储单元105中,并且将关于所获取的无线电波信息的数据与时间戳相关联地存储在存储单元105中(步骤S101)。
然后,信息处理装置10确定用户是否已经进行图像搜索操作(步骤S103)。在尚未进行图像搜索操作的情况下,信息处理装置10返回步骤S103,等待图像搜索操作。
另一方面,在用户已经进行图像搜索操作的情况下,信息处理装置10的图像搜索单元109利用时间戳指定与指定的捕捉图像相对应的无线电波信息(步骤S105),并且根据指定的无线电波信息和用户操作设定搜索条件(步骤S107)。然后,图像搜索单元109从多个所存储的无线电波信息段中提取与所设定的搜索条件相匹配的无线电波信息(步骤S109)。在提取与搜索条件相匹配的无线电波信息时,图像搜索单元109利用时间戳指定与所提取的无线电波信息相对应的捕捉图像(步骤S111)。
然后,信息处理装置10的显示控制单元111使指定的捕捉图像在显示屏上显示(步骤S113)。
这使得用户容易地从多个捕捉图像中提取与根据指定的捕捉图像设定的搜索条件相匹配的捕捉图像。
上文已经参考图16简要描述了在根据本实施例的信息处理装置10中执行的信息处理方法的流程的实例。
(关于硬件配置)
接下来将参考图17详细描述根据本公开的实施例的信息处理装置10的硬件配置。图17为用于描述根据本公开的实施例的信息处理装置10的硬件配置的框图。
信息处理装置10主要包括CPU 901、ROM 903和RAM 905。此外,信息处理装置10还包括主机总线907、桥接器909、外部总线911、界面913、输入装置915、输出装置917、存储装置919、驱动器921、连接端口923以及通信装置925。
CPU 901用作运算处理装置和控制装置,并根据记录在ROM 903、RAM905、存储装置919或可移除记录介质927中的各种程序控制信息处理装置10的整体操作或部分操作。ROM903存储CPU 901使用的程序、操作参数等。RAM 905主要存储CPU 901使用的程序以及在程序的执行期间适当变化的参数等。这些通过主机总线907相互连接,所述主机总线907包括内部总线,诸如CPU总线。
主机总线907通过桥接器909连接到外部总线911,诸如PCI(***部件互连/接口)总线。
输入装置915是由用户操作的操作装置,诸如例如鼠标、键盘、触摸面板、按钮、开关和操纵杆。此外,输入装置915可以是使用例如红外线或其他无线电波的远程控制装置(所谓的远程控制器),或可以是外部连接装置929,诸如移动电话或遵循信息处理装置10的操作的PDA。此外,输入装置915基于例如由用户使用以上操作装置输入的信息生成输入信号,并且包括用于将输入信号输出至CPU 901的输入控制电路等。信息处理装置10的用户可以向信息处理装置10输入各种数据,并且可以通过操作该输入装置915指导信息处理装置10执行各种类型的处理。
输出装置917包括能够可视地或可听地通知用户所获取信息的装置。这样的装置包括诸如CRT显示装置、液晶显示装置、等离子显示装置、EL显示装置和灯的显示装置;诸如扬声器和耳机的音频输出装置;打印机;移动电话;传真机等。例如,输出装置917输出通过信息处理装置10执行的各种类型的处理获得的结果。具体地讲,显示装置以文本或图像的形式显示通过信息处理装置10执行的各种类型的处理获得的结果。另一方面,音频输出装置将包括再现音频数据、声音数据等的音频信号转换成模拟信号,并输出模拟信号。
存储装置919是用于存储数据的被配置为信息处理装置10的存储单元的实例的装置。存储装置919包括例如磁存储装置,诸如HDD(硬盘驱动器)、半导体存储装置、光存储装置、磁光存储装置等。该存储装置919存储将通过CPU 901执行的程序以及各种类型的数据、外部获得的各种类型的数据等。
驱动器921是记录介质的读取器/写入器,并且被内置在信息处理装置10中或附接在其外部。驱动器921读取记录在附接的可移除记录介质927(诸如磁盘、光盘、磁光盘或半导体存储器)中的信息并且将读取信息输出至RAM905。此外,驱动器921可以在附接的可移除记录介质927(诸如磁盘、光盘、磁光盘或半导体存储器)中写入记录。可移除记录介质927为例如DVD介质、HD-DVD介质、蓝光(注册商标)介质等。此外,可移除记录介质927可以是CompactFlash(CF;注册商标)、闪存、SD记忆卡(安全数字记忆卡)等。此外,可移除记录介质927可以是例如配备有非接触IC芯片的IC卡(集成电路卡)、电子设备等。
连接端口923是允许装置直接连接到信息处理装置10的端口。连接端口923的实例包括USB(通用串行总线)端口、IEEE1394端口、SCSI(小型计算机***接口)端口等。连接端口923的其他实例包括RS-232C端口、光学音频终端、高清晰多媒体接口(HDMI,注册商标)端口等。通过将外部连接装置929与该连接端口923连接,信息处理装置10直接从外部连接装置929获取各种类型的数据并且向外部连接装置929提供各种类型的数据。
通信装置925是包括例如用于连接至通信网络931的通信装置等的通信接口。通信装置925为例如用于有线或无线LAN(局域网)、蓝牙(注册商标),或WUSB(无线USB)的通信卡等。此外,通信装置925可以是用于光通信的路由器、用于ADSL(非对称数字用户线)的路由器、用于各种类型的通信的调制解调器等。该通信装置925可以根据预定协议,例如诸如因特网上的TCP/IP,并且利用例如其他通信装置传输和接收信号等。此外,连接至通信装置925的通信网络931包括以有线或无线方式连接的网络和类似物,并且可以是例如因特网、家庭LAN、红外通信、无线电波通信、卫星通信等。
上文阐述了能够实现根据本公开的实施例的信息处理装置10的功能的硬件配置的实例。以上结构元件中的每一个可以使用通用构件实现,或者也可以使用每个结构元件的功能专用的硬件实现。因此,在实施本实施例时,可以根据技术水平适当地修改要使用的硬件配置。
上文已经参考附图描述了本公开的一个或多个优选实施例,然而本公开不限于以上实例。本领域技术人员可以发现在随附权利要求范围内的各种变更和修改,应当理解,它们自然将在本公开的技术范围内。
此外,本说明书中所描述的效果仅仅是说明性或示例性的效果,而不是限制性的。也就是说,伴随或代替以上效果,根据本公开的技术可以实现本领域技术人员由本说明书的描述而明白的其他效果。
此外,本技术也可配置如下。在此,前文所述的图像搜索单元对应于以下读取单元和搜索单元。
(1)一种信息处理装置,包括:
读取单元,其被配置成从被配置成相互关联地记录关于无线电波的无线电波信息、捕捉图像和拍摄捕捉图像时的时间的记录单元中读取所述无线电波信息;以及
搜索单元,其被配置成基于包括在所读取的无线电波信息中的无线电波的数量和所述无线电波的强度中的至少一个从记录在所述记录单元中的多个所述捕捉图像中搜索满足搜索条件的捕捉图像。
(2)根据(1)所述的信息处理装置,其中
所述搜索单元
关于待用作任何搜索基础的所述捕捉图像,基于与所述捕捉图像和所述无线电波信息相关联的时间戳指定在作为搜索基础的所述捕捉图像生成时检测到的所述无线电波信息,
由包括在所指定的无线电波信息中的所述无线电波的所述强度和数量的组合设定所述搜索条件,以指定与所述搜索条件相匹配的所述无线电波信息,并且
利用与所指定的无线电波信息相关联的所述时间戳,指定与所述时间戳相对应的所述捕捉图像。
(3)根据(2)所述的信息处理装置,其中
除了基于所述搜索条件指定的所述捕捉图像之外,所述搜索单元还从所述多个捕捉图像中选择在所述指定的捕捉图像前后的预定时间段拍摄的所述捕捉图像。
(4)根据(1)至(3)中任一项所述的信息处理装置,其中
在存在与所述搜索条件相匹配的多个所述捕捉图像的情况下,所述搜索单元根据所述无线电波的相似度改变搜索结果的显示顺序。
(5)根据(1)至(4)中任一项所述的信息处理装置,还包括:
显示控制单元,其被配置成执行用于使通过所述搜索单元找到的所述捕捉图像在显示屏上显示的显示控制,其中
所述显示控制单元在所述显示屏上至少提供其中显示所述捕捉图像的捕捉图像显示区域和用于指定所述搜索条件的搜索条件设定区域,并且关于显示于所述捕捉图像显示区域中的任意的所述捕捉图像中的、由用户指定的所述捕捉图像,使代表被包括在与所述用户指定的所述捕捉图像相对应的所述无线电波信息中的所述无线电波的所述强度和数量的显示对象显示于所述搜索条件设定区域中,并且
所述搜索单元根据所述用户在所述搜索条件设定区域中执行的用户操作设定所述搜索条件。
(6)根据(5)所述的信息处理装置,其中
所述显示控制单元
在所述显示屏上提供搜索结果显示区域,与所述搜索条件相匹配的所述捕捉图像作为搜索结果显示在其中;以及搜索结果细节显示区域,在与所述搜索条件相匹配的捕捉图像中由所述用户指定的所述捕捉图像详细地显示在其中;并且
使与所述搜索条件相匹配的捕捉图像以列表显示或时间线显示的方式显示在所述搜索结果显示区域中。
(7)根据(6)所述的信息处理装置,其中
所述显示控制单元至少将与所述搜索条件相匹配的所述捕捉图像的缩略图像布置在所述搜索结果显示区域中。
(8)根据(6)或(7)所述的信息处理装置,其中
所述显示控制单元使示出被包括在与所述用户指定的所述捕捉图像相对应的所述无线电波信息中的所述无线电波的强度模式的对象和用于指定用于搜索的所述无线电波的所述数量的数量指定对象作为所述显示对象而显示,并且
使用利用所述数量指定对象指定的所述数量作为所述搜索条件,所述搜索单元搜索其中所述数量的或更多的所述无线电波信息匹配的所述捕捉图像。
(9)根据(6)或(7)所述的信息处理装置,其中
所述显示控制单元使示出被包括在与所述用户指定的所述捕捉图像相对应的所述无线电波信息中的所述无线电波的强度模式的对象和用于指定所述无线电波的组合的组合指定对象作为所述显示对象而显示,并且
使用利用所述组合指定对象指定的所述无线电波的所述组合作为所述搜索条件,所述搜索单元搜索与其中已经检测到所述无线电波的所述指定组合的所述无线电波信息相对应的所述捕捉图像。
(10)根据(6)或(7)所述的信息处理装置,其中
所述显示控制单元使用于指定无线电波的相对强度的强度指定对象或用于指定与在捕捉图像中待成像的对象的相对分隔距离的分隔距离指定对象作为所述显示对象而显示,并且
使用被包括在与所述用户指定的所述捕捉图像相对应的所述无线电波信息中且利用与所述强度指定对象或所述分隔距离指定对象相对应的加权系数加权的所述无线电波的所述强度作为所述搜索条件,所述搜索单元搜索与具有高于或等于加权后的强度的所述强度或低于或等于加权后的强度的所述强度的所述无线电波信息相对应的所述捕捉图像。
(11)根据(6)或(7)所述的信息处理装置,其中
所述显示控制单元使示出被包括在与所述用户指定的所述捕捉图像相对应的所述无线电波信息中的所述无线电波的强度模式的对象、用于指定所述无线电波的组合的组合指定对象,以及用于指定无线电波的相对强度的强度指定对象作为所述显示对象而显示,并且
使用通过利用与所述强度指定对象相对应的加权系数将被包括在与所述用户指定的所述捕捉图像相对应的所述无线电波信息中的所述无线电波的所述强度加权获得的值和利用所述组合指定对象指定的所述无线电波的所述组合作为所述搜索条件,所述搜索单元搜索与具有高于或等于加权后的强度的所述强度或低于或等于加权后的强度的所述强度并且在其中已经检测到所述无线电波的所述指定组合的所述无线电波信息相对应的所述捕捉图像。
(12)根据(1)至(11)中任一项所述的信息处理装置,其中
所述无线电波为用于无线通信的无线电波。
(13)一种信息处理方法,包括:
从被配置成相互关联地记录关于无线电波的无线电波信息、捕捉图像和拍摄所述捕捉图像的时间的记录单元中读取所述无线电波信息;以及
基于被包括在所读取的无线电波信息中的无线电波的数量和所述无线电波的强度中的至少一个在记录在所述记录单元中的多个所述捕捉图像中搜索满足搜索条件的捕捉图像。
(14)一种程序,其用于使计算机实施以下各项:
从被配置成相互关联地记录关于无线电波的无线电波信息、捕捉图像和拍摄所述捕捉图像的时间的记录单元中读取所述无线电波信息的读取功能;以及
基于被包括在所读取的无线电波信息中的无线电波的数量和所述无线电波的强度中的至少一个在记录在所述记录单元中的多个所述捕捉图像中搜索满足搜索条件的捕捉图像的搜索功能。
参考标记列表
1 监控相机(成像装置)
3 无线电波监测节点
10 信息处理装置
101 数据获取单元
103 数据记录单元
105 存储单元
107 捕捉图像再现单元
109 图像搜索单元
111 显示控制单元
500 显示屏
501 捕捉图像显示区域
503 再现状态指定对象
505 搜索处理开始对象
507 搜索条件设定区域
509 搜索结果显示区域
511 搜索结果细节显示区域
513 指向对象
515 无线电波检测点指示对象
517 再现位置指示对象
519 无线电波模式显示对象
521 数量指定对象
523 组合指定对象
525 阈值指定对象
527 组合/阈值指定对象。

Claims (14)

1.一种信息处理装置,包括:
读取单元,其被配置成从被配置成相互关联地记录关于无线电波的无线电波信息、捕捉图像以及拍摄所述捕捉图像的时间的记录单元中读取所述无线电波信息;以及
搜索单元,其被配置成基于被包括在所读取的所述无线电波信息中的无线电波的数量和所述无线电波的强度中的至少一个从记录在所述记录单元中的多个所述捕捉图像中搜索满足搜索条件的捕捉图像。
2.根据权利要求1所述的信息处理装置,其中
所述搜索单元
关于待用作任何搜索基础的所述捕捉图像,基于与所述捕捉图像和所述无线电波信息相关联的时间戳指定在作为搜索基础的所述捕捉图像生成时检测到的所述无线电波信息,
由包括在所指定的无线电波信息中的所述无线电波的所述强度和数量的组合设定所述搜索条件,以指定与所述搜索条件相匹配的所述无线电波信息,并且
利用与所指定的无线电波信息相关联的所述时间戳,指定与所述时间戳相对应的所述捕捉图像。
3.根据权利要求2所述的信息处理装置,其中
除了基于所述搜索条件指定的所述捕捉图像之外,所述搜索单元还从所述多个捕捉图像中选择在所述指定的捕捉图像前后的预定时间段拍摄的所述捕捉图像。
4.根据权利要求1所述的信息处理装置,其中
在存在与所述搜索条件相匹配的多个所述捕捉图像的情况下,所述搜索单元根据所述无线电波的相似度改变搜索结果的显示顺序。
5.根据权利要求1所述的信息处理装置,还包括:
显示控制单元,其被配置成执行用于使通过所述搜索单元找到的所述捕捉图像在显示屏上显示的显示控制,其中
所述显示控制单元在所述显示屏上至少提供其中显示所述捕捉图像的捕捉图像显示区域和用于指定所述搜索条件的搜索条件设定区域,并且关于显示于所述捕捉图像显示区域中的任意的所述捕捉图像中的、由用户指定的所述捕捉图像,使代表被包括在与所述用户指定的所述捕捉图像相对应的所述无线电波信息中的所述无线电波的所述强度和数量的显示对象显示于所述搜索条件设定区域中,并且
所述搜索单元根据所述用户在所述搜索条件设定区域中执行的用户操作设定所述搜索条件。
6.根据权利要求5所述的信息处理装置,其中
所述显示控制单元
在所述显示屏上提供搜索结果显示区域,与所述搜索条件相匹配的所述捕捉图像作为搜索结果显示在其中;以及搜索结果细节显示区域,在与所述搜索条件相匹配的捕捉图像中由所述用户指定的所述捕捉图像详细地显示在其中;并且
使与所述搜索条件相匹配的捕捉图像以列表显示或时间线显示的方式显示在所述搜索结果显示区域中。
7.根据权利要求6所述的信息处理装置,其中
所述显示控制单元至少将与所述搜索条件相匹配的所述捕捉图像的缩略图像布置在所述搜索结果显示区域中。
8.根据权利要求6所述的信息处理装置,其中
所述显示控制单元使示出被包括在与所述用户指定的所述捕捉图像相对应的所述无线电波信息中的所述无线电波的强度模式的对象和用于指定用于搜索的所述无线电波的所述数量的数量指定对象作为所述显示对象而显示,并且
使用利用所述数量指定对象指定的所述数量作为所述搜索条件,所述搜索单元搜索其中所述数量的或更多的所述无线电波信息匹配的所述捕捉图像。
9.根据权利要求6所述的信息处理装置,其中
所述显示控制单元使示出被包括在与所述用户指定的所述捕捉图像相对应的所述无线电波信息中的所述无线电波的强度模式的对象和用于指定所述无线电波的组合的组合指定对象作为所述显示对象而显示,并且
使用利用所述组合指定对象指定的所述无线电波的组合作为所述搜索条件,所述搜索单元搜索与其中已经检测到所述无线电波的所述指定组合的所述无线电波信息相对应的所述捕捉图像。
10.根据权利要求6所述的信息处理装置,其中
所述显示控制单元使用于指定无线电波的相对强度的强度指定对象或用于指定与在捕捉图像中待成像的对象的相对分隔距离的分隔距离指定对象作为所述显示对象而显示,并且
使用被包括在与所述用户指定的所述捕捉图像相对应的所述无线电波信息中且利用与所述强度指定对象或所述分隔距离指定对象相对应的加权系数加权的所述无线电波的所述强度作为所述搜索条件,所述搜索单元搜索与具有高于或等于加权后的所述强度的强度或低于或等于加权后的所述强度的强度的所述无线电波信息相对应的所述捕捉图像。
11.根据权利要求6所述的信息处理装置,其中
所述显示控制单元使示出被包括在与所述用户指定的所述捕捉图像相对应的所述无线电波信息中的所述无线电波的强度模式的对象、用于指定所述无线电波的组合的组合指定对象,以及用于指定无线电波的相对强度的强度指定对象作为所述显示对象而显示,并且
使用通过利用与所述强度指定对象相对应的加权系数将被包括在与所述用户指定的所述捕捉图像相对应的所述无线电波信息中的所述无线电波的所述强度加权获得的值和利用所述组合指定对象指定的所述无线电波的所述组合作为所述搜索条件,所述搜索单元搜索与具有高于或等于加权后的所述强度的强度或低于或等于加权后的所述强度的强度并且在其中已经检测到所述无线电波的所述指定组合的所述无线电波信息相对应的所述捕捉图像。
12.根据权利要求1所述的信息处理装置,其中
所述无线电波为用于无线通信的无线电波。
13.一种信息处理方法,包括:
从被配置成相互关联地记录关于无线电波的无线电波信息、捕捉图像和拍摄所述捕捉图像的时间的记录单元中读取所述无线电波信息;以及
基于被包括在所读取的所述无线电波信息中的无线电波的数量和所述无线电波的强度中的至少一个在记录在所述记录单元中的多个所述捕捉图像中搜索满足搜索条件的捕捉图像。
14.一种程序,其用于使计算机实施以下各项:
从被配置成相互关联地记录关于无线电波的无线电波信息、捕捉图像和拍摄所述捕捉图像的时间的记录单元中读取所述无线电波信息的读取功能;以及
基于被包括在所读取的所述无线电波信息中的无线电波的数量和所述无线电波的强度中的至少一个在记录在所述记录单元中的多个所述捕捉图像中搜索满足搜索条件的捕捉图像的搜索功能。
CN201680045581.8A 2015-08-11 2016-05-17 信息处理装置、信息处理方法和程序 Active CN107851129B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015158707 2015-08-11
JP2015-158707 2015-08-11
PCT/JP2016/064637 WO2017026154A1 (ja) 2015-08-11 2016-05-17 情報処理装置、情報処理方法及びプログラム

Publications (2)

Publication Number Publication Date
CN107851129A true CN107851129A (zh) 2018-03-27
CN107851129B CN107851129B (zh) 2022-04-26

Family

ID=57984198

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680045581.8A Active CN107851129B (zh) 2015-08-11 2016-05-17 信息处理装置、信息处理方法和程序

Country Status (4)

Country Link
US (1) US10719543B2 (zh)
JP (1) JP6724919B2 (zh)
CN (1) CN107851129B (zh)
WO (1) WO2017026154A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11269964B2 (en) * 2017-07-24 2022-03-08 Mycelebs Co., Ltd. Field-of-interest based preference search guidance system
US11558679B1 (en) * 2018-03-01 2023-01-17 Amazon Technologies, Inc. Systems and methods for submitting video evidence
KR102619271B1 (ko) * 2018-11-01 2023-12-28 한화비전 주식회사 복수의 카메라들을 포함하는 영상 촬영 장치 및 영상 촬영 시스템
CN112054859B (zh) * 2019-11-25 2023-12-29 陕西智航信科技有限公司 天线强度失配分析***及方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006217336A (ja) * 2005-02-04 2006-08-17 Dainippon Printing Co Ltd 撮影情報検索システム
CN1841413A (zh) * 2005-03-29 2006-10-04 富士通株式会社 标签测试装置、标签测试方法以及标签测试程序
JP2007052646A (ja) * 2005-08-18 2007-03-01 Fujifilm Holdings Corp 画像検索装置、画像プリント装置、プリント注文システム、店頭プリント端末装置、撮像装置、画像検索プログラム及び方法
CN101796873A (zh) * 2007-09-10 2010-08-04 索尼公司 无线电通信设备、信息处理***、程序和无线电通信方法
JP2011523126A (ja) * 2008-05-22 2011-08-04 ユー‐ブロックス、アクチエンゲゼルシャフト ファイル作成方法およびシステム
US20130088619A1 (en) * 2008-06-30 2013-04-11 Nintendo Co., Ltd. Imaging apparatus, imaging system, and game apparatus
US20140205144A1 (en) * 2013-01-22 2014-07-24 Denso Corporation In-vehicle target detecting device

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4659184B2 (ja) 2000-07-25 2011-03-30 株式会社日立製作所 娯楽施設のサービスシステム
EP1841229A4 (en) 2004-12-17 2011-12-07 Dainippon Printing Co Ltd PICTURE INFORMATION MANAGEMENT SYSTEM AND METHOD AND PICTURE INFORMATION SEARCH SYSTEM
US8022987B2 (en) * 2005-06-30 2011-09-20 Sandia Corporation Information-based self-organization of sensor nodes of a sensor network
US20070276540A1 (en) * 2006-05-16 2007-11-29 Akinobu Okuda Robot, radio detection system, radio detection method and recording medium storing radio detection processing program

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006217336A (ja) * 2005-02-04 2006-08-17 Dainippon Printing Co Ltd 撮影情報検索システム
CN1841413A (zh) * 2005-03-29 2006-10-04 富士通株式会社 标签测试装置、标签测试方法以及标签测试程序
JP2007052646A (ja) * 2005-08-18 2007-03-01 Fujifilm Holdings Corp 画像検索装置、画像プリント装置、プリント注文システム、店頭プリント端末装置、撮像装置、画像検索プログラム及び方法
CN101796873A (zh) * 2007-09-10 2010-08-04 索尼公司 无线电通信设备、信息处理***、程序和无线电通信方法
JP2011523126A (ja) * 2008-05-22 2011-08-04 ユー‐ブロックス、アクチエンゲゼルシャフト ファイル作成方法およびシステム
US20130088619A1 (en) * 2008-06-30 2013-04-11 Nintendo Co., Ltd. Imaging apparatus, imaging system, and game apparatus
US20140205144A1 (en) * 2013-01-22 2014-07-24 Denso Corporation In-vehicle target detecting device

Also Published As

Publication number Publication date
JP6724919B2 (ja) 2020-07-15
CN107851129B (zh) 2022-04-26
US20180173704A1 (en) 2018-06-21
JPWO2017026154A1 (ja) 2018-05-24
US10719543B2 (en) 2020-07-21
WO2017026154A1 (ja) 2017-02-16

Similar Documents

Publication Publication Date Title
CN103119595B (zh) 通过快门按击的自动媒体共享
CN107862315B (zh) 字幕提取方法、视频搜索方法、字幕分享方法及装置
CN103780973B (zh) 视频标签添加方法及装置
US20070206834A1 (en) Search system, image-capturing apparatus, data storage apparatus, information processing apparatus, captured-image processing method, information processing method, and program
US20200334454A1 (en) People stream analysis method, people stream analysis apparatus, and people stream analysis system
US20090190804A1 (en) Electronic apparatus and image processing method
CN107851129A (zh) 信息处理装置、信息处理方法和程序
US20140293069A1 (en) Real-time image classification and automated image content curation
CN106663196A (zh) 视频中的计算机显著人物识别
CN108090406A (zh) 人脸识别方法及***
CN107148628A (zh) 用于基于特征进行认证的***和方法
CN105659279A (zh) 信息处理设备、信息处理程序、记录介质和信息处理方法
US8311271B2 (en) Image processing apparatus and image processing method
JP2021535667A (ja) 事象を管理するための注目期間及び少なくとも1つの注目領域を決定する方法、装置及びプログラム
JP2006079458A (ja) 画像伝送システム、画像伝送方法、及び画像伝送プログラム
CN110291516A (zh) 信息处理设备、信息处理方法和程序
CN108959884A (zh) 人证核验装置和方法
CN106096043A (zh) 一种拍照方法和移动终端
CN110446104A (zh) 视频处理方法、装置及存储介质
CN107360366A (zh) 拍照方法、装置、存储介质及电子设备
JP2010204733A (ja) 落とし物情報管理装置、方法、プログラムおよびシステム
CN104508702B (zh) 图像检索装置以及图像检索方法
CN114924950A (zh) 测试方法、电子设备和计算机可读介质
CN108540760A (zh) 视频监控识别方法、装置和***
US20110091072A1 (en) Image processing apparatus, image processing system, and control method for image processing apparatus

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant