CN100551046C - 信息处理的方法和装置 - Google Patents

信息处理的方法和装置 Download PDF

Info

Publication number
CN100551046C
CN100551046C CNB2006100582525A CN200610058252A CN100551046C CN 100551046 C CN100551046 C CN 100551046C CN B2006100582525 A CNB2006100582525 A CN B2006100582525A CN 200610058252 A CN200610058252 A CN 200610058252A CN 100551046 C CN100551046 C CN 100551046C
Authority
CN
China
Prior art keywords
image
mobile
pickup mode
image pickup
detected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB2006100582525A
Other languages
English (en)
Other versions
CN1829320A (zh
Inventor
田村朝子
宫牧秀宇
铃木雅晴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN1829320A publication Critical patent/CN1829320A/zh
Application granted granted Critical
Publication of CN100551046C publication Critical patent/CN100551046C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19608Tracking movement of a target, e.g. by detecting an object predefined as a target, using target direction and or velocity to predict its new position
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639Details of the system layout
    • G08B13/19641Multiple cameras having overlapping views on a single scene
    • G08B13/19643Multiple cameras having overlapping views on a single scene wherein the cameras play different roles, e.g. different resolution, different camera type, master-slave camera
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19678User interface
    • G08B13/19682Graphic User Interface [GUI] presenting system data to the user, e.g. information on a screen helping a user interacting with an alarm system
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)

Abstract

公开了一种信息处理的方法和装置,其中,可以拍摄预定区域的图像,并且可以容易地跟踪该预定区域中所期望的活动体以拍摄该活动体的图像。传感器图像获取模块获取传感器图像。活动体检测模块基于该传感器图像检测存在于预定区域中的活动体。跟踪对象指定模块指定检测到的其中一个活动体。当通过该跟踪对象指定模块指定活动体时,摄像模式转换模块将摄像模式设置为连续跟踪模式,在该连续跟踪模式中,跟踪所指定的活动体以拍摄该活动体的图像。本发明可应用于例如监控***。

Description

信息处理的方法和装置
技术领域
本发明涉及一种信息处理***、信息处理装置和信息处理方法、程序以及记录介质,尤其涉及一种可以拍摄预定区域中的图像、并且可以跟踪用户所期望的预定区域中的活动体以拍摄该活动体的图像的信息处理***、信息处理装置和信息处理方法、程序以及记录介质。
背景技术
近年来,为了确保安全,例如在有自动柜员机(automaticteller machine,ATM)的银行、停车区和住宅等中经常安装多地点照相机监控***(多照相机***)。
如上所述的这种多照相机***包括多个视频照相机和用于记录由该视频照相机获取的图像的记录装置。已经提出了利用如上所述的这种多照相机***的装置,其中,如例如在日本特开平10-108163号公报(下文称之为专利文献1)中所公开的,按比例缩小多个图像,并将其合成为一帧图像。还提出了一种设备,其中,如例如在日本特开2000-243062号公报(下文称之为专利文献2)中所公开的,收集来自多个视频照相机图像,并将其记录在记录介质例如录像带上。
图1示出传统的多照相机***的例子的外观图。
参考图1,所示的多照相机***1包括四个照相机11-1到11-4。照相机11-1到11-4是拍摄方向固定的固定照相机或者拍摄方向可变的全方位移动变焦(pan tilt zoom)照相机。例如在停车区,照相机11-1到11-4监控直径40m的圆形广范围的区域21。
图2示出图1中所示的多照相机***的结构的例子。
参考图2,每个照相机11-1到11-4拍摄图像。照相机11-1到11-4被分别连接到记录装置41,并将通过图像拍摄所获取的图像的模拟信号提供给记录装置41。记录装置41记录图像数据,该图像数据是通过从照相机11-1到11-4提供的图像的模拟信号的A/D转换而获得的图像的数字信号。此外,记录装置41被连接到显示装置42,并使显示装置42显示与该图像数据相对应的图像。
然而,在图2中的多照相机***1中,可被连接到记录装置41的照相机仅限于四个照相机11-1到11-4,因此多照相机***1的可扩展性差。
图3示出图1中的多照相机***1的结构的另一例子。
参考图3,通过网络51将照相机11-1到11-4连接到个人计算机(PC)52。每个照相机11-1到11-4拍摄图像,并根据IP(Internet Protocol,网络协议)通过网络51将通过图像拍摄所获得的图像数据传输给PC 52。PC 52记录该图像数据并显示与该图像数据相对应的图像。
如上所述,在多照相机***1中,需要四个照相机11-1到11-4来监控区域21。因此,安装照相机很麻烦,并且对多照相机***1需要高成本。此外,为了获取高清晰度的图像,需要以高摄像倍率(magnification)拍摄图像,因此,需要更多数量的照相机。然而,在不增加照相机的数量而想要获取高清晰度的图像的情况下,从整个区域21的所有部位获得高清晰度的图像是困难的。因此,在一般情况下,需要操作者监控正常图像并指定所期望的区域,以获取该区域的高清晰度的图像。
现有这样一种监控照相机:其可利用单个照相机通过在顺序改变摄像方向的同时拍摄被摄体的图像以获得由多个单元图像形成的整个被摄体的全景图像来监控广范围的状况。
发明内容
然而,利用上述这种监控照相机,为了产生整个被摄体的单个图像,需要获取形成整个被摄体的图像的所有单元图像,并需要大量时间以产生整个被摄体的图像。因此,难以完全捕获在短时间内出现在图像拍摄的范围内的状况下的任何微小的变化。
特别地,在获取整个摄像范围的图像之后直到获取整个摄像范围的下一图像为止,以高速度活动的活动体(活动被摄体)有时在一段时间内会移出图像拍摄的范围。此外,用户在必要时有时想要跟踪并拍摄所期望的活动体的图像。
本发明期望提供一种信息处理***、信息处理装置和信息处理方法、程序以及记录介质,其中可以拍摄预定区域的图像,并且可以容易地跟踪该预定区域中所期望的活动体以拍摄该活动体的图像。
为了达到上述期望,根据本发明的实施例,提供一种信息处理***,包括:区域图像拍摄装置,用于拍摄预定区域的图像;检测装置,用于基于由该区域图像拍摄装置通过图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;指定装置,用于指定由该检测装置检测到的其中一个活动体;以及设置装置,用于将摄像模式设置为顺序拍摄由该检测装置检测到的活动体的图像的循环摄像模式,或者跟踪由该指定装置所指定的活动体以拍摄该活动体的图像的连续跟踪模式;其中当由该指定装置指定其中一个活动体时,该设置装置将摄像模式设置为连续跟踪模式,以及该检测装置还检测已检测到的任何活动体的消失,并当由该检测装置检测到由该指定装置所指定的活动体消失时,该设置装置将摄像模式设置为循环摄像模式。
根据本发明的另一实施例,提供一种信息处理装置,用于控制被摄体的图像拍摄,包括:区域图像拍摄控制装置,用于控制拍摄预定区域的图像的区域图像拍摄装置,以拍摄该预定区域的图像;检测装置,用于基于由该区域图像拍摄装置通过图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;活动体图像拍摄控制装置,用于控制拍摄由该检测装置检测到的活动体的图像的活动体图像拍摄装置,以拍摄该活动体的图像;指定装置,用于指定由该检测装置检测到的其中一个活动体;以及设置装置,用于将摄像模式设置为顺序拍摄由该检测装置检测到的活动体的图像的循环摄像模式,或者跟踪由该指定装置所指定的活动体以拍摄该活动体的图像的连续跟踪模式;其中当由该指定装置指定其中一个活动体时,该设置装置将摄像模式设置为连续跟踪模式,以及该检测装置还检测已检测到的任何活动体的消失,并当由该检测装置检测到由该指定装置所指定的活动体消失时,该设置装置将摄像模式设置为循环摄像模式。
根据本发明的又一实施例,提供一种用于控制被摄体的图像拍摄的信息处理装置的信息处理方法,包括以下步骤:区域图像拍摄控制步骤,用于控制拍摄预定区域的图像的区域图像拍摄装置,以拍摄该预定区域的图像;检测步骤,用于基于由该区域图像拍摄装置通过图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;活动体图像拍摄控制步骤,用于控制拍摄通过该检测步骤中的处理检测到的活动体的图像的活动体图像拍摄装置,以拍摄该活动体的图像;指定步骤,用于指定通过该检测步骤中的处理检测到的其中一个活动体;设置步骤,用于将摄像模式设置为顺序拍摄通过该检测步骤中的处理检测到的活动体的图像的循环摄像模式,或者跟踪通过该指定步骤中的处理所指定的活动体以拍摄该活动体的图像的连续跟踪模式;其中,当通过该指定步骤中的处理指定其中一个活动体时,该设置步骤中的处理将摄像模式设置为连续跟踪模式,以及该检测步骤中的处理还检测已检测到的任何活动体的消失,并当通过该检测步骤中的处理检测到通过该指定步骤中的处理所指定的活动体消失时,该设置步骤中的处理将摄像模式设置为循环摄像模式。
根据本发明的再一实施例,提供一种用于使计算机执行控制被摄体的图像拍摄的处理的程序,包括以下步骤:区域图像拍摄控制步骤,用于控制拍摄预定区域的图像的区域图像拍摄装置,以拍摄该预定区域的图像;检测步骤,用于基于由该区域图像拍摄装置通过图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;活动体图像拍摄控制步骤,用于控制拍摄通过该检测步骤中的处理检测到的活动体的图像的活动体图像拍摄装置,以拍摄该活动体的图像;指定步骤,用于指定通过该检测步骤中的处理检测到的其中一个活动体;以及设置步骤,用于将摄像模式设置为顺序拍摄通过该检测步骤中的处理检测到的活动体的图像的循环摄像模式,或者跟踪通过该指定步骤中的处理所指定的活动体以拍摄该活动体的图像的连续跟踪模式;其中,当通过该指定步骤中的处理指定其中一个活动体时,该设置步骤中的处理将摄像模式设置为连续跟踪模式。
根据本发明的再一实施例,提供一种记录介质,在该记录介质上或该记录介质中记录用于使计算机执行控制被摄体的图像拍摄的处理的程序,该程序包括以下步骤:区域图像拍摄控制步骤,用于控制拍摄预定区域的图像的区域图像拍摄装置,以拍摄该预定区域的图像;检测步骤,用于基于由该区域图像拍摄装置通过图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;活动体图像拍摄控制步骤,用于控制拍摄通过该检测步骤中的处理检测到的活动体的图像的活动体图像拍摄装置,以拍摄通过该检测步骤中的处理检测到的活动体的图像;指定步骤,用于指定通过该检测步骤中的处理检测到的其中一个活动体;以及设置步骤,用于将摄像模式设置为顺序拍摄通过该检测步骤中的处理检测到的活动体的图像的循环摄像模式,或者跟踪通过该指定步骤中的处理所指定的活动体以拍摄该活动体的图像的连续跟踪模式;其中,当通过该指定步骤中的处理指定其中一个活动体时,该设置步骤中的处理将摄像模式设置为连续跟踪模式。
根据本发明的又一实施例,提供一种信息处理***,包括:区域图像拍摄部分,用于拍摄预定区域的图像;检测部分,用于基于由该区域图像拍摄部分通过图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;指定部分,用于指定由该检测部分检测到的其中一个活动体;以及设置部分,用于将摄像模式设置为顺序拍摄由该检测部分检测到的活动体的图像的循环摄像模式,或者跟踪由该指定部分所指定的活动体以拍摄该活动体的图像的连续跟踪模式;其中,当由该指定部分指定其中一个活动体时,该设置部分将摄像模式设置为连续跟踪模式,以及该检测部分还检测已检测到的任何活动体的消失,并当由该检测部分检测到由该指定部分所指定的活动体消失时,该设置部分将摄像模式设置为循环摄像模式。
根据本发明的又一实施例,提供一种信息处理装置,用于控制被摄体的图像拍摄,包括:区域图像拍摄控制部分,用于控制拍摄预定区域的图像的区域图像拍摄部分,以拍摄该预定区域的图像;检测部分,用于基于由该区域图像拍摄部分通过图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;活动体图像拍摄控制部分,用于控制拍摄由该检测部分检测到的活动体的图像的活动体图像拍摄部分,以拍摄该活动体的图像;指定部分,用于指定由该检测部分检测到的其中一个活动体;以及设置部分,用于将摄像模式设置为顺序拍摄由该检测部分检测到的活动体的图像的循环摄像模式,或者跟踪由该指定部分所指定的活动体以拍摄该活动体的图像的连续跟踪模式;其中当由该指定部分指定其中一个活动体时,该设置部分将摄像模式设置为连续跟踪模式,以及该检测部分还检测已检测到的任何活动体的消失,并当由该检测部分检测到由该指定部分所指定的活动体消失时,该设置部分将摄像模式设置为循环摄像模式。
在该信息处理***、信息处理装置、信息处理方法、程序以及记录介质中,拍摄预定区域的图像,并基于通过图像拍摄所获得的区域图像来检测存在于该预定区域中的活动体。然后,拍摄检测到的活动体的图像。然后,如果指定了检测到的其中一个活动体,则将摄像模式从循环摄像模式和连续跟踪模式之间设置为连续跟踪模式,其中在该循环摄像模式中,顺序拍摄通过该检测装置或在该检测步骤中检测到的活动体的图像,在该连续跟踪模式中,跟踪通过该指定装置或在该指定步骤中所指定的活动体以拍摄该活动体的图像。
利用该信息处理***、信息处理装置、信息处理方法、程序以及记录介质,可以拍摄预定区域的图像,并且可以容易地跟踪用户所期望的预定区域中的活动体以拍摄该活动体的图像。
通过下面结合附图的说明和所附的权利要求书,本发明的上述和其它目的、特征和优点将变得很明显,其中在所有的附图中,相同的附图标记表示相同的部分或要素。
附图说明
图1是示出传统的多照相机***的例子的外观的示意图;
图2是示出图1的多照相机***的结构的例子的示意图;
图3是类似但示出图1的多照相机***的结构的另一例子的图;
图4是示出应用本发明的监控***的外观的例子的图;
图5是示出图4中所示的监控***的结构的例子的示意图;
图6是示出图5中所示的客户机的结构的例子的框图;
图7是示出图5中所示的客户机的功能结构的例子的框图;
图8是示出显示在图6中所示的输出部分上的屏幕的例子的示意图;
图9和10是示出显示在图8中所示的屏幕上的摄像模式选择部分的例子的图;
图11是详细说明在图4的监控***中所使用的循环摄像模式和连续跟踪模式的图;
图12是说明当摄像模式为循环摄像模式时由图5中所示的客户机执行的循环摄像处理的流程图;
图13是说明当摄像模式为连续跟踪模式时由图5中所示的客户机执行的连续跟踪处理的流程图;
图14是说明用于由图5中所示的客户机获取传感器图像和变焦图像的图像获取处理的流程图;以及
图15和16是示出图4中所示的监控***的结构的不同例子的示意图。
具体实施方式
在详细说明本发明的优选实施例之前,对在所附权利要求书中叙述的几个特征与下面说明的优选实施例中的特定要素之间的对应关系进行说明。然而,该说明仅用于确认:在本发明的实施例的说明中公开了支持如在权利要求书中所叙述的本发明的特定要素。因此,即使一些在实施例的说明中叙述的特定要素在以下说明中没有被叙述为其中一个特征,这并不意味着该特定要素不与特征相对应。相反,即使一些特定要素被叙述为与其中一个特征相对应的要素,这也并不意味着该要素不与除该要素以外的任何其它特征相对应。
此外,以下说明不意味着:与本发明的实施例中所述的特定要素相对应的本发明都在权利要求书中进行了说明。换句话说,以下说明不否认存在一种发明,其对应于在本发明的实施例的说明中所述的特定要素,但是没有在权利要求书中进行叙述,即,该说明不否认存在一种发明,其可以以分案专利申请申请专利或可作为对权利要求书的随后修改的结果被附加包括在本专利申请中。
根据权利要求1所述的信息处理***包括:区域图像拍摄部分(例如,图5的传感器照相机121),用于拍摄预定区域的图像;检测部分(例如,图7的活动体检测模块222),用于基于通过该区域图像拍摄部分的图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;指定部分(例如,图7的跟踪对象指定模块227),用于指定其中一个通过该检测部分检测到的活动体;以及设置部分(例如,图7的摄像模式转换模块228),用于将摄像模式设置为顺序拍摄由该检测部分检测到的活动体的图像的循环摄像模式,或者跟踪由该指定部分所指定的活动体以拍摄该活动体的图像的连续跟踪模式,当通过该指定部分指定其中一个活动体时,该设置部分将摄像模式设置成连续跟踪模式(例如,图12的步骤S10的处理)。
根据权利要求2所述的信息处理装置是一种用于控制被摄体的图像拍摄的信息处理装置(例如,图5的客户机132),并包括:区域图像拍摄控制部分(例如,图7的传感器图像获取模块221),用于控制拍摄预定区域的图像的区域图像拍摄部分(例如,图5的传感器照相机121),以拍摄该预定区域的图像;检测部分(例如,图7的活动体检测模块222),用于基于通过该区域图像拍摄部分的图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;活动体图像拍摄控制部分(例如,图7的跟踪对象图像获取模块223),用于控制拍摄通过该检测部分检测到的活动体的图像的活动体图像拍摄部分(例如,图5的变焦照相机122),以拍摄该活动体的图像;指定部分(例如,图7的跟踪对象指定模块227),用于指定其中一个通过该检测部分检测到的活动体;以及设置部分(例如,图7的摄像模式转换模块228),用于将摄像模式设置为顺序拍摄通过该检测部分检测到的活动体的图像的循环摄像模式,或者跟踪通过该指定部分所指定的活动体以拍摄该活动体的图像的连续跟踪模式,当通过该指定部分指定其中一个活动体时,该设置部分将摄像模式设置为连续跟踪模式(例如,图12的步骤S10中的处理)。
根据权利要求3所述的信息处理装置被配置成使得该检测部分还检测已经检测到的任何活动体(例如,图14的步骤S52中的处理)的消失,以及当通过该检测部分检测通过该指定部分所指定的活动体的消失时,该设置部分将摄像模式设置为循环摄像模式(例如,图13的步骤S34中的处理)。
根据权利要求4所述的信息处理方法是一种用于控制被摄体的图像拍摄的信息处理装置(例如,图5的客户机132)的信息处理方法,并包括:区域图像拍摄控制步骤(例如,图14的步骤S51),用于控制拍摄预定区域的图像的区域图像拍摄部分(例如,图5的传感器照相机121),以拍摄该预定区域的图像;检测步骤(例如,图14的步骤S52),用于基于通过该区域图像拍摄部分的图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;活动体图像拍摄控制步骤(例如,图14的步骤S60),用于控制拍摄通过该检测步骤中的处理检测到的活动体的图像的活动体图像拍摄部分(例如,图5的变焦照相机122),以拍摄该活动体的图像;指定步骤(例如,图12的步骤S9中的处理),用于指定通过该检测步骤中的处理检测到的其中一个活动体;以及设置步骤(例如,图12的步骤S10中的处理),用于将摄像模式设置为顺序拍摄通过该检测步骤中的处理检测到的活动体的图像的循环摄像模式,或者跟踪通过该指定步骤中的处理所指定的活动体以拍摄该活动体的图像的连续跟踪模式,当通过在该指定步骤中的处理指定其中一个活动体时,该设置步骤中的处理将摄像模式设置为连续跟踪模式。
根据权利要求5所述的程序和根据权利要求5所述的记录在记录介质中或者记录介质上的程序是用于使计算机执行控制被摄体图像拍摄的处理的程序,并包括:区域图像拍摄控制步骤(例如,图14的步骤S51),用于控制拍摄预定区域的图像的区域图像拍摄部分(例如,图5的传感器照相机121),以拍摄该预定区域的图像;检测步骤(例如,图14的步骤S52),用于基于通过该区域图像拍摄部分的图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;活动体图像拍摄控制步骤(例如,图14的步骤S60),用于控制拍摄通过该检测步骤中的处理检测到的活动体的图像的活动体图像拍摄部分(例如,图5的变焦照相机122),以拍摄该活动体的图像;指定步骤(例如,图12的步骤S9中的处理),用于指定通过该检测步骤中的处理检测到的其中一个活动体;以及设置步骤(例如,图12的步骤S10中的处理),用于将摄像模式设置为顺序拍摄通过该检测步骤中的处理检测到的活动体的图像的循环摄像模式,或者跟踪通过该指定步骤中的处理所指定的活动体以拍摄该活动体的图像的连续跟踪模式,当通过在该指定步骤中的处理指定其中一个活动体时,该设置步骤中的处理将摄像模式设置为连续跟踪模式。
下面,参考附图对本发明的特定实施例进行详细说明。
图4示出应用本发明的监控***101的外观的例子。
参考图4,所示的监控***101包括照相机单元111。参考图5,该照相机单元111包括:传感器照相机121,用于拍摄广范围的区域;以及变焦照相机122,用于在变焦(放大)状态下拍摄预定活动体的图像。传感器照相机121拍摄广范围的区域的图像,而变焦照相机122变焦并拍摄从通过传感器照相机121的图像拍摄所获得的传感器图像151内检测到的活动体的图像。从而,根据图4中所示的监控***101,可以监控例如停车区中的直径为40m的圆柱形广范围的区域21。
结果,当与图1中所示的多照相机***1进行比较时,图4中所示的监控***101需要较少数量的照相机,并且可以容易地进行安装并以较低的成本进行生产。
图5示出监控***101的结构的例子。
参考图5,监控***101包括:包括传感器照相机121和变焦照相机122的照相机单元111、网络131以及客户机132。通过网络131,监控***101将由传感器照相机121所获取的传感器图像151和通过利用变焦照相机122的图像拍摄所获得的变焦图像152记录在客户机132中,并利用客户机132再现由此记录的传感器图像151和变焦图像152。
照相机单元111的传感器照相机121包括作为单一部件而形成的全方位移动部分121A和照相机部分121B。全方位移动部分121A作为可转动台而形成,用于例如关于水平转动和高低俯仰的两个轴(水平方向和垂直方向)自由地改变摄像方向。照相机部分121B被设置在形成全方位移动部分121A的可转动台上,并在客户机132的控制下控制全方位移动部分121A,以调整摄像方向的水平或垂直方向,且改变摄像视角以扩大或缩小拍摄作为活动图片的广范围的(被摄体的)图像的摄像倍率。特别地,例如,照相机部分121B顺序改变摄像方向,以拍摄被摄体的图像从而获取多个单元图像,并产生由该多个单元图像组成的全景图像的传感器图像151。
照相机部分121B通过网络131将通过图像拍摄所获得的传感器图像151提供给客户机132。在图5中,传感器照相机121拍摄包括活动体161和162的广范围的图像,以获取包括活动体161和162的传感器图像151。
变焦照相机122与传感器照相机121类似包括作为单一部件而形成的全方位移动部分122A和照相机部分122B。全方位移动部分122A作为可转动台而形成,与在传感器照相机121中类似,用于例如关于与水平转动和高低俯仰的两个轴自由改变摄像方向。照相机部分122B被设置在形成全方位移动部分122A的可转动台上,并在客户机132的控制下控制全方位移动部分122A,以调整摄像方向的水平或垂直方向,且改变摄像视角以增大或减小摄像倍率以拍摄预定活动体作为变焦后的活动图片。
客户机132检测包括在从传感器照相机121提供给其的传感器图像151中的活动体161和162,并确定围绕每个活动体161和162的预定区域(例如,矩形区域)作为活动体框171或172。
客户机132将例如传感器图像151上的活动体框172的四个顶点A到D关于X轴(图5中沿水平方向的轴)和Y轴(沿垂直方向的轴)的坐标提供给变焦照相机122。变焦照相机122基于该坐标执行活动体162的(活动体框172的)变焦图像拍摄以获取变焦图像152。应该注意,在下面的说明中,以帧为单位来获取传感器图像151和变焦图像152。变焦照相机122通过网络131将变焦图像152提供给客户机132。
网络131是通信网络,其允许数据的双向通信,并且可以是例如通过电话线路连接到客户机132的因特网或者连接到TA(Terminal Adapter,终端适配器)或调制解调器的ISDN(Integrated Services Digital Network,综合业务数字网)/B(宽带)-ISDN、LAN(Local Area Network,局域网)等。
例如由个人计算机形成客户机132,客户机132通过网络131控制传感器照相机121和变焦照相机122。此外,客户机132记录来自传感器照相机121的传感器图像151和来自变焦照相机122的变焦图像152,并再现所记录的传感器图像151和变焦图像152,以对其进行显示。
图6示出图5中所示的客户机132的结构的例子。
参考图6,中央处理单元(CPU)201通过总线204与只读存储器(ROM)202和随机存取存储器(RAM)203连接。应该注意,CPU 201、ROM 202和RAM 203形成微型计算机。输入/输出接口205也被连接到总线204。
CPU 201根据存储在ROM 202中的程序或者存储在RAM203中的程序执行各种处理。ROM 202具有存储于其中的各种程序。RAM 203存储通过通信部分209获取的程序。此外,RAM 203适当存储CPU 201执行各种处理所需的数据等。
包括键盘、鼠标、麦克风等的输入部分206、包括液晶显示器(LCD)单元、扬声器等的输出部分207、由硬盘等形成的存储器部分208和由TA、调制解调器等形成的通信部分209被连接到输入/输出接口205。通信部分209被连接到图5的网络131,并通过网络131与传感器照相机121和变焦照相机122进行通信。
必要时将驱动器210与输入/输出接口205适当连接,从装入驱动器210中的可移动介质211中读出程序,并将其安装在存储器部分208中。CPU 201将安装在存储器部分208中的该程序载入例如RAM 203中,并执行该程序。
图7示出图5中所示的客户机132的功能结构的例子。
参考图7,所示的客户机132包括对应于例如图6中所示的CPU 201的传感器图像获取模块221、活动体检测模块222、跟踪对象图像获取模块223、视角计算模块224、跟踪对象指定模块227、摄像模式转换模块228以及再现模块229。客户机132还包括对应于例如图6中的存储器部分208的跟踪对象信息管理数据库(DB)225和显示信息DB 226。
将获取传感器图像151的指令从输入部分206提供给传感器图像获取模块221,作为对用户的操作的响应。传感器照相机121在传感器图像获取模块221的控制下拍摄广范围的区域21的图像,并将由此获得的传感器图像151提供给传感器图像获取模块221。传感器图像获取模块221将来自传感器照相机121的该传感器图像151提供给活动体检测模块222。
传感器图像获取模块221基于由从活动体检测模块222提供的活动体框的顶点A到D的坐标所表示的活动体的出现位置,产生显示信息。传感器图像获取模块221在显示信息DB 226中产生预定的文件,并将该显示信息和传感器图像151登记在该文件中。
活动体检测模块222基于从传感器图像获取模块221提供给其的传感器图像151,检测存在于传感器图像151的图像拍摄区域中的活动体的出现,并将ID(标识符;下文称之为活动体ID)赋给检测到其存在的每个活动体。活动体检测模块222确定检测到出现的每个活动体的活动体框,并确定活动体框的顶点A到D的坐标作为该活动体的出现位置。活动体检测模块222将活动体ID和出现位置提供给传感器图像获取模块221和视角计算模块224。
跟踪对象图像获取模块223从跟踪对象信息管理DB 225获取跟踪对象信息,该跟踪对象信息包括摄像视角和与该跟踪对象相对应的活动体ID。跟踪对象图像获取模块223基于该跟踪对象信息的摄像视角控制变焦照相机122,以拍摄活动体的变焦图像作为活动图片(跟踪图像拍摄)。跟踪对象图像获取模块223将作为变焦图像拍摄的结果而获得的变焦图像152与包括在跟踪对象信息中的跟踪对象的活动体的活动体ID相对应进行登记。
视角计算模块224基于从跟踪对象指定模块227提供的跟踪对象的活动体的活动体ID、从摄像模式转换模块228提供的摄像模式、以及从活动体检测模块222提供的活动体ID和出现位置,确定作为跟踪对象的活动体。因而,视角计算模块224确定用于包括活动体的成像区域的摄像视角。视角计算模块224将该摄像视角和与跟踪对象相对应的活动体ID作为跟踪对象信息提供给跟踪对象信息管理DB 225。
跟踪对象信息管理DB 225存储来自活动体检测模块222的跟踪对象信息。显示信息DB 226存储来自传感器图像获取模块221的显示信息和传感器图像151。
跟踪对象指定模块227基于从输入部分206提供的跟踪对象信息,获取来自显示信息DB 226的跟踪对象的活动体的活动体ID,作为对用户的操作和指定跟踪对象的响应。跟踪对象指定模块227将该活动体ID提供给视角计算模块224。此外,跟踪对象指定模块227基于登记在显示信息DB 226中的显示信息,从传感器图像151内检测跟踪对象的活动体的消失,并将代表检测结果的消失检测信息提供给摄像模式转换模块228。
摄像模式转换模块228基于从输入部分206提供的转换信息,将摄像模式设置为跟踪活动体以实现顺序拍摄变焦图像的连续跟踪模式,或者顺序拍摄检测到的活动体的图像的循环摄像模式,作为对用户操作和表示摄像模式的转换或者从跟踪对象指定模块227提供的跟踪对象信息的响应。摄像模式转换模块228将所设置的摄像模式提供给视角计算模块224。
再现模块229根据从输入部分206提供的获取传感器图像151的指令,再现来自显示信息DB 226的传感器图像151,作为对用户的操作的响应,并再现变焦图像152,然后使输出部分207显示该传感器图像151和该变焦图像152。此外,再现模块229从显示信息DB 226中读出显示信息,并基于该显示信息的出现位置使活动体框显示在传感器图像151上。
图8中示出图6的输出部分207上所显示的屏幕的例子。
当用户发出获取传感器图像151的指令时,将图8所示的屏幕250显示在输出部分207上。
图8的屏幕250包括:传感器图像显示部分251,用于显示传感器图像151;操作部分252,用于显示GUI(Graphical UserInterface,图形用户界面),通过该GUI发出执行与传感器图像151和变焦图像152的记录(图片记录)相关的操作的指令;变焦图像显示部分253,用于显示变焦图像152的活动图片;以及摄像模式选择部分254等。
再现模块229使传感器图像显示部分251显示当前正在获取的传感器图像,并使变焦图像显示部分253显示当前正在获取的变焦图像152的活动图片。
应该注意,在图8中,将摄像模式设置为循环摄像模式。在这种情况下,如图9可见,在摄像模式选择部分254中,例如以与普通显示颜色不同的颜色强调显示表示摄像模式为循环摄像模式的循环摄像按钮261。
另一方面,在将摄像模式设置为连续跟踪模式的情况下,如图10可见,在摄像模式选择部分254中,例如以与图8中的颜色不同的颜色正常显示循环摄像按钮261。此外,在摄像模式选择部分254中强调显示表示摄像模式为连续跟踪模式的连续跟踪按钮262。
现在,参考图11来详细说明循环摄像模式和连续跟踪模式。
在摄像模式为循环摄像模式的情况下,变焦照相机122执行顺序将活动体检测模块222检测到的所有活动体设置为图像拍摄对象的变焦图像拍摄。此外,当开始图像拍摄时,或者当跟踪对象的活动体从传感器图像151内消失时,或者当作为如下文所述的结束连续跟踪模式的时机而点击循环摄像按钮261时,作为循环摄像模式的时机,将摄像模式设置为循环摄像模式。
在摄像模式为循环摄像模式的情况下,在摄像模式选择部分254中强调显示循环摄像按钮261,而不显示连续跟踪按钮262(显示消失)。另一方面,当用户操作输入部分206以指定(点击)传感器图像151上的活动体框时,作为结束循环摄像模式的时机,将摄像模式从循环摄像模式转换为连续跟踪模式。
另一方面,当摄像模式为连续跟踪模式时,变焦照相机122执行变焦图像拍摄,将与指定为跟踪对象的传感器图像151上的活动体框相对应的一个活动体设置为图像拍摄对象,作为对用户在输入部分206的操作的响应。此外,当循环摄像模式将被结束时,即当用户操作输入部分206以指定(点击)传感器图像151上的活动体框时,作为连续跟踪模式的时机,将摄像模式设置为连续跟踪模式。
当摄像模式为连续跟踪模式时,在摄像模式选择部分254中正常显示循环摄像按钮261,而强调显示连续跟踪按钮262,或者不显示循环摄像按钮261而强调显示连续跟踪按钮262。另一方面,当跟踪对象的活动体从传感器图像151内消失时,或者当用户操作输入部分206以指定(点击)循环摄像按钮261时,作为结束连续跟踪模式的时机,将摄像模式从连续跟踪模式转换为循环摄像模式。换句话说,循环摄像按钮261具有两个功能:表示摄像模式为循环摄像模式和将摄像模式改变为循环摄像模式。
现在,参考图12对当摄像模式为循环摄像模式时由客户机132执行的循环摄像处理进行说明。例如,当将摄像模式设置为循环摄像模式时,开始该循环摄像处理。
在步骤S1中,如图8或9可见,再现模块229使摄像模式选择部分254的循环摄像按钮261被强调显示,之后,处理进入步骤S2。在步骤S2,再现模块229擦除连续跟踪按钮262的显示。换句话说,再现模块229停止在摄像模式选择部分254中显示连续跟踪按钮262。
在步骤S2的处理之后,处理进入步骤S3,在步骤S3,再现模块229读出由传感器图像获取模块221所获取的并被登记在显示信息DB 226中的传感器图像151,并将该传感器图像151提供给传感器图像显示部分251,以对其进行显示。之后,处理进入步骤S4。
在步骤S4,再现模块229读出由跟踪对象图像获取模块223所获取的并被登记在显示信息DB 226中的变焦图像152,并将该变焦图像152提供给变焦图像显示部分253,以对其进行显示,之后,处理进入步骤S5。
在步骤S5,再现模块229从显示信息DB 226中获取与在步骤S3所显示的传感器图像151相对应的显示信息的出现位置。之后,处理进入步骤S6。
在步骤S6,再现模块229基于在步骤S5所获取的出现位置使活动体框172(图5)被显示在传感器图像151上。这里,如果将被设置为跟踪对象的所期望的活动体存在于屏幕250的传感器图像显示部分251中所显示的传感器图像151上,则用户可以操作输入部分206以指定活动体框172中所期望的活动体的位置,以指定将被作为跟踪对象的活动体。
在步骤S6的处理之后,处理进入步骤S7,在步骤S7,跟踪对象指定模块227判定用户是否指定了传感器图像151上的位置,作为对代表由用户指定的并从输入部分206提供的位置的指定位置信息的响应。
如果在S7判定没有指定传感器图像151上的位置,则处理返回步骤S3,以便重复从步骤S3开始的步骤中的处理。另一方面,如果在步骤S7判定指定了传感器图像151上的位置,则处理进入步骤S8,在步骤S8,跟踪对象指定模块227判定由用户指定的位置是否在活动体框172的内侧。
如果在步骤S8判定由用户指定的位置不在活动体框172的内侧,则处理返回步骤S3,以便重复从步骤S3开始的步骤中的处理。另一方面,如果在步骤S8判定由用户指定的位置在活动体框172的内侧,则处理进入步骤S9,在步骤S9,跟踪对象指定模块227从登记在显示信息DB 226中的显示信息中获取与活动体框172相对应的活动体ID,并将该活动体ID提供给视角计算模块224和再现模块229。
在步骤S9的处理之后,处理进入步骤S10,在步骤S10,跟踪对象指定模块227向摄像模式转换模块228发出转换摄像模式的指令。从而,摄像模式转换模块228将摄像模式设置为连续跟踪模式,并将代表将摄像模式转换为连续跟踪模式的摄像模式信息提供给视角计算模块224。之后,结束处理。
如上所述,监控***101可以跟踪所期望的活动体,并顺序拍摄活动体的变焦图像,作为对用户指定所期望的活动体的活动体框的简单、容易和直观操作的响应。
现在,参考图13对当摄像模式为连续跟踪模式时由客户机132执行的连续跟踪处理进行说明。例如,当在图12中的步骤S10中将摄像模式设置为连续跟踪模式时,开始该连续跟踪处理。
在步骤S21,如图10中所见,再现模块229使正常显示摄像模式选择部分254的循环摄像按钮261,之后,处理进入步骤S22。在步骤S22,再现模块229使强调显示连续跟踪按钮262,之后,处理进入步骤S23。
在步骤S23到S26,执行分别与图12的步骤S3到S6中的处理相同的处理。因此,在此省略了对该处理的重复说明以免冗余。
在步骤S26的处理之后,处理进入步骤S27,在步骤S27,再现模块229基于在步骤S9从跟踪对象指定模块227提供的活动体ID判定在传感器图像151上是否存在跟踪对象。特别地,再现模块229判定与在步骤S23显示的传感器图像151相对应的并被登记在显示信息DB 226中的显示信息是否包括从跟踪对象指定模块227提供的活动体ID。
如果在步骤S27判定在传感器图像151上不存在跟踪对象,即与传感器图像151相对应的显示信息不包括从跟踪对象指定模块227提供的跟踪对象的活动体ID,则再现模块229将表示跟踪对象消失的消失检测信息提供给跟踪对象指定模块227。之后,处理进入步骤S34。
在步骤S34,跟踪对象指定模块227向摄像模式转换模块228发出转换摄像模式的指令。从而,摄像模式转换模块228将当前的摄像模式设置为循环摄像模式。然后,摄像模式转换模块228将代表将摄像模式转换为循环摄像模式的摄像模式信息提供给视角计算模块224。之后,结束处理。
另一方面,如果在步骤S27判定在传感器图像151上存在跟踪对象,即与传感器图像151相对应的显示信息包括从跟踪对象指定模块227提供的跟踪对象的活动体ID,则处理进入步骤S28。在步骤S28,再现模块229使例如基于包括在该显示信息中的出现位置,以与传感器图像151上的正常显示的颜色不同的颜色,来强调显示跟踪对象的活动体框172。从而,用户可以容易地识别将当前显示的传感器图像151上所出现的哪个活动体设置为跟踪对象。
应该注意,可以不强调显示跟踪对象的活动体框172,而使该活动体框172中所显示的指针的颜色或形状不同于另一活动体框172中所显示的另一指针的颜色和形状。
在步骤S28的处理之后,处理进入步骤S29,在步骤S29,摄像模式转换模块228判定用户是否操作了循环摄像按钮261,即是否从输入部分206提供了表示用户操作了循环摄像按钮261的信息。
如果在步骤S29判定用户操作了循环摄像按钮261,则处理进入步骤S34,在步骤S34,如上文所述,摄像模式转换模块228将摄像模式设置为循环摄像模式,并将代表将摄像模式转换为循环摄像模式的摄像模式信息提供给视角计算模块224。之后,结束处理。
另一方面,如果在步骤S29判定用户没有操作循环摄像按钮261,则处理进入步骤S30。在步骤S30到S32,执行与上述图12的步骤S7到S9中的处理相同的处理。这里,在此省略了这些处理的重复说明以免冗余。
在步骤S32的处理之后,处理进入步骤S33,在步骤S33,跟踪对象指定模块227转换跟踪对象。特别地,跟踪对象指定模块227从登记在显示信息DB 226中的显示信息中获取与包括由用户指定的位置的活动体框172相对应的活动体ID,并将与该活动体ID相对应的活动体设置为新的跟踪对象。然后,跟踪对象指定模块227将从显示信息中获取的活动体ID作为新的跟踪对象的活动体的活动体ID提供给视角计算模块224,之后,处理返回步骤S23。
现在,参考图14对客户机132获取传感器图像151和变焦图像152的图像获取处理进行说明。例如,当用户操作输入部分206以发出获取传感器图像151的请求时,开始该图像获取处理。
在步骤S51,传感器图像获取模块221控制传感器照相机121以拍摄广范围的区域的图像,获取通过图像拍摄所获得的传感器图像151并将其提供给活动体检测模块222。
在步骤S51的处理之后,处理进入步骤S52,在步骤S52,活动体检测模块222判定从来自传感器图像获取模块221的传感器图像151内是否检测到活动体。更具体地,活动体检测模块222判定在从传感器图像获取模块221提供的传感器图像151与在前面的操作周期中所获取的另一传感器图像151之间的亮度水平的差值。然后,如果该亮度水平的差值超过了在通过制造商制造时预先设置的阈值,则活动体检测模块222将与该亮度水平相对应的形成传感器图像151的所有像素集合检测为活动体,并判定检测到了活动体。
应该注意,如果活动体检测模块222不检测到这时为止已经检测到的任何活动体,则其检测到活动体从传感器图像151中的消失。
如果在步骤S52判定没有检测到活动体,则处理返回步骤S51,以便重复获取传感器图像151的处理直到检测到一个或多个活动体为止。另一方面,如果在步骤S52判定检测到一个或多个活动体,则处理进入步骤S53,在步骤S53,活动体检测模块222将活动体ID赋给检测到的活动体中的每一新的活动体。特别地,活动体检测模块222例如基于在步骤S52检测到的亮度水平的差值而检测为活动体的像素集合等,判定当前检测到的每一活动体是否是直至这时为止还未检测到的新的活动体。然后,活动体检测模块222将活动体ID赋给被判定为新的活动体的每一活动体。
在步骤S53的处理之后,处理进入步骤S54,在步骤S54,活动体检测模块222识别来自在步骤S51被检测为活动体的像素集合的传感器图像151上的每一活动体的出现位置。活动体检测模块222将在步骤S51检测到的所有活动体的活动体ID和出现位置作为显示信息提供给传感器图像获取模块221和视角计算模块224。
在步骤S54的处理之后,处理进入步骤S55,在步骤S55,传感器图像获取模块221将显示信息和在步骤S51所获取的传感器图像151以相互对应关系登记到显示信息DB 226中。
在步骤S55的处理之后,处理进入步骤S56,在步骤S56,视角计算模块224判定摄像模式是否是连续跟踪模式,即是否在图12的步骤S10中从摄像模式转换模块228提供了代表将摄像模式转换为连续跟踪模式的摄像模式信息。
如果在步骤S56判定摄像模式为连续跟踪模式,则视角计算模块224在步骤S57基于在步骤S54所提供的活动体ID、与该活动体ID相对应的出现位置、以及在图12的步骤S9或者图13的步骤S33中从跟踪对象指定模块227提供的跟踪对象的活动体的活动体ID,来识别跟踪对象的活动体的出现位置。换句话说,视角计算模块224根据在步骤S54所提供的活动体ID和与该活动体ID相对应的出现位置,识别与该跟踪对象的活动体相对应的出现位置。
然后,视角计算模块224计算用于拍摄已识别出出现位置的图像的变焦照相机122的摄像视角作为跟踪对象的摄像视角,并将该摄像视角和相应的活动体ID作为跟踪对象信息登记在跟踪对象信息管理DB 225中。
另一方面,如果在步骤S56判定摄像模式不是连续跟踪模式,即摄像模式为循环摄像模式,则处理进入步骤S58。在步骤S58,视角计算模块224基于在步骤S54所提供的活动体ID和相应的出现位置,判定变焦图像拍摄中活动体ID的活动体的优先级。
视角计算模块224可以采用以下六种方法来判定该优先级。
第一种判定优先级的方法:最新被检测到出现的活动体的优先级高于任何已经被检测到的活动体的优先级。在这种情况下,例如,由于优先获取最新被检测到出现的活动体的变焦图像152,因此可以容易地发现侵入者。
第二种判定优先级的方法:位于较高位置处的活动体的优先级高于位于较低位置处的其它活动体的优先级。在这种情况下,由于优先获取位于较高位置处的活动体的变焦图像152,因此可能获取通常位于较高位置处的人脸的变焦图像摄影。从而,可以容易地确定侵入者。
第三种判定优先级的方法:位于较低位置处的活动体的优先级高于位于较高位置处的其它活动体的优先级。在这种情况下,由于优先获取位于较低位置处的活动体的变焦图像152,因此在将传感器照相机121安装在高的位置例如建筑物外的情况下,可以容易地获取位于与高的地方例如天空和建筑物相比,相对较近的位置处的人和车辆的变焦图像152。
第四种判定优先级的方法:具有相对较大尺寸的活动体的优先级高于具有相对较小尺寸的其它活动体的优先级。在这种情况下,由于优先获取具有较大尺寸的活动体的变焦图像152,因此与位于远处的其它活动体相比,更有可能获取位于附近的活动体的变焦图像152。
第五种判定优先级的方法:具有相对较小尺寸的活动体的优先级高于具有相对较大尺寸的其它活动体的优先级。在这种情况下,由于优先获取具有较小尺寸的活动体的变焦图像152,因此与位于附近的其它活动体相比,更有可能获取位于远处的活动体例如人和车辆的变焦图像152。
第六种判定优先级的方法:垂直延伸的活动体具有更高的优先级。在这种情况下,由于优先获取垂直延伸的活动体的变焦图像152,因此更有可能获取通常是垂直延伸的活动体的人的全身的变焦图像152。
例如,可以选择如上所述用于判定优先级的这六种方法中的一种,以响应用户在输入部分206的操作。视角计算模块224根据用户选择的第一到第六种方法中的一种,在变焦图像拍摄中判定在步骤S52中检测到的活动体的优先级。
在步骤S58的处理之后,处理进入步骤S59,在步骤S59,视角计算模块224按照优先级的递减顺序将与在步骤S58中判定的优先级相对应的活动体顺序设置为跟踪对象,并基于与该活动体相对应的出现位置,与步骤S57中的处理类似,计算该跟踪对象的摄像视角。然后,视角计算模块224将该摄像视角和相应的活动体ID作为跟踪对象信息登记到跟踪对象信息管理DB 225中。
在步骤S57或S59的处理之后,处理进入步骤S60,在步骤S60,跟踪对象图像获取模块223从跟踪对象信息管理DB 225中读出跟踪对象信息。跟踪对象图像获取模块223基于该跟踪对象信息控制变焦照相机122以执行该跟踪对象的变焦图像拍摄,并获取通过该变焦图像拍摄所获得的变焦图像152。之后,处理返回步骤S51。
图15示出图4的监控***101的另一形式的结构的例子。
图15的监控***101包括固定照相机451,该固定照相机451代替图5中所示的传感器照相机121可以实时地执行360度的全方位的图像拍摄。
图16示出图4的监控***101的又一形式的结构的例子。
在图16的监控***101中,另外提供了固定照相机471,并将该固定照相机471连接到网络131。在这种情况下,客户机132的活动体检测模块222还检测固定图像中的活动体,并且还在必要时显示该固定图像,其中该固定图像是由固定照相机471通过图像拍摄所获得的活动图片。
通过该方式,在图16的监控***101中,由于不仅检测传感器图像151上的活动体,而且还检测固定图像上的活动体,因此可以增大所监控的区域。例如,如果安装了固定照相机471以监控许多活动体出现的固定区域,例如停车区的收费亭或大门,并且为了监控停车区的广范围,安装了照相机单元111,则肯定可以监控整个停车区。
应该注意,不仅可以在客户机132中,而且也可以在传感器照相机121或变焦照相机122中,提供图7的客户机132中的模块。
此外,监控***101的应用不局限于监控区域21。
而且,传感器照相机121和变焦照相机122不局限于全方位照相机。此外,虽然在本实施例中,监控***101包括传感器照相机121和变焦照相机122两个照相机,但是照相机的数量不局限于此,而可以使用单个照相机来获取传感器图像151和变焦图像152。
总之,将监控***101配置成使得其可以:拍摄区域21的图像;基于通过图像拍摄所获得的传感器图像151来检测存在于区域21中的活动体;以及如果指定检测到的其中一个活动体,则将摄像模式设置为顺序拍摄活动体的图像的循环摄像模式和跟踪其中一个活动体以拍摄该活动体的图像的连续跟踪模式中的连续跟踪模式,可能拍摄区域21的图像,并容易地跟踪用户所期望的区域21中的其中一个活动体以拍摄该活动体的图像。
在此应该注意,在本说明书中,说明用于使计算机执行各种处理而记录的程序的步骤可以但不是必须以与该流程中所述的顺序的时间序列来处理,该步骤包括被并行或单独执行的处理(例如,并行处理或基于对象的处理)。
此外,可以由单个计算机来处理该程序,或者由多个计算机分散处理该程序。而且,可以将该程序传输到位于远处的计算机并由该计算机来执行该程序。
尽管使用特定条件说明了本发明的优选实施例,但是该说明仅仅是为了例示性的目的,并且应该理解,在不脱离以下权利要求书的精神或范围的情况下,可以做出改变和变化。

Claims (5)

1.一种信息处理***,包括:
区域图像拍摄装置,用于拍摄预定区域的图像;
检测装置,用于基于由所述区域图像拍摄装置通过图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;
指定装置,用于指定由所述检测装置检测到的其中一个活动体;以及
设置装置,用于将摄像模式设置为顺序拍摄由所述检测装置检测到的活动体的图像的循环摄像模式,或者跟踪由所述指定装置所指定的活动体以拍摄该活动体的图像的连续跟踪模式;其中,
当由所述指定装置指定其中一个活动体时,所述设置装置将摄像模式设置为连续跟踪模式,以及
所述检测装置还检测已检测到的任何活动体的消失,并当由所述检测装置检测到由所述指定装置所指定的活动体消失时,所述设置装置将摄像模式设置为循环摄像模式。
2.一种信息处理装置,用于控制被摄体的图像拍摄,包括:
区域图像拍摄控制装置,用于控制拍摄预定区域的图像的区域图像拍摄装置,以拍摄该预定区域的图像;
检测装置,用于基于由所述区域图像拍摄装置通过图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;
活动体图像拍摄控制装置,用于控制拍摄由所述检测装置检测到的活动体的图像的活动体图像拍摄装置,以拍摄该活动体的图像;
指定装置,用于指定由所述检测装置检测到的其中一个活动体;以及
设置装置,用于将摄像模式设置为顺序拍摄由所述检测装置检测到的活动体的图像的循环摄像模式,或者跟踪由所述指定装置所指定的活动体以拍摄该活动体的图像的连续跟踪模式;其中
当由所述指定装置指定其中一个活动体时,所述设置装置将摄像模式设置为连续跟踪模式,以及
所述检测装置还检测已检测到的任何活动体的消失,并当由所述检测装置检测到由所述指定装置所指定的活动体消失时,所述设置装置将摄像模式设置为循环摄像模式。
3.一种用于控制被摄体的图像拍摄的信息处理装置的信息处理方法,包括以下步骤:
区域图像拍摄控制步骤,用于控制拍摄预定区域的图像的区域图像拍摄装置,以拍摄该预定区域的图像;
检测步骤,用于基于由所述区域图像拍摄装置通过图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;
活动体图像拍摄控制步骤,用于控制拍摄通过该检测步骤中的处理检测到的活动体的图像的活动体图像拍摄装置,以拍摄该活动体的图像;
指定步骤,用于指定通过该检测步骤中的处理检测到的其中一个活动体;
设置步骤,用于将摄像模式设置为顺序拍摄通过该检测步骤中的处理检测到的活动体的图像的循环摄像模式,或者跟踪通过该指定步骤中的处理所指定的活动体以拍摄该活动体的图像的连续跟踪模式;其中,
当通过该指定步骤中的处理指定其中一个活动体时,该设置步骤中的处理将摄像模式设置为连续跟踪模式,以及
该检测步骤中的处理还检测已检测到的任何活动体的消失,并当通过该检测步骤中的处理检测到通过该指定步骤中的处理所指定的活动体消失时,该设置步骤中的处理将摄像模式设置为循环摄像模式。
4.一种信息处理***,包括:
区域图像拍摄部分,用于拍摄预定区域的图像;
检测部分,用于基于由所述区域图像拍摄部分通过图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;
指定部分,用于指定由所述检测部分检测到的其中一个活动体;以及
设置部分,用于将摄像模式设置为顺序拍摄由所述检测部分检测到的活动体的图像的循环摄像模式,或者跟踪由所述指定部分所指定的活动体以拍摄该活动体的图像的连续跟踪模式;其中,
当由所述指定部分指定其中一个活动体时,所述设置部分将摄像模式设置为连续跟踪模式,以及
所述检测部分还检测已检测到的任何活动体的消失,并当由所述检测部分检测到由所述指定部分所指定的活动体消失时,所述设置部分将摄像模式设置为循环摄像模式。
5.一种信息处理装置,用于控制被摄体的图像拍摄,包括:
区域图像拍摄控制部分,用于控制拍摄预定区域的图像的区域图像拍摄部分,以拍摄该预定区域的图像;
检测部分,用于基于由所述区域图像拍摄部分通过图像拍摄所获得的区域图像,来检测存在于该预定区域中的活动体;
活动体图像拍摄控制部分,用于控制拍摄由所述检测部分检测到的活动体的图像的活动体图像拍摄部分,以拍摄该活动体的图像;
指定部分,用于指定由所述检测部分检测到的其中一个活动体;以及
设置部分,用于将摄像模式设置为顺序拍摄由所述检测部分检测到的活动体的图像的循环摄像模式,或者跟踪由所述指定部分所指定的活动体以拍摄该活动体的图像的连续跟踪模式;其中,
当由所述指定部分指定其中一个活动体时,所述设置部分将摄像模式设置为连续跟踪模式,以及
所述检测部分还检测已检测到的任何活动体的消失,并当由所述检测部分检测到由所述指定部分所指定的活动体消失时,所述设置部分将摄像模式设置为循环摄像模式。
CNB2006100582525A 2005-02-28 2006-02-28 信息处理的方法和装置 Expired - Fee Related CN100551046C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005054393 2005-02-28
JP2005054393A JP4378636B2 (ja) 2005-02-28 2005-02-28 情報処理システム、情報処理装置および情報処理方法、プログラム、並びに記録媒体

Publications (2)

Publication Number Publication Date
CN1829320A CN1829320A (zh) 2006-09-06
CN100551046C true CN100551046C (zh) 2009-10-14

Family

ID=36931615

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2006100582525A Expired - Fee Related CN100551046C (zh) 2005-02-28 2006-02-28 信息处理的方法和装置

Country Status (3)

Country Link
US (1) US7684591B2 (zh)
JP (1) JP4378636B2 (zh)
CN (1) CN100551046C (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4961914B2 (ja) * 2006-09-08 2012-06-27 ソニー株式会社 撮像表示装置、撮像表示方法
JP4492697B2 (ja) * 2007-12-28 2010-06-30 カシオ計算機株式会社 撮像装置、及び、プログラム
DE102008041933A1 (de) * 2008-09-10 2010-03-11 Robert Bosch Gmbh Überwachungssystem, Verfahren zur Detektion und/oder Verfolgung eines Überwachungsobjektes und Computerprogrammen
JP5446546B2 (ja) * 2009-07-28 2014-03-19 ソニー株式会社 撮像制御装置、撮像制御方法、プログラム、撮像システム
CN102158689B (zh) * 2011-05-17 2013-12-18 无锡中星微电子有限公司 视频监控***及方法
JP2013090063A (ja) * 2011-10-14 2013-05-13 Sumitomo Electric Ind Ltd 監視装置、監視方法および監視プログラム
JP2013219544A (ja) * 2012-04-09 2013-10-24 Ricoh Co Ltd 画像処理装置、画像処理方法、及び画像処理プログラム
ES2821735T3 (es) 2014-08-21 2021-04-27 Identiflight Int Llc Sistema y procedimiento de detección de pájaros
US9521830B2 (en) * 2014-08-21 2016-12-20 Identiflight, Llc Bird or bat detection and identification for wind turbine risk mitigation
CN104767911A (zh) * 2015-04-28 2015-07-08 腾讯科技(深圳)有限公司 图像处理方法及装置
JP2022006912A (ja) * 2020-06-25 2022-01-13 キヤノン株式会社 制御装置、撮像装置、監視システム、及び制御方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6215519B1 (en) * 1998-03-04 2001-04-10 The Trustees Of Columbia University In The City Of New York Combined wide angle and narrow angle imaging system and method for surveillance and monitoring
US6724421B1 (en) * 1994-11-22 2004-04-20 Sensormatic Electronics Corporation Video surveillance system with pilot and slave cameras
CN2667571Y (zh) * 2003-10-27 2004-12-29 北京雷波泰克信息技术有限公司 快速多目标人像自动识别与跟踪安全防御装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3809661B2 (ja) * 1995-12-28 2006-08-16 ソニー株式会社 動き検出装置および動き検出方法
JPH1169342A (ja) 1997-08-22 1999-03-09 Hitachi Denshi Ltd 侵入物体追尾画像処理システム
JP3808242B2 (ja) * 1999-07-26 2006-08-09 パイオニア株式会社 画像処理装置、画像処理方法及びナビゲーション装置
JP3852745B2 (ja) 2000-02-28 2006-12-06 株式会社日立国際電気 物体検出方法及び物体検出装置
JP2002101408A (ja) 2000-09-22 2002-04-05 Asahi Precision Co Ltd 監視カメラシステム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6724421B1 (en) * 1994-11-22 2004-04-20 Sensormatic Electronics Corporation Video surveillance system with pilot and slave cameras
US6215519B1 (en) * 1998-03-04 2001-04-10 The Trustees Of Columbia University In The City Of New York Combined wide angle and narrow angle imaging system and method for surveillance and monitoring
CN2667571Y (zh) * 2003-10-27 2004-12-29 北京雷波泰克信息技术有限公司 快速多目标人像自动识别与跟踪安全防御装置

Also Published As

Publication number Publication date
US20060192856A1 (en) 2006-08-31
JP2006245648A (ja) 2006-09-14
US7684591B2 (en) 2010-03-23
CN1829320A (zh) 2006-09-06
JP4378636B2 (ja) 2009-12-09

Similar Documents

Publication Publication Date Title
CN100551046C (zh) 信息处理的方法和装置
CN1829319B (zh) 信息处理***、信息处理装置和方法
CN100551047C (zh) 信息处理的方法和装置
US8488001B2 (en) Semi-automatic relative calibration method for master slave camera control
US7573492B2 (en) Monitoring system and method, and program and recording medium used therewith
US6989745B1 (en) Sensor device for use in surveillance system
US7342489B1 (en) Surveillance system control unit
US7242295B1 (en) Security data management system
CN100525424C (zh) 成像装置和方法以及成像***
JP4614653B2 (ja) 監視装置
CN101577818A (zh) 信息处理装置和方法以及程序
CN105592301A (zh) 摄像设备及其控制方法和监视照相机***
CN110324572A (zh) 监视***、监视方法和非暂时性计算机可读存储介质
KR100995949B1 (ko) 화상 처리 장치, 카메라 장치 및 화상 처리 방법
CN101494770B (zh) 用于控制监控照相机的屏蔽的颜色的装置和方法
JP3841033B2 (ja) モニタリングシステムおよび方法並びにプログラムおよび記録媒体
JP4172352B2 (ja) 撮像装置及び方法、撮像システム、プログラム
KR100307658B1 (ko) 폐쇄회로 텔레비전 분할 감시 시스템
JP3969172B2 (ja) モニタリングシステムおよび方法並びにプログラムおよび記録媒体
JP3838150B2 (ja) モニタリングシステムおよび方法並びにプログラムおよび記録媒体
JP4333255B2 (ja) 監視装置
JP2000251193A (ja) 映像処理装置及び方法並びに記憶媒体
JP3838151B2 (ja) モニタリングシステムおよび方法並びにプログラムおよび記録媒体
JP5531512B2 (ja) 情報処理装置、プログラム、および情報処理方法
JP2005176142A (ja) 監視装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20091014