CN108605081A - 智能目标追踪 - Google Patents

智能目标追踪 Download PDF

Info

Publication number
CN108605081A
CN108605081A CN201780006137.XA CN201780006137A CN108605081A CN 108605081 A CN108605081 A CN 108605081A CN 201780006137 A CN201780006137 A CN 201780006137A CN 108605081 A CN108605081 A CN 108605081A
Authority
CN
China
Prior art keywords
light source
image sequence
light
camera apparatus
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780006137.XA
Other languages
English (en)
Other versions
CN108605081B (zh
Inventor
钱昊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
He Is A Mdt Infotech Ltd In Hangzhou
Original Assignee
He Is A Mdt Infotech Ltd In Hangzhou
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by He Is A Mdt Infotech Ltd In Hangzhou filed Critical He Is A Mdt Infotech Ltd In Hangzhou
Publication of CN108605081A publication Critical patent/CN108605081A/zh
Application granted granted Critical
Publication of CN108605081B publication Critical patent/CN108605081B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16—ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16M—FRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M11/00—Stands or trestles as supports for apparatus or articles placed thereon ; Stands for scientific apparatus such as gravitational force meters
    • F16M11/02—Heads
    • F16M11/04—Means for attachment of apparatus; Means allowing adjustment of the apparatus relatively to the stand
    • F16M11/041—Allowing quick release of the apparatus
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16—ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16M—FRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M11/00—Stands or trestles as supports for apparatus or articles placed thereon ; Stands for scientific apparatus such as gravitational force meters
    • F16M11/02—Heads
    • F16M11/04—Means for attachment of apparatus; Means allowing adjustment of the apparatus relatively to the stand
    • F16M11/06—Means for attachment of apparatus; Means allowing adjustment of the apparatus relatively to the stand allowing pivoting
    • F16M11/10—Means for attachment of apparatus; Means allowing adjustment of the apparatus relatively to the stand allowing pivoting around a horizontal axis
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16—ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16M—FRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M11/00—Stands or trestles as supports for apparatus or articles placed thereon ; Stands for scientific apparatus such as gravitational force meters
    • F16M11/02—Heads
    • F16M11/18—Heads with mechanism for moving the apparatus relatively to the stand
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16—ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16M—FRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M11/00—Stands or trestles as supports for apparatus or articles placed thereon ; Stands for scientific apparatus such as gravitational force meters
    • F16M11/20—Undercarriages with or without wheels
    • F16M11/2007—Undercarriages with or without wheels comprising means allowing pivoting adjustment
    • F16M11/2014—Undercarriages with or without wheels comprising means allowing pivoting adjustment around a vertical axis
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16—ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16M—FRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M13/00—Other supports for positioning apparatus or articles; Means for steadying hand-held apparatus or articles
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16—ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16M—FRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M13/00—Other supports for positioning apparatus or articles; Means for steadying hand-held apparatus or articles
    • F16M13/04—Other supports for positioning apparatus or articles; Means for steadying hand-held apparatus or articles for supporting on, or holding steady relative to, a person, e.g. by chains, e.g. rifle butt or pistol grip supports, supports attached to the chest or head
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S1/00—Beacons or beacon systems transmitting signals having a characteristic or characteristics capable of being detected by non-directional receivers and defining directions, positions, or position lines fixed relatively to the beacon transmitters; Receivers co-operating therewith
    • G01S1/70—Beacons or beacon systems transmitting signals having a characteristic or characteristics capable of being detected by non-directional receivers and defining directions, positions, or position lines fixed relatively to the beacon transmitters; Receivers co-operating therewith using electromagnetic waves other than radio waves
    • G01S1/703—Details
    • G01S1/7032—Transmitters
    • G01S1/7038—Signal details
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/66—Tracking systems using electromagnetic waves other than radio waves
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S3/00—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
    • G01S3/78—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using electromagnetic waves other than radio waves
    • G01S3/782—Systems for determining direction or deviation from predetermined direction
    • G01S3/785—Systems for determining direction or deviation from predetermined direction using adjustment of orientation of directivity characteristics of a detector or detector system to give a desired condition of signal derived from that detector or detector system
    • G01S3/786—Systems for determining direction or deviation from predetermined direction using adjustment of orientation of directivity characteristics of a detector or detector system to give a desired condition of signal derived from that detector or detector system the desired condition being maintained automatically
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/56—Accessories
    • G03B17/561—Support related camera accessories
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/254—Analysis of motion involving subtraction of images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681—Motion detection
    • H04N23/6815—Motion detection by distinguishing pan or tilt from motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16—ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16M—FRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M11/00—Stands or trestles as supports for apparatus or articles placed thereon ; Stands for scientific apparatus such as gravitational force meters
    • F16M11/20—Undercarriages with or without wheels
    • F16M11/2007—Undercarriages with or without wheels comprising means allowing pivoting adjustment
    • F16M11/2035—Undercarriages with or without wheels comprising means allowing pivoting adjustment in more than one direction
    • F16M11/2042—Undercarriages with or without wheels comprising means allowing pivoting adjustment in more than one direction constituted of several dependent joints
    • F16M11/205—Undercarriages with or without wheels comprising means allowing pivoting adjustment in more than one direction constituted of several dependent joints the axis of rotation intersecting in a single point, e.g. gimbals
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16—ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16M—FRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M11/00—Stands or trestles as supports for apparatus or articles placed thereon ; Stands for scientific apparatus such as gravitational force meters
    • F16M11/20—Undercarriages with or without wheels
    • F16M11/2007—Undercarriages with or without wheels comprising means allowing pivoting adjustment
    • F16M11/2035—Undercarriages with or without wheels comprising means allowing pivoting adjustment in more than one direction
    • F16M11/2064—Undercarriages with or without wheels comprising means allowing pivoting adjustment in more than one direction for tilting and panning
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16—ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16M—FRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M11/00—Stands or trestles as supports for apparatus or articles placed thereon ; Stands for scientific apparatus such as gravitational force meters
    • F16M11/20—Undercarriages with or without wheels
    • F16M11/24—Undercarriages with or without wheels changeable in height or length of legs, also for transport only, e.g. by means of tubes screwed into each other
    • F16M11/242—Undercarriages with or without wheels changeable in height or length of legs, also for transport only, e.g. by means of tubes screwed into each other by spreading of the legs
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16—ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16M—FRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M2200/00—Details of stands or supports
    • F16M2200/04—Balancing means
    • F16M2200/041—Balancing means for balancing rotational movement of the head
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16—ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16M—FRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M2200/00—Details of stands or supports
    • F16M2200/04—Balancing means
    • F16M2200/044—Balancing means for balancing rotational movement of the undercarriage
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10141—Special mode during image acquisition
    • G06T2207/10152—Varying illumination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

一种用于目标追踪的方法。该方法包括：使用相机装置抓取场景的图像序列；基于沿该图像序列的局部光变化的模式、检测场景中的光源；回应于检测到光源、将该图像序列中至少一个图像的光源的位置与该至少一个图像内的目标位置进行比较以生成结果；以及基于该结果生成控制信号以改变该相机装置的视场，从而使得该光源与该目标位置在该视场内实质地对准。

Description

智能目标追踪
背景技术
视场(FOV)是由相机成像的场景的范围。FOV内的物体将出现在由该相机抓取和/或输出的图像中。例如，FOV可对应于一立体角(solid angle),相机镜头在该立体角内投射光输入至该相机的光学传感器。
发明内容
总的来说，一方面，本发明涉及一种用于目标追踪的方法。该方法包括：使用相机装置抓取场景的图像序列；基于沿(across)该图像序列的局部光变化(local lightchange)的模式、检测场景中的光源；回应于检测到光源、将该图像序列中至少一个图像的光源的位置与该至少一个图像内的目标位置进行比较以生成结果；以及基于该结果生成控制信号以改变该相机装置的视场，从而使得该光源与该目标位置在该视场内实质地对准。
总的来说，一方面，本发明涉及一种用于相机装置的追踪控制器。该追踪控制器包括计算机处理器和存储指令的存储器。运行该指令可使该计算机处理器：获取场景的图像序列，其中该图像序列是由该相机装置抓取的；基于沿该图像序列的局部光变化的模式、检测该场景中的光源；回应于检测到光源、将该图像序列中至少一个图像的光源的位置与该至少一个图像内的目标位置进行比较以生成结果；以及基于该结果生成控制信号以改变该相机装置的视场，从而使得该光源与该目标位置在该视场内实质地对准。
总的来说，一方面，本发明涉及一种非暂态计算机可读存储介质，其存储用于目标追踪的指令。当由计算机处理器运行时、该指令包括以下功能：获取场景的图像序列，其中该图像序列是由该相机装置抓取的；基于沿该图像序列的局部光变化的模式、检测该场景中的光源；回应于检测到光源、将该图像序列中至少一个图像的光源的位置与该至少一个图像内的目标位置进行比较以生成结果；以及基于该结果生成控制信号以改变该相机装置的视场，从而使得该光源与该视场内的该目标位置实质地对准。
本发明的其他方面将通过以下说明和随附权利要求书而明显易懂。
附图说明
图1.1和1.2示出了根据本发明的一个或多个实施例的***的示意性框图；
图2示出了根据本发明的一个或多个实施例的方法流程图；
图3A、3B、4、5和6示出了根据本发明的一个或多个实施例的各种不同示例；以及
图7示出了根据本发明的一个或多个实施例的计算***。
具体实施方式
现在将参照附图详细描述本发明的具体实施例。各个附图中相同的元件可由相同的参考数字表示，以确保一致性。
在本发明的实施例的以下详细说明中，陈述了若干具体细节以提供对本发明更通透的理解。然而，本领域普通技术人员应理解的是，本发明无需这些具体细节也可实施。在其他实例中，为了避免不必要地复杂化该说明，省略了已知特征的详细描述。
在以下说明中，在本发明的各种不同实施例中关于一幅图描述的任意组件可等同于关于任意其他附图描述的具有相同命名的组件。为简洁起见，这些组件的至少一部分是通过各种不同的标记而隐含识别的。而且，将不会针对每个附图重复这些组件的说明。因此，每个附图中组件的每个实施例通过引用而并入，并且被视为可选地存在于具有一个或多个类似命名的组件的每个其它附图中。此外，根据本发明的若干实施例，附图中组件的任意描述应被解读为是可选的实施例，其可相对于关于其它附图中对应的具有相同命名的组件而描述的实施例而添加、结合或替换。在各附图中，黑色虚线框表示可选地可存在与该黑色虚线框之前或之后的组件类似的额外的组件。而且，连接附图中各组件的实线或虚线表示相连组件之间的关系。虚线表示该关系可能不包括任何物理连接或物理元件，或者可能不与任何物理连接或物理元件相关联。
在整个说明书中，使用了序数(例如，第一、第二、第三等)作为元件(即，本申请中的任何名词)的形容词。这些序数的使用并非暗示或构成该元件的特定顺序、也非将任何元件限定为仅具有单个，除非另外通过使用术语“之前”、“之后”、“单个”以及其它此类措辞明确指明。相反，这些序数的使用是为了区分不同的元件。示意性地，第一元件不同于第二元件，并且第一元件可包括多于一个的元件，而且第一元件在元件顺序方面可以在该第二元件之后(或之前)。
总的来说，本发明的实施例提供了用于追踪相机装置的视场(FOV)中物体的***、方法及计算机可读介质。在本发明的一个或多个实施例中，光源附接在该物体上，并且同时使用该相机装置抓取图像序列。在一个或多个实施例中，光源发射频闪光，频闪光的强度和/或颜色随时间而变化。基于沿该图像序列的局部光变化的模式、检测FOV中的光源。回应于检测到光源，将该光源的位置与图像内的目标位置进行比较以生成结果，比如位移或运动参数。相应地，基于该结果生成控制信号以控制相机装置支座。具体地，相机装置支座基于该控制信号调节FOV，使得该光源与该目标位置在FOV内实质地对准。在一个或多个实施例中，该图像序列是录像的一部分，并且该控制信号使该对象在该录像中显现于该FOV内的该目标位置处。
图1.1示出了根据一个或多个实施例的***100。在一个或多个实施例中，可省略、重复/或替换图1.1中示出的一个或多个模块和元件。相应地，本发明的实施例不应被视为受限于图1.1所示模块的具体布置。
如图1.1所示，***100包括具有相机镜头111的相机装置110、追踪控制器120、相机装置支座130、场景140、相机镜头111的视场141、显现于FOV141内的物体142以及附接在该物体142上的光源143。而且，相机装置110、追踪控制器120和相机装置支座130可通信地彼此连接。在本发明的一个或多个实施例中，该相机装置110、追踪控制器120和相机装置支座130中的两个或更多个集成在一个装置内。例如，追踪控制器120的至少一部分可包含在该相机装置110内。在另一示例中，追踪控制器120的至少一部分可包含在相机装置支座130内。在又一示例中，追踪控制器120的一部分包含在相机装置110内，而追踪控制器120的另一部分包含在相机装置支座130内。
在本发明的一个或多个实施例中，光源143是可发光的任意装置。在一个或多个实施例中，光源143包括发光二极管LED。在一个或多个实施例中，光源143发射频闪光，其强度和/或颜色随时间而变化。例如，频闪光可根据特定占空比(即，光模式具有亮级的时间所占的百分比)和重复率(即，单位时间周期内强度变化的次数)发射不同步的光变化模式(free-running light change pattern)。在此使用的“光变化模式”是一种光的强度和/或颜色变化的模式。在一个或多个实施例中，光源143发射与相机110的帧频相比具有低重复率(例如，10赫兹、20赫兹等等)的光变化模式。帧频是单位时间内由相机装置110抓取的图像数量(一串静态图像或录像)。在一个或多个实施例中，光源143发射与相机装置110的帧率同步的光变化模式。
在本发明的一个或多个实施例中，相机装置110是具有相机镜头(例如，相机镜头111)以及用于拍摄照片和/或录像的相关元件的装置。相机装置110的一个示例为具有通信功能的专用相机。在一个或多个实施例中，相机装置110是移动装置，比如具有内置相机的移动电话，通常被称为智能手机。智能手机可具有带图形用户界面的显示器，其占据大部分(例如，70％或更多)主表面。相机镜头111可位于智能手机的主表面或背面。在一个或多个实施例中，相机镜头111包括计时器，用于基于光源143的占空比和/或重复率来控制图像抓取的帧率。
在一个或多个实施例中，场景140是由相机装置110成像的动作或事件发生的地点。视场(FOV)141是由相机装置110使用该相机镜头111成像的场景140的范围。换言之，FOV141内的物体将显现于相机装置110所抓取和/或输出的图像中。例如，FOV141可对应于一立体角，相机镜头111在该立体角内投射光输入至与相机装置110相关联的光学传感器(未示出)中。在一个或多个实施例中，根据相机镜头111关于场景140如何取向、关于场景140如何缩放或者关于场景140如何定位，FOV141对应于场景140的不同部分。在一个或多个实施例中，相机装置110包括硬件组件、软件组件或其组合。在一个或多个实施例中，相机装置110可包括以下参照图7A和7B描述的计算***700和网络720的至少一部分，或者使用其实施。
在本发明的一个或多个实施例中，相机装置支座130被配置为机械地支撑相机装置110，并且回应于来自追踪控制器120的控制信号而调节相机镜头111的FOV141。例如，相机装置支座130可包括电动倾斜及旋转装置，用于调节相机镜头111的相机角度。在另一示例中，相机装置支座130可包括电动横向及竖向滑动装置，用于调节相机镜头111相对于场景140的位置。该滑动装置可包括机械台，用于支撑并移动该相机装置110。下文中参照图3A和3B描述相机装置支座130的示例。
在一个或多个实施例中，追踪控制器120包括被配置为调节相机镜头111的FOV141的硬件组件、软件组件或其组合。例如，追踪控制器120可通过控制相机装置支座130而控制FOV141。在另一示例中，追踪控制器120还可通过控制相机镜头111的缩放等级而控制FOV141。在一个或多个实施例中，追踪控制器120控制FOV141，使得物体142显现于FOV141内的目标位置。在一个或多个实施例中，追踪控制器120使用下文中参照图2描述的方法控制FOV141。在一个或多个实施例中，追踪控制器120包括下文中参照图1.2描述的组件。
图1.2示出了根据一个或多个实施例的追踪控制器120的细节。图1.2的以下描述涉及上文中图1.1所描绘的各种组件。在一个或多个实施例中，可省略、重复/或替换图1.2中示出的一个或多个模块和元件。相应地，本发明的实施例不应被视为受限于图1.2所示模块的具体布置。
如图1.2所示，追踪控制器120包括硬件处理器121、存储器122和资源库123。在本发明的一个或多个实施例中，硬件处理器121对应于下文中图7A所描绘的计算机处理器702。类似地，存储器122和资源库123对应于下文中图7A所描绘的非永久存储器704和/或永久存储器706。例如，存储器122可存储软件指令，运行该软件指令时可使硬件处理器121执行上文中图1.1所描绘的相机装置110的FOV调节功能。在一个或多个实施例中，追踪控制器120根据下文中参照图2描述的方法流程执行FOV调节功能。在一个或多个实施例中，存储器122存储指令以执行下文中参照图2描述的方法流程的一个或多个部分。在一个或多个实施例中，追踪控制器120和相机装置110集成在一个装置中。在此类实施例中，用于执行参照图2描述的方法流程的一个或多个部分的该指令为移动应用或移动app的一部分，移动应用或移动app为用户可安装的软件应用，其被设计以在智能手机或其他移动装置上运行。
而且，如图1.2所示，资源库123包括图像序列126、光变化模式124、位移125、运动参数128和目标位置127。具体地，图像序列126包括由相机装置111抓取的连贯的图像(例如，图像A 126a)。例如，图像A 126a对应于在特定时间点由FOV141覆盖的场景的一部分。光变化模式124是沿该图像序列126的、光强和/或光色在不同强度等级和/或颜色之间交替的模式。在一个或多个实施例中，光变化模式124对应于该图像序列126中每个图像上的光斑。例如，光斑可由每个图像中的像素位置限定或由相连的像素位置的集合限定。在一个或多个实施例中，光变化模式124是由光源143所发射的频闪光引起的，表示该光源143在每个图像内的位置。换言之，光源143在每个图像内的位置可基于沿该图像序列126的该光变化模式124出现在何处而确定。例如，光变化模式124表示光源143在图像A 126a中位于位置A127a。类似地，该图像序列126中的每个其他图像与该光源143的位置相关联。目标位置127是该追踪控制器120被配置为追踪物体142的预定位置。例如，目标位置127可被定义为是FOV141的中心，该中心对应于该图像序列126中每个图像的中心。换言之，追踪控制器120被配置为调节FOV141，以使得调节后该物体142显现于图像的中心(即，目标位置127)。在其他示例中，目标位置127可被定义为是偏离FOV141中心的不同位置。位移125为目标位置127与图像内光源143位置(例如，位置A 127a)之间的距离。在一个或多个实施例中，位移125包括水平方向距离和垂直距离。位移125可通过像素的数量或任意其他适当的距离度量来表示。在一个或多个实施例中，物体142可为移动物体，使得光源143的位置(例如，位置A 127a)可随该图像序列126中图像的不同而变化。在此实施例中，运动参数128是光源143的位置(例如，位置A 127a)随时间的变化率。例如，运动参数128可包括光源143的位置(例如，位置A127a)随该图像序列126中不同图像的变化。取决于物体142的运动方向，该运动参数128可包括水平部分和垂直部分。从数学角度，运动参数128对应于位移125随时间的导数。
在一个或多个实施例中，追踪控制器120基于上述图像序列126、光变化模式124、位移125、运动参数128和目标位置127执行FOV调节功能。具体地，追踪控制器120使用下文中参照图2描述的方法执行FOV调节功能。下文中参照图4-6描述该图像序列126、光变化模式124、位移125和运动参数128的示例。
图2示出了根据一个或多个实施例的流程图。图2中所示进程可通过例如上文中参照图1.1和1.2描述的一个或多个组件执行。可省略、重复/或替换图2中示出的一个或多个步骤。相应地，本发明的实施例不应被视为受限于图2所示步骤的特定顺序和布置。
首先，在步骤S201中，启动场景内的光源。在本发明的一个或多个实施例中，光源被附接在场景中的物体上。在一个或多个实施例中，光源发射频闪光，其强度和/或颜色随时间而变化。例如，频闪光回应于启动(例如，开启)的光源而发射不同步的光模式。在一个或多个实施例中，光源发射与相机装置的帧频相比具有低重复率(例如，10赫兹、20赫兹等等)的光变化模式的频闪光。在一个或多个实施例中，光源发射与相机装置的帧率同步的频闪光。例如，可基于发自追踪控制器和/或相机装置的触发信号而启动和/或同步该频闪光。
在步骤S202中，通过相机装置抓取该场景的图像序列。具体地，物***于相机镜头的视场(FOV)内并且显现于该图像序列中。例如，该图像序列可包括一串(a burst of)静态图像或者可为一串静态图像的一部分。在另一示例中，该图像序列可包括录像或为录像的一部分。在一个或多个实施例中，该场景的该图像序列是在光源发射频闪光的同时抓取的。在一个或多个实施例中，该图像序列的帧率是基于光源的占空比和/或重复率而选定的，以使得连贯的图像(或者是该图像序列中具有固定间隔的一对图像)包括交替的亮级和暗级，和/或与光源交替的颜色。例如，光源可为不同步的，并且帧率是基于该不同步的光源的预定占空比和/或重复率而选定的。在一个或多个实施例中，相机装置的定时器用于根据该选定的帧率而控制图像抓取。
在一个或多个实施例中，光源的占空比和/或重复率是基于该图像序列的帧率而选定的，以使得连贯的图像(或者是该图像序列中具有固定间隔的一对图像)包括交替的亮级和暗级，和/或与光源交替的颜色。例如，帧率可为预定的，并且光源例如基于来自相机装置的触发信号而与该帧率同步。
在步骤S203中，基于沿该图像序列的局部光变化模式、检测场景中的光源。具体地，从该光源发射的频闪光引起该相机装置的光学传感器接收到的光强和/或光色的变化，产生了沿该图像序列的局部光变化模式。在一个或多个实施例中，调节频闪光的强度，以控制每个图像中该局部强度变化模式所在位置的尺寸。例如，位置尺寸可限于FOV的水平和垂直尺寸的百分比(例如，1％、3％等)。在一个或多个实施例中，在由相机装置的光学传感器识别出的、连贯的图像中交替的亮级和暗级和/或交替的颜色的差异超出预定阈值处定义该位置和尺寸。在一个或多个实施例中，该位置被称为是图像中光源的位置。
在一个或多个实施例中，通过将对应像素的光强值和/或光色值相减，对图像序列中的一对图像进行比较。具体地，光强值和/或光色值是通过光学传感器生成的。具体地，将一个图像中像素的光强值和/或光色值与另一图像中对应像素的光强值和/或光色值相减，以生成差值。将差值中存在交替的亮级和暗级差异和/或存在交替的颜色差异的像素选定为该图像中光源位置的一部分。取决于光源的占空比/重复率与该图像序列的帧率的比值，这对图像可为连贯的图像或者由特定数量的图像(比如每三个图像)分隔的两个图像。
在步骤S204中，分析该图像序列，以确定至少一个图像中光源的位置以及沿该图像序列的该光源的运动。在一个或多个实施例中，光源的位置是基于由相机装置的光学传感器识别出的、连贯的图像中交替的亮级和暗级和/或交替的颜色的差异超出预定阈值处而确定的。在一个或多个实施例中，光源的运动是基于沿该图像序列的该光源位置的变化率而确定的。
在步骤S205中，回应于检测到光源、将至少一个图像内该光源的位置和目标位置进行比较以生成结果。在一个或多个实施例中，该结果包括从该光源位置到该目标位置的位移。在一个或多个实施例中，该位移可随该图像序列中图像的不同而变化，这表示物体是移动物体。在此实施例中，计算位移随时间的变化率，例如，随图像的变化率，并将其作为该运动参数。
在步骤S206中，基于该结果生成控制信号，以用于定向该相机装置。在一个或多个装置中，控制信号被配置为将相机镜头的取向调节为与位移相对(opposite)的方向。例如，如果该位移表示目标位置在图像内光源位置的右方，则控制信号将相机镜头的取向调至朝向左方。在一个或多个实施例中，控制信号被配置为将相机关于场景的相对位置调节为与位移相对(opposite)的方向。例如，如果该位移表示目标位置在图像内光源位置的右方，则控制信号将相机的相对位置调节为朝向左方。在一个或多个实施例中，运动参数被视为是由控制信号引起的调节量的微调。
在步骤S207中，将控制信号发送给安装有相机装置的相机装置支座(例如，倾斜及旋转装置或机械台)。相应地，将相机镜头的取向或相机装置的相对位置调节至与位移相对的方向。
在步骤S208中，在相机装置的FOV内检测目标位置与光源之间的实质对准。具体地，该实质对准是通过将相机镜头的取向或相机装置的相对位置调节至与位移相对的方向而实现的。
在步骤S209中，回应于检测到该实质对准，抓取该场景的额外图像。在一个或多个实施例中，通过相机装置、以规律的重复率(即，帧率)持续地抓取并输出连贯的图像。在此实施例中，被分析以生成控制信号的该图像序列只限于该额外图像之前的滚动时窗(例如，两个连贯图像、五个连贯图像、十个连贯图像等的滚动序列)。随着时间的流逝，该额外图像成为更新的图像序列的一部分，用于生成更新的控制信号，从而持续地追踪FOV中的物体。
在一个或多个实施例中，被分析以生成控制信号的该图像序列被指定为是控制信息而无需由相机装置输出。与之相反，在光源(并且因此该物体)与目标位置实质地对准时、通过该相机装置输出该额外图像。例如，该控制信息可与该额外图像分开存储，直至该控制信号被丢弃或从相机装置中移除。
在步骤S210中，确定是否继续进行图像抓取。如果结果是肯定的，即继续进行图像抓取，则该方法返回至步骤S202。如果结果是否定的，即不继续进行图像抓取，则该方法结束。
图3A、3B、4、5和6示出了根据一个或多个实施例的各种不同示例。图3A、3B、4、5和6中所示的示例，例如可基于上文中图1.1和1.2所描绘的一个或多个组件以及上文中图2所描绘的方法流程。在一个或多个实施例中，可省略、重复/或替换图3A、3B、4、5和6中示出的一个或多个模块和元件。相应地，本发明的实施例不应被视为受限于图3A、3B、4、5和6所示模块的具体布置。
图3A示出了电动相机移动装置支架210，其为图1.1所描绘的相机装置支座130的示例。此外，由该电动相机移动装置支架210机械地支撑的相机移动装置201(例如，具有相机镜头220的智能手机)为上文中图1.1所描绘的相机装置110的示例。在本发明的一个或多个实施例中，电动相机移动装置支架210是一种电机组件，包括支座221、倾斜轴203、U型托架204、旋转轴209和支架222。支座221被配置为机械地支撑相机移动装置201，并且机械地连接至倾斜轴203。支架222被配置于实体表面的同时、维持该电动相机移动装置支架210的机械稳定。虽然未明确示出，U型托架204容纳与该倾斜轴203连接的倾斜电机、与该旋转轴209连接的旋转电机以及被配置为与上文中图1.1所描绘的相机装置110和/或追踪控制器120通信的通信接口。例如，通信接口可基于蓝牙、NFC、USB或其他无线/有线通信接口。在一个或多个实施例中，旋转轴209可回应于经由通信接口从该追踪控制器120接收到控制信号、通过该旋转电机、围绕旋转轴线209-1旋转。类似地，倾斜轴203可回应于经由通信接口从该追踪控制器120接收到控制信号、通过该倾斜电机、围绕倾斜轴线203-1旋转。回应于该支座221关于该倾斜轴线203-1的倾斜和/或该支座221连同该倾斜轴203和托架204一起围绕该旋转轴线209-1的旋转，可调节相机镜头220的取向。相应地，相机镜头220的FOV220-1是根据相机镜头220的取向而调节的。
图3B示出了相机移动装置手柄800，其为上文中图1.1所描绘的相机移动装置支座130的示例。此外，由该相机移动装置手柄800机械地支撑的相机移动装置201(例如，具有相机镜头220的智能手机)是上文中图1.1所描绘的相机装置110的示例。在本发明的一个或多个实施例中，相机移动装置手柄800是一种电机组件，包括支座221、倾斜轴203、倾斜电机213、旋转轴209、旋转电机219和手柄222。支座221被配置为机械地支撑相机移动装置201，并且机械地连接至倾斜轴203。手柄222被配置为在由观察者握持的同时、维持该相机移动装置手柄800的机械稳定。虽然未明确示出，手柄222包括被配置为与上文中图1.1所描绘的相机装置110和/或追踪控制器120通信的通信接口。例如，通信接口可基于蓝牙、NFC、USB或其他无线/有线通信接口。在一个或多个实施例中，旋转轴209可回应于经由通信接口从该追踪控制器120接收到控制信号、通过该旋转电机219、围绕旋转轴线209-1旋转。类似地，倾斜轴203可回应于经由通信接口从该追踪控制器120接收到控制信号、通过该倾斜电机213、围绕倾斜轴线203-1旋转。回应于该支座221关于该倾斜轴线203-1的倾斜和/或该支座221连同该倾斜轴203和倾斜电机213一起围绕该旋转轴线209-1的旋转，可调节相机镜头220的取向。相应地，相机镜头220的FOV220-1是根据相机镜头220的取向而调节的。
图4示出了上文中图1.1和1.2所描绘的光源143的光变化模式124。如图4所示，水平轴对应于时间，而垂直轴对应于光强。具体地，光变化模式124是光强随时间在亮级400a和暗级400b之间交替的模式。例如，在时间周期A 410中维持亮级400a光强，并且可以以特定重复率随时间重现亮级400a光强。当光强随时间在亮级400a和暗级400b之间交替时，通过相机装置周期性地抓取图像序列。例如，可在时间点A 401a、时间点B 401b、时间点C401c等处抓取图像序列中的连贯图像，这些时间点以时间周期B 420、时间周期C 430等彼此间隔。具体地，时间周期A 410包含至少一个图像抓取时间点，比如时间点B 401b。虽然图4中描绘的光变化模式124是一种光强变化的模式，但在其他示例中该光变化模式124还可包括光色变化。换言之，可用不同的颜色来表示光色变化，从而作为亮级400a和暗级400b的替代或补充方案。
图5示出了上文中图1.1和1.2描绘的场景140的图像序列126的示例。如图5所示，该图像序列126包括在上文中描述的时间点A 401a、时间点B 401b、时间点C 401c等处抓取的图像A 126a、图像B 126b和图像C 126c等等。根据上文中参照图4描绘的光变化模式124的示例，光源143显现为图像A 126a、图像B 126b和图像C 126c等中标记为“a”的位置处的交替的暗斑和亮斑。与之相反，在图像A 126a、图像B 126b和图像C 126c等中标记为“b”的其他位置处的光强维持实质地不变。例如，标记为“a”的位置可通过图像A 126a和图像B126b中对应像素的光强值相减得到的差值结果126d确定。类似地，标记为“a”的位置还可通过图像B 126b和图像C 126c中对应像素的光强值相减得到的差值结果126d确定。在差值结果126d中，黑色表示无差，而白色表示非零差。相应地，光源的位置对应于差值结果126d中的白斑。
而且，如图5所示，每个图像的中心被定义为是目标位置127。相应地，从标记为“a”的位置到目标位置127之间的距离对应于位移125。图5中所示的该标记为“a”的位置、该目标位置127以及该位移125分别为上文中图1.2所描绘的位置A 127a、目标位置127以及位移125的示例。在一个或多个实施例中，该标记为“a”的位置随图像A 126a、图像B 126b和图像C 126c等的不同而变化。该标记为“a”的位置随图像A 126a、图像B 126b和图像C 126c等而变化的变化率对应于上文中图1.2所描绘的运动参数128。
图6示出了一种示例性录像600，其包括上文中参照图4描述的图像序列126的示例。在示例性情景中，目标位置是图像的中心。如图6所示，光源143被识别为位于图像序列126中各图像(例如，图像A 126)的左部。具体地，光源143由男性(即，物体142)的双手支撑。例如，光源143的位置是基于上文中图5所描绘的图像A 126a、图像B 126b和图像C 126c等中交替的暗斑和亮斑而识别的。换言之，光源143对应于图5中描绘的图像A 126a、图像B126b和图像C 126c等中标记为“a”的位置。由于目标位置(即，图像中心)在光源位置的右方，目标追踪控制器120被配置为将相机装置110朝左侧取向，使得支撑该光源143的该男性(即，物体142)显现于图像的中心。相应地，基于所识别出的光源143的位置“a”而调节该相机装置110的取向，以使得物体142显现于图像X 126a的中心。
本发明的实施例可在计算***上实施。可使用移动、台式、服务器、路由器、交换器、嵌入式装置或其他类型的硬件的任意组合。例如，如图7A所示，计算***700可包括一个或多个计算机处理器702、非永久存储器704(例如，易失性存储器，比如随机存取存储器(RAM)、缓存器)、永久存储器706(例如，硬盘、比如光盘驱动器或数字通用光盘(DVD)驱动器的光驱、闪存等等)、通信接口712(例如，蓝牙接口、红外接口、网络接口、光接口等等)以及若干其它元件和功能。
计算机处理器702可为用于处理指令的集成电路。例如，计算机处理器可为处理器的一个或多个内核或微内核。计算***700还可包括一个或多个输入装置710，比如触屏、键盘、鼠标、麦克风、触摸板、光笔或任意其它类型的输入装置。
通信接口712可包括用于将计算***700连接至网络(未示出)(例如，局域网(LAN)、比如因特网的万维网(WAN)、移动网络或任意其它类型的网络)和/或其它装置(比如其它计算装置)的集成电路。
而且，计算***700可包括一个或多个输出装置708，比如屏幕(例如，液晶显示器(LCD)、等离子显示器、触屏、阴极射线管(CRT)监视器、投影仪或其他显示装置)、打印机、外部存储或任意其他输出装置。一个或多个该输出装置可与该输入装置相同或不同。该输入及输出装置可以以本地或远程方式连接至计算机处理器702、非永久存储器704和永久存储器706。存在许多不同类型的计算***，并且前述输入和输出装置可采取其它形式。
以用于执行本发明实施例的计算机可读程序代码的形式存在的软件指令可整体或部分地、暂时或永久地存储在非暂态计算机可读介质中，比如CD、DVD、存储装置、软盘、磁带、闪存、物理存储器或任意其它计算机可读存储介质。具体地，软件指令可对应于计算机可读程序代码，当由处理器运行时，其被配置为执行本发明的一个或多个实施例。
图7A中的计算***700可连接至网络或为网络的一部分。例如，如图7B所示，网络720可包括多个节点(例如，节点X722、节点Y724)。每个节点可对应于计算***，比如如图7A所示的计算***，或节点的组合可对应于图7A所示的计算***。示意性地，本发明的实施例可在分布式***中的节点上实施，该节点连接至其它节点。示意性地，本发明的实施例可在具有多个节点的分布式计算***上实施，其中本发明的每个部分可位于该分布式计算***内的不同节点上。而且，前述计算***700的一个或多个元件可位于远程位置并且通过网络连接至其它元件。
尽管图7B中未示出，但该节点可对应于服务器机箱中的叶片(blade)，其经由背板连接至其它节点。示意性地，该节点可对应于数据中心的服务器。示意性地，该节点可对应于计算机处理器或者具有共享存储器和/或资源的计算机处理器的微内核。
网络720中的节点(例如，节点X722、节点Y724)可被配置为向客户端装置726提供服务。例如，该节点可为云计算***的一部分。该节点可包括从客户端装置726接收请求并且向客户端装置726发送应答的功能。客户端装置726可为计算***，比如图7A所示的计算***。而且，客户端装置726可包括和/或执行本发明的一个或多个实施例的全部或一部分。
图7A和图7B中描绘的计算***或计算***的组可包括执行在此公开的各种操作的功能。例如，该计算***可执行相同或不同***上进程之间的通信。采用相同形式的被动或主动通信的各种各样的机构可利于相同装置上进程之间的数据交换。这些进程间通信的代表性示例包括但不限于：文件、信号、插口、消息队列、传输线路、旗语、共享存储器、消息传递以及存储器映射文件的实施方式。
图7A中的计算***可实施和/或可被连接至数据储存库。例如，数据储存库的一个示例为数据库。数据库是被配置为易于数据检索、修改、重新组织和/或删除的信息的集合。数据库管理***(DBMS)是一种向用户提供定义、创建、查询、更新或管理数据库的接口的软件应用。
用户或软件应用可向DBMS提交声明或查询。然后，DBMS解读该声明。该声明可为用于请求信息的选择声明、更新声明、创建声明、删除声明等等。此外，该声明可包括指定数据或数据容器(数据库、表格、记录、栏、视图等等)、标识符、状态(比较运算符)、函数(例如，并集、全并集、计数、取平均等等)、排序(例如，升序、降序)等等的参数。DBMS可运行该声明。例如，DBMS可访问存储器缓存、参照或索引文件以进行读取、写入、删除或其组合，以用于应答该声明。DBMS可从永久或非永久存储器加载数据，并且执行运算以应答该查询。DBMS可将结果返回给用户或软件应用。
上述功能描述仅为图7A中计算***和图7B中节点和/或客户端装置执行的功能的少数示例。使用本发明的一个或多个实施例，还可执行其它功能。
虽然已参照有限的实施例描述了本发明，但受益于本公开的本领域技术人员在不脱离在此公开的本发明的范围的前提下还可构想出其它实施例。因此，本发明的范围应仅由随附权利要求书限定。

Claims (20)

1.一种用于目标追踪的方法，包括：
使用相机装置抓取场景的图像序列；
基于沿所述图像序列的局部光变化的模式、检测所述场景中的光源；
回应于检测到所述光源、将所述图像序列中至少一个图像中光源的位置与所述至少一个图像内的目标位置进行比较以生成结果；以及
基于所述结果生成控制信号以改变所述相机装置的视场，从而使得所述光源与所述目标位置在所述视场内实质地对准。
2.如权利要求1所述的方法，还包括：
将所述控制信号发送给安装有所述相机装置的倾斜及旋转装置；
回应于发送所述控制信号、检测所述目标位置与所述光源在所述视场内的实质对准；以及
使用所述相机装置并且回应于检测到所述实质对准、进一步抓取所述场景的额外图像，
其中，所述光源附接在所述场景中的物体上，以使得所述物体在所述额外图像中显现于所述目标位置。
3.如权利要求1所述的方法，其中，沿所述图像序列的所述局部光变化的模式是通过所述光源发射的频闪光产生的。
4.如权利要求1所述的方法，其中，所述局部光变化的模式包括选自由以下群组中的至少一个：光强变化、光色变化以及光强变化与光色变化的结合。
5.如权利要求1所述的方法，还包括：
分析所述图像序列以确定所述至少一个图像中所述光源的位置以及所述光源沿所述图像序列的运动，
其中，还基于所述运动生成所述控制信号。
6.如权利要求2所述的方法，其中，所述图像序列和所述额外图像是录像中视频帧序列的一部分。
7.如权利要求2所述的方法，还包括：
指定所述图像序列为与所述额外图像分离的控制信息。
8.一种用于相机装置的追踪控制器，包括：
计算机处理器；以及
存储器，所述存储器存储指令，当执行所述指令时、引起所述计算机处理器：
获取场景的图像序列，其中所述图像序列是由所述相机装置抓取的；
基于沿所述图像序列的局部光变化的模式、检测所述场景中的光源；
回应于检测到所述光源、将所述图像序列中至少一个图像中光源的位置与所述至少一个图像内的目标位置进行比较以生成结果；以及
基于所述结果生成控制信号以改变所述相机装置的视场，从而使得所述光源与所述目标位置在所述视场内实质地对准。
9.如权利要求8所述的追踪控制器，其中，当执行所述指令时、还使所述计算机处理器：
将所述控制信号发送给安装有所述相机装置的倾斜及旋转装置；
回应于发送所述控制信号、检测所述目标位置与所述光源在所述视场内的实质对准；以及
回应于检测到所述实质对准、使所述相机装置进一步抓取所述场景的额外图像，
其中，所述光源附接在所述场景中的物体上，以使得所述物体在所述额外图像中显现于所述目标位置。
10.如权利要求8所述的追踪控制器，其中，沿所述图像序列的所述局部光变化的模式是通过所述光源发射的频闪光产生的。
11.如权利要求8所述的追踪控制器，其中，所述局部光变化的模式包括选自由以下群组中的至少一个：光强变化、光色变化以及光强变化与光色变化的结合。
12.如权利要求8所述的追踪控制器，其中，当执行所述指令时、还使所述计算机处理器：
分析所述图像序列以确定所述至少一个图像中所述光源的位置以及所述光源沿所述图像序列的运动，
其中，还基于所述运动生成所述控制信号。
13.如权利要求9所述的追踪控制器，其中，所述图像序列和所述额外图像是录像中视频帧序列的一部分。
14.如权利要求9所述的追踪控制器，其中，当执行所述指令时、还使所述计算机处理器：
指定所述图像序列为与所述额外图像分离的控制信息。
15.一种非暂态计算机可读介质，存储用于目标追踪的指令，当由计算机处理器运行时、所述指令包括以下功能：
获取场景的图像序列，其中所述图像序列是由所述相机装置抓取的；
基于沿所述图像序列的局部光变化的模式、检测所述场景中的光源；
回应于检测到所述光源、将所述图像序列中至少一个图像中光源的位置与所述至少一个图像内的目标位置进行比较以生成结果；以及
基于所述结果生成控制信号以改变所述相机装置的视场，从而使得所述光源与所述目标位置在所述视场内实质地对准。
16.如权利要求15所述的非暂态计算机可读介质，其中，当由计算机处理器运行时、所述指令还包括以下功能：
将所述控制信号发送给安装有所述相机装置的倾斜及旋转装置；
回应于发送所述控制信号、检测所述目标位置与所述光源在所述视场内的实质对准；以及
使用所述相机装置并且回应于检测到所述实质对准、进一步抓取所述场景的额外图像，
其中，所述光源附接在所述场景中的物体上，以使得所述物体在所述额外图像中显现于所述目标位置。
17.如权利要求15所述的非暂态计算机可读介质，其中，沿所述图像序列的所述局部光变化的模式是通过所述光源发射的频闪光产生的。
18.如权利要求17所述的非暂态计算机可读介质，其中，所述局部光变化的模式包括选自由以下群组中的至少一个：光强变化、光色变化以及光强变化与光色变化的结合。
19.如权利要求15所述的非暂态计算机可读介质，其中，当由计算机处理器运行时、所述指令还包括以下功能：
分析所述图像序列以确定所述至少一个图像中所述光源的位置以及所述光源沿所述图像序列的运动，
其中，还基于所述运动生成所述控制信号。
20.如权利要求16所述的非暂态计算机可读介质，其中，当由计算机处理器运行时、所述指令还包括以下功能：
指定所述图像序列为与所述额外图像分离的控制信息。
CN201780006137.XA 2017-07-18 2017-07-18 智能目标追踪 Active CN108605081B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2017/093439 WO2019014861A1 (en) 2017-07-18 2017-07-18 INTELLIGENT FOLLOWING OF OBJECTS

Publications (2)

Publication Number Publication Date
CN108605081A true CN108605081A (zh) 2018-09-28
CN108605081B CN108605081B (zh) 2020-09-01

Family

ID=63633645

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201780006137.XA Active CN108605081B (zh) 2017-07-18 2017-07-18 智能目标追踪
CN201880046774.4A Active CN110914638B (zh) 2017-07-18 2018-07-18 使用反射光源的智能物体追踪
CN201880046775.9A Active CN110915194B (zh) 2017-07-18 2018-07-18 使用目标识别码的智能目标追踪

Family Applications After (2)

Application Number Title Priority Date Filing Date
CN201880046774.4A Active CN110914638B (zh) 2017-07-18 2018-07-18 使用反射光源的智能物体追踪
CN201880046775.9A Active CN110915194B (zh) 2017-07-18 2018-07-18 使用目标识别码的智能目标追踪

Country Status (6)

Country Link
US (3) US10587813B2 (zh)
EP (1) EP3656118A4 (zh)
JP (1) JP6856914B2 (zh)
CN (3) CN108605081B (zh)
TW (3) TWI721290B (zh)
WO (3) WO2019014861A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020118624A1 (en) * 2018-12-13 2020-06-18 Hangzhou Taro Positioning Technology Co., Ltd. Camera mobile device stabilization using a high frame rate auxiliary imaging element
WO2020142952A1 (en) * 2019-01-09 2020-07-16 Hangzhou Taro Positioning Technology Co., Ltd. Directional sound capture using image-based object tracking
WO2020142892A1 (en) * 2019-01-08 2020-07-16 Hangzhou Taro Positioning Technology Co., Ltd. Determining region-of-interest of object using image-based object tracking
CN113273176A (zh) * 2019-01-02 2021-08-17 杭州他若定位科技有限公司 使用基于图像的对象跟踪的自动化电影制作
CN114964183A (zh) * 2022-07-28 2022-08-30 金田产业发展(山东)集团有限公司 一种便携式定位导航工程勘测装置

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11364637B2 (en) * 2017-07-18 2022-06-21 Hangzhou Taro Positioning Technology Co., Ltd. Intelligent object tracking
WO2019014861A1 (en) 2017-07-18 2019-01-24 Hangzhou Taruo Information Technology Co., Ltd. INTELLIGENT FOLLOWING OF OBJECTS
JP7210872B2 (ja) * 2017-07-19 2023-01-24 富士フイルムビジネスイノベーション株式会社 画像処理装置及び画像処理プログラム
TWM560035U (zh) * 2017-11-13 2018-05-11 鄭宇傑 影像追蹤裝置
CN112313576B (zh) * 2018-06-19 2022-09-06 杭州他若定位科技有限公司 具有稳定功能的相机移动设备支架
US11158074B1 (en) * 2018-10-02 2021-10-26 Facebook Technologies, Llc Depth sensing using temporal coding
WO2020232703A1 (zh) * 2019-05-23 2020-11-26 深圳市瑞立视多媒体科技有限公司 刚体识别方法、装置、***及终端设备
CN110348418B (zh) * 2019-07-17 2022-03-11 上海商汤智能科技有限公司 目标跟踪方法及装置、智能移动设备和存储介质
KR102216968B1 (ko) * 2019-09-06 2021-02-18 주식회사 원더풀플랫폼 크래들을 이용한 도우미 시스템
TWI772830B (zh) * 2020-07-02 2022-08-01 黑快馬股份有限公司 具有畫面穩定功能的跟拍系統及具有畫面穩定功能的跟拍方法
CN113923338A (zh) * 2020-07-07 2022-01-11 黑快马股份有限公司 具有画面稳定功能的跟拍***及具有画面稳定功能的跟拍方法
CN111830520B (zh) * 2020-07-09 2023-08-04 广东诚浩工程项目管理有限公司 一种工程建设监理质量验收实测实量装置及方法
US11165969B1 (en) * 2020-08-03 2021-11-02 Sky Castle Toys LLC System and method for adding auxiliary lights to a camera to create fluorescence in selected features of a captured image

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1460187A (zh) * 2001-03-28 2003-12-03 皇家菲利浦电子有限公司 用于在自动视频跟踪***中选择目标的方法
US20130120636A1 (en) * 2011-11-10 2013-05-16 Apple Inc. Illumination system
CN103810695A (zh) * 2012-11-15 2014-05-21 浙江大华技术股份有限公司 一种光源定位方法及装置

Family Cites Families (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5227985A (en) * 1991-08-19 1993-07-13 University Of Maryland Computer vision system for position monitoring in three dimensions using non-coplanar light sources attached to a monitored object
WO1994029670A1 (fr) * 1993-06-10 1994-12-22 Kabushiki Kaisha Oh - Yoh Keisoku Kenkyusho Appareil pour mesurer la position d'un objet en mouvement
US6618117B2 (en) * 1997-07-12 2003-09-09 Silverbrook Research Pty Ltd Image sensing apparatus including a microcontroller
US6803989B2 (en) * 1997-07-15 2004-10-12 Silverbrook Research Pty Ltd Image printing apparatus including a microcontroller
WO1999061948A1 (fr) * 1998-05-25 1999-12-02 Matsushita Electric Industrial Co., Ltd. Telemetre et appareil photographique
JP2000165850A (ja) * 1998-11-25 2000-06-16 Matsushita Electric Ind Co Ltd 移動体追尾装置
JP2001305645A (ja) * 2000-04-21 2001-11-02 Fuji Photo Film Co Ltd カメラ及び雲台装置
TW543323B (en) * 2000-10-03 2003-07-21 Jestertek Inc Multiple camera control system
US6515740B2 (en) * 2000-11-09 2003-02-04 Canesta, Inc. Methods for CMOS-compatible three-dimensional image sensing using quantum efficiency modulation
KR100355382B1 (ko) * 2001-01-20 2002-10-12 삼성전자 주식회사 영상 시퀀스에서의 객체 레이블 영상 생성장치 및 그 방법
US20020171754A1 (en) * 2001-05-18 2002-11-21 I-Jen Lai Digital camera with multi-illuminating source
US20040070565A1 (en) * 2001-12-05 2004-04-15 Nayar Shree K Method and apparatus for displaying images
KR100459179B1 (ko) * 2002-04-16 2004-12-03 엘지전자 주식회사 횡류팬
CN1204417C (zh) * 2002-07-05 2005-06-01 北京创先泰克科技有限公司 自动跟踪运动目标的***和实现方法
JP4284949B2 (ja) * 2002-09-05 2009-06-24 ソニー株式会社 移動撮影システム、移動撮影方法、及び撮影装置
US7847234B2 (en) * 2003-08-06 2010-12-07 The United States Of America As Represented By The Secretary Of The Army Method and system for observing a subject at a first location based upon quantum properties measured at a second location
KR100565318B1 (ko) * 2003-12-15 2006-03-30 엘지전자 주식회사 카메라폰의 촬영 안내 방법 및 장치
US7078672B2 (en) * 2004-01-16 2006-07-18 Tong Xie Method and system for optically tracking a target using interferometric technique
WO2005109859A2 (en) * 2004-05-01 2005-11-17 Eliezer Jacob Digital camera with non-uniform image resolution
US20060098729A1 (en) * 2004-11-09 2006-05-11 Lien-Chieh Shen Smart image processing CCTV camera device and method for operating same
WO2006085834A1 (en) * 2005-01-28 2006-08-17 Microvision, Inc. Method and apparatus for illuminating a field-of-view and capturing an image
US8803978B2 (en) * 2006-05-23 2014-08-12 Microsoft Corporation Computer vision-based object tracking system
US8996172B2 (en) * 2006-09-01 2015-03-31 Neato Robotics, Inc. Distance sensor system and method
WO2009018647A1 (en) * 2007-08-08 2009-02-12 Tony Mayer Non-retro-reflective license plate imaging system
DE112007003673B4 (de) * 2007-10-10 2020-10-29 Trimble Jena Gmbh Vermessungsvorrichtung zum Verfolgen und Vermessen eines Objekts
CN100538723C (zh) * 2007-10-26 2009-09-09 浙江工业大学 多视觉传感器信息融合的内河船舶自动识别***
JP5261684B2 (ja) * 2007-11-27 2013-08-14 スタンレー電気株式会社 ストロボ装置
JP5150229B2 (ja) 2007-12-07 2013-02-20 株式会社トプコン 測量システム
JP5060358B2 (ja) * 2008-03-25 2012-10-31 株式会社トプコン 測量システム
JP2009290827A (ja) 2008-06-02 2009-12-10 Sony Corp 画像処理装置および画像処理方法
CN102113321B (zh) * 2008-08-05 2013-09-11 爱信精机株式会社 目标对象物位置确定装置
EP2194399A1 (de) * 2008-12-03 2010-06-09 Leica Geosystems AG Positionsbestimmungsverfahren und geodätisches Vermessungssystem
CN101494737B (zh) * 2009-03-09 2011-04-20 杭州海康威视数字技术股份有限公司 一种一体化摄像机装置及自适应自动聚焦方法
US8866889B2 (en) * 2010-11-03 2014-10-21 Microsoft Corporation In-home depth camera calibration
EP2656181B1 (en) * 2010-12-22 2019-10-30 zSpace, Inc. Three-dimensional tracking of a user control device in a volume
JP2012149888A (ja) * 2011-01-14 2012-08-09 Ricoh Co Ltd 光検出装置及び光検出方法
US8711206B2 (en) * 2011-01-31 2014-04-29 Microsoft Corporation Mobile camera localization using depth maps
CN102143324A (zh) * 2011-04-07 2011-08-03 天津市亚安科技电子有限公司 一种云台自动平滑跟踪目标的方法
CN102148965B (zh) * 2011-05-09 2014-01-15 厦门博聪信息技术有限公司 多目标跟踪特写拍摄视频监控***
US8605205B2 (en) * 2011-08-15 2013-12-10 Microsoft Corporation Display as lighting for photos or video
EP2570769A1 (de) * 2011-09-13 2013-03-20 Hexagon Technology Center GmbH Geodätisches Vermessungssystem und Verfahren mit multipler Zielverfolgungsfunktionalität
CN102360423A (zh) * 2011-10-19 2012-02-22 丁泉龙 一种人体智能跟踪方法
US8653427B2 (en) * 2011-12-17 2014-02-18 Raytheon Company Digital semi-active laser receiver tracking of multiple line-of-sight (LOS) objects
KR101290197B1 (ko) * 2012-02-21 2013-07-30 중앙대학교 산학협력단 영상의 깊이 정보 추정 장치 및 방법
US9283677B2 (en) * 2012-04-05 2016-03-15 Rethink Robotics, Inc. Visual indication of target tracking
CN102724482B (zh) * 2012-06-18 2015-08-26 西安电子科技大学 基于gps和gis的智能视觉传感网络运动目标接力跟踪***
JP5966665B2 (ja) * 2012-06-26 2016-08-10 ソニー株式会社 情報処理装置、情報処理方法および記録媒体
US20140037135A1 (en) * 2012-07-31 2014-02-06 Omek Interactive, Ltd. Context-driven adjustment of camera parameters
CN103634509A (zh) * 2012-08-30 2014-03-12 苏州翔合智能科技有限公司 自动追踪录制方法及***
DE112013004569B4 (de) * 2012-09-19 2016-07-07 Faro Technologies Inc. Verfahren zum festen Anvisieren und Verfolgen eines ausgewählten Retroreflektors mit einem Lasertracker
CN103677237B (zh) * 2012-09-20 2016-12-21 原相科技股份有限公司 对象追踪装置及其控制方法
US9697427B2 (en) * 2014-01-18 2017-07-04 Jigabot, LLC. System for automatically tracking a target
EP2765388B1 (de) * 2013-02-08 2018-10-17 Hexagon Technology Center GmbH Mobiler Feld-Controller zur Messung und Fernsteuerung
CN103383446B (zh) * 2013-04-09 2017-07-07 北京半导体照明科技促进中心 基于可见光的室内定位方法、装置和***以及光源
EP2827099A1 (de) * 2013-07-16 2015-01-21 Leica Geosystems AG Lasertracker mit Zielsuchfunktionalität
KR102063102B1 (ko) * 2013-08-19 2020-01-07 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
EP2879371B1 (en) * 2013-11-29 2016-12-21 Axis AB System for following an object marked by a tag device with a camera
JP6380843B2 (ja) * 2013-12-19 2018-08-29 株式会社リコー 物体検出装置及びこれを備えた移動体機器制御システム並びに物体検出用プログラム
US9454699B2 (en) * 2014-04-29 2016-09-27 Microsoft Technology Licensing, Llc Handling glare in eye tracking
CN106537252B (zh) * 2014-05-06 2020-03-06 宁波舜宇光电信息有限公司 转光三维成像装置和投射装置及其应用
EP3167304A4 (en) * 2014-07-08 2018-02-21 Basf Se Detector for determining a position of at least one object
DE102014109701A1 (de) * 2014-07-10 2016-01-14 Epcos Ag Sensor
US10455137B2 (en) * 2014-07-28 2019-10-22 Orbotech Ltd. Auto-focus system
US10609273B2 (en) * 2014-07-31 2020-03-31 Maxell, Ltd. Image pickup device and method of tracking subject thereof
US9992396B1 (en) * 2015-02-02 2018-06-05 Apple Inc. Focusing lighting module
JP2018510373A (ja) * 2015-02-10 2018-04-12 モービルアイ ビジョン テクノロジーズ リミテッド 自律車両ナビゲーションのための疎な地図
EP3064898B1 (de) 2015-03-04 2019-12-18 Leica Geosystems AG Vermessungsgerät mit Feinanzielungs- bzw. Zielverfolgungsfunktionalität
JP6500535B2 (ja) * 2015-03-23 2019-04-17 カシオ計算機株式会社 画像処理装置、画像処理方法及びプログラム
CN104834903B (zh) * 2015-04-24 2018-04-27 深圳先牛信息技术有限公司 用于移动设备的双眼虹膜图像采集装置
CN105169717B (zh) * 2015-07-22 2017-10-03 深圳市富微科创电子有限公司 一种采用目标追踪技术的玩具飞机遥控***及方法
CN105184776B (zh) * 2015-08-17 2018-09-28 中国测绘科学研究院 目标跟踪方法
WO2017070629A1 (en) * 2015-10-23 2017-04-27 Fluke Corporation Imaging tool for vibration and/or misalignment analysis
KR102592980B1 (ko) * 2015-11-04 2023-10-20 매직 립, 인코포레이티드 광 필드 디스플레이 계측
JP6604509B2 (ja) * 2015-12-17 2019-11-13 カシオ計算機株式会社 撮像装置、被写体追尾方法、及びプログラム
EP3185037B1 (en) * 2015-12-23 2020-07-08 STMicroelectronics (Research & Development) Limited Depth imaging system
CN105611127A (zh) * 2015-12-28 2016-05-25 天津鼎视汇达科技有限公司 红外球机智能补光***
US10341629B2 (en) * 2016-06-30 2019-07-02 Hipcam Ltd. Touch screen WiFi camera
CN106534674A (zh) * 2016-10-17 2017-03-22 努比亚技术有限公司 一种显示对焦区域的方法和移动终端
CN106341610A (zh) * 2016-11-25 2017-01-18 广东欧珀移动通信有限公司 拍照方法及移动终端
WO2019014861A1 (en) 2017-07-18 2019-01-24 Hangzhou Taruo Information Technology Co., Ltd. INTELLIGENT FOLLOWING OF OBJECTS

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1460187A (zh) * 2001-03-28 2003-12-03 皇家菲利浦电子有限公司 用于在自动视频跟踪***中选择目标的方法
US20130120636A1 (en) * 2011-11-10 2013-05-16 Apple Inc. Illumination system
CN103810695A (zh) * 2012-11-15 2014-05-21 浙江大华技术股份有限公司 一种光源定位方法及装置

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113273170B (zh) * 2018-12-13 2023-04-28 杭州他若定位科技有限公司 使用高帧率辅助成像元件使相机移动设备稳定的方法、装置及存储介质
CN113273170A (zh) * 2018-12-13 2021-08-17 杭州他若定位科技有限公司 使用高帧率辅助成像元件使相机移动设备稳定
US11991445B2 (en) 2018-12-13 2024-05-21 Hangzhou Taro Positioning Technology Co., Ltd. Camera mobile device stabilization using a high frame rate auxiliary imaging element
WO2020118624A1 (en) * 2018-12-13 2020-06-18 Hangzhou Taro Positioning Technology Co., Ltd. Camera mobile device stabilization using a high frame rate auxiliary imaging element
CN113273176B (zh) * 2019-01-02 2023-05-30 杭州他若定位科技有限公司 使用基于图像的对象跟踪的自动化电影制作
CN113273176A (zh) * 2019-01-02 2021-08-17 杭州他若定位科技有限公司 使用基于图像的对象跟踪的自动化电影制作
CN113196297A (zh) * 2019-01-08 2021-07-30 杭州他若定位科技有限公司 使用基于图像的对象跟踪确定对象的感兴趣区域
US11900616B2 (en) 2019-01-08 2024-02-13 Hangzhou Taro Positioning Technology Co., Ltd. Determining region-of-interest of an object using image-based object tracking
CN113196297B (zh) * 2019-01-08 2024-03-22 杭州他若定位科技有限公司 使用基于图像的对象跟踪确定对象的感兴趣区域
WO2020142892A1 (en) * 2019-01-08 2020-07-16 Hangzhou Taro Positioning Technology Co., Ltd. Determining region-of-interest of object using image-based object tracking
WO2020142952A1 (en) * 2019-01-09 2020-07-16 Hangzhou Taro Positioning Technology Co., Ltd. Directional sound capture using image-based object tracking
CN113196737A (zh) * 2019-01-09 2021-07-30 杭州他若定位科技有限公司 使用基于图像的对象跟踪进行定向声音捕获
US11902737B2 (en) 2019-01-09 2024-02-13 Hangzhou Taro Positioning Technology Co., Ltd. Directional sound capture using image-based object tracking
CN114964183B (zh) * 2022-07-28 2022-10-25 金田产业发展(山东)集团有限公司 一种便携式定位导航工程勘测装置
CN114964183A (zh) * 2022-07-28 2022-08-30 金田产业发展(山东)集团有限公司 一种便携式定位导航工程勘测装置

Also Published As

Publication number Publication date
JP6856914B2 (ja) 2021-04-14
TW201913171A (zh) 2019-04-01
EP3656118A1 (en) 2020-05-27
CN110914638A (zh) 2020-03-24
CN108605081B (zh) 2020-09-01
US20200154036A1 (en) 2020-05-14
US11190701B2 (en) 2021-11-30
TWI716708B (zh) 2021-01-21
WO2019014861A1 (en) 2019-01-24
CN110914638B (zh) 2021-11-26
CN110915194A (zh) 2020-03-24
WO2019015616A1 (en) 2019-01-24
JP2020526853A (ja) 2020-08-31
US20190082112A1 (en) 2019-03-14
TWI716707B (zh) 2021-01-21
EP3656118A4 (en) 2021-03-03
TW201913245A (zh) 2019-04-01
WO2019015614A1 (en) 2019-01-24
CN110915194B (zh) 2021-06-25
TWI721290B (zh) 2021-03-11
TW201908859A (zh) 2019-03-01
US20200151887A1 (en) 2020-05-14
US11122210B2 (en) 2021-09-14
US10587813B2 (en) 2020-03-10

Similar Documents

Publication Publication Date Title
CN108605081A (zh) 智能目标追踪
US11727644B2 (en) Immersive content production system with multiple targets
WO2018204279A1 (en) Automated matrix photo framing using range camera input
MX2007012923A (es) Camaras digitales con sistemas de autoenfoque de triangulacion y metodos relacionados.
JP2014014076A (ja) ３ｄ深度情報に基づいたイメージぼかし
JP2017500766A (ja) 再焦点合わせ可能画像
US11402730B2 (en) Camera mobile device holder with stablization
CN107430436A (zh) 全景手势的自动检测
US11881018B2 (en) Detecting dual band infrared light source for object tracking
US20200213524A1 (en) Intelligent object tracking
US20200298413A1 (en) Intelligent object tracking
JP6817527B1 (ja) 情報処理装置、プログラムおよび情報処理システム
US11991445B2 (en) Camera mobile device stabilization using a high frame rate auxiliary imaging element
CN109698903A (zh) 图像获取方法及图像获取装置
WO2022188733A1 (en) Scenario triggering and interaction based on target positioning and identification
KR20240062676A (ko) 입체표식기를 이용하여 사용자의 위치 및 방향을 인식하는 가상현실 구현 시스템 및 가상현실 구현 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant