RU2013139872A - Сравнение движущихся объектов на основе вектора движения - Google Patents

Сравнение движущихся объектов на основе вектора движения Download PDF

Info

Publication number
RU2013139872A
RU2013139872A RU2013139872/08A RU2013139872A RU2013139872A RU 2013139872 A RU2013139872 A RU 2013139872A RU 2013139872/08 A RU2013139872/08 A RU 2013139872/08A RU 2013139872 A RU2013139872 A RU 2013139872A RU 2013139872 A RU2013139872 A RU 2013139872A
Authority
RU
Russia
Prior art keywords
frames
video sequence
video
movement
objects
Prior art date
Application number
RU2013139872/08A
Other languages
English (en)
Other versions
RU2602792C2 (ru
Inventor
Цайфэн ШАНЬ
Адрианус Маринус Герардус ПЕТЕРС
Original Assignee
Конинклейке Филипс Электроникс Н.В.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Конинклейке Филипс Электроникс Н.В. filed Critical Конинклейке Филипс Электроникс Н.В.
Publication of RU2013139872A publication Critical patent/RU2013139872A/ru
Application granted granted Critical
Publication of RU2602792C2 publication Critical patent/RU2602792C2/ru

Links

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B69/00—Training appliances or apparatus for special sports
    • A63B69/36—Training appliances or apparatus for special sports for golf
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2625—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/144—Movement detection
    • H04N5/145—Movement estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00—Measuring of physical parameters relating to sporting activity
    • A63B2220/80—Special sensors, transducers or devices therefor
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00—Measuring of physical parameters relating to sporting activity
    • A63B2220/80—Special sensors, transducers or devices therefor
    • A63B2220/806—Video cameras
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003—Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0127—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter
    • H04N7/013—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter the incoming video signal comprising different parts having originally different frame rate, e.g. video and graphics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
    • H04N7/014—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes involving the use of motion vectors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Image Analysis (AREA)
  • Processing Or Creating Images (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Circuits (AREA)

Abstract

1. Устройство для анализа движения различных объектов или одного и того же объекта, захваченного в различные моменты времени, по меньшей мере в двух видеопоследовательностях, причем упомянутое устройство содержит:средство (110; 210А; 210В) оценки движения для вычисления векторов движения упомянутых объектов на отдельных кадрах первой видеопоследовательности из упомянутых по меньшей мере двух видеопоследовательностей;средство (120; 220) интерполяции кадров для генерации и вставки промежуточных кадров в упомянутую первую видеопоследовательность, основываясь на упомянутых вычисляемых векторах движения для повышения частоты кадров упомянутой первой видеопоследовательности; исредство (130; 230) выравнивания кадров для осуществления пространственного и временного выравнивания кадров упомянутой первой видеопоследовательности с повышенной частотой кадров с кадрами второй видеопоследовательности из упомянутых по меньшей мере двух видеопоследовательностей.2. Устройство по п. 1, дополнительно содержащее визуализатор (140) для визуализации упомянутого движения упомянутого по меньшей мере одного объекта.3. Устройство по п. 1 или 2, дополнительно содержащее видеогенератор (240) для генерации третьей видеопоследовательности, содержащей различия в движенияхобъектов из упомянутых первой и второй видеопоследовательностей, обработанных посредством упомянутого устройства.4. Устройство по п. 2, в котором упомянутый визуализатор (140) выполнен с возможностью визуализировать упомянутое движение упомянутого объекта посредством добавления информации по меньшей мере об одном из направления движения, количества и ускорения движени

Claims (10)

1. Устройство для анализа движения различных объектов или одного и того же объекта, захваченного в различные моменты времени, по меньшей мере в двух видеопоследовательностях, причем упомянутое устройство содержит:
средство (110; 210А; 210В) оценки движения для вычисления векторов движения упомянутых объектов на отдельных кадрах первой видеопоследовательности из упомянутых по меньшей мере двух видеопоследовательностей;
средство (120; 220) интерполяции кадров для генерации и вставки промежуточных кадров в упомянутую первую видеопоследовательность, основываясь на упомянутых вычисляемых векторах движения для повышения частоты кадров упомянутой первой видеопоследовательности; и
средство (130; 230) выравнивания кадров для осуществления пространственного и временного выравнивания кадров упомянутой первой видеопоследовательности с повышенной частотой кадров с кадрами второй видеопоследовательности из упомянутых по меньшей мере двух видеопоследовательностей.
2. Устройство по п. 1, дополнительно содержащее визуализатор (140) для визуализации упомянутого движения упомянутого по меньшей мере одного объекта.
3. Устройство по п. 1 или 2, дополнительно содержащее видеогенератор (240) для генерации третьей видеопоследовательности, содержащей различия в движениях
объектов из упомянутых первой и второй видеопоследовательностей, обработанных посредством упомянутого устройства.
4. Устройство по п. 2, в котором упомянутый визуализатор (140) выполнен с возможностью визуализировать упомянутое движение упомянутого объекта посредством добавления информации по меньшей мере об одном из направления движения, количества и ускорения движения.
5. Устройство по п. 4, в котором упомянутый визуализатор (14 0) выполнен с возможностью добавлять упомянутую информацию в виде цветового кодирования.
6. Устройство по п. 2, в котором упомянутый визуализатор (140) выполнен с возможностью обнаруживать предварительно определяемые объекты, представляющие интерес, в упомянутых первой и второй видеопоследовательностях.
7. Устройство отображения, содержащее устройство по п. 1.
8. Игровое устройство, содержащее устройство отображения по п. 7.
9. Способ анализа движения различных объектов или одного и того же объекта, захваченного в различные моменты времени, по меньшей мере в двух видеопоследовательностях, причем упомянутый способ содержит:
вычисление векторов движения упомянутых объектов на отдельных кадрах первой видеопоследовательности из упомянутых по меньшей мере двух видеопоследовательностей;
генерацию и вставку промежуточных кадров в упомянутую первую видеопоследовательность, основываясь на упомянутых
вычисляемых векторах движения для повышения частоты кадров упомянутой первой видеопоследовательности; и
осуществление пространственного и временного выравнивания кадров упомянутой первой видеопоследовательности с кадрами второй видеопоследовательности из упомянутых по меньшей мере двух видеопоследовательностей.
10. Компьютерный программных продукт, содержащий средства кода для выполнения этапов способа по п. 9, когда он выполняется на вычислительном устройстве.
RU2013139872/08A 2011-01-28 2012-01-16 Сравнение движущихся объектов на основе вектора движения RU2602792C2 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP11152548.1 2011-01-28
EP11152548 2011-01-28
PCT/IB2012/050196 WO2012101542A1 (en) 2011-01-28 2012-01-16 Motion vector based comparison of moving objects

Publications (2)

Publication Number Publication Date
RU2013139872A true RU2013139872A (ru) 2015-03-10
RU2602792C2 RU2602792C2 (ru) 2016-11-20

Family

ID=45558796

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2013139872/08A RU2602792C2 (ru) 2011-01-28 2012-01-16 Сравнение движущихся объектов на основе вектора движения

Country Status (6)

Country Link
US (1) US20130293783A1 (ru)
EP (1) EP2668771A1 (ru)
JP (1) JP6030072B2 (ru)
CN (1) CN103404122B (ru)
RU (1) RU2602792C2 (ru)
WO (1) WO2012101542A1 (ru)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2742221C2 (ru) * 2017-04-21 2021-02-03 Зенимакс Медиа Инк. Компенсация движения на основании ввода игрока посредством прогнозирования векторов движения

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014205643A1 (en) * 2013-06-25 2014-12-31 Thomson Licensing Method and system capable of alignment of video frame sequences
KR101946256B1 (ko) 2018-07-09 2019-02-11 이노뎁 주식회사 압축영상에 대한 움직임 벡터의 시각화 표시 처리 방법
CN111294644B (zh) * 2018-12-07 2021-06-25 腾讯科技（深圳）有限公司 视频拼接方法、装置、电子设备及计算机可读存储介质
RU2737343C2 (ru) * 2019-01-10 2020-11-27 Федеральное государственное казенное военное образовательное учреждение высшего образования "Военный учебно-научный центр Военно-воздушных сил "Военно-воздушная академия имени профессора Н.Е. Жуковского и Ю.А. Гагарина" (г. Воронеж) Министерства обороны Российской Федерации Способ определения характера движения объекта на кадрах видеопоследовательности

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7843510B1 (en) * 1998-01-16 2010-11-30 Ecole Polytechnique Federale De Lausanne Method and system for combining video sequences with spatio-temporal alignment
AU702724B1 (en) * 1998-07-20 1999-03-04 Ian Galbraith Hay Image manipulation apparatus
AU7439900A (en) * 1999-10-08 2001-04-23 Inmotion Technologies Ltd. Video training and gaming method for comparing events
CN100349188C (zh) * 1999-11-24 2007-11-14 伊摩信科技有限公司 以时空同步整合视频序列的方法及***
ATE481695T1 (de) 2000-04-07 2010-10-15 Dartfish Sa Automatisiertes stroboskop-verfahren für videosequenzen
JP2002027315A (ja) * 2000-07-07 2002-01-25 Sony Corp 動き検出装置及び動き検出方法
US6567536B2 (en) * 2001-02-16 2003-05-20 Golftec Enterprises Llc Method and system for physical motion analysis
JP3668168B2 (ja) * 2001-09-14 2005-07-06 株式会社東芝 動画像処理装置
JP2005515675A (ja) * 2001-12-26 2005-05-26 イェダ リサーチ アンド デベロップメント カンパニー リミテッド ビデオの空間または時間解像度を高めるためのシステムおよび方法
US20030202599A1 (en) * 2002-04-29 2003-10-30 Koninklijke Philips Electronics N.V. Scalable wavelet based coding using motion compensated temporal filtering based on multiple reference frames
EP1404130A1 (en) * 2002-09-24 2004-03-31 Matsushita Electric Industrial Co., Ltd. Method and apparatus for processing a video signal mixed with an additional image signal
JP2004164563A (ja) * 2002-09-26 2004-06-10 Toshiba Corp 画像解析方法、画像解析装置、画像解析プログラム
US7752548B2 (en) * 2004-10-29 2010-07-06 Microsoft Corporation Features such as titles, transitions, and/or effects which vary according to positions
WO2006048875A2 (en) * 2004-11-05 2006-05-11 Yissum Research Development Company Of The Hebrew University Of Jerusalem Method and system for spatio-temporal video warping
KR100699261B1 (ko) * 2005-06-24 2007-03-27 삼성전자주식회사 움직임 에러 검출장치와 이를 포함하는 움직임 에러보정장치와 이에 의한 움직임 에러 검출방법 및 움직임에러 보정방법
ATE413216T1 (de) 2005-07-12 2008-11-15 Dartfish Sa Verfahren zur analyse der bewegung einer person während einer aktivität
US20100201512A1 (en) 2006-01-09 2010-08-12 Harold Dan Stirling Apparatus, systems, and methods for evaluating body movements
US8340185B2 (en) * 2006-06-27 2012-12-25 Marvell World Trade Ltd. Systems and methods for a motion compensated picture rate converter
US20100027667A1 (en) * 2007-01-26 2010-02-04 Jonatan Samuelsson Motion estimation for uncovered frame regions
CN101652994A (zh) * 2007-03-29 2010-02-17 夏普株式会社 视频发送装置、视频接收装置、视频记录装置、视频重放装置及视频显示装置
JP5125294B2 (ja) * 2007-07-31 2013-01-23 株式会社ニコン プログラム、画像処理装置、撮像装置および画像処理方法
RU2408160C1 (ru) * 2009-08-10 2010-12-27 Зао "Ниир-Ком" Способ нахождения векторов движения деталей в динамических изображениях и устройство для его реализации
JP5424852B2 (ja) * 2009-12-17 2014-02-26 キヤノン株式会社 映像情報処理方法及びその装置
US8421847B2 (en) * 2010-05-21 2013-04-16 Mediatek Inc. Apparatus and method for converting two-dimensional video frames to stereoscopic video frames

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2742221C2 (ru) * 2017-04-21 2021-02-03 Зенимакс Медиа Инк. Компенсация движения на основании ввода игрока посредством прогнозирования векторов движения
US11323740B2 (en) 2017-04-21 2022-05-03 Zenimax Media Inc. Systems and methods for player input motion compensation by anticipating motion vectors and/or caching repetitive motion vectors
US11330291B2 (en) 2017-04-21 2022-05-10 Zenimax Media Inc. Systems and methods for player input motion compensation by anticipating motion vectors and/or caching repetitive motion vectors
US11503332B2 (en) 2017-04-21 2022-11-15 Zenimax Media Inc. Systems and methods for player input motion compensation by anticipating motion vectors and/or caching repetitive motion vectors
US11533504B2 (en) 2017-04-21 2022-12-20 Zenimax Media Inc. Systems and methods for player input motion compensation by anticipating motion vectors and/or caching repetitive motion vectors
US11601670B2 (en) 2017-04-21 2023-03-07 Zenimax Media Inc. Systems and methods for player input motion compensation by anticipating motion vectors and/or caching repetitive motion vectors
US11695951B2 (en) 2017-04-21 2023-07-04 Zenimax Media Inc. Systems and methods for player input motion compensation by anticipating motion vectors and/or caching repetitive motion vectors

Also Published As

Publication number Publication date
EP2668771A1 (en) 2013-12-04
JP6030072B2 (ja) 2016-11-24
WO2012101542A1 (en) 2012-08-02
RU2602792C2 (ru) 2016-11-20
JP2014508455A (ja) 2014-04-03
US20130293783A1 (en) 2013-11-07
CN103404122B (zh) 2017-03-22
CN103404122A (zh) 2013-11-20

Similar Documents

Publication Publication Date Title
RU2013139872A (ru) Сравнение движущихся объектов на основе вектора движения
GB2557525A (en) Electronic display stabilization using pixel velocities
EP2777026B1 (en) Information processing device, information processing method, and program
MY167467A (en) Performing motion vector prediction for video coding
US11398049B2 (en) Object tracking device, object tracking method, and object tracking program
JP2014521139A5 (ru)
GB201003223D0 (en) Object tracking using graphics engine derived vectors in a mortion estimation system
MX2020010515A (es) Metodo de prediccion de imagen y aparato relacionado.
MX2021003044A (es) Método y dispositivo de predicción de imagen.
MY163359A (en) Method and apparatus for encoding and decoding motion vector based on reduced motion vector predictor candidates
WO2014032020A3 (en) Feature based high resolution motion estimation from low resolution images captured using an array source
EP2555522A3 (en) External vectors in a motion estimation system
JP2016534771A5 (ru)
ATE538453T1 (de) Bildverarbeitungsverfahren und bildverarbeitungsvorrichtung
IN2015KN00682A (ru)
JP2013105285A5 (ru)
JP2011022796A5 (ru)
RU2015103854A (ru) Устройство обработки изображений и способ обработки изображений
JP2007274299A5 (ru)
RU2014137146A (ru) Повышение разрешающей способности изображения
JP2014064110A5 (ru)
FR2983607B1 (fr) Procede et dispositif de suivi d'un objet dans une sequence d'au moins deux images
JP2011223583A5 (ru)
US20130069935A1 (en) Depth generation method and apparatus using the same
JP2014508455A5 (ru)

Legal Events

Date Code Title Description
MM4A The patent is invalid due to non-payment of fees

Effective date: 20180117