RU2018119471A - Устройство обработки информации, устройство формирования изображений, способы управления для них и энергонезависимый машиночитаемый носитель хранения данных - Google Patents

Устройство обработки информации, устройство формирования изображений, способы управления для них и энергонезависимый машиночитаемый носитель хранения данных Download PDF

Info

Publication number
RU2018119471A
RU2018119471A RU2018119471A RU2018119471A RU2018119471A RU 2018119471 A RU2018119471 A RU 2018119471A RU 2018119471 A RU2018119471 A RU 2018119471A RU 2018119471 A RU2018119471 A RU 2018119471A RU 2018119471 A RU2018119471 A RU 2018119471A
Authority
RU
Russia
Prior art keywords
image
virtual
view
viewpoint
virtual viewpoint
Prior art date
Application number
RU2018119471A
Other languages
English (en)
Other versions
RU2718413C2 (ru
RU2018119471A3 (ru
Inventor
Йосики ИВАКИРИ
Original Assignee
Кэнон Кабусики Кайся
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Кэнон Кабусики Кайся filed Critical Кэнон Кабусики Кайся
Publication of RU2018119471A3 publication Critical patent/RU2018119471A3/ru
Publication of RU2018119471A publication Critical patent/RU2018119471A/ru
Application granted granted Critical
Publication of RU2718413C2 publication Critical patent/RU2718413C2/ru

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/10—Geometric effects
    • G06T15/20—Perspective computation
    • G06T15/205—Image-based rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/167—Synchronising or controlling image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30168—Image quality inspection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0088—Synthesising a monoscopic image signal from stereoscopic images, e.g. synthesising a panoramic or high resolution monoscopic image

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Quality & Reliability (AREA)
  • Human Computer Interaction (AREA)
  • Computing Systems (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Processing (AREA)
  • Image Generation (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Claims (35)

1. Устройство обработки информации, содержащее:
- модуль формирования, выполненный с возможностью формировать изображение с виртуальной точкой обзора в соответствии с позицией и/или направлением в зоне прямой видимости точки обзора; и
- модуль уведомления, выполненный с возможностью отправлять уведомление касательно информации относительно качества изображения с виртуальной точкой обзора, сформированного посредством модуля формирования.
2. Устройство по п. 1, в котором модуль уведомления отправляет уведомление относительно позиции и/или направления в зоне прямой видимости точки обзора, в которой формируется низкокачественное изображение с виртуальной точкой обзора.
3. Устройство по п. 1, в котором модуль уведомления отправляет одно из уведомления относительно позиции и/или направления в зоне прямой видимости точки обзора, в которой формируется изображение с виртуальной точкой обзора с отсутствующим объектом, и уведомления относительно позиции и/или направления в зоне прямой видимости точки обзора, в которой формируется изображение с виртуальной точкой обзора с шумом.
4. Устройство по п. 1, в котором модуль уведомления передает информацию относительно качества изображения с виртуальной точкой обзора в другое устройство или отображает информацию относительно качества изображения с виртуальной точкой обзора на модуле отображения.
5. Устройство по п. 1, в котором модуль формирования формирует изображение с виртуальной точкой обзора в соответствии с виртуальной точкой обзора, которая перемещается через предварительно определенный тракт с предварительно определенной скоростью.
6. Устройство по п. 1, в котором модуль формирования формирует изображение с виртуальной точкой обзора в соответствии с виртуальной точкой обзора, которая перемещается в предварительно определенной области.
7. Устройство по п. 1, в котором модуль формирования формирует изображение с виртуальной точкой обзора в соответствии с виртуальной точкой обзора, которая перемещается в соответствии позиции виртуальной точки обзора, сформированной посредством другого устройства обработки информации.
8. Устройство по п. 1, в котором модуль формирования формирует изображение с виртуальной точкой обзора в соответствии с автоматически последовательно обновленной позицией и/или направлением в зоне прямой видимости точки обзора.
9. Устройство формирования изображений для формирования, из видео, захваченных посредством множества устройств захвата изображений, изображения с виртуальной точкой обзора, видимого из виртуальной точки обзора, запрашиваемой клиентом, и предоставления изображения с виртуальной точкой обзора в клиент, содержащее:
- модуль формирования изображений, выполненный с возможностью формировать изображение с виртуальной точкой обзора на основе информации виртуальных точек обзора, представляющей позицию и направление в зоне прямой видимости виртуальной точки обзора, запрашиваемой клиентом;
- модуль передачи изображений, выполненный с возможностью передавать сформированное изображение с виртуальной точкой обзора в клиент;
- модуль запоминания, выполненный с возможностью запоминать, если информация, указывающая то, что, изображение с виртуальной точкой обзора является анормальным, принимается из первого типа клиента, информацию виртуальных точек обзора изображения с анормальной виртуальной точкой обзора; и
- модуль передачи виртуальных точек обзора, выполненный с возможностью передавать, во второй тип клиента, запрашивающего создание изображения с виртуальной точкой обзора, информацию, представляющую позицию и направление в зоне прямой видимости виртуальной точки обзора, представленной посредством информации виртуальных точек обзора, запоминаемой в модуле запоминания.
10. Устройство по п. 9, дополнительно содержащее:
- приемный модуль, выполненный с возможностью принимать, из первого типа клиента, инструкцию, чтобы выбирать один из множества режимов, ассоциированных с перемещением виртуальной точки обзора, предоставленной заранее; и
- модуль формирования, выполненный с возможностью формировать информацию виртуальных точек обзора в соответствии с выбранным режимом.
11. Устройство по п. 10, в котором множество режимов включают в себя:
- режим перемещения, с предварительно определенной скоростью, виртуальной точкой обзора вдоль тракта для наблюдения, сверху, всей области, в которой может существовать объект,
- режим оценки направления перемещения виртуальной точки обзора, запрашиваемой посредством второго типа клиента, и перемещения виртуальной точки обзора в оцененном направлении перемещения,
- режим задания, в качестве цели мониторинга, предварительно установленной области, в которой качество объекта легко ухудшается, и перемещения виртуальной точки обзора в области с предварительно определенной скоростью, и
- режим перемещения виртуальной точки обзора в зависимости только от операции пользователем первого типа клиента.
12. Устройство по п. 9, в котором модуль передачи виртуальных точек обзора передает информацию, графически представляющую взаимосвязь между текущей виртуальной точкой обзора, запрашиваемой посредством второго типа клиента, и позицией и направлением виртуальной точки обзора, запоминаемыми в модуле запоминания.
13. Устройство по п. 11, в котором множество режимов включает в себя режим обнаружения, на основе распределения объектов, наименьшей области, включающей в себя объекты, и перемещения виртуальной точки обзора таким образом, чтобы наблюдать наименьшую область сверху.
14. Устройство по п. 9, дополнительно содержащее:
- модуль комбинирования, выполненный с возможностью формировать одно изображение посредством разделения области, в которой может существовать объект, на предварительно установленное число областей и комбинирования изображений с виртуальной точкой обзора для наблюдения соответствующих разделенных областей сверху,
- при этом, при выполнении передачи в первый тип клиента, модуль передачи изображений передает комбинированное изображение, полученное посредством модуля комбинирования.
15. Устройство по п. 9, в котором если информация виртуальных точек обзора, принимаемая из первого типа клиента, принимается, модуль формирования изображений оценивает присутствие/отсутствие анормальности в текущем изображении с виртуальной точкой обзора на основе максимальной яркости, средней яркости и минимальной яркости компонентов яркости в изображениях с виртуальной точкой обзора, сформированных от предварительно установленного предыдущего времени до текущего времени, и формирует, если анормальность оценивается, изображение с виртуальной точкой обзора, дополненное информацией, указывающей то, что оценивается анормальность.
16. Способ управления для устройства обработки информации, содержащий этапы, на которых:
- формируют изображение с виртуальной точкой обзора в соответствии с позицией и/или направлением в зоне прямой видимости точки обзора; и
- отправляют уведомление касательно информации относительно качества сформированного изображения с виртуальной точкой обзора.
17. Энергонезависимый машиночитаемый носитель хранения данных, сохраняющий программу, которая, при выполнении посредством компьютера, инструктирует компьютеру выполнять:
- формирование изображения с виртуальной точкой обзора в соответствии с позицией и/или направлением в зоне прямой видимости точки обзора; и
- отправку уведомления касательно информации относительно качества сформированного изображения с виртуальной точкой обзора.
RU2018119471A 2017-06-12 2018-05-28 Устройство обработки информации, устройство формирования изображений, способы управления для них и энергонезависимый машиночитаемый носитель хранения данных RU2718413C2 (ru)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017115406A JP6924079B2 (ja) 2017-06-12 2017-06-12 情報処理装置及び方法及びプログラム
JP2017-115406 2017-06-12

Publications (3)

Publication Number Publication Date
RU2018119471A3 RU2018119471A3 (ru) 2019-12-04
RU2018119471A true RU2018119471A (ru) 2019-12-04
RU2718413C2 RU2718413C2 (ru) 2020-04-02

Family

ID=62495539

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2018119471A RU2718413C2 (ru) 2017-06-12 2018-05-28 Устройство обработки информации, устройство формирования изображений, способы управления для них и энергонезависимый машиночитаемый носитель хранения данных

Country Status (5)

Country Link
US (1) US10917621B2 (ru)
EP (1) EP3416137A1 (ru)
JP (1) JP6924079B2 (ru)
BR (1) BR102018010906A2 (ru)
RU (1) RU2718413C2 (ru)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210134049A1 (en) * 2017-08-08 2021-05-06 Sony Corporation Image processing apparatus and method
JP2020010300A (ja) * 2018-07-12 2020-01-16 キヤノン株式会社 映像生成装置、映像生成装置の制御方法及びプログラム
JP7233867B2 (ja) * 2018-07-20 2023-03-07 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
KR102543228B1 (ko) * 2018-10-18 2023-06-13 삼성전자주식회사 포터블 장치 및 그 제어방법
JP7403956B2 (ja) 2019-02-27 2023-12-25 キヤノン株式会社 情報処理装置、制御方法、及びプログラム
JP7341674B2 (ja) * 2019-02-27 2023-09-11 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
US11057609B2 (en) * 2019-02-27 2021-07-06 Canon Kabushiki Kaisha Information processing apparatus, information processing method, and computer readable storage medium for determining a moving path of virtual viewpoint
CN111698548B (zh) * 2019-03-12 2021-05-28 杭州海康威视***技术有限公司 一种视频播放方法及装置
JP7401196B2 (ja) 2019-05-23 2023-12-19 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム
EP3996052B1 (en) * 2019-07-02 2024-05-08 Sony Group Corporation Information processing system, information processing method, and program
JP7291224B2 (ja) * 2019-07-26 2023-06-14 富士フイルム株式会社 情報処理装置、情報処理方法、及びプログラム
JP7418101B2 (ja) * 2019-07-26 2024-01-19 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム
JP7471784B2 (ja) 2019-08-21 2024-04-22 キヤノン株式会社 提供装置、制御方法、及び、プログラム
JP7423974B2 (ja) * 2019-10-21 2024-01-30 株式会社Ｊｖｃケンウッド 情報処理システム、情報処理方法及びプログラム
JP2021086189A (ja) * 2019-11-25 2021-06-03 キヤノン株式会社 情報処理装置、情報処理方法、映像処理システム、およびプログラム
WO2021117482A1 (ja) * 2019-12-09 2021-06-17 ソニーグループ株式会社 情報処理装置および方法、プログラム、並びに、情報処理システム
WO2021131375A1 (ja) * 2019-12-26 2021-07-01 富士フイルム株式会社 情報処理装置、情報処理方法、及びプログラム
JP7322191B2 (ja) * 2020-01-22 2023-08-07 富士フイルム株式会社 情報処理装置、情報処理方法、及びプログラム
CN115004237A (zh) * 2020-01-23 2022-09-02 索尼集团公司 信息处理装置、信息处理方法以及程序
JP2022014358A (ja) * 2020-07-06 2022-01-19 キヤノン株式会社 情報処理装置、情報処理装置の制御方法およびプログラム
US12028507B2 (en) * 2021-03-11 2024-07-02 Quintar, Inc. Augmented reality system with remote presentation including 3D graphics extending beyond frame
JP2022182119A (ja) * 2021-05-27 2022-12-08 キヤノン株式会社 画像処理装置およびその制御方法、プログラム

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06331728A (ja) * 1993-05-19 1994-12-02 Toshiba Corp レーダ信号処理装置
JP3650349B2 (ja) 2001-08-17 2005-05-18 株式会社ブレインズ 画像伝送装置
CA2620761C (en) * 2004-08-30 2016-05-10 Trace Optic Technologies Pty Ltd. A method and apparatus of camera control
JP2008527806A (ja) 2005-01-03 2008-07-24 ブミー インコーポレイテッド 夜間監視のシステムおよび方法
CN100383769C (zh) 2005-06-17 2008-04-23 杭州波导软件有限公司 一种电脑接收带摄像头手机输入视频数据的方法及***
US8106924B2 (en) * 2008-07-31 2012-01-31 Stmicroelectronics S.R.L. Method and system for video rendering, computer program product therefor
US9167134B2 (en) * 2010-03-30 2015-10-20 Panasonic Intellectual Property Managment Co., Ltd. Imaging control device, immersion position information generation device, imaging control method, immersion position information generation method
JP2011212347A (ja) * 2010-03-31 2011-10-27 Namco Bandai Games Inc プログラム、情報記憶媒体、端末及びネットワークシステム
JP5562103B2 (ja) * 2010-04-16 2014-07-30 キヤノン株式会社 画像処理装置および方法
JP2012120031A (ja) * 2010-12-02 2012-06-21 Canon Inc 映像処理装置及びその制御方法
JP2012142860A (ja) * 2011-01-05 2012-07-26 Canon Inc 任意視点映像処理装置及びその制御方法、及びプログラム
JP5697512B2 (ja) * 2011-03-31 2015-04-08 富士通テン株式会社 画像生成装置、画像表示システム及び画像表示装置
JP2013009274A (ja) * 2011-06-27 2013-01-10 Canon Inc 画像処理装置および画像処理方法、プログラム
JP2013038602A (ja) * 2011-08-08 2013-02-21 Sony Corp 画像処理装置、および画像処理方法、並びにプログラム
JP2014215828A (ja) 2013-04-25 2014-11-17 シャープ株式会社 画像データ再生装置、および視点情報生成装置
JP6349637B2 (ja) * 2013-07-11 2018-07-04 株式会社デンソー 車両用画像合成装置
US9799110B2 (en) * 2013-07-29 2017-10-24 Jfe Steel Corporation Abnormality detection method and blast furnace operation method
JP6250993B2 (ja) * 2013-09-11 2017-12-20 株式会社東芝 センサ情報管理装置、センサ情報管理方法
JP6309749B2 (ja) * 2013-12-09 2018-04-11 シャープ株式会社 画像データ再生装置および画像データ生成装置
JP2015204512A (ja) * 2014-04-14 2015-11-16 パナソニックＩｐマネジメント株式会社 情報処理装置、情報処理方法、カメラ、受信装置、受信方法
JP6490349B2 (ja) * 2014-04-15 2019-03-27 株式会社日立国際電気 監視カメラシステム
CN106716244B (zh) * 2014-09-10 2019-05-03 富士胶片株式会社 摄影控制装置、摄影装置、摄影控制方法
US20160159281A1 (en) * 2014-12-04 2016-06-09 Hyundai Mobis Co., Ltd. Vehicle and control method thereof
US9672707B2 (en) 2015-03-12 2017-06-06 Alarm.Com Incorporated Virtual enhancement of security monitoring

Also Published As

Publication number Publication date
US20180359458A1 (en) 2018-12-13
RU2718413C2 (ru) 2020-04-02
US10917621B2 (en) 2021-02-09
EP3416137A1 (en) 2018-12-19
JP2019004229A (ja) 2019-01-10
BR102018010906A2 (pt) 2018-12-26
RU2018119471A3 (ru) 2019-12-04
JP6924079B2 (ja) 2021-08-25

Similar Documents

Publication Publication Date Title
RU2018119471A (ru) Устройство обработки информации, устройство формирования изображений, способы управления для них и энергонезависимый машиночитаемый носитель хранения данных
JP2018110398A5 (ru)
JP6983837B2 (ja) 複数のカメラからのビューを組み合わせる方法及びカメラシステム
US10116922B2 (en) Method and system for automatic 3-D image creation
JP2019004229A5 (ja) 情報処理装置及び方法及びプログラム
IL300597A (en) Systems and methods for eye examination
JP2017126142A5 (ja) 情報処理装置、端末装置、情報処理方法及びプログラム
JP6693509B2 (ja) 画像処理装置、画像処理方法、および画像処理システム
US20170201689A1 (en) Remotely controlled communicated image resolution
KR20120086795A (ko) 원격으로 증강현실 서비스를 공유하는 증강현실 시스템 및 그 방법
TWI672674B (zh) 深度處理系統
JP2016057814A5 (ru)
AU2018416431B2 (en) Head-mounted display and method to reduce visually induced motion sickness in a connected remote display
JP2015023416A5 (ja) 情報処理装置及びその制御方法、プログラム、並びに記憶媒体
JP2017529029A5 (ru)
JP2015156573A5 (ja) 撮像装置、通信機器、及び撮像方法
JP2020523668A5 (ru)
US20240193218A1 (en) Offloading slam processing to a remote device
JP2018015079A5 (ru)
US20150317522A1 (en) Appearance presentation system, method, and program
JP2013045144A5 (ru)
EP2957397A3 (en) Measurement system, object pickup system, measurement method, and carrier means
JP2015204546A5 (ru)
JP2014131200A5 (ru)
JP6941458B2 (ja) 監視システム