RU2013143314A - Захват и отображение изображений в реальном времени - Google Patents

Захват и отображение изображений в реальном времени Download PDF

Info

Publication number
RU2013143314A
RU2013143314A RU2013143314/07A RU2013143314A RU2013143314A RU 2013143314 A RU2013143314 A RU 2013143314A RU 2013143314/07 A RU2013143314/07 A RU 2013143314/07A RU 2013143314 A RU2013143314 A RU 2013143314A RU 2013143314 A RU2013143314 A RU 2013143314A
Authority
RU
Russia
Prior art keywords
pixels
image
additional
subset
direct observation
Prior art date
Application number
RU2013143314/07A
Other languages
English (en)
Other versions
RU2570354C2 (ru
Inventor
ГРОТ Арьян Виллем ДЕ
Original Assignee
Фотонис Незерлендс Б.В.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Фотонис Незерлендс Б.В. filed Critical Фотонис Незерлендс Б.В.
Publication of RU2013143314A publication Critical patent/RU2013143314A/ru
Application granted granted Critical
Publication of RU2570354C2 publication Critical patent/RU2570354C2/ru

Links

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/12—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices with means for image conversion or intensification
    • G02B23/125—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices with means for image conversion or intensification head-mounted
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/296—Synchronisation thereof; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/20—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only
    • H04N23/23—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only from thermal infrared radiation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/53—Control of the integration time
    • H04N25/531—Control of the integration time by controlling rolling shutters in CMOS SSIS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/30—Transforming light or analogous information into electric information
    • H04N5/33—Transforming infrared radiation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Toxicology (AREA)
  • Health & Medical Sciences (AREA)
  • Optics & Photonics (AREA)
  • General Physics & Mathematics (AREA)
  • Astronomy & Astrophysics (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Measurement Of Radiation (AREA)
  • Studio Devices (AREA)
  • Camera Bodies And Camera Details Or Accessories (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

1. Система (100, 200, 300) непосредственного наблюдения, скомпонованная для захвата и отображения изображений в реальном времени, при этом система непосредственного наблюдения содержит i) датчик (110) изображения, содержащий чувствительную к излучению матрицу (120) для захвата изображения (142), ii) схему (140) считывания, подключенную к чувствительной к излучению матрице для считывания изображения, iii) процессор (160, 260) сигналов для обработки изображения, для получения обработанного изображения (162, 262) и iv) устройство (180) отображения для отображения обработанного изображения, при этом чувствительная к излучению матрица скомпонована строками пикселей (122) датчика и устройство отображения скомпоновано строками пикселей (182) устройства отображения, и в котором:- схема считывания представляет собой схему скользящего затвора для последовательного считывания строк пикселей датчика, для последовательного обеспечения поднаборов пикселей (124);- процессор сигналов сконфигурирован для, при наличии одного из поднаборов пикселей, обработки поднабора пикселей для обеспечения обработанного поднабора пикселей; и- устройство отображения сконфигурировано для, при наличии обработанного поднабора пикселей, отображения обработанного поднабора пикселей на соответствующем ему поднаборе пикселей (184) устройства отображения, для отображения обработанного изображения последовательно на строках пикселей устройства отображения.2. Система (200, 300) непосредственного наблюдения по п.1, где система непосредственного наблюдения содержит дополнительный датчик (210) изображения и дополнительную схему (240) считывания, при этом дополнительный датчик изоб

Claims (15)

1. Система (100, 200, 300) непосредственного наблюдения, скомпонованная для захвата и отображения изображений в реальном времени, при этом система непосредственного наблюдения содержит i) датчик (110) изображения, содержащий чувствительную к излучению матрицу (120) для захвата изображения (142), ii) схему (140) считывания, подключенную к чувствительной к излучению матрице для считывания изображения, iii) процессор (160, 260) сигналов для обработки изображения, для получения обработанного изображения (162, 262) и iv) устройство (180) отображения для отображения обработанного изображения, при этом чувствительная к излучению матрица скомпонована строками пикселей (122) датчика и устройство отображения скомпоновано строками пикселей (182) устройства отображения, и в котором:
- схема считывания представляет собой схему скользящего затвора для последовательного считывания строк пикселей датчика, для последовательного обеспечения поднаборов пикселей (124);
- процессор сигналов сконфигурирован для, при наличии одного из поднаборов пикселей, обработки поднабора пикселей для обеспечения обработанного поднабора пикселей; и
- устройство отображения сконфигурировано для, при наличии обработанного поднабора пикселей, отображения обработанного поднабора пикселей на соответствующем ему поднаборе пикселей (184) устройства отображения, для отображения обработанного изображения последовательно на строках пикселей устройства отображения.
2. Система (200, 300) непосредственного наблюдения по п.1, где система непосредственного наблюдения содержит дополнительный датчик (210) изображения и дополнительную схему (240) считывания, при этом дополнительный датчик изображения содержит дополнительную чувствительную к излучению матрицу (220) для захвата дополнительного изображения (242), дополнительная схема считывания подключена к дополнительной чувствительной к излучению матрице для считывания дополнительного изображения, дополнительная чувствительная к излучению матрица скомпонована строками пикселей (222) дополнительного датчика, дополнительная схема считывания представляет собой дополнительную схему скользящего затвора для последовательного считывания строк пикселей дополнительного датчика, для последовательного обеспечения дополнительных поднаборов пикселей (224), и при этом система непосредственного наблюдения сконфигурирована для синхронного отображения изображения (142) и дополнительного изображения на устройстве (180) отображения с помощью:
- схемы (140) скользящего затвора и дополнительной схемы скользящего затвора, сконфигурированных для синхронного обеспечения поднабора пикселей (124) и одного из дополнительных поднаборов пикселей путем по существу синхронного считывания соответствующих участков изображения и дополнительного изображения; и
- процессора (260) сигналов, сконфигурированного для, при наличии поднабора пикселей и дополнительного поднабора пикселей, объединения поднабора пикселей с дополнительным поднабором пикселей для получения обработанного поднабора пикселей.
3. Система (200, 300) непосредственного наблюдения по п.2, в которой датчик (110) изображения представляет собой датчик изображения в видимом свете для восприятия видимого света (112) и дополнительный датчик (210) изображения представляет собой тепловой датчик изображения для восприятия инфракрасного излучения (212), чтобы сделать возможным синхронное отображение изображения (142) в видимом свете и теплового изображения (242) на устройстве (180) отображения.
4. Система (200, 300) непосредственного наблюдения по любому из пп. 2-3, в которой процессор (260) сигналов сконфигурирован для объединения поднабора пикселей (124) с дополнительным поднабором пикселей (224) путем слияния поднабора пикселей с дополнительным поднабором пикселей для получения в качестве обработанного изображения (262) слияния изображений изображения (142) с дополнительным изображением (242).
5. Система (200, 300) непосредственного наблюдения по п.2, в которой чувствительная к излучению матрица (120) имеет первое пространственное разрешение, дополнительная чувствительная к излучению матрица (220) имеет второе пространственное разрешение, при этом второе пространственное разрешение ниже, чем первое пространственное разрешение, и дополнительная схема (240) скользящего затвора сконфигурирована для считывания дополнительного изображения (242) со второй скоростью считывания, которая ниже, чем первая скорость считывания схемы (140) скользящего затвора, для обеспечения возможности упомянутого синхронного обеспечения поднабора пикселей (124) и дополнительного поднабора пикселей (224).
6. Система (200, 300) непосредственного наблюдения по п.5, в которой схема (140) скользящего затвора сконфигурирована для считывания изображения (142) с первой скоростью считывания в пределах периода (Ti) кадра изображения и дополнительная схема (240) скользящего затвора сконфигурирована для считывания дополнительного изображения (242) со второй скоростью считывания в пределах периода кадра изображения.
7. Система (200, 300) непосредственного наблюдения по п.5, в которой схема (140) скользящего затвора синхронизирована с первой частотой следования пикселей для обеспечения первой скорости считывания и дополнительная схема (240) скользящего затвора синхронизирована с второй частотой следования пикселей для обеспечения второй скорости считывания.
8. Система (200, 300) непосредственного наблюдения по п.5, где система непосредственного наблюдения содержит блок (250) масштабирования для пространственного масштабирования дополнительного поднабора пикселей (224), для обеспечения в качестве дополнительного изображения (242) масштабированного изображения (252), имеющего первое пространственное разрешение.
9. Система (200, 300) непосредственного наблюдения по п.8, в которой блок (250) масштабирования сконфигурирован для выполнения пространственного масштабирования с использованием по меньшей мере одного способа из группы способов: повторения пикселей, линейной интерполяции первого порядка, линейной интерполяции высокого порядка и нелинейной интерполяции.
10. Система (100, 200, 300) непосредственного наблюдения по любому из пп. 1-3, 5-9, в которой процессор (160, 260) сигналов содержит конвейер обработки изображения для получения конвейерной обработки поднаборов пикселей (124).
11. Система (100, 200, 300) непосредственного наблюдения по любому из пп. 1-3, 5-9, в которой схема (140) скользящего затвора сконфигурирована для считывания изображения (142) с первой скоростью считывания и где система непосредственного наблюдения сконфигурирована для задания первой скорости считывания в зависимости от количества излучения (112), падающего на чувствительную к излучению матрицу (120).
12. Система (100, 200, 300) непосредственного наблюдения по любому из пп. 1-3, 5-9, где система непосредственного наблюдения содержит усилитель изображения для обеспечения усиленного видимого света к датчику (110) изображения.
13. Применение системы (100, 200, 300) непосредственного наблюдения по любому из приведенных выше пп. в шлеме, крепеже на голову, винтовочном прицеле или карманном устройстве.
14. Способ (300) захвата и отображения изображений в реальном времени системой непосредственного наблюдения, при этом система непосредственного наблюдения содержит i) датчик изображения, содержащий чувствительную к излучению матрицу для захвата изображения, ii) схему считывания, подключенную к чувствительной к излучению матрице для считывания изображения, iii) процессор сигналов для обработки изображения, для получения обработанного изображения и iv) устройство отображения для отображения обработанного изображения, при этом чувствительная к излучению матрица скомпонована строками пикселей датчика и устройство отображения скомпоновано строками пикселей устройства отображения, и при этом способ содержит этапы, на которых:
- последовательно считывают (340) строки пикселей датчика с помощью схемы считывания для последовательного обеспечения поднаборов пикселей;
- при наличии одного из поднаборов пикселей обрабатывают (360) поднабор пикселей с помощью процессора сигналов для обеспечения обработанного поднабора пикселей; и
- при наличии обработанного поднабора пикселей отображают (380) обработанный поднабор пикселей с помощью устройства отображения, на соответствующем ему поднаборе пикселей устройства отображения, для отображения обработанного изображения последовательно на строках пикселей устройства отображения.
15. Считываемый компьютером носитель (400), содержащий инструкции для побуждения процессорной системы к выполнению способа по п.14.
RU2013143314/07A 2011-02-25 2011-02-25 Захват и отображение изображений в реальном времени RU2570354C2 (ru)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/EP2011/052853 WO2012113459A1 (en) 2011-02-25 2011-02-25 Acquiring and displaying images in real-time

Publications (2)

Publication Number Publication Date
RU2013143314A true RU2013143314A (ru) 2015-03-27
RU2570354C2 RU2570354C2 (ru) 2015-12-10

Family

ID=44625386

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2013143314/07A RU2570354C2 (ru) 2011-02-25 2011-02-25 Захват и отображение изображений в реальном времени

Country Status (13)

Country Link
US (1) US9787918B2 (ru)
EP (1) EP2679000B1 (ru)
JP (1) JP5925812B2 (ru)
KR (1) KR101711097B1 (ru)
CN (1) CN103392335B (ru)
AU (1) AU2011359859B2 (ru)
BR (1) BR112013021410A2 (ru)
CA (1) CA2826675C (ru)
IL (1) IL227845A (ru)
MY (1) MY165813A (ru)
RU (1) RU2570354C2 (ru)
SG (1) SG192767A1 (ru)
WO (1) WO2012113459A1 (ru)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5929712B2 (ja) * 2012-11-06 2016-06-08 セイコーエプソン株式会社 撮影装置、撮影装置の制御方法
US9307161B2 (en) 2014-01-10 2016-04-05 Qualcomm Incorporated System and method for capturing digital images using multiple short exposures
FR3020735B1 (fr) * 2014-04-30 2017-09-15 Ulis Procede de traitement d'une image infrarouge pour une correction des non uniformites
US11024082B2 (en) * 2015-05-04 2021-06-01 Google Llc Pass-through display of captured imagery
JP2018121092A (ja) 2015-05-28 2018-08-02 株式会社ジャパンディスプレイ 撮像表示システム
US20170094190A1 (en) * 2015-09-30 2017-03-30 Microsoft Technology Licensing, Llc Processing display of digital camera readout with minimal latency
US10432840B2 (en) * 2015-10-08 2019-10-01 L-3 Communication-Insight Technology Division Fusion night vision system
KR102425895B1 (ko) * 2015-12-24 2022-07-27 삼성전자주식회사 전자장치의 데이터 동기 장치 및 방법
JP6645949B2 (ja) * 2016-11-01 2020-02-14 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置、情報処理システム、および情報処理方法
CN106449716B (zh) 2016-11-11 2021-11-26 京东方科技集团股份有限公司 显示面板及其制作方法、显示设备
CN106653802B (zh) * 2016-11-11 2019-07-30 京东方科技集团股份有限公司 显示面板及其制作方法、显示设备
CN107800978B (zh) * 2017-10-26 2020-05-12 天津大学 异步复位同步读出的pwm像素架构
US10768047B2 (en) * 2018-02-15 2020-09-08 Viavi Solutions Inc. Sensor device and methods of use
CN111372038B (zh) * 2018-12-26 2021-06-18 厦门星宸科技有限公司 多串流影像处理装置及方法
CN110392149A (zh) 2019-07-23 2019-10-29 华为技术有限公司 图像摄取显示终端
KR102502153B1 (ko) * 2020-10-23 2023-02-20 조선대학교산학협력단 콘크리트 강도 측정시스템 및 측정방법

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4797751A (en) 1985-06-19 1989-01-10 Yamaguchi Cinema Corporation Electronic camera apparatus for recording and reproducing moving object images
JPH09247519A (ja) * 1996-03-08 1997-09-19 Sony Corp 撮像装置
US6282462B1 (en) 1996-06-28 2001-08-28 Metrovideo Inc. Image acquisition system
US6560029B1 (en) * 2001-12-21 2003-05-06 Itt Manufacturing Enterprises, Inc. Video enhanced night vision goggle
US20030222987A1 (en) 2002-05-30 2003-12-04 Karazuba Paul M. Line scan image recording device with internal system for delaying signals from multiple photosensor arrays
JP4189252B2 (ja) * 2003-04-02 2008-12-03 パナソニック株式会社 画像処理装置及びカメラ
US7112774B2 (en) * 2003-10-09 2006-09-26 Avago Technologies Sensor Ip (Singapore) Pte. Ltd CMOS stereo imaging system and method
JP2005159596A (ja) * 2003-11-25 2005-06-16 Mega Chips Corp デジタルカメラ
KR100594236B1 (ko) * 2003-12-30 2006-06-30 삼성전자주식회사 프레임 메모리 버퍼 없이 영상신호처리를 가능하게 하는고체 촬상 소자 및 그 구동 방법
US7538326B2 (en) * 2004-12-03 2009-05-26 Fluke Corporation Visible light and IR combined image camera with a laser pointer
US7121036B1 (en) * 2004-12-23 2006-10-17 Raytheon Company Method and apparatus for safe operation of an electronic firearm sight depending upon the detection of a selected color
JP4561353B2 (ja) 2004-12-24 2010-10-13 日産自動車株式会社 映像信号処理装置とその方法及び車載カメラシステム
US7969462B2 (en) 2005-03-30 2011-06-28 L-3 Communications Corporation Digitally enhanced night vision device
US7428378B1 (en) * 2005-07-29 2008-09-23 Pure Digital Technologies, Inc. Controlling an exposure time for digital cameras
JP4795813B2 (ja) * 2006-02-23 2011-10-19 クラリオン株式会社 車両周囲監視装置
JP4867552B2 (ja) * 2006-09-28 2012-02-01 株式会社ニコン 撮像装置
JP5105907B2 (ja) * 2007-03-06 2012-12-26 キヤノン株式会社 撮像システム
JP2008252331A (ja) 2007-03-29 2008-10-16 Victor Co Of Japan Ltd デジタル監視システム
KR101409769B1 (ko) 2007-08-01 2014-06-19 삼성전자주식회사 영상 데이터 처리 장치 및 그의 영상 데이터 처리 방법
RU2389154C1 (ru) * 2008-11-01 2010-05-10 Вячеслав Михайлович Смелков Устройство панорамного телевизионного наблюдения
JP2010134743A (ja) * 2008-12-05 2010-06-17 Panasonic Corp 画像処理装置
JP2010154171A (ja) * 2008-12-25 2010-07-08 Olympus Imaging Corp 撮像装置および撮像方法
CN101459829B (zh) 2008-12-25 2011-05-04 杭州恒生数字设备科技有限公司 一种低延迟的全数字监控***
US8994837B2 (en) * 2010-11-26 2015-03-31 Intel Mobile Communications GmbH Image processing devices and image processing methods of moving objects

Also Published As

Publication number Publication date
CA2826675C (en) 2018-04-10
AU2011359859B2 (en) 2016-06-16
AU2011359859A1 (en) 2013-08-29
SG192767A1 (en) 2013-09-30
MY165813A (en) 2018-04-27
IL227845A0 (en) 2013-09-30
EP2679000A1 (en) 2014-01-01
CA2826675A1 (en) 2012-08-30
JP5925812B2 (ja) 2016-05-25
CN103392335B (zh) 2017-06-13
JP2014511606A (ja) 2014-05-15
KR20140008415A (ko) 2014-01-21
KR101711097B1 (ko) 2017-02-28
WO2012113459A1 (en) 2012-08-30
EP2679000B1 (en) 2016-11-02
BR112013021410A2 (pt) 2016-10-25
RU2570354C2 (ru) 2015-12-10
IL227845A (en) 2017-03-30
CN103392335A (zh) 2013-11-13
US20130314546A1 (en) 2013-11-28
US9787918B2 (en) 2017-10-10

Similar Documents

Publication Publication Date Title
RU2013143314A (ru) Захват и отображение изображений в реальном времени
JP2012058093A5 (ru)
JP2014086862A5 (ru)
EP2569934A4 (en) IMAGING APPARATUS, IMAGE PROCESSING METHOD AND RECORDING MEDIUM FOR RECORDING A PROGRAM THEREFOR
JP2010107770A5 (ru)
JP2011244058A5 (ru)
EP2608555A3 (en) Product imaging device, product imaging method, image coversion device, image processing device, image processing system, program, and information recording medium
JP2006285787A5 (ru)
JP2012249070A5 (ru)
EP2461571A3 (en) Image capture apparatus
EP2635031A3 (en) Systems and methods for image processing
WO2009001685A1 (ja) 撮像表示方法および撮像表示装置
CA2909761C (en) Imaging apparatus and method
JP2013258586A5 (ru)
JP2012159781A5 (ja) 制御装置、表示制御方法、およびプログラム
PH12014501715A1 (en) A device for imaging, recording and saving thermographic image, a system of three liquid crystal matrices used by this device and its application for the detection of thermal anomalies, and a method of diagnosing of these anomalies
CN103412141B (zh) 一种基于机器视觉的葡萄新梢生长速率测量***及方法
JP2014026062A5 (ru)
WO2013066457A3 (en) Blur-calibration system for electro-optical sensors and method using a moving multi-focal multi-target constellation
JP2009171161A5 (ru)
JP2018207415A5 (ru)
JP2013065971A5 (ru)
JP2015080169A5 (ru)
Bieszczad et al. Image processing module for high-speed thermal camera with cooled detector
CN102494674B (zh) 暗弱空间碎片高精度定位方法

Legal Events

Date Code Title Description
MM4A The patent is invalid due to non-payment of fees

Effective date: 20180226