CN106063260A - 视频处理器、视频处理器的工作方法 - Google Patents

视频处理器、视频处理器的工作方法 Download PDF

Info

Publication number
CN106063260A
CN106063260A CN201580011974.2A CN201580011974A CN106063260A CN 106063260 A CN106063260 A CN 106063260A CN 201580011974 A CN201580011974 A CN 201580011974A CN 106063260 A CN106063260 A CN 106063260A
Authority
CN
China
Prior art keywords
picture signal
signal
image
clock
video processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580011974.2A
Other languages
English (en)
Other versions
CN106063260B (zh
Inventor
须藤贤
长谷宪多朗
横内理人
小峰仁
河野秀太郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of CN106063260A publication Critical patent/CN106063260A/zh
Application granted granted Critical
Publication of CN106063260B publication Critical patent/CN106063260B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/156Mixing image signals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00Stereoscopic photography
    • G03B35/08Stereoscopic photography by simultaneous recording
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/005Adapting incoming signals to the display format of the display terminal
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006Details of the interface to the display terminal
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006Details of the interface to the display terminal
    • G09G5/008Clock recovery
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G09G5/026Control of mixing and/or overlay of colours in general
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/363Graphics controllers
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39Control of the bit-mapped memory
    • G09G5/391Resolution modifying circuits, e.g. variable screen formats
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/139Format conversion, e.g. of frame-rate or size
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/167Synchronising or controlling image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/20Pc systems
    • G05B2219/23Pc programming
    • G05B2219/23167Display of selected sequence, permissable sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10132Ultrasound image
    • G06T2207/101363D ultrasound image
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/14Solving problems related to the presentation of information to be displayed
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/08Power processing, i.e. workload management for processors involved in display operations, such as CPUs or GPUs
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/08Biomedical applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074Stereoscopic image analysis
    • H04N2013/0096Synchronisation or controlling aspects

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Surgery (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Data Mining & Analysis (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Human Computer Interaction (AREA)
  • Veterinary Medicine (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Endoscopes (AREA)

Abstract

视频处理器具有:判定部(12),其对输入图像信号是2D/3D图像信号中的哪个进行判定;LR合成部(15),其在判定为是3D图像信号的情况下,合成左右图像信号而作为合成图像信号输出,在判定为是2D图像信号的情况下,将2D图像信号嵌入于左右图像信号中的一方而作为合成图像信号输出;以及图像处理部(16),其以3D图像信号的时钟的两倍以上的图像处理时钟对合成图像信号进行图像处理。

Description

视频处理器、视频处理器的工作方法
技术领域
本发明涉及对包含左图像信号和右图像信号在内的3D图像信号进行图像处理的视频处理器、视频处理器的工作方法。
背景技术
近年来,提出了能够进行立体观察的3D内窥镜并实现了产品化。参照图6来说明对包含这样的3D内窥镜所取得的左图像信号和右图像信号在内的3D图像信号进行处理的视频处理器的一个结构例。
图6是示出现有的用于显示3D图像信号的视频处理器的结构例的框图。
在图6所示的结构例中,通过一个2D视频处理器90L对3D内窥镜所取得的左图像信号L进行处理,通过另一个2D视频处理器90R对右图像信号R进行处理,通过3D合成部99对处理后的左图像信号和右图像信号进行合成,由此,进行3D显示。
由于3D图像信号基本上是以高清晰度画质(HD:High Definition)拍摄的,因此,左图像信号L和右图像信号R以HD时钟(例如74MHz)被输入。对所输入的左图像信号L进行图像处理的2D视频处理器90L和对所输入的右图像信号R进行图像处理的2D视频处理器90R的内部结构没有差异,是能够处理高清晰度画质(HD)的2D图像信号的一般的视频处理器的结构。
即,2D视频处理器90L、90R具有:连接部91,其用于连接内窥镜;时钟转变部92,其将图像信号的时钟转换为用于进行图像处理等的时钟;图像处理部93,其进行图像处理;HD分辨率转换部94,其用于将图像信号的分辨率转换为HD图像信号的分辨率;时钟转变部95,其用于将图像信号的时钟转换为标准画质(SD:Standard Definition)时钟(例如13.5MHz);SD分辨率转换部96,其用于将图像信号的分辨率转换为SD图像信号的分辨率;HD增强部97,其用于对HD图像信号进行增强处理;以及SD增强部98,其用于对SD图像信号进行增强处理。
这样的2D视频处理器90L或90R在单独工作时,与2D的HD内窥镜连接并被输入2D-HD图像信号、或者与SD内窥镜(SD内窥镜基本上仅是2D用)连接并被输入SD图像信号。2D视频处理器90L或90R以HD时钟进行图像处理部93的图像处理以使得能够与HD图像信号对应。因此,时钟转变部92在输入了SD图像信号的情况下进行从SD时钟向HD时钟的转变,但在输入了HD图像信号的情况下不进行特别的时钟转变。由图像处理部93进行了图像处理后的图像信号在被作为HD图像信号输出给HD监视器的情况下,通过HD分辨率转换部94和HD增强部97进行处理,另一方面,在被作为SD图像信号输出给SD监视器的情况下,通过时钟转变部95进行向SD时钟的转变之后,通过SD分辨率转换部96和SD增强部98进行处理。这里,2D视频处理器90L或90R不论输入图像信号是2D-HD图像信号和SD图像信号中的哪个,都能够实现向HD监视器的HD图像信号输出和向SD监视器的SD图像信号输出这双方。
并且,在组合了2D视频处理器90L、90R并连接3D-HD内窥镜进行3D-HD图像信号的处理的情况下,在通过2D视频处理器90L对左图像信号进行了处理并通过2D视频处理器90R对右图像信号R进行了处理后,通过3D合成部99对2D视频处理器90L的HD增强部97所输出的左图像信号L和2D视频处理器90R的HD增强部97所输出的右图像信号R进行3D合成,由此,能够在3D-HD监视器上对3D图像信号进行显示。并且,即使在输入了3D-HD图像信号的情况下,如果将来自一方的HD增强部97的输出与HD监视器连接,则也能够将左图像信号L或右图像信号R的一方作为2D的HD图像信号进行观察,如果将来自一方的SD增强部98的输出与SD监视器连接,则也能够将左图像信号L或右图像信号R的一方作为2D的SD图像信号进行观察。
然而,在上述那样的现有的结构中,为了显示3D图像信号,需要两台能够处理HD图像信号的2D视频处理器,而且还需要用于对由两台2D视频处理器处理后的左图像信号L和右图像信号R进行3D合成的装置,因此,***的规模较大,价格变高。
本发明是鉴于上述情况而完成的,其目的在于,提供能够对2D图像信号和3D图像信号这双方进行处理的价格低廉的视频处理器和视频处理器的工作方法。
发明内容
用于解决课题的手段
本发明的某个方式的视频处理器具有:判定部,其对所输入的图像信号是包含左图像信号和右图像信号在内的3D图像信号还是2D图像信号进行判定;图像信号合成部,其在所述判定部判定为是所述3D图像信号的情况下,合成所述左图像信号和所述右图像信号而作为合成图像信号输出,在所述判定部判定为是所述2D图像信号的情况下,将该2D图像信号嵌入所述左图像信号和所述右图像信号中的一方而作为合成图像信号输出;以及图像处理部,其以所述3D图像信号的时钟的两倍以上的图像处理时钟对所述合成图像信号进行图像处理。
在本发明的某个方式的视频处理器的工作方法中,判定部对所输入的图像信号是包含左图像信号和右图像信号在内的3D图像信号还是2D图像信号进行判定,图像信号合成部在所述判定部判定为是所述3D图像信号的情况下,合成所述左图像信号和所述右图像信号而作为合成图像信号输出,在所述判定部判定为是所述2D图像信号的情况下,将该2D图像信号嵌入于所述左图像信号和所述右图像信号中的一方而作为合成图像信号输出,图像处理部以所述3D图像信号的时钟的两倍以上的图像处理时钟对所述合成图像信号进行图像处理。
附图说明
图1是示出本发明的实施方式1中的内窥镜***的结构的框图。
图2是示出上述实施方式1中的视频处理器的结构的框图。
图3是示出在上述实施方式1中LR合成部所合成的图像信号的例子的图。
图4是示出本发明的实施方式2中的视频处理器的结构的框图。
图5是示出在上述实施方式2中HD分辨率转换部所输出的HD图像信号的例子的图。
图6是示出现有的用于显示3D图像信号的视频处理器的结构例的框图。
具体实施方式
以下,参照附图对本发明的实施方式进行说明。
[实施方式1]
图1至图3是示出本发明的实施方式1的图,图1是示出内窥镜***的结构的框图。
该内窥镜***具有进行图像处理的视频处理器1。
该视频处理器1能够选择性地与拍摄标准画质(SD:Standard Definition)的图像信号(SD图像信号)的SD内窥镜2、拍摄2D的高清晰度画质(HD:High Definition)图像信号(HD图像信号)的HD内窥镜3以及拍摄3D的HD图像信号(由左图像信号L和右图像信号R构成的3D-HD图像信号)的3D-HD内窥镜4连接。这里,SD图像信号仅是2D的,因此是2D-SD图像信号,HD图像信号是指2D-HD图像信号。
并且,显示SD图像信号的SD监视器5、显示HD的2D图像信号的HD监视器6以及显示3D-HD图像信号的3D-HD监视器7能够与视频处理器1连接。另外,如果能够切换2D显示和3D显示,则也可以兼用作HD监视器6和3D-HD监视器7。并且,SD监视器5和HD监视器6也能够同时与视频处理器1连接。
接着,图2是示出视频处理器1的结构的框图。
视频处理器1具有连接部11、判定部12、时钟转变部13、时钟转变部14、LR合成部15、图像处理部16、图像信号分割部17、时钟转变部18、时钟转变部19、HD分辨率转换部21、HD/SD分辨率转换部22、HD增强部23以及HD/SD增强部24。
连接部11选择性地与SD内窥镜2、HD内窥镜3或者3D-HD内窥镜4连接。
判定部12对与连接部11连接的内窥镜是SD内窥镜2、HD内窥镜3以及3D-HD内窥镜4中的哪个(因此,所输入的图像信号是包含左图像信号L和右图像信号R在内的3D图像信号还是2D图像信号)进行判定,并输出2D连接(更详细而言,SD连接或HD连接)或3D连接(3D-HD连接)的判定结果。
时钟转变部13将经由连接部11输入的图像信号的时钟转换为用于进行图像处理等的时钟。这里,假设SD图像信号的时钟是例如13.5MHz,HD图像信号的时钟不论2D图像信号、左图像信号L、右图像信号R中的哪个图像信号都是例如74MHz。与此相对,本实施方式中的图像处理部16以74MHz两倍的148MHz的图像处理时钟进行工作使得能够对左图像信号L和右图像信号R这双方进行处理(因此,能够对像素数比左图像信号L和右图像信号R合起来少的SD图像信号和2D的HD图像信号中的任意图像信号进行处理)。因此,不论所输入的图像信号是SD图像信号、2D的HD图像信号以及左图像信号L中的哪个,时钟转变部13都将时钟转换为图像处理时钟(例如148MHz)。
时钟转变部14基本上发挥与时钟转变部13相同的功能,但是,3D图像信号是LR两通道输入,而2D图像信号是一通道输入。因此,如果假设2D图像信号的时钟转变由时钟转变部13进行,则该时钟转变部14仅在输入了右图像信号R时将右图像信号R的时钟转换为图像处理时钟(例如148MHz)。
LR合成部15在判定部12的判定结果是3D连接时(即,所输入的图像信号是3D图像信号时),合成左图像信号L和右图像信号R而作为合成图像信号(这里是LR合成图像信号)输出。这里,图3是示出LR合成部15所合成的图像信号的例子的图。在该图3所示的例子中,LR合成部15根据1920×1080i的左图像信号L和1920×1080i的右图像信号R制成4400×1125i(帧速:59.94Hz)或5280×1125i(帧速:50Hz)的所谓并列(side by side)方式的LR合成图像信号(但是,当然也可以使用其他方式制成LR合成图像信号)。
另一方面,LR合成部15在判定部12的判定结果是2D连接时(即,所输入的图像信号是2D图像信号(SD图像信号或2D的HD图像信号)时),通过将所输入的2D图像信号嵌入左图像信号L和右图像信号R中的一方(例如,与图3中的左图像信号L相当的位置)来制成合成图像信号。
图像处理部16以3D图像信号的时钟的两倍以上的图像处理时钟(例如148MHz)对LR合成部15所输出的合成图像信号进行图像处理。该图像处理适当包含光学黑相减处理、白平衡处理、同时化处理、去噪处理、边缘强调处理、伽马转换处理等一般的图像处理。
图像信号分割部17将进行了图像处理后的合成图像信号分割为左图像信号L和右图像信号R。
即,图像信号分割部17在判定部12的判定结果是3D连接时,将通过图像处理部16进行图像处理后的LR合成图像信号分割为左图像信号L和右图像信号R,分别将左图像信号L输出给时钟转变部18,将右图像信号R输出给时钟转变部19。
并且,图像信号分割部17在判定部12的判定结果是2D连接时,将通过图像处理部16进行了图像处理后的合成图像信号分割为左图像信号L和右图像信号R,将包含SD图像信号或2D的HD图像信号在内的左图像信号L输出给时钟转变部18和时钟转变部19。此时,输出给时钟转变部18的左图像信号L在后段作为HD图像信号被输出,输出给时钟转变部19的左图像信号L在后段作为SD图像信号被输出。
时钟转变部18将从图像信号分割部17接收到的图像信号的时钟从图像处理时钟(例如148MHz)转换为HD时钟(例如74MHz)。
另一方面,时钟转变部19在判定部12的判定结果是3D连接时,将从图像信号分割部17接收到的图像信号的图像处理时钟(例如148MHz)转换为HD时钟(例如74MHz),在判定部12的判定结果是2D连接时,将该图像处理时钟(例如148MHz)转换为SD时钟(例如13.5MHz)。
HD分辨率转换部21将图像信号的分辨率转换为作为输出监视器的HD监视器6或3D-HD监视器7的显示分辨率。在HD图像信号中存在例如全分辨率和比全分辨率低的分辨率等多种分辨率。因此,该HD分辨率转换部21不仅在输入图像信号是SD图像信号的情况下进行分辨率转换,也在输入图像信号是HD图像信号的情况下根据需要进行分辨率转换。
这样,时钟转变部18和HD分辨率转换部21构成如下的高清晰度转换部:对被图像信号分割部17分割后的左图像信号L和右图像信号R中的一方或者嵌入于该一方(例如,左图像信号L)的2D图像信号进行向3D图像信号的时钟的高清晰度图像信号的分辨率转换。
HD/SD分辨率转换部22在判定部12的判定结果是3D连接时,将图像信号的分辨率转换为作为输出监视器的3D-HD监视器7的显示分辨率,在判定部12的判定结果是2D连接时,将图像信号的分辨率转换为作为输出监视器的SD监视器5的显示分辨率。
这样,时钟转变部19和HD/SD分辨率转换部22构成如下的标准画质转换部:在判定部12判定为是3D图像信号的情况下,对被图像信号分割部17分割后的左图像信号L和右图像信号R中的另一方进行向3D图像信号的时钟的高清晰度图像信号的分辨率转换,在判定部12判定为是2D图像信号的情况下,对嵌入于一方(例如,左图像信号L)的2D图像信号进行向标准画质图像的时钟的该标准画质图像的分辨率转换。
HD增强部23对HD分辨率转换部21所输出的HD图像信号进行HD用的增强处理。
HD/SD增强部24在判定部12的判定结果是3D连接时,对从HD/SD分辨率转换部22输出的HD图像信号进行HD用的增强处理,在判定部12的判定结果是2D连接时,对从HD/SD分辨率转换部22输出的SD图像信号进行SD用的增强处理。
根据上述那样的结构的视频处理器1,来自HD增强部23的输出和来自HD/SD增强部24的输出的组合在3D连接时为(左图像信号L、右图像信号R),在2D连接时为(HD图像信号、SD图像信号)。
在图6所示的现有的结构中,为了显示3D图像信号而需要左图像信号L用和右图像信号R用这两个图像处理部93,与此相对,根据这样的实施方式1,能够仅使用一个图像处理部16进行处理,简化了结构,从而能够以低廉的价格提供对2D图像信号和3D图像信号这双方进行处理的视频处理器。
而且,在图6所示的现有的结构中需要两台视频处理器,与此相对,根据本实施方式,使用一台视频处理器即可,因此,简化了内窥镜***的结构,还能够降低***整体的价格。
并且,由于在图6所示的现有的结构中具有两个来自HD增强部97的输出和两个来自SD增强部98的输出共计四个***的输出,因此,在连接了SD内窥镜2、HD内窥镜3、3D-HD内窥镜4中的任意内窥镜时,都有可能成为哪个输出***没有被使用的状态。例如,在连接了3D-HD内窥镜4时,两个SD增强部98的输出***没有被使用,在连接了SD内窥镜2或HD内窥镜3时,一个HD增强部97的输出***和一个SD增强部98的输出***没有被使用等。与此相对,根据本实施方式的结构,能够降低这种输出***的浪费。
此外,在图6所示的现有的结构中,由于在连接SD内窥镜2或HD内窥镜3时,不需要两个2D视频处理器90L、90R中的一方,而且也不需要连接3D合成部99,因此,在连接3D-HD内窥镜4时和连接SD内窥镜2或HD内窥镜3时,需要变更***整体的连接。与此相对,根据本实施方式的结构,能够减轻这样的连接变更的麻烦。
[实施方式2]
图4和图5示出了本发明的实施方式2,图4是示出视频处理器1的结构的框图。
在该实施方式2中,通过对与上述实施方式1相同的部分标注同一标号等而适当地省略说明,主要仅对不同的点进行说明。
在上述实施方式1中,在输入图像信号是2D-HD图像信号和3D-HD图像信号中的任意的情况下,都在图像处理后从处理时钟(例如148MHz)转换为HD时钟(例如74MHz)并输出,但本实施方式是直接在处理时钟的状态下进行输出的实施方式。
图4所示的视频处理器1具有连接部11、判定部12、时钟转变部13、时钟转变部14、LR合成部15、图像处理部16、L/R提取部35、时钟转变部36、HD分辨率转换部31、SD分辨率转换部32、HD增强部33以及SD增强部34。
这里,连接部11、判定部12、时钟转变部13、时钟转变部14、LR合成部15、图像处理部16的各结构与上述实施方式1基本相同。
L/R提取部35是如下的图像信号提取部:在判定部12判定为是3D图像信号的情况下,从进行了图像处理后的LR合成图像信号中提取左图像信号L或右图像信号R,在判定部12判定为是2D图像信号的情况下,提取被嵌入了2D图像信号并进行了图像处理的一方(例如,左图像信号L)。
即,L/R提取部35在判定部12的判定结果是3D连接时(连接了3D-HD内窥镜4时),从图像处理部16所输出的合成图像信号中提取左图像信号L和右图像信号R中的一方(例如,左图像信号L),在判定部12的判定结果是2D连接时(连接了SD内窥镜2或HD内窥镜3时),从该合成图像信号中提取嵌入了2D图像信号的左图像信号L。
时钟转变部36将L/R提取部35所提取的图像信号的时钟从图像处理时钟(例如148MHz)转换为SD时钟(例如13.5MHz)。
HD分辨率转换部31是如下的高清晰度转换部:对进行了图像处理后的LR合成图像信号或嵌入于一方(例如,左图像信号L)并进行了图像处理后的2D图像信号进行向图像处理时钟的高清晰度图像信号的分辨率转换。
即,HD分辨率转换部31以图像处理时钟(例如148MHz)将图像处理部16所输出的LR合成图像信号或嵌入于左图像信号L的2D图像信号的分辨率转换为作为输出监视器的HD监视器6或3D-HD监视器7的显示分辨率。
这里,在3D连接时,HD分辨率转换部31所输出的LR合成图像信号是例如图3所示那样的4400×1125i(帧速:59.94Hz)或者5280×1125i(帧速:50Hz)的所谓的并列方式的LR合成图像信号,内部所包含的左图像信号L和右图像信号R都是1920×1080i的图像信号。
与此相对,在2D连接时,HD分辨率转换部31所输出的HD图像信号是例如图5所示那样的2200×1125p(帧速:59.94Hz)或2640×1125p(帧速:50Hz)中的1920×1080p的逐行扫描图像信号。这里,图5是示出HD分辨率转换部31所输出的HD图像信号的例子的图。因此,在本实施方式中,假定HD监视器6是逐行扫描方式的监视器(另外,在HD监视器6是隔行扫描方式的监视器的情况下,转换为隔行扫描图像信号并输出)。
SD分辨率转换部32将时钟转变部36所输出的图像信号的分辨率转换为作为输出监视器的SD监视器5的显示分辨率。
这样,时钟转变部36和SD分辨率转换部32构成如下的标准画质转换部:对L/R提取部35所提取的左图像信号L或右图像信号R、或者对嵌入于一方(例如,左图像信号L)的2D图像信号进行向标准画质图像的时钟的该标准画质图像的分辨率转换。
HD增强部33对HD分辨率转换部31所输出的HD图像信号进行HD用的增强处理。
SD增强部34对SD分辨率转换部32所输出的SD图像信号进行SD用的增强处理。
根据上述那样的结构的视频处理器1,来自HD增强部33的输出和来自SD增强部34的输出的组合在3D连接时为(LR合成图像信号、SD图像信号),在2D连接时为(HD图像信号、SD图像信号)。
另外,在上述实施方式1中,假定所输入的HD图像信号是例如1920×1080i,但在本实施方式的结构中,由于所输出的HD图像信号是例如1920×1080p的图像信号,因此,对于所输入的HD图像信号,也能够接受1920×1080p。
这里,在所输入的HD图像信号是1920×1080p的情况下,由于输入时钟是148MHz,因此,时钟转变部13和时钟转变部14不进行特别的时钟转换,LR合成部15直接输出所输入的HD图像信号而不进行特殊的合成,图像处理部16进行与逐行扫描图像对应的处理。
根据这样的实施方式2,实现与上述实施方式1基本相同的效果,并且,即使在3D连接时,不仅能够输出3D图像信号还能够输出SD图像信号。
并且,即使对于2D的HD图像信号,也能够输入1920×1080p的图像信号进行处理并输出,能够进一步提高画质。
另外,在上述内容中主要对视频处理器进行了说明,但也可以是使视频处理器像上述那样工作的视频处理器的工作方法,还可以是用于使计算机执行该视频处理器的工作方法的控制程序、记录该控制程序且计算机能够进行读取的非暂时性记录介质等。
并且,本发明不直接限于上述实施方式,在实施阶段能够在不脱离其主旨的范围内对结构要素进行变形并实现具体化。并且,通过上述实施方式所公开的多个结构要素的适当组合,能够形成各种发明方式。例如,也可以从实施方式所示的所有结构要素中删除几个结构要素。而且,也可以适当组合不同的实施方式中的结构要素。这样,当然能够在不脱离发明的主旨的范围内进行各种变形和应用。
本申请是以2014年5月8日在日本申请的日本特愿2014-097062号为优先权主张的基础进行申请的,上述公开内容被引用于本申请说明书、权利要求书以及附图。

Claims (5)

1.一种视频处理器,其特征在于,该视频处理器具有:
判定部,其对所输入的图像信号是包含左图像信号和右图像信号在内的3D图像信号还是2D图像信号进行判定;
图像信号合成部,其在所述判定部判定为是所述3D图像信号的情况下,合成所述左图像信号和所述右图像信号而作为合成图像信号输出,在所述判定部判定为是所述2D图像信号的情况下,将该2D图像信号嵌入所述左图像信号和所述右图像信号中的一方而作为合成图像信号输出;以及
图像处理部,其以所述3D图像信号的时钟的两倍以上的图像处理时钟对所述合成图像信号进行图像处理。
2.根据权利要求1所述的视频处理器,其特征在于,
该视频处理器还具有:
图像信号分割部,其将进行了所述图像处理后的所述合成图像信号分割为所述左图像信号和所述右图像信号;
高清晰度转换部,其对被所述图像信号分割部分割而成的所述左图像信号和所述右图像信号中的所述一方或嵌入于该一方的所述2D图像信号进行向所述3D图像信号的时钟的高清晰度图像信号的分辨率转换;以及
标准画质转换部,其在所述判定部判定为是所述3D图像信号的情况下,对被所述图像信号分割部分割而成的所述左图像信号和所述右图像信号中的另一方进行向所述3D图像信号的时钟的所述高清晰度图像信号的分辨率转换,在所述判定部判定为是所述2D图像信号的情况下,对嵌入于所述一方的所述2D图像信号进行向标准画质图像的时钟的所述标准画质图像的分辨率转换。
3.根据权利要求1所述的视频处理器,其特征在于,
该视频处理器还具有:
高清晰度转换部,其对进行了所述图像处理后的所述合成图像信号或者嵌入于所述一方并进行了所述图像处理后的所述2D图像信号进行向所述图像处理时钟的所述高清晰度图像信号的分辨率转换;
图像信号提取部,其在所述判定部判定为是所述2D图像信号的情况下,提取被嵌入了所述2D图像信号并进行了所述图像处理后的所述一方;以及
标准画质转换部,其对嵌入于所述一方的所述2D图像信号进行向所述标准画质图像的时钟的所述标准画质图像的分辨率转换。
4.根据权利要求3所述的视频处理器,其特征在于,
所述图像信号提取部在所述判定部判定为是所述3D图像信号的情况下,从进行了所述图像处理后的所述合成图像信号中提取所述左图像信号或所述右图像信号,
所述标准画质转换部对所述图像信号提取部所提取的所述左图像信号或所述右图像信号进行向所述标准画质图像的时钟的所述标准画质图像的分辨率转换。
5.一种视频处理器的工作方法,其特征在于,
判定部对所输入的图像信号是包含左图像信号和右图像信号在内的3D图像信号还是2D图像信号进行判定,
图像信号合成部在所述判定部判定为是所述3D图像信号的情况下,合成所述左图像信号和所述右图像信号而作为合成图像信号输出,在所述判定部判定为是所述2D图像信号的情况下,将该2D图像信号嵌入于所述左图像信号和所述右图像信号中的一方而作为合成图像信号输出,
图像处理部以所述3D图像信号的时钟的两倍以上的图像处理时钟对所述合成图像信号进行图像处理。
CN201580011974.2A 2014-05-08 2015-04-15 视频处理器、视频处理器的工作方法 Active CN106063260B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014097062 2014-05-08
JP2014-097062 2014-05-08
PCT/JP2015/061635 WO2015170557A1 (ja) 2014-05-08 2015-04-15 ビデオプロセッサ、ビデオプロセッサの作動方法

Publications (2)

Publication Number Publication Date
CN106063260A true CN106063260A (zh) 2016-10-26
CN106063260B CN106063260B (zh) 2018-04-03

Family

ID=54392410

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580011974.2A Active CN106063260B (zh) 2014-05-08 2015-04-15 视频处理器、视频处理器的工作方法

Country Status (5)

Country Link
US (1) US9635341B2 (zh)
EP (1) EP3116227A4 (zh)
JP (1) JP5948508B2 (zh)
CN (1) CN106063260B (zh)
WO (1) WO2015170557A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107306492B (zh) * 2016-02-25 2019-10-25 奥林巴斯株式会社 内窥镜***和内窥镜***的工作方法
EP3217361B1 (en) * 2016-03-11 2021-12-15 Imagination Technologies Limited Importance sampling for determining a light map
JP6801990B2 (ja) * 2016-06-22 2020-12-16 オリンパス株式会社 画像処理システムおよび画像処理装置
KR20190088532A (ko) * 2016-12-01 2019-07-26 엘지전자 주식회사 영상표시장치, 및 이를 구비하는 영상표시 시스템
WO2018123801A1 (ja) * 2016-12-28 2018-07-05 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 三次元モデル配信方法、三次元モデル受信方法、三次元モデル配信装置及び三次元モデル受信装置
WO2018187939A1 (zh) * 2017-04-11 2018-10-18 深圳市柔宇科技有限公司 三维图像的识别方法和终端
JP7235532B2 (ja) * 2019-02-25 2023-03-08 ソニー・オリンパスメディカルソリューションズ株式会社 医療用画像処理装置、画像処理方法およびプログラム
US11275973B2 (en) 2019-04-15 2022-03-15 Noblis, Inc. Adapting pre-trained classification algorithms

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040145655A1 (en) * 2002-12-02 2004-07-29 Seijiro Tomita Stereoscopic video image display apparatus and stereoscopic video signal processing circuit
CN1993078A (zh) * 2004-08-05 2007-07-04 奥林巴斯株式会社 内窥镜用信号处理装置
CN102143369A (zh) * 2010-01-29 2011-08-03 日立民用电子株式会社 影像处理装置和影像处理方法
CN103096101A (zh) * 2011-11-07 2013-05-08 联想(北京)有限公司 视频合成方法、装置及电子设备

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5784097A (en) * 1995-03-29 1998-07-21 Sanyo Electric Co., Ltd. Three-dimensional image display device
US5850352A (en) * 1995-03-31 1998-12-15 The Regents Of The University Of California Immersive video, including video hypermosaicing to generate from multiple video views of a scene a three-dimensional video mosaic from which diverse virtual video scene images are synthesized, including panoramic, scene interactive and stereoscopic images
US6445814B2 (en) * 1996-07-01 2002-09-03 Canon Kabushiki Kaisha Three-dimensional information processing apparatus and method
US6862364B1 (en) * 1999-10-27 2005-03-01 Canon Kabushiki Kaisha Stereo image processing for radiography
KR100768837B1 (ko) * 2003-04-17 2007-10-19 샤프 가부시키가이샤 3차원 화상 작성 장치, 3차원 화상 재생 장치, 3차원 화상 처리 장치, 3차원 화상 처리 프로그램을 기록한 기록 매체
WO2007085950A2 (en) * 2006-01-27 2007-08-02 Imax Corporation Methods and systems for digitally re-mastering of 2d and 3d motion pictures for exhibition with enhanced visual quality
JP5338166B2 (ja) * 2008-07-16 2013-11-13 ソニー株式会社 送信装置、立体画像データ送信方法、受信装置および立体画像データ受信方法
KR101545510B1 (ko) * 2008-12-24 2015-08-20 삼성전자주식회사 프레임 속도 조절이 가능한 2차원 영상 또는 3차원 영상 디스플레이 방법 및 장치
JP5588144B2 (ja) 2009-10-14 2014-09-10 パナソニック株式会社 映像信号処理装置及び映像信号処理方法
JP2011216948A (ja) 2010-03-31 2011-10-27 Sony Corp カメラシステム、映像処理装置及びカメラ装置
JP4861495B2 (ja) * 2010-05-31 2012-01-25 株式会社東芝 映像変換装置及び映像変換方法
US20150062295A1 (en) * 2011-08-26 2015-03-05 Aki Yoneda Image processing system, transmitting device, receiving device, transmitting method, receiving method, and computer program
BR112014012158A2 (pt) * 2012-09-27 2017-05-30 Sony Corp aparelho e método de transmissão, receptor, e, método de recepção
US9295372B2 (en) * 2013-09-18 2016-03-29 Cerner Innovation, Inc. Marking and tracking an area of interest during endoscopy

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040145655A1 (en) * 2002-12-02 2004-07-29 Seijiro Tomita Stereoscopic video image display apparatus and stereoscopic video signal processing circuit
CN1993078A (zh) * 2004-08-05 2007-07-04 奥林巴斯株式会社 内窥镜用信号处理装置
CN102143369A (zh) * 2010-01-29 2011-08-03 日立民用电子株式会社 影像处理装置和影像处理方法
CN103096101A (zh) * 2011-11-07 2013-05-08 联想(北京)有限公司 视频合成方法、装置及电子设备

Also Published As

Publication number Publication date
JP5948508B2 (ja) 2016-07-06
CN106063260B (zh) 2018-04-03
WO2015170557A1 (ja) 2015-11-12
JPWO2015170557A1 (ja) 2017-04-20
EP3116227A1 (en) 2017-01-11
US20170039454A1 (en) 2017-02-09
EP3116227A4 (en) 2017-08-16
US9635341B2 (en) 2017-04-25

Similar Documents

Publication Publication Date Title
CN106063260A (zh) 视频处理器、视频处理器的工作方法
US8854448B2 (en) Image processing apparatus, image display system, and image processing method and program
US11403742B2 (en) Image processing device, image processing method, and recording medium for generating bird's eye synthetic image
KR20160032909A (ko) 멀티 영상 전처리 장치 및 방법
US11467387B2 (en) Image processing apparatus and image processing method
JP2008017311A (ja) 車両用映像表示装置及び車両周囲映像の表示方法
US20190379820A1 (en) Video signal processing device, video signal processing method, and camera device
CN102184560A (zh) 一种基于模板的ccd-dr图像拼接方法
CN110692240A (zh) 立体拍摄装置
KR101819984B1 (ko) 실시간 영상 합성 방법
US11494934B2 (en) Image processing device, image processing method, and monitoring system
JP5906696B2 (ja) 車両周辺撮影装置および車両周辺画像の処理方法
JPWO2018087856A1 (ja) 映像合成装置及び映像合成方法
JP2014199508A (ja) 画像処理装置、画像処理方法及びプログラム
JP2013131042A (ja) 画像処理装置及びその制御方法
CN113688674A (zh) 一种基于ar智能眼镜的局部图像识别方法及***
KR102599584B1 (ko) 영상 처리 장치
JP2014106647A (ja) 画像処理装置、画像処理方法、及びプログラム
JP2013098966A (ja) 映像処理システム、映像処理方法、及びコンピュータプログラム
SG11201903194UA (en) System for dynamically maximizing the contrast between the foreground and background in images and/or image sequences
JP2013115739A (ja) 画像間差分装置および画像間差分方法
US20240212831A1 (en) Systems and methods for real-time processing of medical imaging data utilizing a single instruction multiple data processor
JP2018046464A (ja) 視線一致顔画像合成方法、テレビ会議システム、及びプログラム
JP2023174066A (ja) 画像処理装置、画像処理方法、およびプログラム
JP2022161981A (ja) 撮像装置及びその制御方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant