TWI524755B - 影像處理方法、影像處理系統及電腦程式 - Google Patents
影像處理方法、影像處理系統及電腦程式 Download PDFInfo
- Publication number
- TWI524755B TWI524755B TW098106193A TW98106193A TWI524755B TW I524755 B TWI524755 B TW I524755B TW 098106193 A TW098106193 A TW 098106193A TW 98106193 A TW98106193 A TW 98106193A TW I524755 B TWI524755 B TW I524755B
- Authority
- TW
- Taiwan
- Prior art keywords
- image
- processing
- moving body
- image processing
- frame
- Prior art date
Links
- 238000012545 processing Methods 0.000 title claims description 369
- 238000003672 processing method Methods 0.000 title claims description 21
- 238000004590 computer program Methods 0.000 title claims description 19
- 238000000034 method Methods 0.000 claims description 88
- 210000000746 body region Anatomy 0.000 claims description 82
- 230000008569 process Effects 0.000 claims description 74
- 238000012937 correction Methods 0.000 claims description 43
- 238000012935 Averaging Methods 0.000 claims description 28
- 238000006243 chemical reaction Methods 0.000 claims description 16
- 230000002708 enhancing effect Effects 0.000 claims description 9
- 230000009467 reduction Effects 0.000 claims description 8
- 230000000694 effects Effects 0.000 description 23
- 239000004973 liquid crystal related substance Substances 0.000 description 23
- 239000000758 substrate Substances 0.000 description 22
- 230000006870 function Effects 0.000 description 14
- 238000013500 data storage Methods 0.000 description 12
- 230000008859 change Effects 0.000 description 10
- 239000004065 semiconductor Substances 0.000 description 9
- 239000010410 layer Substances 0.000 description 8
- IJGRMHOSHXDMSA-UHFFFAOYSA-N Atomic nitrogen Chemical compound N#N IJGRMHOSHXDMSA-UHFFFAOYSA-N 0.000 description 6
- 229910052735 hafnium Inorganic materials 0.000 description 6
- VBJZVLUMGGDVMO-UHFFFAOYSA-N hafnium atom Chemical compound [Hf] VBJZVLUMGGDVMO-UHFFFAOYSA-N 0.000 description 6
- 239000002356 single layer Substances 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 239000000463 material Substances 0.000 description 5
- 239000000565 sealant Substances 0.000 description 5
- 125000006850 spacer group Chemical group 0.000 description 5
- XLOMVQKBTHCTTD-UHFFFAOYSA-N Zinc monoxide Chemical compound [Zn]=O XLOMVQKBTHCTTD-UHFFFAOYSA-N 0.000 description 4
- 229910000449 hafnium oxide Inorganic materials 0.000 description 4
- WIHZLLGSGQNAGK-UHFFFAOYSA-N hafnium(4+);oxygen(2-) Chemical compound [O-2].[O-2].[Hf+4] WIHZLLGSGQNAGK-UHFFFAOYSA-N 0.000 description 4
- 230000008447 perception Effects 0.000 description 4
- MZLGASXMSKOWSE-UHFFFAOYSA-N tantalum nitride Chemical compound [Ta]#N MZLGASXMSKOWSE-UHFFFAOYSA-N 0.000 description 4
- 229910052782 aluminium Inorganic materials 0.000 description 3
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 239000004020 conductor Substances 0.000 description 3
- 230000005684 electric field Effects 0.000 description 3
- 239000005262 ferroelectric liquid crystals (FLCs) Substances 0.000 description 3
- 229910052757 nitrogen Inorganic materials 0.000 description 3
- 229910052760 oxygen Inorganic materials 0.000 description 3
- 239000001301 oxygen Substances 0.000 description 3
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 2
- 229910052684 Cerium Inorganic materials 0.000 description 2
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 229910052799 carbon Inorganic materials 0.000 description 2
- GWXLDORMOJMVQZ-UHFFFAOYSA-N cerium Chemical compound [Ce] GWXLDORMOJMVQZ-UHFFFAOYSA-N 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 229910003437 indium oxide Inorganic materials 0.000 description 2
- PJXISJQVUVHSOJ-UHFFFAOYSA-N indium(iii) oxide Chemical compound [O-2].[O-2].[O-2].[In+3].[In+3] PJXISJQVUVHSOJ-UHFFFAOYSA-N 0.000 description 2
- AMGQUBHHOARCQH-UHFFFAOYSA-N indium;oxotin Chemical compound [In].[Sn]=O AMGQUBHHOARCQH-UHFFFAOYSA-N 0.000 description 2
- 229910052746 lanthanum Inorganic materials 0.000 description 2
- FZLIPJUXYLNCLC-UHFFFAOYSA-N lanthanum atom Chemical compound [La] FZLIPJUXYLNCLC-UHFFFAOYSA-N 0.000 description 2
- 239000011368 organic material Substances 0.000 description 2
- XOLBLPGZBRYERU-UHFFFAOYSA-N tin dioxide Chemical compound O=[Sn]=O XOLBLPGZBRYERU-UHFFFAOYSA-N 0.000 description 2
- 229910001887 tin oxide Inorganic materials 0.000 description 2
- 239000011800 void material Substances 0.000 description 2
- 239000011787 zinc oxide Substances 0.000 description 2
- HJTAZXHBEBIQQX-UHFFFAOYSA-N 1,5-bis(chloromethyl)naphthalene Chemical compound C1=CC=C2C(CCl)=CC=CC2=C1CCl HJTAZXHBEBIQQX-UHFFFAOYSA-N 0.000 description 1
- SMZOUWXMTYCWNB-UHFFFAOYSA-N 2-(2-methoxy-5-methylphenyl)ethanamine Chemical compound COC1=CC=C(C)C=C1CCN SMZOUWXMTYCWNB-UHFFFAOYSA-N 0.000 description 1
- NIXOWILDQLNWCW-UHFFFAOYSA-N 2-Propenoic acid Natural products OC(=O)C=C NIXOWILDQLNWCW-UHFFFAOYSA-N 0.000 description 1
- 239000004952 Polyamide Substances 0.000 description 1
- 239000000956 alloy Substances 0.000 description 1
- 229910045601 alloy Inorganic materials 0.000 description 1
- 229910000410 antimony oxide Inorganic materials 0.000 description 1
- VOANFGTXELDUQQ-UHFFFAOYSA-N antimony;indium;oxotin Chemical compound [In].[Sb].[Sn]=O VOANFGTXELDUQQ-UHFFFAOYSA-N 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- GOLCXWYRSKYTSP-UHFFFAOYSA-N arsenic trioxide Inorganic materials O1[As]2O[As]1O2 GOLCXWYRSKYTSP-UHFFFAOYSA-N 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 238000005452 bending Methods 0.000 description 1
- UMIVXZPTRXBADB-UHFFFAOYSA-N benzocyclobutene Chemical compound C1=CC=C2CCC2=C1 UMIVXZPTRXBADB-UHFFFAOYSA-N 0.000 description 1
- 229910052804 chromium Inorganic materials 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- PMHQVHHXPFUNSP-UHFFFAOYSA-M copper(1+);methylsulfanylmethane;bromide Chemical compound Br[Cu].CSC PMHQVHHXPFUNSP-UHFFFAOYSA-M 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000003822 epoxy resin Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 229910010272 inorganic material Inorganic materials 0.000 description 1
- 239000011147 inorganic material Substances 0.000 description 1
- 239000011229 interlayer Substances 0.000 description 1
- 239000012528 membrane Substances 0.000 description 1
- 229910052751 metal Inorganic materials 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 229910052750 molybdenum Inorganic materials 0.000 description 1
- 238000012806 monitoring device Methods 0.000 description 1
- QJGQUHMNIGDVPM-UHFFFAOYSA-N nitrogen group Chemical group [N] QJGQUHMNIGDVPM-UHFFFAOYSA-N 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- TWNQGVIAIRXVLR-UHFFFAOYSA-N oxo(oxoalumanyloxy)alumane Chemical compound O=[Al]O[Al]=O TWNQGVIAIRXVLR-UHFFFAOYSA-N 0.000 description 1
- VTRUBDSFZJNXHI-UHFFFAOYSA-N oxoantimony Chemical compound [Sb]=O VTRUBDSFZJNXHI-UHFFFAOYSA-N 0.000 description 1
- 229920002647 polyamide Polymers 0.000 description 1
- 229920000647 polyepoxide Polymers 0.000 description 1
- 229920005989 resin Polymers 0.000 description 1
- 239000011347 resin Substances 0.000 description 1
- 229910001415 sodium ion Inorganic materials 0.000 description 1
- 229910052715 tantalum Inorganic materials 0.000 description 1
- 229910052719 titanium Inorganic materials 0.000 description 1
- 229910052721 tungsten Inorganic materials 0.000 description 1
- YVTHLONGBIQYBO-UHFFFAOYSA-N zinc indium(3+) oxygen(2-) Chemical compound [O--].[Zn++].[In+3] YVTHLONGBIQYBO-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20216—Image averaging
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
- Studio Circuits (AREA)
- Studio Devices (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Facsimile Image Signal Circuits (AREA)
Description
本發明係關於對移動影像進行影像處理的方法、進行移動影像的影像處理的影像處理系統、以及用來進行移動影像的影像處理的電腦程式。
近年來,可以欣賞高清晰影像的高解析度且大螢幕的液晶顯示裝置、電漿顯示裝置已經普及。因此,對影像的品質的要求也越來越高,其中一個要求是臨場感、遠近感(距離感)。而藉由提高立體感、縱深感,可以提高臨場感。
例如,焦點位於整體螢幕上的照片缺乏距離感、立體感。於是,在現有技術中,為了使使用影像拍攝裝置所拍攝的照片(靜止影像)有距離感、立體感,提出了對照片進行模糊處理(散焦處理)的方法(例如,專利文獻1:日本專利申請公開H10-233919號公報、專利文獻2:日本專利申請公開2005-229198號公報)。
在專利文獻1中描述了使用焦點條件不同的兩個影像,從影像中取出主要部分和背景,對主要部分的影像進行銳化處理,並且對背景進行模糊處理的影像處理裝置。
在專利文獻2中描述了使用照明光量不同的兩個影像,從影像中取出拍攝物件和背景,對拍攝物件及背景中的至少一者進行模糊處理的影像處理方法。
在專利文獻1、2中所描述的影像處理技術為關於靜止影像的技術,而不是關於提高移動影像的臨場感、縱深感的技術。於是,本發明的實施例模式的目的之一在於提供一種影像處理方法,藉由該影像處理方法,可以在二維影像顯示用顯示裝置上產生提高了立體感、縱深感的移動影像。
另外,本發明的實施例模式的另一目的在於提供一種可以產生提高了立體感、縱深感的移動影像的影像處理系統。
另外,本發明的實施例模式的另一目的在於提供一種用來實現產生提高了立體感、縱深感的移動影像的影像處理方法的電腦程式。
本發明的影像處理方法的結構例子之一為如下:為了對由多個框影像所構成的移動影像進行影像處理,將至少一個框影像分成由產生移動體的像素組所構成的移動體區域和由不產生移動體的像素組所構成的背景區域,並且對背景區域進行影像處理,來從框影像產生校正框影像。在該結構例子中,對背景區域進行的影像處理為對背景區域進行的模糊效果隨著移動體區域在框影像中所占的比例增大而增強的模糊處理。
另外,在本發明的影像處理方法的另一結構例子中,由於將校正物件的框影像分成移動體區域和移動體區域以外的背景區域,所以根據成為校正物件的第一框影像和第一框影像的k框前(k為自然數)的第二框影像的差值、以及第一框影像和第一框影像的k框後的第三框影像的差值,從第一框影像中取出產生移動體的像素,而可以產生由移動體區域和背景區域所構成的掩罩影像,所述移動體區域係由產生移動體的像素組所構成,所述背景區域係由不產生移動體的像素組所構成。在該結構例子中,使用該掩罩影像判定第一框影像的各個像素是包含在背景區域中還是包含在移動體區域中。
另外,在上述影像處理方法的各個結構例子中,也可以對移動體區域進行與對背景區域進行的影像處理不同的影像處理。
本發明的影像處理系統的結構例子之一具有顯示由多個框影像構成的移動影像的影像顯示部;從至少一個框影像中取出移動體,將框影像分成由產生移動體的像素組所構成的移動體區域和由不產生移動體的像素組所構成的背景區域的移動體取出部;以及對背景區域進行模糊處理,而產生校正框影像的校正框影像產生部。在該結構中,校正框影產生部為這樣一種裝置,其進行隨著移動體區域在框影像中所占的比例增高而增強對背景區域進行的模糊效果的模糊處理。
本發明的影像處理系統的其他結構例子之一具有顯示由多個框影像所構成的移動影像的影像顯示部;根據成為校正物件的第一框影像和第一框影像的k框前(k為自然數)的第二框影像的差值、以及第一框影像和第一框影像的k框後的第三框影像的差值,從第一框影像中取出產生移動體的像素,並且產生由移動體區域和背景區域所構成的掩罩影像的掩罩影像產生部,所述移動體區域係由產生移動體的像素組所構成,所述背景區域係由不產生移動體的像素組所構成;以及使用掩罩影像判定產生第一框影像的各個像素是包含在背景區域中還是包含在移動體區域中,並且對背景區域的像素進行模糊處理,而產生校正框影像的校正框影像產生部。
在上述結構例子中,校正框影像產生部為這樣一種裝置,其進行隨著移動體區域在第一框影像中所占的比例增大而增強對背景區域進行的模糊效果的模糊處理。
另外,在影像處理系統的各個結構例子中,也可以在校正框影像產生部對移動體區域進行與對背景區域進行的影像處理不同的影像處理。
本發明的電腦程式的結構例子之一為使影像處理裝置進行包括如下兩種處理的影像處理的程式,即從產生移動影像的多個框影像中的至少一個框影像中取出移動體,將框影像分成由產生移動體的像素組所構成的移動體區域和由不產生移動體的像素組所構成的背景區域的處理;以及對背景區域進行模糊處理來產生校正框影像的處理。並且,作為在產生校正影像的處理中的對背景區域進行的影像處理,由影像處理裝置進行隨著移動體區域在框影像中所占的比例增大而增強模糊效果的模糊處理。
本發明的電腦程式的其他結構例子之一為使影像處理裝置進行如下兩種處理的程式,即根據成為校正物件的第一框影像和第一框影像的k框前(k為自然數)的第二框影像的差值、以及第一框影像和第一框影像的k框後的第三框影像的差值,從第一框影像中取出產生移動體的像素,而產生由移動體區域和背景區域所構成的掩罩影像的處理,所述移動體區域係由產生移動體的像素組所構成,所述背景區域係由不產生移動體的像素組所構成;以及使用掩罩影像判定產生第一框影像的各個像素是包含在背景區域中還是包含在移動體區域中,並且對背景區域的像素進行模糊處理,來產生校正框影像的處理。
在上述電腦程式的各個結構例子中,作為在產生校正框影像的處理中的對背景區域進行的影像處理,可以使影像處理裝置進行隨著移動體區域在第一框影像中所占的比例增大而增強模糊效果的模糊處理。
在將本說明書所提出的發明應用於電腦程式中的情況下,也可以在產生校正框影像的處理中,使影像處理裝置對移動體區域進行與對背景區域進行的影像處理不同的影像處理。
對背景區域進行的影像處理為模糊處理,作為該模糊處理進行平均化處理、中值濾波器(median filter)處理、減弱對比度的對比度轉換處理、以及鑲嵌處理中的至少一種影像處理即可。
另外,可以對移動體區域進行與對背景區域進行的影像處理不同的影像處理而產生校正框影像。在此情況下,作為對移動體區域進行的影像處理,進行銳化處理、增強對比度的對比度轉換處理、以及邊緣增強處理中的至少一種影像處理即可。
藉由對產生移動影像的框影像的背景進行與影像的移動對應地改變模糊程度的模糊處理,可以與人的眼睛的焦點調整功能對應地模糊背景。換言之,藉由對背景進行這種模糊處理,可以產生具有高距離感、縱深感的移動影像。例如,藉由對由電視接收機所接收到的電視廣播影像進行這種模糊處理,可以一邊接收其影像資料一邊將其轉換成具有高縱深感的移動影像,而可以提供具有高附加價值的電視機。
下面,將參照附圖來說明本發明的實施例模式。注意,本說明書中所提出的發明可以藉由多種不同的方式來予以實施,所屬技術領域的普通技術人員可以很容易地理解一個事實就是本說明書中所提出的發明的實施例模式可以將其模式及詳細內容在不脫離宗旨及其範圍下變換為各種形式。因此,本說明書中所提出的發明不應該被解釋為僅限定在實施例模式所記載的內容中。
本實施例模式說明對由多個框影(frame image)像所構成的移動影像進行影像處理的影像處理方法、以及用來實現該影像處理的影像處理系統及電腦程式。
首先,使用圖1來說明影像處理系統的結構。在本實施例模式中,說明具備影像顯示部的影像處理系統作為影像處理系統。換言之,也可以說本實施例模式的影像處理系統為具備影像處理裝置的影像顯示系統。圖1為示出本實施例模式的影像處理系統的結構例子的方塊圖。圖1所示的影像處理系統100為可以顯示由多個框影像所構成的移動影像的裝置,並且具有影像處理裝置101及影像輸出裝置102。
影像處理裝置101為這樣一種裝置,即從所讀取的多個框影像中的至少一個中取出移動體,並且將該框影像分成由產生移動體的像素組所產生的移動體區域和移動體區域以外的背景區域。另外,影像處理裝置101為藉由對取出的移動體及背景的框影像進行影像處理,來產生校正框影像的裝置。在影像處理裝置101中至少對框影像的背景區域進行模糊處理。而且,在影像處理裝置101中也可以對移動體區域進行影像處理。在本實施例模式中,為了進一步提高校正後的移動影像的距離感、縱深感,在影像處理裝置101中對移動體區域進行與模糊處理不同的影像處理。
影像輸出裝置102為接收從影像處理裝置101輸出的影像資料的裝置。在本實施例模式中,影像輸出裝置102為顯示二維影像的影像顯示裝置,並且是顯示由多個框影像構成的移動影像的裝置。
如圖1所示,影像處理裝置101由運算處理部111、資料儲存部112、控制部113、輸入側介面部114、以及輸出側介面部115等所構成。
運算處理部111為進行各種運算處理(諸如影像資料的運算處理等)的裝置,並且包括CPU(中央處理單元)、影像處理用算術電路等。
資料儲存部112具有用來儲存用於在影像處理裝置101中進行影像處理的資料的各種記憶體電路。例如,資料儲存部112包括儲存運算處理部111進行移動影像的影像處理的電腦程式、以及影像處理用篩檢程式的資料及查找表等的ROM(唯讀記憶體);儲存運算處理部111計算出來的運算結果的RAM(隨機存取記憶體);以及儲存輸入到影像處理裝置101中的影像資料的記憶體電路等。
控制部113包括用來控制影像處理裝置101的電路的電路。例如,控制部113包括控制資料儲存部112的資料的寫入的寫入控制電路、以及控制其資料的讀取的讀取控制電路等。
輸入側介面部114為用來與連接到影像處理裝置101的外部裝置進行信號的發送/接收,以便將影像資料等的資料從其外部裝置提取到影像處理裝置101中的裝置。例如,為了在影像處理裝置101中對影像資料進行處理,影像資料必須為數位資料。因此,在影像資料為類比資料的情況下,較佳在輸入側介面部114中設置A-D轉換電路(類比-數位轉換電路)。外部裝置為輸出影像資料的裝置,例如有影像拍攝裝置等的拍攝裝置、再生儲存在硬碟或DVD等的儲存媒體中的影像資料的影像再生裝置。
輸出側介面部115為用來與影像輸出裝置102進行信號的發送/接收,以便對影像輸出裝置102輸出影像資料的裝置。例如,為了對影像輸出裝置102輸出類比視頻信號,在輸出側介面部115中設置D-A轉換電路(數位-類比轉換電路)。
具有顯示移動影像的功能的影像輸出裝置102例如可以由液晶顯示裝置、電致發光顯示裝置、場發射顯示器(Field Emission Display)、電漿顯示器等構成。圖1示出影像輸出裝置102的結構的一例。如圖中所示,影像輸出裝置102由具備多個像素120的顯示部121、掃描線驅動電路122、以及信號線驅動電路123等所構成。在顯示部121中,以M列N行(M、N為自然數)配置有像素120。掃描線125及信號線126電連接到各個像素120上,因而像素120分別電連接到掃描線驅動電路122及信號線驅動電路123上。
顯示部121的各個像素120的亮度值(也稱為灰度值、濃度值)取決於從影像處理裝置101輸入的影像資料。掃描線驅動電路122將用來選擇進行顯示的像素120的信號輸入到掃描線125中,並且信號線驅動電路123將影像資料輸入到信號線126中。被選擇的像素120透過信號線126接收影像資料,並且顯示由該影像資料所決定的濃淡。
另外,圖1的影像處理系統100是當影像輸出裝置102為移動影像的顯示裝置時的影像顯示系統,然而,本發明的實施例模式不局限於影像顯示系統。例如,藉由使用具備儲存硬碟等的移動影像的資料的儲存媒體的移動影像儲存裝置構成影像輸出裝置102,也可以將本實施例模式的影像處理系統用作影像資料儲存系統。
接下來,參照圖2說明在影像處理裝置101中進行的影像處理方法。圖2為本實施例模式的影像處理方法的流程圖。
在產生移動影像的多個框影像中,在連續的兩個框影像中存在影像有變化的部分。在本說明書中,在框影像中將有大於或等於某個臨界值的變化的(或比某個臨界值大)的影像稱為“移動體”,而將其他部分的影像稱為“背景”。換言之,背景是指沒有移動變化或移動變化比某個臨界值小(或某個臨界值小於或等於)的影像。另外,在框影像中,將產生移動體的多個像素(像素組)稱為“移動體區域”,而將產生背景的多個像素(像素組)稱為“背景區域”。換言之,背景區域為框影像中的除移動體區域以外的區域,並且為由不產生移動體的像素組所構成的區域。
在本實施例模式的影像處理方法中,從框影像中取出移動變化在大於或等於某個臨界值的影像(移動體),將框影像分成移動體區域和背景區域。然後,藉由對背景區域進行模糊處理(散焦處理),並且對移動體區域進行可獲得與模糊處理相反的效果的影像處理,來產生校正框影像。換言之,對移動體區域進行的影像處理為實現焦點完全位於拍攝目標上的狀態的影像處理,其具有使影像清晰、使影像銳化、增強影像等的效果。
在影像處理裝置101中,對輸入的多個框影像中的至少一個框影像的背景區域進行模糊處理,產生校正的框影像(稱為“校正框影像”)。圖2示出在影像處理裝置101中產生校正框影像的流程。另外,圖2也是影像處理裝置101所進行的電腦程式的流程圖。在需要將要產生校正框影像的框影像和其他框影像加以區分的情況下,將要產生校正框影像的框影像稱為“目標框影像”。
在影像處理裝置101中,首先從目標框影像中取出移動體(步驟201)。將該處理稱為“移動體取出處理”。藉由從目標框影像中取出移動體,背景也被取出,所以該移動體取出處理也是背景取出處理。因此,藉由移動體取出處理,目標框影像被分成移動體區域和背景區域。
接下來,在影像處理裝置101中,判定目標框影像的各個像素是否是移動體區域的像素(步驟202)。然後,在判定結果是其為移動體區域的像素的情況下,對符合該條件的像素進行移動體影像處理(步驟203),而對不符合該條件的像素,即其為背景區域的像素進行背景影像處理(步驟204)。移動體影像處理為將像素的亮度值校正為使其亮度值成為適合於作為移動體顯示的亮度值的處理。背景影像處理為模糊處理。借助於背景影像處理,像素的亮度值被校正為適合於作為背景顯示的亮度值。而且,在本實施例模式中,移動體在目標框影像中所占的比例越大,對背景區域的像素進行越增強的模糊處理。
接下來,藉由判定是否對目標框影像的所有的像素進行處理(步驟205),重複進行步驟202到步驟203。藉由對目標框影像的所有像素進行移動體影像處理及背景影像處理中的任一者,產生目標框影像的校正框影像,產生框影像的影像處理就此結束(步驟206)。
在步驟203中進行的移動體影像處理中,進行具有使影像清晰、增強影像等的效果的影像處理中的至少一種。作為這種影像處理,例如有增強對比度的對比度轉換處理(對比度增強處理)、銳化處理、反銳化掩罩處理、以及邊緣增強處理等。
步驟204中進行的背景影像處理為模糊處理。藉由模糊背景,獲得使觀看移動影像的人產生焦點位於移動體上的感覺的效果。作為模糊處理,有平均化處理、減弱對比度的對比度轉換處理、雜訊去除處理、鑲嵌處理等。換言之,作為背景影像處理進行的模糊處理為具有抑制從影像獲得的資訊量的效果如使影像的邊緣不清晰、使顏色變淡等的影像處理。在步驟204中至少進行一種具有模糊效果的影像處理。
另外,在步驟204中,移動體區域在目標影像所占的比例越大,進行對於背景區域的模糊效果越增強的處理。換言之,移動體越大,背景的模糊程度越大。將人走近的移動影像作為例子來進行說明,由於作為移動體的人的影像逐漸變大,所以人越靠近其背景越模糊。因此,由於人越靠近從背景可獲得的資訊越少,所以使觀看該移動影像者自然地產生焦點位於人上的感覺。換言之,觀看者感覺到移動影像為具有高距離感、縱深感的影像。另外,因為藉由步驟203的移動體影像處理使人的影像變清晰,所以可以使觀看移動影像者自然地產生焦點位於移動部分上的感覺。
在影像處理裝置101中,對產生移動影像的多個框影像按順序進行步驟201到步驟206的各個處理來產生多個校正框影像。各個校正框影像從影像處理裝置101輸出到影像輸出裝置102。在影像輸出裝置102中,顯示部121顯示由多個校正框影像所構成的移動影像。由於在影像處理裝置101中預先藉由影像處理進行了與人的眼睛的焦點調整功能相近的處理,所以觀看顯示部121者可以欣賞到提高了縱深感、距離感的移動影像。
進行影像處理的影像處理裝置101相當於根據圖2的流程從目標框影像中取出移動體的移動體取出部,並且還相當於對目標框影像進行影像處理來產生校正框影像的校正框影像產生部。另外,在資料儲存部112中儲存有用來使影像處理裝置101進行圖2的流程所表示的影像處理的電腦程式。
在本實施例模式中,可以將各種移動體取出方法應用於移動體取出處理中。由於容易進行運算處理,所以在該處理中較佳採用使用連續的三個框影像,並基於相鄰的兩個框影像的差值取出移動體的方法。另外,求出兩個影像的差值的意思是算出位於兩個影像中的相同位置的像素的亮度值的差值的絕對值。差值影像是指以該亮度值的差值的絕對值為各個像素的亮度值的影像。
在本實施例模式中,為了從目標框影像fa中取出移動體,基於在時間上連續的三個框影像fa-1、fa、fa+1的差值產生遮蓋移動體區域的掩罩影像ma。該掩罩影像ma為由白色影像和黑色影像所構成的二值影像,白色影像和黑色影像表示目標框影像fa中的移動體區域和背景區域的差別。參照圖3及圖4來說明移動體取出處理。圖3及圖4為示出移動體取出處理的一例的流程圖。參照圖3說明步驟221至235,參照圖4說明步驟236至240。
首先,影像處理裝置101讀取三個框影像fa-1、fa、fa+1(步驟221)。讀取的框影像fa-1、fa、fa+1的資料寫入到資料儲存部112中。框影像fa為目標框影像。注意,作為處理物件的三個框影像不局限於與目標框影像fa相接的框影像。也就是說,可以使用目標框影像fa、目標框影像fa的k框前(k為自然數)的框影像和目標框影像fa的k框後的框影像。例如,也可以為框影像fa和其前兩個的框影像fa-2及其後兩個的框影像fa+2。另外,在如使用固定影像拍攝裝置拍攝的移動影像那樣背景幾乎不變的移動影像的情況下,k也可以為大於或等於3。實施者可以考慮移動影像的拍攝條件等而適當地設定k的值。然而,從影像處理速度的觀點來看,不管移動影像的拍攝條件如何,較佳將目標框影像的1或2框前的框影像或目標框影像的1或2框後的框影像用於移動體取出處理。
影像處理裝置101中的運算處理部111計算出目標框影像fa的像素(x,y)和框影像fa-1的像素(x,y)的差值(步驟222)。在此,以像素(x,y)為像素的最小單位。另外,像素(x,y)的資料(像素值)由紅色、綠色、藍色的三種顏色(RGB)的亮度值(灰度值)所構成。因此,當進行步驟222時,與RGB的亮度值對應地計算出三個差值ΔR1
(x,y)、ΔG1
(x,y)、ΔB1
(x,y)。差值ΔR1
(x,y)、ΔG1
(x,y)、ΔB1
(x,y)儲存在影像處理裝置101的資料儲存部112中。另外,像素(x,y)的顏色要素也可以為RGB以外的顏色,例如可以為黃色、藍綠色、紫紅色。
接下來,運算處理部111分別對於差值ΔR1
(x,y)、ΔG1
(x,y)、ΔB1
(x,y)判定其值是否大於或等於臨界值(Rth
、Gth
、Bth
)(步驟223)。若差值為大於或等於臨界值,則將亮度判定值設定為1(步驟224)。另一方面,若差值低於臨界值,則將亮度判定值設定為0(步驟225)。換言之,當ΔR1
(x,y)≧Rth
時,紅色的亮度判定值αR1
(x,y)=1,而當ΔR1
(x,y)<Rth
時,紅色的亮度判定值αR1
(x,y)=0。綠色、藍色也是同樣的,根據差值ΔG1
(x,y)、ΔB1
(x,y)為大於或等於臨界值Gth
、Bth
還是低於Gth
、Bth
,決定其亮度判定值αG1
(x,y)、αB1
(x,y)為“1”還是“0”。在此,當辨別影像是否移動體時,使用兩個框影像之間的亮度值的變化量。臨界值(Rth
、Gth
、Bth
)為用來辨別影像是包含在移動體中還是包含在背景中的亮度值的變化量的臨界值,並且其對應於移動的變化量的臨界值。決定的亮度判定值αR1
(x,y)、αG1
(x,y)、αB1
(x,y)儲存在影像處理裝置101的資料儲存部112中。
接下來,運算處理部111判定RGB的亮度判定值的總合是否大於或等於2(步驟226)。若αR1
(x,y)+αG1
(x,y)+αB1
(x,y)≧2,則將像素(x,y)的差值判定值D1
(x,y)設定為1(步驟227)。若αR1
(x,y)+αG1
(x,y)+αB1
(x,y)<2,則將差值判定值D1
(x,y)設定為0(步驟228)。差值判定值D1
(x,y)儲存在影像處理裝置101的資料儲存部112中。
差值判定值D1
(x,y)對應於將兩個框影像fa、fa-1的差值影像二值化了的影像的像素(x,y)的亮度值。換言之,D1
(x,y)=1表示該二值的差值影像的像素(x,y)顯示白色,D1
(x,y)=0表示該二值的差值影像的像素(x,y)顯示黑色。在此,在框影像fa-1和目標框影像fa之間的亮度值沒有變化或變化量少的像素(x,y)中,D1
(x,y)=1,而在其變化量有大於或等於某個臨界值的像素(x,y)中,D1
(x,y)=0。
步驟222至步驟228也可以說是對像素(x,y)的RGB的亮度值的差值進行擇多處理,而將像素(x,y)的亮度值設定為白色或黑色的處理。藉由對所有的像素進行步驟222至步驟228,可以得到框影像fa和框影像fa-1的差值影像的二值影像。在此,該二值的差值影像的白色影像(亮度值=1的像素組)相當於組合框影像fa的移動體區域和框影像fa-1的移動體區域的區域。
另外,步驟222至步驟228為運算處理部111求出目標框影像fa的像素(x,y)和框影像fa-1的像素(x,y)的差值資料,並且根據該差值資料求出差值判定值D1
(x,y)的處理。在運算處理部111中對目標框影像fa的像素(x,y)和框影像fa+1的像素(x,y)進行與上述步驟222至步驟228的處理同樣的處理(步驟229至步驟235)。另外,如圖3所示,在步驟229至步驟235中計算出的資料的符號上附加“2
”,以便與在步驟222至步驟228中計算出的資料區別。
因此,藉由對所有的像素進行步驟229至步驟235,可以得到框影像fa和框影像fa+1的差值影像的二值影像。在此,該二值的差值影像的白色影像(亮度值=1的像素組)相當於組合框影像fa的移動體區域和框影像fa+1的移動體區域的區域。
接下來,運算處理部111判定兩個差值判定值D1
(x,y)和D2
(x,y)是否都是“1”(步驟236)。在兩個亮度判定值D1
(x,y)和D2
(x,y)都是“1”的情況下,將移動體判定值M(x,y)設定為“1”(步驟237),而在兩個亮度判定值D1
(x,y)和D2
(x,y)中的至少一著不是“1”的情況下,將移動體判定值M(x,y)設定為“0”(步驟238)。換言之,在步驟236中求出D1
(x,y)=1、D2
(x,y)=1的AND運算(AND)。若該AND運算的結果為“真”,則M(x,y)=1(步驟237),若該AND運算的結果為“偽”,則M(x,y)=0(步驟238。)
移動體判定值M(x,y)表示掩罩影像ma的像素(x,y)的亮度值。換言之,當M(x,y)=1時,掩罩影像ma的像素(x,y)顯示白色,而當M(x,y)=0時,掩罩影像ma的像素(x,y)顯示黑色。
接下來,判定是否已對所有的像素進行了移動體判定值M(x,y)的計算(步驟239)。當所有的像素的移動體判定值M(x,y)沒有決定時,返回步驟222及步驟229。藉由計算出所有的像素的移動體判定值M(x,y),產生以移動體判定值M(x,y)為亮度值的掩罩影像ma,而移動體區域的取出就此結束(步驟240)。
在掩罩影像ma中,移動體判定值M(x,y)=1的區域(顯示白色的像素組)為目標框影像fa的移動體區域,移動體判定值M(x,y)=0的區域(顯示黑色的像素組)為目標框影像fa的背景區域。換言之,掩罩影像ma為由移動體區域和背景區域所構成的二值的影像,並且藉由產生掩罩影像ma,目標框影像fa被分成移動體區域和不包含在移動體區域中的區域(背景區域)。
另外,藉由圖3及圖4的移動體取出處理所產生的掩罩影像ma可以說是藉由計算出小於或等於兩個二值化的影像的AND運算(AND)而形成的二值影像,該兩個二值化的影像即將框影像fa和框影像fa-1的差值影像二值化而得到的影像以及將框影像fa和框影像fa+1的差值影像二值化而得到的影像。
在此,影像處理裝置101為藉由進行圖3及圖4的移動體取出處理,從目標框影像中取出移動體的移動體取出部,並且為產生由移動體區域和背景區域所構成的掩罩影像的掩罩影像產生部。
也可以在影像處理裝置101中先對用於移動體取出處理的三個框影像進行影像處理,然後產生掩罩影像ma,以便更正確地從目標框影像中取出移動體。作為這種影像處理,有平均化處理、使用水平方向的線性一次濾波器(linear primary differential filter)的濾波器處理、邊緣檢測處理、使用中值濾波器的雜訊去除處理等。
在圖3中的移動體取出處理的流程中,將在步驟226及步驟233中決定差值判定值D1
(x,y)、D2
(x,y)的值的條件設定為RGB的亮度判定值的總合為大於或等於2,但是也可以是其總合為大於或等於1或大於或等於3的條件。
接下來,將說明使用掩罩影像ma判定目標框影像fa的像素是移動體區域的像素還是背景區域的像素,並基於其判定校正目標框影像fa來產生校正框影像的方法。在此,將該處理稱為“掩罩處理”。在圖2的流程中,步驟201至步驟206的處理相當於掩罩處理。使用圖5來說明掩罩處理。圖5為本實施例模式的掩罩處理的流程圖。
在掩罩處理中,首先計算出移動體區域在目標框影像fa中所占的比例Pm(稱為“移動體區域的比例Pm”)(步驟251)。該移動體區域的比例Pm等於掩罩影像ma的白色顯示的區域(移動體判定值M(x,y)=1的像素組,並且亮度值=1的區域)在其掩罩影像ma中所占的比例。於是,在此,根據掩罩影像ma的所有像素數量中的亮度值=1(移動體判定值M(x,y)=1)的像素數量的比例計算出移動體區域所占的比例Pm。計算出了的移動體區域的比例Pm儲存在影像處理裝置101的資料儲存部112中。
在此,將移動體區域的比例Pm的計算出處理作為掩罩處理中的一個處理,但是也可以在移動體取出處理中求出移動體區域的比例Pm。在此情況下,藉由每當進行步驟237時都計算設定為M(x,y)=1的像素數量而完成步驟239,可以根據該像素數量計算出比例Pm。
接下來,將目標框影像fa的像素(x,y)的亮度值讀取到運算處理部111中(步驟252)。將掩罩影像ma的像素(x,y)的亮度值讀取到運算處理部111中(步驟253),並且判定其亮度值是否是1(步驟254)。掩罩影像ma的像素(x,y)的亮度值相當於移動體判定值M(x,y),其值為“1”或“0”。當掩罩影像ma的像素(x,y)的亮度值=1時,對目標框影像fa的像素(x,y)進行移動體影像處理,來校正其亮度值(步驟255)。當掩罩影像ma的像素(x,y)的亮度值≠1(亮度值=0)時,對目標框影像fa的像素(x,y)進行背景影像處理,來校正其亮度值(步驟256)。藉由步驟255及步驟256決定的亮度值為校正框影像Fa的像素(x,y)的亮度值。該亮度值被儲存到資料儲存部112中的校正框影像用記憶體電路中。
接下來,判定是否已對目標框影像fa的所有像素進行了步驟255或步驟256的處理(步驟257)。在所有的像素的處理沒有結束的情況下,重複進行步驟252至步驟257。藉由計算出所有的像素的亮度值,產生校正框影像Fa(步驟258),而掩罩處理就此結束。
換言之,影像處理裝置101為產生校正框影像Fa的裝置,其包括產生掩罩影像ma的掩罩影像產生部、以及產生校正框影像Fa的校正框影像產生部。
在步驟256的背景影像處理中,藉由步驟251所計算出的移動體區域的比例Pm越大,進行獲得越大模糊效果的模糊處理。在本實施例模式中,將模糊處理設定為等級0至等級5的六個階段。等級5的模糊效果最大,而等級0的模糊效果最小。在本實施例模式中,等級0的模糊處理就是不進行模糊處理,且不校正像素的亮度值的處理。
在本實施例模式中,將移動體區域的比例Pm分成低於或等於100%且高於或等於50%、低於50%且高於或等於40%、低於40%且高於或等於30%、低於30%且高於或等於20%、低於20%且高於或等於10%、以及低於10%且高於或等於0%的六個範圍,並且根據移動體區域的比例Pm來進行等級5至等級0的模糊處理。使用圖6來說明背景影像處理。圖6為本實施例模式的背景影像處理的流程圖。
判定藉由步驟251所求出的移動體區域的比例Pm是否大於或等於50%(步驟261)。若是Pm≧50%,就進行等級5的模糊處理(步驟262)。若是Pm<50%,就判定比例Pm是否大於或等於40%(步驟263)。若是步驟263的判定結果為Pm≧40%,就進行等級4的模糊處理(步驟264),而若該判定結果為Pm<40%,就判定比例Pm是否大於或等於30%(步驟265)。若是步驟265的判定結果為Pm≧30%,就進行等級3的模糊處理(步驟266),而若該判定結果為Pm<30%,就判定比例Pm是否大於或等於20%(步驟267)。若是步驟267的判定結果為Pm≧20%,就進行等級2的模糊處理(步驟268),而若該判定結果為Pm<20%,就判定比例Pm是否大於或等於10%(步驟269)。若是步驟269的判定結果為Pm≧10%,就進行等級1的模糊處理(步驟270),而若該判定結果為Pm<10%,就進行等級0的模糊處理(步驟271)。在此,由於等級0的模糊處理為不校正像素(x,y)的亮度值的處理,所以校正前的像素(x,y)的亮度值成為校正後的亮度值。
如圖6的流程圖所示,與移動體區域的比例Pm對應地對包含在背景區域中的像素(x,y)進行等級5-等級0中任一等級的模糊處理,而背景影像處理就此結束。
在圖6的流程圖中,將模糊處理的等級設定為六個階段,然而本發明的實施例模式不局限於此,只要模糊處理為大於或等於兩個步驟即可。另外,設定模糊處理的等級的條件不局限於圖6的流程圖,而實施者可以適當地設定。換言之,動體區域的比例Pm越大,獲得越大模糊效果地設定模糊處理的等級即可。
接下來,將作為模糊處理進行平均化處理的情況作為例子,說明進行不同等級的模糊處理的方法。
在平均化處理中,可以利用藉由增加求出亮度的平均值的像素數量增強模糊處理的效果,而設定模糊處理的等級。在此情況下,例如,當等級0時不進行像素的平均化處理。在等級1的平均化處理中,將以物件的像素為中心配置為3行3列的9個像素的亮度值的平均值作為校正後的像素的亮度值。在等級2的平均化處理中,求出亮度值的平均值的像素組是以物件的像素為中心配置為5行5列的25個像素組。在等級3的平均化處理中,其為配置為7行7列的49個像素組,在等級4的平均化處理中,其為配置為9行9列的81個像素組,並且在等級5的平均化處理中,其為配置為11行11列的121個像素組。
或者,可以利用藉由增加平均化處理的次數增強模糊處理的效果,而設定模糊處理的等級。例如,當等級0時,不對像素進行平均化處理。在等級1的平均化處理中,將以物件的像素為中心配置為3行3列的9個像素的亮度值的平均值作為校正後的像素值。當等級2時,進行兩次等級1的平均化處理。換言之,在第一次平均化處理中,求出以物件的像素為中心配置為3行3列的9個像素的亮度值的平均值。在第二次平均化處理中,也求出相同的9個像素的亮度值的平均值。但是,作為物件的像素的亮度值,使用藉由第一次平均化處理算出的平均值。藉由第二次平均化處理算出的平均值為藉由等級2的模糊處理算出的像素的亮度值。等級3至5的平均化處理也與等級2的平均化處理同樣,在等級3、等級4、以及等級5的平均化處理中,進行平均化處理的次數分別為三次、四次、五次。
即使模糊處理為中值濾波器處理、減弱對比度的對比度轉換處理、以及鑲嵌處理,也可以與平均化處理同樣地進行不同等級的模糊處理。
接下來,使用影像而具體說明圖2的影像處理。圖7A及7B為示出本實施例模式的影像處理方法的內容的說明圖。圖7A示出校正前的六個框影像300至305,圖7B示出對各個框影像300至305進行影像處理的校正框影像310至315。如圖7A所示,在此,作為要進行影像處理的移動影像,設想人從遠處的兩棵樹之間靠近來的移動影像。注意,圖7A所示的框影像300至305不是在時間上相鄰的框影像。
藉由進行本實施例模式的影像處理,對移動體的人進行移動體影像處理。因此,人的影像變清晰或被增強(參照圖7B)。另一方面,基於圖6的流程圖,根據人的影像在框影像中所占的比例,對除人以外的背景影像進行模糊程度不同的模糊處理。在圖7A的移動影像的情況下,由於人越靠近,人在框影像中所占的面積越大,所以時間越經過,框影像的背景越模糊。在圖7B所示的各個校正框影像310至315中,分別對背景區域進行等級0至5的模糊處理。
如圖7B所示,藉由進行本實施例模式的影像處理,人越靠近,背景越模糊。結果,由於從背景所得到的資訊量逐漸減少,所以可以使觀看該移動影像者自然地產生人從遠處越靠近,焦點越集中到人上的感覺。
如上所述,藉由移動體區域在框影像中所占的比例越大,進行對於背景區域的模糊效果越增強的影像處理,而可以產生高臨場感(距離感、縱深感)的移動影像。換言之,在本實施例模式中,由於藉由根據影像的移動改變對於各個框影像的背景的模糊效果,以影像處理預先進行與人的眼睛在看物體時進行的焦點調整功能極為相近的處理,因此,即使顯示在二維畫面上時,也可以產生觀看者可以感覺到距離感、縱深感的移動影像。
藉由如監控攝像機那樣固定攝像機以相同的焦點條件拍攝移動影像,可以拍攝背景沒有變化的移影像。這種移動影像例如為由圖7A所示的多個框影像所構成的移動影像。在本實施例模式中,說明從這種移動影像中取出移動體的方法。
在本實施例模式中,準備沒有移動體的僅由背景所構成的框影像(稱為“背景用框影像”),而代替三個框影像。產生該背景用框影像和目標框影像的差值影像,將該差值影像二值化的影像成為掩罩影像ma。
當產生掩罩影像ma時,求出像素(x,y)的亮度的差值值(ΔR1
(x,y)、ΔG1
(x,y)、ΔB1
(x,y))。根據差值為大於或等於臨界值還是低於臨界值,將亮度判定值(αR1
(x,y)、αG1
(x,y)、αB1
(x,y))設定為“0”或“1”。到此的流程與圖3的步驟222至步驟225相同。
若是αR1
(x,y)+αG1
(x,y)+αB1
(x,y)≧2,則該像素的移動體判定值M(x,y)=1。若是αR1
(x,y)+αG1
(x,y)+αB1
(x,y)<2,則該像素的移動體判定值M(x,y)=0。藉由決定所有像素的移動體判定值M(x,y),與實施例模式1同樣地產生掩罩影像ma。
在對背景區域及移動體區域雙方進行影像處理的情況下,也可以根據移動體區域在框影像中所占的比例改變對於移動體區域的影像處理的效果。換言之,在移動體影像處理中,也與圖6的背景影像處理同樣,根據移動體區域的比例Pm,對移動體區域進行不同等級的影像處理。在此情況下,移動體區域的比例Pm越大,將在移動體影像處理中進行的影像處理(銳化處理、對比度增強處理等)的等級設定得使影像的銳化或增強效果越大即可。
在本實施例模式中,說明圖1的影像輸出裝置102。圖8A及8B為用於影像輸出裝置102的液晶顯示裝置的結構例子的說明圖。圖8A為本實施例模式的液晶顯示裝置的俯視圖。圖8B為沿圖8A的線C-D切割的剖面圖。本實施例模式的液晶顯示裝置具有形成有由電晶體所構成的電路的基板、與該基板相對的基板、以及夾在這兩個基板之間的液晶層。在本實施例模式的液晶顯示裝置中,電路由使用晶體半導體膜的頂部閘極型電晶體形成。另外,其顯示模式為MVA(多域垂直配向)模式。
如圖8A所示,在基板5100上形成有像素部5101、第一掃描線驅動電路5102、第二掃描線驅動電路5103、以及信號線驅動電路5104。像素部5101具有多個像素。在各個像素中設置有像素電極、以及電連接到像素電極的電晶體。另外,第一掃描線驅動電路5102、第二掃描線驅動電路5103、以及信號線驅動電路5104由多個電晶體等的多個半導體元件所構成。
像素部5101、第一掃描線驅動電路5102、第二掃描線驅動電路5103、以及信號線驅動電路5104被密封劑5516密封在元件基板5100和基板5510之間。另外,藉由TAB方式將FPC 5200及IC晶片5530設定在基板5100上。從影像處理裝置101輸出到影像輸出裝置102的信號被輸入到FPC 5200中。
參照圖8B說明沿圖8A的線C-D切割的剖面結構。為了容易說明,在圖8B中,作為像素部5101的剖面結構示出一個電晶體5110及像素電極5111的一部分,並且作為第二掃描線驅動電路5103的剖面結構示出兩個電晶體5112及5113。
在基板5100上作為基底膜形成有由單層結構或疊層結構所構成的絕緣膜5501。作為絕緣膜5501,形成氧化矽膜、氮化矽膜、氮氧化矽膜、或氧氮化矽膜等。在此,氮氧化矽就是其氮含量比氧含量多的材料,而氧氮化矽就是其氧含量比氮含量多的材料。另外,與電晶體5110、5112、5113的半導體膜接觸的絕緣膜5501的層較佳由氧化矽膜或氧氮化矽膜形成。這是因為可以減少絕緣膜5501和通道形成區域之間的介面態密度的緣故。另外,作為絕緣膜5501,較佳至少形成一層如氮化矽膜或氮氧化矽膜之類的對鈉離子具有阻擋效果的膜。
在絕緣膜5501上形成有島狀半導體膜5502,在半導體膜5502上作為閘極絕緣膜形成有絕緣膜5503。半導體膜5502構成電晶體5110、5112、5113的通道形成區域、以及源極區及汲極區。絕緣膜5503由熱氧化膜、氧化矽膜、氮化矽膜、或氧氮化矽膜等的單層膜或這些膜的疊層膜所形成。絕緣膜5503的與半導體膜5502接觸的層較佳為氧化矽膜或氧氮化矽膜。這是因為可以減少絕緣膜5503和半導體膜5502之間的介面態密度的緣故。
在絕緣膜5503上形成加工成預定形狀的導電膜5504。導電膜5504為單層結構、多層結構的膜,並且構成電晶體5110、5112、5113的閘極電極、以及像素部5101的掃描線。在此,為了抑制洩漏電流,採用雙閘極結構形成像素部5101的電晶體5110。
覆蓋導電膜5504地形成由單層結構或疊層結構構成的絕緣膜5505。絕緣膜5505用作層間膜。作為由用於絕緣膜5505的有機材料所構成的膜、有由聚醯亞胺、丙烯酸、聚醯胺、聚醯亞胺醯胺、抗蝕劑、苯並環丁烯、環氧樹脂所構成的膜等。另外,作為由無機材料構成的膜,有由氧化矽、氮化矽、氧氮化矽、氮氧化矽、氮化鋁、氧化鋁、氧氮化鋁、氮含量比氧含量多的氮氧化鋁、類金剛石碳(DLC)、含氮碳(例如CN)、磷矽玻璃(PSG)、硼磷矽玻璃(BPSG)所構成的膜等。
在絕緣膜5503及絕緣膜5505中形成有接觸孔。接觸孔到達各個電晶體5110、5112、5113的源極區或汲極區。在絕緣膜5505上形成有加工成預定形狀的導電膜5506。導電膜5506構成電晶體5110、5112、5113的源極電極、汲極電極、以及像素部5101的信號線。導電膜5506為單層結構或多層結構的膜。
在絕緣膜5505上形成有絕緣膜5507。絕緣膜5507可以與絕緣膜5505同樣地形成。在將絕緣膜5507加工成平坦化膜的情況下,例如形成至少一層由有機材料所構成的膜作為絕緣膜5507即可。藉由將絕緣膜5507加工成平坦化膜,可以抑制液晶分子的配向無序。
在絕緣膜5507上形成有像素電極5111。像素電極5111在形成於絕緣膜5507中的接觸孔中與導電膜5506接觸。因此,像素電極5111和電晶體5110電連接。另外,在像素電極5111中形成有開口部。借助於該開口部,藉由在液晶分子中不存在電場的狀態下將液晶分子傾斜地配向,可以以MVA模式來進行顯示。另外,為了將液晶分子這樣配向,也可以在像素電極5111上面設置突起部,而代替形成開口部。
在將像素電極5111作為透光電極的情況下,使用透射光的透光導電膜形成像素電極5111。作為透光導電膜,例如有在氧化銦中包含氧化錫的銦錫氧化物膜、在銦錫氧化物中包含氧化矽的銦錫矽氧化物膜、在氧化銦中包含氧化鋅的銦鋅氧化物膜、氧化鋅膜、或氧化錫膜等。另一方面,在將像素電極5111作為反射電極的情況下,使用反射光的導電膜形成像素電極5111。例如,使用由Ti、Mo、Ta、Cr、W、Al等的金屬或它們的合金等所構成的單層結構的膜或疊層結構的膜形成像素電極5111即可。
在絕緣膜5507上的不與像素電極5111重疊的區域形成有間隔物5508。間隔物5508由樹脂所形成。借助於間隔物5508,維持基板5100和基板5510之間的間隙(空隙)。在該空隙中形成包含液晶分子的液晶層5517。覆蓋像素電極5111及間隔物5508地形成有配向膜5509。根據需要形成配向膜5509。
基板5510用作為相對基板。在基板5510上形成有相對電極5511、顏色濾光片層5512、以及突起部5513。相對電極5511可以由用來形成像素電極5111的透光導電膜所形成。借助於突起部5513,藉由在不存在電場的狀態下將液晶分子傾斜地配向,可以以MVA模式進行顯示。在基板5510上覆蓋相對電極5511及突起部5513地還形成有配向膜5514。根據需要形成配向膜5514。
在基板5100和基板5510之間圍繞像素部5101、第一掃描線驅動電路5102、第二掃描線驅動電路5103、以及信號線驅動電路5104地形成有密封劑5516。在由密封劑5516密封的基板5100和基板5510的空隙中存在包含液晶分子的液晶層5517。
在被密封劑5516所圍繞的區域的外側並且在絕緣膜5507上形成有多個端子5518。端子5518由與像素電極5111相同的導電膜所構成,並且電連接到像素部5101、第一掃描線驅動電路5102、第二掃描線驅動電路5103、以及信號線驅動電路5104中的任一個。在端子5518上中間夾著各向異性導電材料膜5519連接有FPC 5200。另外,在FPC 5200上中間夾著各向異性導電體膜5520固定有IC晶片5530。換言之,端子5518、FPC 5200、以及IC晶片5530彼此電連接。
雖然不一定需要設置IC晶片5530,但是藉由在IC晶片5530中包括功能電路(記憶體或緩衝器),可以有效地利用基板面積。
另外,在本實施例模式中,雖然說明了顯示模式為MVA模式的液晶顯示裝置,但是液晶顯示裝置的顯示模式也可以為PVA(影像垂直調整)模式。在採用PVA方式的情況下,在圖8B的結構中,在相對電極5511中設置槽縫即可。另外,液晶的驅動模式不局限於MVA方式、PVA方式,也可以採用TN(扭轉向列)模式、IPS(平面內轉換)模式、FFS(邊緣電場切換)模式、ASM(軸線對稱排列微單元)模式、OCB(光學補償彎曲)模式、FLC(鐵電性液晶)模式、AFLC(反鐵電性液晶)模式等。
另外,作為像素輸出裝置102,除了液晶顯示裝置以外,還可以使用電致發光顯示裝置、場致發射顯示器(Field Emission Display)、電漿顯示器等的各種顯示裝置。另外,影像輸出裝置102還可以為硬碟錄影機、DVD燒錄機等的各種錄影裝置。
在本實施例模式中,說明具備顯示部的影像處理系統的結構例子。
圖9示出組合了顯示裝置1101和電路板1111的影像處理系統的一例。在電路板1111上設置有影像處理裝置101。顯示裝置1101為影像輸出裝置102,例如可以使用實施例模式3的液晶顯示裝置。顯示裝置1101具有像素部1102、掃描線驅動電路1103、以及信號線驅動電路1104。在電路板1111上例如形成有控制電路1112及運算電路1113等。顯示裝置1101和電路板1111透過連接佈線1114彼此連接。作為連接佈線1114可以使用FPC等。
例如,藉由使用圖9所示的影像處理系統來完成電視接收裝置。藉由將本說明書提出的影像處理系統(影像顯示系統)作為電視接收裝置,觀眾可以欣賞到高臨場感的影像的電視廣播。
本說明書提出的影像處理系統可以應用於各種電子裝置。作為這種電子裝置,例如可以舉出影像拍攝裝置如攝像機及數位相機等、護目鏡型顯示器、導航系統、電腦、遊戲機、攜帶型資訊終端(移動電腦、手機、攜帶型遊戲機或電子書籍等)、以及影像再生設備等。另外,典型的影像再生設備為具有再生記錄在DVD(數位影音光碟)或硬碟等的記錄媒體中的影像資料並顯示其影像資料的功能的裝置。使用圖10A至10C來說明電子裝置的一例。圖10A至10C為本實施例模式的電子裝置的外觀圖。
圖10A為監視器的外觀圖。監視器包括框體1211、支撐台1212、顯示部1213。圖10A所示的監視裝置有在顯示部顯示各種資訊(靜止影像、移動影像、文字影像等)的功能。另外,圖10A所示的監視器的功能不局限於此,可以具有各種功能。
圖10B為影像拍攝裝置的外觀圖。影像拍攝裝置包括主體1231、顯示部1232、影像接收部1233、操作鍵1234、外部連接埠1235、快門按鈕1236。圖10B所示的影像拍攝裝置具有拍攝靜止影像及移動影像的功能。影像拍攝裝置設置有校正拍攝的移動影像及靜止影像的影像處理裝置,可以在影像拍攝裝置中校正移動影像並將校正的移動影像寫入各種記錄媒體中。另外,圖10B所示的影像拍攝裝置的功能不局限於此,可以具有各種功能。
圖10C為電腦的外觀圖。電腦包括主體1251、殼體1252、顯示部1253、鍵盤1254、外部連接埠1255、指向裝置1256。另外,還包括影像處理裝置。圖10C所示的計算機具有在顯示部顯示各種資訊(靜止影像、移動影像、文字影像等)的功能。例如,基於鍵盤1254、指向裝置1256的輸入對移動影像進行影像處理。另外,圖10C所示的電腦的功能不局限於這些,可以具有各種功能。
本實施例模式可以與其他實施例模式適當地組合。
本說明書根據2008年3月5日在日本專利局受理的日本專利申請編號2008-054626而製作,所述申請內容包括在本說明書中。
100...影像處理系統
101...影像處理裝置
102...影像輸出裝置
111...運算處理部
112...資料儲存部
113...控制部
114...輸入側介面部
115...輸出側介面部
120...像素
121...顯示部
122...掃描線驅動電路
123...信號線驅動電路
125...掃描線
126...信號線
5100...基板
5101...像素部
5102...第一掃描線驅動電路
5103...第二掃描線驅動電路
5104...信號線驅動電路
5110...電晶體
5111...像素電極
5112...電晶體
5113...電晶體
5200...可撓性印刷電路板(FPC)
5501...絕緣膜
5502...半導體膜
5503...絕緣膜
5504...導電膜
5505...絕緣膜
5506...導電膜
5507...絕緣膜
5508...間隔物
5509...配向膜
5510...基板
5511...相對電極
5512...顏色濾光片層
5513...突起部
5514...配向膜
5516...密封劑
5517...液晶層
5518...端子
5519...各向異性導電材料膜
5520...可撓性印刷電路板(FPC)
5530...IC晶片
1101...顯示裝置
1102...像素部
1103...掃描線驅動電路
1104...信號線驅動電路
1111...電路板
1112...控制電路
1113...運算電路
1114...連接佈線
1211...殼體
1212...支撐台
1213...顯示部
1231...主體
1232...顯示部
1233...影像接收部
1234...操作鍵
1235...外部連接埠
1236...快門按鈕
1251...主體
1252...殼體
1253...顯示部
1254...鍵盤
1255...外部連接埠
1256...指向裝置
在附圖中:
圖1為示出影像處理系統的結構例子的方塊圖;
圖2為示出校正移動影像的影像處理的一例的流程圖;
圖3為示出移動體取出處理的一例的流程圖;
圖4為示出移動體取出處理的一例的流程圖;
圖5為示出掩罩處理的一例的流程圖;
圖6為示出背景影像處理的一例的流程圖;
圖7A和7B分別為校正前的框影像的說明圖和校正框影像的說明圖;
圖8A和8B為影像輸出裝置的結構例子的說明圖;
圖9為影像處理系統的結構例子的說明圖;
圖10A至10C分別為示出監視器的結構例子的外觀圖、示出影像拍攝裝置的結構例子的外觀圖、以及示出電腦的結構例子的外觀圖。
100...影像處理系統
101...影像處理裝置
102...影像輸出裝置
111...運算處理部
112...資料儲存部
113...控制部
114...輸入側介面部
115...輸出側介面部
120...像素
121...顯示部
122...掃描線驅動電路
123...信號線驅動電路
125...掃描線
126...信號線
Claims (24)
- 一種用來處理包括多個框影像的移動影像的影像處理方法,包括如下步驟:將該多個框影像中的一個框影像分成包含產生移動體的像素組的移動體區域和包含不產生該移動體的像素組的背景區域;以及對該多個框影像中的該一個框影像的該背景區域進行第一影像處理,並且對該多個框影像中的該一個框影像的該移動體區域進行第二影像處理,其中,該第一影像處理為模糊處理,並且對於該背景區域的該模糊處理隨著該移動體區域在該多個框影像中的該一個框影像中所占的比例增大而增強,其中,該第二影像處理係不同於該第一影像處理,並且該第二影像處理隨著該移動體區域在該多個框影像中的該一個框影像中所占的該比例增大而增強。
- 如申請專利範圍第1項的影像處理方法,其中,在該移動體區域在該多個框影像中的該一個框影像中所占的比例比預定值小時,不對該背景區域進行該模糊處理。
- 如申請專利範圍第1項的影像處理方法,其中,該第二影像處理包括銳化處理、增強對比度的對比度轉換處理、以及邊緣增強處理中的至少一個影像處理。
- 如申請專利範圍第1項的影像處理方法,其中,進行平均化處理、中值濾波器(median filter)處理、減弱對比度的對比度轉換處理、以及鑲嵌處理中的至少一個影 像處理作為該模糊處理。
- 一種用來處理包括多個框影像的移動影像的影像處理方法,包括如下步驟:根據第一框影像和該第一框影像的k框前的第二框影像間的差值、以及該第一框影像和該第一框影像的k框後的第三框影像間的差值,從該第一框影像中取出產生移動體的像素,並且產生使用移動體區域和背景區域形成的掩罩影像,該移動體區域包括產生該移動體的該像素,該背景區域包括不產生該移動體的像素,其中,k為自然數;使用該掩罩影像來判定產生該第一框影像的各個像素是包含在該背景區域中還是包含在該移動體區域中;以及對包含在該背景區域中的像素進行第一影像處理,並且對包含在該移動體區域中的像素進行第二影像處理,其中,該第一影像處理為模糊處理,並且對於該背景區域的該模糊處理隨著該移動體區域在該第一框影像中所占的比例增大而增強,並且其中,該第二影像處理係不同於該第一影像處理,並且該第二影像處理隨著該移動體區域在該第一框影像中所占的該比例增大而增強。
- 如申請專利範圍第5項的影像處理方法,其中,在該移動體區域在該第一框影像中所占的比例比預定值小時,該第一影像處理中不對包含在該背景區域中的該像素進行該模糊處理。
- 如申請專利範圍第5項的影像處理方法,其中,進 行銳化處理、增強對比度的對比度轉換處理、以及邊緣增強處理中的至少一個影像處理作為該第二影像處理。
- 如申請專利範圍第5項的影像處理方法,其中,作為該模糊處理,進行平均化處理、中值濾波器處理、減弱對比度的對比度轉換處理、以及鑲嵌處理中的至少一個影像處理。
- 一種影像處理系統,包括:顯示包含多個框影像的移動影像的影像顯示部;從該多個框影像中的至少一個框影像中取出移動體,並且將該多個框影像中的該至少一個框影像分成包含產生該移動體的像素組的移動體區域和包含不產生該移動體的像素組的背景區域的移動體取出部;以及對該背景區域進行第一影像處理並且對該移動體區域進行第二影像處理來產生校正框影像的校正框影像產生部,其中,該影像顯示部顯示該校正框影像,其中,該第一影像處理為模糊處理,並且對於該背景區域的該模糊處理隨著該移動體區域在該多個框影像中的該一個框影像中所占的比例增大而增強,並且其中,該第二影像處理係不同於該第一影像處理,並且該第二影像處理隨著該移動體區域在該多個框影像中的該一個框影像中所占的該比例增大而增強。
- 如申請專利範圍第9項的影像處理系統,其中,在該移動體區域在該多個框影像中的該一個框影像中所占 的比例比預定值小時,該校正框影像產生部不對該背景區域進行該模糊處理。
- 如申請專利範圍第9項的影像處理系統,其中,該校正框影像產生部進行銳化處理、增強對比度的對比度轉換處理、以及邊緣增強處理中的至少一個影像處理作為該第二影像處理。
- 如申請專利範圍第9項的影像處理系統,其中,該校正框影像產生部進行平均化處理、中值濾波器處理、減弱對比度的對比度轉換處理、以及鑲嵌處理中的至少一個影像處理作為該模糊處理。
- 一種影像處理系統,包括:顯示包括多個框影像的移動影像的影像顯示部;根據第一框影像和該第一框影像的k框前的第二框影像間的差值、以及該第一框影像和該第一框影像的k框後的第三框影像間的差值,從該第一框影像中取出產生移動體的像素,並且產生使用移動體區域和背景區域形成的掩罩影像的掩罩影像產生部,該移動體區域包含產生該移動體的像素組,該背景區域包含不產生該移動體的像素組,其中,k為自然數;以及使用該掩罩影像來判定產生該第一框影像的各個像素是包含在該背景區域中還是包含在該移動體區域中,並且對該背景區域的像素進行第一影像處理以及對該移動體區域的像素進行第二影像處理來產生校正框影像的校正框影像產生部, 其中,該影像顯示部顯示該校正框影像,其中,該第一影像處理為模糊處理,並且對於該背景區域的該模糊處理隨著該移動體區域在該第一框影像中所占的比例增大而增強,並且其中,該第二影像處理係不同於該第一影像處理,並且該第二影像處理隨著該移動體區域在該第一框影像中所占的該比例增大而增強。
- 如申請專利範圍第13項的影像處理系統,其中,在該移動體區域在該第一框影像中所占的比例比預定值小時,該校正框影像產生部在該第一影像處理中不對該背景區域的該等像素進行該模糊處理。
- 如申請專利範圍第13項的影像處理系統,其中,該校正框影像產生部進行銳化處理、增強對比度的對比度轉換處理、以及邊緣增強處理中的至少一個影像處理作為該第二影像處理。
- 如申請專利範圍第13項的影像處理系統,其中,該校正框影像產生部進行平均化處理、中值濾波器處理、減弱對比度的對比度轉換處理、以及鑲嵌處理中的至少一個影像處理作為該模糊處理。
- 一種由影像處理裝置進行的用來進行包括多個框影像的移動影像的影像處理的電腦程式,包括:使該影像處理裝置執行影像處理,包含:組構成從該多個框影像中的至少一個框影像中取出移動體,並且將該多個框影像中的該至少一個框影像分成包 含產生該移動體的像素組的移動體區域和包含不產生該移動體的像素組的背景區域的第一處理;以及組構成對該背景區域進行第一影像處理並且對該移動體區域進行第二影像處理來產生校正框影像的第二處理,其中,在該第二處理中對該背景區域進行的該第一影像處理為模糊處理,並且對於該背景區域的該模糊處理隨著該移動體區域在該多個框影像中的該一個框影像中所占的比例增大而增強,並且其中,在該第二處理中對該移動體區域進行的該第二影像處理係不同於該第一影像處理,並且該第二影像處理隨著該移動體區域在該多個框影像中的該一個框影像中所占的該比例增大而增強。
- 如申請專利範圍第17項的電腦程式,其中,在該移動體區域在該多個框影像中的該一個框影像中所占的比例比預定值小時,不對該背景區域進行該模糊處理。
- 如申請專利範圍第17項的電腦程式,其中,該第二影像處理包含銳化處理、增強對比度的對比度轉換處理、以及邊緣增強處理中的至少一個影像處理。
- 如申請專利範圍第17項的電腦程式,其中,進行平均化處理、中值濾波器處理、減弱對比度的對比度轉換處理、以及鑲嵌處理中的至少一個影像處理作為該模糊處理。
- 一種由影像處理裝置進行的用來進行包括多個框影像的移動影像的影像處理的電腦程式,包括: 使該影像處理裝置執行影像處理,包含:組構成根據成為校正物件的第一框影像和該第一框影像的k框前的第二框影像間的差值、以及該第一框影像和該第一框影像的k框後的第三框影像間的差值,從該第一框影像中取出產生移動體的像素,並且產生使用移動體區域和背景區域形成的掩罩影像的第一處理,該移動體區域包含產生該移動體的像素組,該背景區域包含不產生該移動體的像素組,其中,k為自然數;以及組構成使用該掩罩影像來判定產生該第一框影像的各個像素是包含在該背景區域中還是包含在該移動體區域中,並對該背景區域的像素進行第一影像處理,以及對該移動體區域的像素進行第二影像處理來產生校正框影像的第二處理,其中,在該第二處理中對該背景區域進行的該第一影像處理為模糊處理,並且對於該背景區域的該模糊處理隨著該移動體區域在該第一框影像中所占的比率增大而增強,並且其中,在該第二處理中對該移動體區域進行的該第二影像處理係不同於該第一影像處理,並且該第二影像處理隨著該移動體區域在該第一框影像中所占的該比例增大而增強。
- 如申請專利範圍第21項的電腦程式,其中,在該移動體區域在該第一框影像中所占的比例比預定值小時,在該第一影像處理中不對該像素進行模糊處理。
- 如申請專利範圍第21項的電腦程式,其中,該第二影像處理包含銳化處理、增強對比度的對比度轉換處理、以及邊緣增強處理中的至少一個影像處理。
- 如申請專利範圍第21項的電腦程式,其中,進行平均化處理、中值濾波器處理、減弱對比度的對比度轉換處理、以及鑲嵌處理中的至少一個影像處理作為該模糊處理。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008054626 | 2008-03-05 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW200952470A TW200952470A (en) | 2009-12-16 |
TWI524755B true TWI524755B (zh) | 2016-03-01 |
Family
ID=41053188
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW098106193A TWI524755B (zh) | 2008-03-05 | 2009-02-26 | 影像處理方法、影像處理系統及電腦程式 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8687918B2 (zh) |
JP (2) | JP5225155B2 (zh) |
CN (1) | CN101527773B (zh) |
TW (1) | TWI524755B (zh) |
Families Citing this family (45)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4245045B2 (ja) * | 2006-12-26 | 2009-03-25 | ソニー株式会社 | 撮像装置、撮像信号処理方法及びプログラム |
KR101552475B1 (ko) * | 2007-11-22 | 2015-09-11 | 가부시키가이샤 한도오따이 에네루기 켄큐쇼 | 화상 처리 방법, 화상 표시 시스템, 및 컴퓨터 프로그램 |
US10645346B2 (en) | 2013-01-18 | 2020-05-05 | Careview Communications, Inc. | Patient video monitoring systems and methods having detection algorithm recovery from changes in illumination |
CN102576412B (zh) | 2009-01-13 | 2014-11-05 | 华为技术有限公司 | 图像处理以为图像中的对象进行分类的方法和*** |
KR101310213B1 (ko) * | 2009-01-28 | 2013-09-24 | 한국전자통신연구원 | 깊이 영상의 품질 개선 방법 및 장치 |
US8867820B2 (en) * | 2009-10-07 | 2014-10-21 | Microsoft Corporation | Systems and methods for removing a background of an image |
JP5583177B2 (ja) * | 2009-12-28 | 2014-09-03 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
CN102804603B (zh) | 2010-01-20 | 2015-07-15 | 株式会社半导体能源研究所 | 信号处理电路及其驱动方法 |
CN101883209B (zh) * | 2010-05-31 | 2012-09-12 | 中山大学 | 一种背景模型与三帧差分相结合进行视频背景检测的方法 |
US8849060B2 (en) * | 2011-07-01 | 2014-09-30 | Semiconductor Energy Laboratory Co., Ltd. | Image processing method, image processing system and display device for modifying background colors based on object colors |
JP5771096B2 (ja) | 2011-08-31 | 2015-08-26 | 株式会社半導体エネルギー研究所 | 画像処理方法 |
TWI448146B (zh) * | 2011-10-14 | 2014-08-01 | Au Optronics Corp | 可改善鬼影現象之立體影像處理方法及其立體顯示裝置 |
US8876178B1 (en) * | 2011-10-14 | 2014-11-04 | Interlock, USA, Inc. | Sliding door handle with pivot pins |
BR112014009109A2 (pt) * | 2011-10-26 | 2017-04-18 | I-Cubed Res Center Inc | aparelho de processamento de imagem, método de processamento de imagem e meio de armazenamento |
KR101896026B1 (ko) * | 2011-11-08 | 2018-09-07 | 삼성전자주식회사 | 휴대 단말기에서 움직임 블러를 생성하는 장치 및 방법 |
US8867830B2 (en) * | 2011-12-06 | 2014-10-21 | Michael Donvig Joensson | Image processing method for recovering details in overexposed digital video footage or digital still images |
EP2629156B1 (en) * | 2012-01-27 | 2024-04-17 | Samsung Electronics Co., Ltd. | Image processing apparatus and method |
JP6218378B2 (ja) * | 2012-12-27 | 2017-10-25 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
US9366913B2 (en) | 2013-02-21 | 2016-06-14 | Semiconductor Energy Laboratory Co., Ltd. | Liquid crystal display device and electronic device |
JP6186184B2 (ja) * | 2013-06-21 | 2017-08-23 | 株式会社ソニー・インタラクティブエンタテインメント | 画像処理装置、画像処理システム、および画像処理方法 |
DE112013007228T5 (de) * | 2013-07-09 | 2016-04-28 | Mitsubishi Electric Corporation | Informationsdarstellungsvorrichtung |
CN103706115A (zh) * | 2013-12-31 | 2014-04-09 | 成都有尔科技有限公司 | 基于智能穿戴设备的互动游戏*** |
CN103871051B (zh) * | 2014-02-19 | 2017-01-18 | 小米科技有限责任公司 | 图像处理方法、装置和电子设备 |
US9727949B1 (en) * | 2014-11-19 | 2017-08-08 | Google Inc. | Providing secure digital images |
JP6624827B2 (ja) | 2015-07-13 | 2019-12-25 | キヤノン株式会社 | 情報処理装置、情報処理方法、コンピュータプログラム |
JP6584179B2 (ja) * | 2015-07-13 | 2019-10-02 | キヤノン株式会社 | 情報処理装置、情報処理方法、コンピュータプログラム |
JP6593629B2 (ja) * | 2015-09-09 | 2019-10-23 | ソニー株式会社 | 画像処理装置、固体撮像素子、および電子機器 |
US10460453B2 (en) * | 2015-12-30 | 2019-10-29 | Texas Instruments Incorporated | Feature point identification in sparse optical flow based tracking in a computer vision system |
WO2017122396A1 (ja) * | 2016-01-15 | 2017-07-20 | ソニー株式会社 | 制御装置、制御方法及びプログラム |
JP2018063381A (ja) * | 2016-10-14 | 2018-04-19 | 矢崎総業株式会社 | 表示装置 |
KR20180052089A (ko) * | 2016-11-09 | 2018-05-17 | 가부시키가이샤 한도오따이 에네루기 켄큐쇼 | 전자 기기의 동작 방법 |
CN109724528A (zh) * | 2017-10-30 | 2019-05-07 | 中冶长天国际工程有限责任公司 | 一种烧结机台车的篦条堵塞程度的确定方法及装置 |
CN108024057B (zh) * | 2017-11-30 | 2020-01-10 | Oppo广东移动通信有限公司 | 背景虚化处理方法、装置及设备 |
CN108093158B (zh) * | 2017-11-30 | 2020-01-10 | Oppo广东移动通信有限公司 | 图像虚化处理方法、装置、移动设备和计算机可读介质 |
CN108050462A (zh) * | 2017-12-04 | 2018-05-18 | 余姚市荣事特电子有限公司 | 一种组合式庭院灯 |
CN108005407A (zh) * | 2017-12-04 | 2018-05-08 | 余姚市荣事特电子有限公司 | 一种仓库滑轨式支撑梁 |
CN108036255A (zh) * | 2017-12-04 | 2018-05-15 | 余姚市荣事特电子有限公司 | 一种应急照明灯 |
KR102546990B1 (ko) | 2018-03-16 | 2023-06-23 | 엘지전자 주식회사 | 신호 처리 장치 및 이를 구비하는 영상표시장치 |
JP7122157B2 (ja) * | 2018-05-22 | 2022-08-19 | 大成建設株式会社 | 落石検出装置および落石検出システム |
JP2019207635A (ja) * | 2018-05-30 | 2019-12-05 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 移動体、画像生成方法、プログラム、及び記録媒体 |
CN110633773B (zh) * | 2018-06-22 | 2022-04-12 | 北京京东尚科信息技术有限公司 | 用于终端设备的二维码生成方法和装置 |
KR102575126B1 (ko) * | 2018-12-26 | 2023-09-05 | 주식회사 엘엑스세미콘 | 영상 처리 장치 및 그 방법 |
CN111340722B (zh) * | 2020-02-20 | 2023-05-26 | Oppo广东移动通信有限公司 | 图像处理方法、处理装置、终端设备及可读存储介质 |
CN116711296A (zh) * | 2021-02-25 | 2023-09-05 | Oppo广东移动通信有限公司 | 电子设备、控制电子设备的方法及计算机可读存储介质 |
CN113012640B (zh) * | 2021-03-08 | 2022-07-12 | 京东方科技集团股份有限公司 | 显示面板及显示装置 |
Family Cites Families (41)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63157579A (ja) | 1986-12-22 | 1988-06-30 | Nippon Telegr & Teleph Corp <Ntt> | 疑似3次元撮像装置 |
JP2941829B2 (ja) * | 1988-12-23 | 1999-08-30 | キヤノン株式会社 | 画像処理方法 |
JP3295437B2 (ja) | 1991-03-29 | 2002-06-24 | 日本放送協会 | 表示装置 |
JPH0636025A (ja) * | 1992-07-21 | 1994-02-10 | Dainippon Printing Co Ltd | デフォーカス処理装置 |
JP2919759B2 (ja) | 1994-05-18 | 1999-07-19 | 三洋電機株式会社 | 光学フィルタ及びこれを用いる立体表示装置 |
JPH08185521A (ja) | 1994-12-28 | 1996-07-16 | Clarion Co Ltd | 移動体カウント装置 |
JP3516774B2 (ja) | 1995-06-14 | 2004-04-05 | 三菱電機株式会社 | 立体映像表示装置 |
JPH09204159A (ja) | 1996-01-29 | 1997-08-05 | Canon Inc | 表示装置の駆動回路と駆動方法 |
JP3733165B2 (ja) | 1996-02-27 | 2006-01-11 | 富士写真フイルム株式会社 | デジタルプリンタの画像データ変換方法 |
JP3083995B2 (ja) * | 1996-08-30 | 2000-09-04 | 株式会社ハドソン | 画像処理方法および装置 |
JPH10111491A (ja) | 1996-10-08 | 1998-04-28 | Fujitsu Ltd | 液晶表示装置 |
JPH10233919A (ja) | 1997-02-21 | 1998-09-02 | Fuji Photo Film Co Ltd | 画像処理装置 |
US6157733A (en) | 1997-04-18 | 2000-12-05 | At&T Corp. | Integration of monocular cues to improve depth perception |
JPH11224324A (ja) | 1998-02-06 | 1999-08-17 | Fuji Photo Film Co Ltd | 画像信号処理方法及び装置 |
JP3668019B2 (ja) * | 1998-10-27 | 2005-07-06 | 株式会社ソニー・コンピュータエンタテインメント | 記録媒体、画像処理装置および画像処理方法 |
US6392620B1 (en) | 1998-11-06 | 2002-05-21 | Canon Kabushiki Kaisha | Display apparatus having a full-color display |
US6646687B1 (en) | 1999-04-16 | 2003-11-11 | Ultimatte Corporation | Automatic background scene defocusing for image compositing |
JP2001296841A (ja) | 1999-04-28 | 2001-10-26 | Matsushita Electric Ind Co Ltd | 表示装置 |
JP2001222264A (ja) | 2000-02-08 | 2001-08-17 | Nippon Soken Inc | カラー液晶表示装置用ガンマ補正装置、ガンマ補正方法及びガンマ補正データ作成方法 |
JP3485107B2 (ja) * | 2000-06-13 | 2004-01-13 | セイコーエプソン株式会社 | 電気光学装置、電気光学装置の製造方法、及び、電子機器 |
JP4040826B2 (ja) | 2000-06-23 | 2008-01-30 | 株式会社東芝 | 画像処理方法および画像表示システム |
TW536827B (en) | 2000-07-14 | 2003-06-11 | Semiconductor Energy Lab | Semiconductor display apparatus and driving method of semiconductor display apparatus |
JP4596224B2 (ja) | 2001-06-27 | 2010-12-08 | ソニー株式会社 | 画像処理装置および方法、記録媒体、並びにプログラム |
JP4413516B2 (ja) * | 2003-03-31 | 2010-02-10 | シャープ株式会社 | 信号タイミング調整システムおよび信号タイミング調整量設定プログラム |
JP3871333B2 (ja) | 2003-11-12 | 2007-01-24 | アンリツ産機システム株式会社 | 異物検出方法、異物検出プログラム及び異物検出装置 |
JP4321287B2 (ja) | 2004-02-10 | 2009-08-26 | ソニー株式会社 | 撮影装置および撮影方法、並びに、プログラム |
JP2005277916A (ja) | 2004-03-25 | 2005-10-06 | Seiko Epson Corp | 動画像処理装置、画像処理システム、動画像処理方法およびそのプログラム、記録媒体 |
JP2006050070A (ja) | 2004-08-02 | 2006-02-16 | Fuji Photo Film Co Ltd | 画像処理方法および装置並びにプログラム |
TW200627362A (en) | 2004-11-01 | 2006-08-01 | Seiko Epson Corp | Signal processing for reducing blur of moving image |
CN100511391C (zh) * | 2004-11-01 | 2009-07-08 | 精工爱普生株式会社 | 用于动图像模糊改善的信号处理 |
JP4649956B2 (ja) | 2004-11-04 | 2011-03-16 | セイコーエプソン株式会社 | 動き補償 |
JP4635663B2 (ja) | 2005-03-15 | 2011-02-23 | オムロン株式会社 | 画像処理システム、画像処理装置および方法、記録媒体、並びにプログラム |
US7702131B2 (en) | 2005-10-13 | 2010-04-20 | Fujifilm Corporation | Segmenting images and simulating motion blur using an image sequence |
JP4306671B2 (ja) | 2005-11-04 | 2009-08-05 | セイコーエプソン株式会社 | 動画像表示装置および動画像表示方法 |
JP2007158706A (ja) | 2005-12-05 | 2007-06-21 | Fujifilm Corp | 動画生成装置、動画生成方法、及びプログラム |
US20100002009A1 (en) | 2005-12-22 | 2010-01-07 | Yoshiki Takata | Display device, a receiving device and a method for driving the display device |
JP2007264722A (ja) | 2006-03-27 | 2007-10-11 | Victor Co Of Japan Ltd | 画像処理装置 |
KR100657522B1 (ko) * | 2006-03-31 | 2006-12-15 | 삼성전자주식회사 | 휴대용 단말기를 이용한 아웃 포커싱 촬영 장치 및 방법 |
US20080079852A1 (en) | 2006-10-02 | 2008-04-03 | Seiko Epson Corporation | Video display method, video signal processing apparatus, and video display apparatus |
EP2223294B1 (en) | 2007-11-20 | 2013-04-10 | Semiconductor Energy Laboratory Co, Ltd. | Liquid crystal display device and image display method of the same |
KR101552475B1 (ko) | 2007-11-22 | 2015-09-11 | 가부시키가이샤 한도오따이 에네루기 켄큐쇼 | 화상 처리 방법, 화상 표시 시스템, 및 컴퓨터 프로그램 |
-
2009
- 2009-02-26 TW TW098106193A patent/TWI524755B/zh not_active IP Right Cessation
- 2009-02-26 US US12/393,282 patent/US8687918B2/en active Active
- 2009-02-27 JP JP2009045844A patent/JP5225155B2/ja active Active
- 2009-03-05 CN CN2009101261934A patent/CN101527773B/zh not_active Expired - Fee Related
-
2013
- 2013-03-12 JP JP2013049122A patent/JP2013152734A/ja not_active Withdrawn
Also Published As
Publication number | Publication date |
---|---|
US20090225183A1 (en) | 2009-09-10 |
CN101527773A (zh) | 2009-09-09 |
CN101527773B (zh) | 2013-04-03 |
TW200952470A (en) | 2009-12-16 |
JP5225155B2 (ja) | 2013-07-03 |
JP2009239903A (ja) | 2009-10-15 |
JP2013152734A (ja) | 2013-08-08 |
US8687918B2 (en) | 2014-04-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI524755B (zh) | 影像處理方法、影像處理系統及電腦程式 | |
KR101552475B1 (ko) | 화상 처리 방법, 화상 표시 시스템, 및 컴퓨터 프로그램 | |
US20190293977A1 (en) | Liquid crystal panel | |
US8009248B2 (en) | Liquid crystal display and television receiver | |
US8576277B2 (en) | 3-D display device and display method thereof | |
US9756318B2 (en) | Method of and apparatus for processing image data for display by a multiple-view display device | |
JP5180916B2 (ja) | 画像処理システム、及び画像処理方法 | |
KR101515031B1 (ko) | 액정 표시장치 및 이 액정 표시장치의 화상 표시방법 | |
TW201203214A (en) | Driving method of display device | |
TW201300840A (zh) | 顯示裝置及其驅動方法 | |
TWI420417B (zh) | 用於處理以顯示裝置顯示之影像資料的方法及設備 | |
TW200529157A (en) | Display device and imaging method | |
TW200822050A (en) | Method for displaying and processing video data and related video data processing apparatus | |
US20210358969A1 (en) | Display device and electronic apparatus | |
US11736814B2 (en) | Image processing method, storage medium and electronic device | |
WO2020192338A1 (zh) | 屏下摄像组件及相应的终端设备 | |
TWI384417B (zh) | 影像處理方法及其裝置 | |
JP4453434B2 (ja) | 液晶装置及び電子機器 | |
US9092904B2 (en) | Multi view image processing apparatus and image processing method thereof | |
CN115225740B (zh) | 一种电子设备、显示屏及成像方法 | |
JP2013187837A (ja) | 画像処理装置、プロセッサ、映像表示装置、画像処理方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
MM4A | Annulment or lapse of patent due to non-payment of fees |