CN105491358A - 一种图像处理方法及装置、终端 - Google Patents
一种图像处理方法及装置、终端 Download PDFInfo
- Publication number
- CN105491358A CN105491358A CN201510843465.8A CN201510843465A CN105491358A CN 105491358 A CN105491358 A CN 105491358A CN 201510843465 A CN201510843465 A CN 201510843465A CN 105491358 A CN105491358 A CN 105491358A
- Authority
- CN
- China
- Prior art keywords
- pixel
- color component
- pixel value
- field picture
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 23
- 238000000034 method Methods 0.000 claims abstract description 86
- 238000012545 processing Methods 0.000 claims description 51
- 230000008569 process Effects 0.000 description 32
- 238000003860 storage Methods 0.000 description 17
- 238000004891 communication Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 12
- 230000000875 corresponding effect Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 9
- 238000003384 imaging method Methods 0.000 description 9
- 238000004364 calculation method Methods 0.000 description 8
- 238000001914 filtration Methods 0.000 description 8
- 238000004422 calculation algorithm Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 230000009467 reduction Effects 0.000 description 5
- 238000012935 Averaging Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000006837 decompression Effects 0.000 description 4
- 238000010295 mobile communication Methods 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 208000034699 Vitreous floaters Diseases 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000002146 bilateral effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 230000005693 optoelectronics Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 241000256844 Apis mellifera Species 0.000 description 1
- 241001269238 Data Species 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 230000000712 assembly Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 239000003990 capacitor Substances 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000005314 correlation function Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000006386 memory function Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000011946 reduction process Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000007493 shaping process Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种图像处理方法及装置、终端,所述方法还包括:获取连续的N帧图像,所述N为大于等于3的整数;从所述N帧图像中确定一帧作为基准帧,将除所述基准帧之外的(N-1)帧图像确定为对比帧;将所述基准帧在第一色彩分量上第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)对比,得到对比结果;所述第一像素点为所述N帧图像中坐标为(i,j)的像素点,所述第一色彩分量为所述M个色彩分量的任意一个分量;根据所述对比结果确定在第一色彩分量上第一像素点的像素值,依此得到第一色彩分量上剩余的全部像素点的像素值;以得到第一色彩分量上像素值的方式得到除所述第一色彩分量外的其他色彩分量上的全部像素点的像素值;将所述M个色彩分量上全部像素点的像素值组成一帧图像。
Description
技术领域
本发明涉及图像处理技术,尤其涉及一种图像处理方法及装置、终端。
背景技术
现如今,科学技术一日千里,电子设备如手机、平板电脑等的拍照功能越来越完善。由于其体积小便于携带等特性,越来越多的人更热衷于使用电子设备如手机拍照功能来记录生活中的美好瞬间,人们对手机拍摄的图像质量要求也越来越高。但是令人厌恶的是,在亮度不够的场合,图像中经常会带有一些噪声(亮度噪声加色度噪声),并且亮度越低噪声越大。这些噪声的存在严重的影响图像的视觉质量。
发明内容
有鉴于此,本发明实施例为解决现有技术中存在的至少一个问题而提供一种图像处理方法及装置、终端,能够提高去噪效果,并能克服容易造成边缘细节的损失等缺点,使最终拍照得到图片有更好的视觉效果。
本发明实施例的技术方案是这样实现的:
第一方面,本发明实施例提供一种图像处理方法,所述方法包括:
获取连续的N帧图像,所述N为大于等于3的整数,所述N帧图像的数据采用颜色模型来表示,所述颜色模型包括M个色彩分量,所述M为大于等于1的整数;
从所述N帧图像中确定一帧作为基准帧,将除所述基准帧之外的(N-1)帧图像确定为对比帧;
将所述基准帧在第一色彩分量上第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)对比,得到对比结果;所述第一像素点为所述N帧图像中坐标为(i,j)的像素点,所述第一色彩分量为所述M个色彩分量的任意一个色彩分量;
根据所述对比结果确定在第一色彩分量上第一像素点的像素值,依此得到第一色彩分量上剩余的全部像素点的像素值;
以得到第一色彩分量上像素值的方式,得到除所述第一色彩分量外的其他色彩分量上的全部像素点的像素值;
将所述M个色彩分量上全部像素点的像素值组成一帧图像。
可选地,针对同一对象,连续拍摄N帧图像。
可选地,所述将所述基准帧在第一色彩分量上第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)对比,得到对比结果,包括:
将基准帧在第一色彩分量上的第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)进行做差,得到差值z(i,j);
判断所述差值z(i,j)是否在预设的第一阈值范围内,得到判断结果。
可选地,根据所述对比结果确定在第一色彩分量上第一像素点的像素值,包括:
当所述判断结果表明至少有一个所述差值z(i,j)在预设的第一阈值范围内时,确定第一像素值集合,所述第一像素集合为所述差值z(i,j)在预设的第一阈值范围内时对应的Q0(i,j);
将所述Q1(i,j)与第一像素值集合进行算术平均,得到第一色彩分量上第一像素点的像素值Q(i,j)。
可选地,根据所述对比结果确定在第一色彩分量上第一像素点的像素值,包括:
当所述判断结果表明至少有一个所述差值z(i,j)在预设的第一阈值范围内时,将Q1(i,j)作为中心点选取一图像块;
从所述图像块内确定第二像素值集合,所述第二像素值集合为图像块内满足预设的第二阈值范围内的像素值的像素点;
将所述Q1(i,j)与第二像素值集合进行算术平均,得到第一色彩分量上第一像素点的像素值Q(i,j)。
可选地,所述图像块为以下之一:
3个像素×3个像素、5个像素×5个像素、7个像素×7个像素、9个像素×9个像素。
可选地,所述N为4。
第二方面,本发明实施例提供一种图像处理装置,所述装置包括获取单元、第一确定单元、对比单元、第二确定单元、第一处理单元、第二处理单元和组成单元,其中:
所述获取单元,用于获取连续的N帧图像,所述N为大于等于3的整数,所述N帧图像的数据采用颜色模型来表示,所述颜色模型包括M个色彩分量,所述M为大于等于1的整数;
所述第一确定单元,用于从所述N帧图像中确定一帧作为基准帧,将除所述基准帧之外的(N-1)帧图像确定为对比帧;
所述对比单元,用于将所述基准帧在第一色彩分量上第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)对比,得到对比结果;所述第一像素点为所述N帧图像中坐标为(i,j)的像素点,所述第一色彩分量为所述M个色彩分量的任意一个色彩分量;
所述第二确定单元,用于根据所述对比结果确定在第一色彩分量上第一像素点的像素值;
所述第一处理单元,用于根据所述对比单元和所述第二确定单元的处理过程,得到第一色彩分量上剩余的全部像素点的像素值;
所述第二处理单元,用于根据所述对比单元、所述第二确定单元和第一处理单元的处理过程,得到除所述第一色彩分量外的其他色彩分量上的全部像素点的像素值;
所述组成单元,用于将第一色彩分量上全部像素点的像素值和其他色彩分量上全部像素点的像素值组成一帧图像。
可选地,所述对比单元包括做差模块和判断模块,其中:
所述做差模块,用于将基准帧在第一色彩分量上的第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)进行做差,得到差值z(i,j);
所述判断模块,用于判断所述差值z(i,j)是否在预设的第一阈值范围内,得到判断结果。
第三方面,本发明实施例提供一种终端,所述终端包括存储器和处理器,其中:
所述存储器,用于存储连续的N帧图像;
所述处理器,用于获取连续的N帧图像,所述N为大于等于3的整数,所述N帧图像的数据采用颜色模型来表示,所述颜色模型包括M个色彩分量,所述M为大于等于1的整数;从所述N帧图像中确定一帧作为基准帧,将除所述基准帧之外的(N-1)帧图像确定为对比帧;将所述基准帧在第一色彩分量上第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)对比,得到对比结果;所述第一像素点为所述N帧图像中坐标为(i,j)的像素点,所述第一色彩分量为所述M个色彩分量的任意一个分量;根据所述对比结果确定在第一色彩分量上第一像素点的像素值,依此得到第一色彩分量上剩余的全部像素点的像素值;以得到第一色彩分量上像素值的方式类推,得到除所述第一色彩分量外的其他色彩分量上的全部像素点的像素值;将所述M个色彩分量上全部像素点的像素值组成一帧图像。
本发明实施例提供一种图像处理方法及装置、终端,其中,获取连续的N帧图像,所述N为大于等于3的整数,所述N帧图像的数据采用颜色模型来表示,所述颜色模型包括M个色彩分量,所述M为大于等于1的整数;从所述N帧图像中确定一帧作为基准帧,将除所述基准帧之外的(N-1)帧图像确定为对比帧;将所述基准帧在第一色彩分量上第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)对比,得到对比结果;所述第一像素点为所述N帧图像中坐标为(i,j)的像素点,所述第一色彩分量为所述M个色彩分量的任意一个色彩分量;根据所述对比结果确定在第一色彩分量上第一像素点的像素值,依此得到第一色彩分量上剩余的全部像素点的像素值;以得到第一色彩分量上像素值的方式,得到除所述第一色彩分量外的其他色彩分量上的全部像素点的像素值;将所述M个色彩分量上全部像素点的像素值组成一帧图像;如此,能够提高去噪效果,并能克服容易造成边缘细节的损失等缺点,使最终拍照得到图片有更好的视觉效果。
附图说明
图1-1为实现本发明各个实施例中一个可选的移动终端的硬件结构示意图;
图1-2为如图1-1所示的移动终端中摄影镜头的组成结构示意图;
图1-3为本发明实施例一图像处理方法的实现流程示意图;
图2为本发明实施例二图像处理方法的实现流程示意图;
图3为本发明实施例三像素块的示意图;
图4为图3所示的像素块的像素值;
图5为本发明实施例四图像处理装置的实现流程示意图。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明的技术方案,并不用于限定本发明的保护范围。现在将参考附图描述实现本发明各个实施例的移动终端。在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身并没有特定的意义。因此,“模块”与“部件”可以混合地使用。
移动终端可以以各种形式来实施。例如,本发明中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。下面,假设终端是移动终端。然而,本领域技术人员将理解的是,除了特别用于移动目的的元件之外,根据本发明的实施方式的构造也能够应用于固定类型的终端。
图1-1为实现本发明各个实施例中的一个可选移动终端的硬件结构示意图,如图1-1所示,移动终端100可以包括无线通信单元110、A/V(音频/视频)输入单元120、用户输入单元130、输出单元150、存储器160、接口单元170、控制器180和电源单元190等等。图1-1示出了具有各种组件的移动终端,但是应理解的是,并不要求实施所有示出的组件。可以替代地实施更多或更少的组件。将在下面详细描述移动终端的元件。
无线通信单元110通常包括一个或多个组件,其允许移动终端100与无线通信***或网络之间的无线电通信。例如,无线通信单元可以包括移动通信模块112、无线互联网模块113和短程通信模块114中的至少一个。
移动通信模块112将无线电信号发送到基站(例如,接入点、节点B等等)、外部终端以及服务器中的至少一个和/或从其接收无线电信号。这样的无线电信号可以包括语音通话信号、视频通话信号、或者根据文本和/或多媒体消息发送和/或接收的各种类型的数据。
无线互联网模块113支持移动终端的无线互联网接入。该模块可以内部或外部地耦接到终端。该模块所涉及的无线互联网接入技术可以包括WLAN(无线LAN)(Wi-Fi)、Wibro(无线宽带)、Wimax(全球微波互联接入)、HSDPA(高速下行链路分组接入)等等。
短程通信模块114是用于支持短程通信的模块。短程通信技术的一些示例包括蓝牙TM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂TM等等。
A/V输入单元120用于接收音频或视频信号。A/V输入单元120可以包括相机121和麦克风1220,相机121对在视频捕获模式或图像捕获模式中由图像捕获装置获得的静态图像或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元151上。经相机121处理后的图像帧可以存储在存储器160(或其它存储介质)中或者经由无线通信单元110进行发送,可以根据移动终端的构造提供两个或更多相机121。麦克风122可以在电话通话模式、记录模式、语音识别模式等等运行模式中经由麦克风接收声音(音频数据),并且能够将这样的声音处理为音频数据。处理后的音频(语音)数据可以在电话通话模式的情况下转换为可经由移动通信模块112发送到移动通信基站的格式输出。麦克风122可以实施各种类型的噪声消除(或抑制)算法以消除(或抑制)在接收和发送音频信号的过程中产生的噪声或者干扰。
用户输入单元130可以根据用户输入的命令生成键输入数据以控制移动终端的各种操作。用户输入单元130允许用户输入各种类型的信息,并且可以包括键盘、锅仔片、触摸板(例如,检测由于被接触而导致的电阻、压力、电容等等的变化的触敏组件)、滚轮、摇杆等等。特别地,当触摸板以层的形式叠加在显示单元151上时,可以形成触摸屏。
接口单元170用作至少一个外部装置与移动终端100连接可以通过的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。识别模块可以是存储用于验证用户使用移动终端100的各种信息并且可以包括用户识别模块(UIM)、客户识别模块(SIM)、通用客户识别模块(USIM)等等。另外,具有识别模块的装置(下面称为“识别装置”)可以采取智能卡的形式,因此,识别装置可以经由端口或其它连接装置与移动终端100连接。接口单元170可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端100内的一个或多个元件或者可以用于在移动终端和外部装置之间传输数据。
另外,当移动终端100与外部底座连接时,接口单元170可以用作允许通过其将电力从底座提供到移动终端100的路径或者可以用作允许从底座输入的各种命令信号通过其传输到移动终端的路径。从底座输入的各种命令信号或电力可以用作用于识别移动终端是否准确地安装在底座上的信号。输出单元150被构造为以视觉、音频和/或触觉方式提供输出信号(例如,音频信号、视频信号、警报信号、振动信号等等)。输出单元150可以包括显示单元151、音频输出模块152等等。
显示单元151可以显示在移动终端100中处理的信息。例如,当移动终端100处于电话通话模式时,显示单元151可以显示与通话或其它通信(例如,文本消息收发、多媒体文件下载等等)相关的用户界面(UI)或图形用户界面(GUI)。当移动终端100处于视频通话模式或者图像捕获模式时,显示单元151可以显示捕获的图像和/或接收的图像、示出视频或图像以及相关功能的UI或GUI等等。
同时,当显示单元151和触摸板以层的形式彼此叠加以形成触摸屏时,显示单元151可以用作输入装置和输出装置。显示单元151可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器等等中的至少一种。这些显示器中的一些可以被构造为透明状以允许用户从外部观看,这可以称为透明显示器,典型的透明显示器可以例如为TOLED(透明有机发光二极管)显示器等等。根据特定想要的实施方式,移动终端100可以包括两个或更多显示单元(或其它显示装置),例如,移动终端可以包括外部显示单元(未示出)和内部显示单元(未示出)。触摸屏可用于检测触摸输入压力以及触摸输入位置和触摸输入面积。
音频输出模块152可以在移动终端处于呼叫信号接收模式、通话模式、记录模式、语音识别模式、广播接收模式等等模式下时,将无线通信单元110接收的或者在存储器160中存储的音频数据转换音频信号并且输出为声音。而且,音频输出模块152可以提供与移动终端100执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出模块152可以包括扬声器、蜂鸣器等等。
存储器160可以存储由控制器180执行的处理和控制操作的软件程序等等,或者可以暂时地存储己经输出或将要输出的数据(例如,电话簿、消息、静态图像、视频等等)。而且,存储器160可以存储关于当触摸施加到触摸屏时输出的各种方式的振动和音频信号的数据。
存储器160可以包括至少一种类型的存储介质,所述存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等等。而且,移动终端100可以与通过网络连接执行存储器160的存储功能的网络存储装置协作。
控制器180通常控制移动终端的总体操作。例如,控制器180执行与语音通话、数据通信、视频通话等等相关的控制和处理。另外,控制器180可以包括用于再现或回放多媒体数据的多媒体模块181,多媒体模块181可以构造在控制器180内,或者可以构造为与控制器180分离。控制器180可以执行模式识别处理,以将在触摸屏上执行的手写输入或者图像绘制输入识别为字符或图像。
电源单元190在控制器180的控制下接收外部电力或内部电力并且提供操作各元件和组件所需的适当的电力。
这里描述的各种实施方式可以以使用例如计算机软件、硬件或其任何组合的计算机可读介质来实施。对于硬件实施,这里描述的实施方式可以通过使用特定用途集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑装置(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、被设计为执行这里描述的功能的电子单元中的至少一种来实施,在一些情况下,这样的实施方式可以在控制器180中实施。对于软件实施,诸如过程或功能的实施方式可以与允许执行至少一种功能或操作的单独的软件模块来实施。软件代码可以由以任何适当的编程语言编写的软件应用程序(或程序)来实施,软件代码可以存储在存储器160中并且由控制器180执行。
至此,己经按照其功能描述了移动终端。下面,为了简要起见,将描述诸如折叠型、直板型、摆动型、滑动型移动终端等等的各种类型的移动终端中的滑动型移动终端作为示例。因此,本发明能够应用于任何类型的移动终端,并且不限于滑动型移动终端。
本发明实施例中所述移动终端还包括摄影镜头,参见图1-2所示,摄影镜头1211由用于形成被摄体像的多个光学镜头构成,为单焦点镜头或变焦镜头。摄影镜头1211在镜头驱动器1221的控制下能够在光轴方向上移动,镜头驱动器1221根据来自镜头驱动控制电路1222的控制信号,控制摄影镜头1211的焦点位置,在变焦镜头的情况下,也可控制焦点距离。镜头驱动控制电路1222按照来自微型计算机1217的控制命令进行镜头驱动器1221的驱动控制。
在摄影镜头1211的光轴上、由摄影镜头1211形成的被摄体像的位置附近配置有摄像元件1212。摄像元件1212用于对被摄体像摄像并取得摄像图像数据。在摄像元件1212上二维且呈矩阵状配置有构成各像素的光电二极管。各光电二极管产生与受光量对应的光电转换电流,该光电转换电流由与各光电二极管连接的电容器进行电荷蓄积。各像素的前表面配置有拜耳排列的RGB滤色器。
摄像元件1212与摄像电路1213连接,该摄像电路1213在摄像元件1212中进行电荷蓄积控制和图像信号读出控制,对该读出的图像信号(模拟图像信号)降低重置噪声后进行波形整形,进而进行增益提高等以成为适当的信号电平。摄像电路1213与A/D转换器1214连接,该A/D转换器1214对模拟图像信号进行模数转换,向总线1227输出数字图像信号(以下称之为图像数据)。
总线1227是用于传送在相机的内部读出或生成的各种数据的传送路径。在总线1227连接着上述A/D转换器1214,此外还连接着图像处理器1215、JPEG处理器1216、微型计算机1217、SDRAM(SynchronousDynamicrandomaccessmemory,同步动态随机存取内存)1218、存储器接口(以下称之为存储器I/F)1219、LCD(LiquidCrystalDisplay,液晶显示器)驱动器1220。
图像处理器1215对基于摄像元件1212的输出的图像数据进行OB相减处理、白平衡调整、颜色矩阵运算、伽马转换、色差信号处理、噪声去除处理、同时化处理、边缘处理等各种图像处理。JPEG处理器1216在将图像数据记录于记录介质1225时,按照JPEG压缩方式压缩从SDRAM1218读出的图像数据。此外,JPEG处理器1216为了进行图像再现显示而进行JPEG图像数据的解压缩。进行解压缩时,读出记录在记录介质1225中的文件,在JPEG处理器1216中实施了解压缩处理后,将解压缩的图像数据暂时存储于SDRAM1218中并在LCD1226上进行显示。另外,在本实施方式中,作为图像压缩解压缩方式采用的是JPEG方式,然而压缩解压缩方式不限于此,当然可以采用MPEG、TIFF、H.264等其他的压缩解压缩方式。
微型计算机1217发挥作为该相机整体的控制部的功能,统一控制相机的各种处理序列。微型计算机1217连接着操作单元1223和闪存1224。
操作单元1223包括但不限于实体按键或者虚拟按键,该实体或虚拟按键可以为电源按钮、拍照键、编辑按键、动态图像按钮、再现按钮、菜单按钮、十字键、OK按钮、删除按钮、放大按钮等各种输入按钮和各种输入键等操作控件,检测这些操作控件的操作状态。
将检测结果向微型计算机1217输出。此外,在作为显示器的LCD1226的前表面设有触摸面板,检测用户的触摸位置,将该触摸位置向微型计算机1217输出。微型计算机1217根据来自操作单元1223的操作位置的检测结果,执行与用户的操作对应的各种处理序列。
闪存1224存储用于执行微型计算机1217的各种处理序列的程序。微型计算机1217根据该程序进行相机整体的控制。此外,闪存1224存储相机的各种调整值,微型计算机1217读出调整值,按照该调整值进行相机的控制。
SDRAM1218是用于对图像数据等进行暂时存储的可电改写的易失性存储器。该SDRAM1218暂时存储从A/D转换器1214输出的图像数据和在图像处理器1215、JPEG处理器1216等中进行了处理后的图像数据。
存储器接口1219与记录介质1225连接,进行将图像数据和附加在图像数据中的文件头等数据写入记录介质1225和从记录介质1225中读出的控制。记录介质1225例如为能够在相机主体上自由拆装的存储器卡等记录介质,然而不限于此,也可以是内置在相机主体中的硬盘等。
LCD驱动器1210与LCD1226连接,将由图像处理器1215处理后的图像数据存储于SDRAM1218,需要显示时,读取SDRAM1218存储的图像数据并在LCD1226上显示,或者,JPEG处理器1216压缩过的图像数据存储于SDRAM1218,在需要显示时,JPEG处理器1216读取SDRAM1218的压缩过的图像数据,再进行解压缩,将解压缩后的图像数据通过LCD1226进行显示。
LCD1226配置在相机主体的背面进行图像显示。该LCD1226LCD,然而不限于此,也可以采用有机EL等各种显示面板(LCD1226),然而不限于此,也可以采用有机EL等各种显示面板。
基于上述移动终端硬件结构以及摄影镜头,提出本发明方法各个实施例。为了解决背景技术中存在的技术问题,本发明实施例提供一种图像处理方法,在该图像处理方法中采用了新的三维(3D)滤波的方法,用于目前的电子设备如手机拍照***,不仅能很好的去除噪声,而且也能很好的保持图像边缘,极大的提高了照片的质量。三维(3D)滤波方法实际上实际基于3D(帧间)图像处理方法,通过对比各帧图像相对应位置像素差值,来判断是否进行3D降噪;相较于现有的手机的去噪方法和3D降噪方法,本发明实施例不需要对图像进行运动估计,具有计算量小、成本低和算法易于理解的有点,并且能在手机上进行实时拍照处理。
下面结合附图和具体实施例对本发明的技术方案进一步详细阐述。
实施例一
为了解决前述的技术问题,本发明实施例提供一种图像处理方法,该图像处理方法应用于终端,该方法所实现的功能可以通过终端中的处理器调用程序代码来实现,当然程序代码可以保存在计算机存储介质中,可见,该终端至少包括处理器和存储介质。
图1-3为本发明实施例一图像处理方法的实现流程示意图,如图1-3所示,该图像处理方法包括:
步骤S101,获取连续的N帧图像;
这里,所述N为大于等于3的整数,所述N帧图像的数据采用颜色模型来表示,所述颜色模型包括M个色彩分量,所述M为大于等于1的整数;
这里,所述终端包括手机、平板电脑等电子设备;
这里,所述N帧图像是针对同一对象所拍摄的N帧,在此隐含的条件是需要环境条件相差不大,例如是相同的地点和针对相同的对象,所述N帧图像可以是其他电子设备拍摄的,存储在该终端上。当然还可以是该终端自己的图像采集单元如摄像头所拍摄的,因此,在步骤S101之前,所述方法还包括:针对同一对象,连续拍摄N帧图像。
步骤S102,从所述N帧图像中确定一帧作为基准帧,将除所述基准帧之外的(N-1)帧图像确定为对比帧;
步骤S103,将所述基准帧在第一色彩分量上第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)对比,得到对比结果;
这里,所述第一像素点(i,j)为任意一个像素点,所述第一色彩分量为所述M个色彩分量的任意一个色彩分量,以YUV色彩模型为例,第一色彩分量可以为Y分量或U分量或V分量。
步骤S104,根据所述对比结果确定在第一色彩分量上第一像素点的像素值,依此得到第一色彩分量上剩余的全部像素点的像素值;
步骤S105,以得到第一色彩分量上像素值的方式类推,得到除所述第一色彩分量外的其他色彩分量上的全部像素点的像素值;
步骤S106,将所述M个色彩分量上全部像素点的像素值组成一帧图像。
本发明实施例中,步骤S103,所述将所述基准帧在第一色彩分量上第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)对比,得到对比结果,包括:
步骤S131,步骤将基准帧在第一色彩分量上的第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)进行做差,得到差值z(i,j);
步骤S132,判断所述差值z(i,j)是否在预设的第一阈值范围内,得到判断结果。
步骤S133,当所述判断结果表明至少有一个所述差值z(i,j)在预设的第一阈值范围内时,确定第一像素值集合;
这里,所述第一像素集合为所述差值z(i,j)在预设的第一阈值范围内时对应的Q0(i,j);所述第一像素值集合中至少包括所述N帧图像中一帧图像的像素的像素值。
步骤S134,将所述Q1(i,j)与第一像素值集合进行算术平均,得到第一色彩分量上第一像素点的像素值Q(i,j)。
本发明实施例中,作为一种优选的实施例方式,所述N为4,当N等于4时,在做算术平均的时候,比较容易计算,因为4正好是2的平方,那么算术平均只需要移动两位即可。当N=8也可以带来这种计算上的简便,但是8帧图像的比较是比较麻烦的,同时计算量也会成倍增加。
实施例二
为了解决前述的技术问题,本发明实施例提供一种图像处理方法,该图像处理方法应用于终端,该方法所实现的功能可以通过终端中的处理器调用程序代码来实现,当然程序代码可以保存在计算机存储介质中,可见,该终端至少包括处理器和存储介质。
该图像处理方法包括:
步骤S201,获取连续的N帧图像;
这里,所述N为大于等于3的整数,所述N帧图像的数据采用颜色模型来表示,所述颜色模型包括M个色彩分量,所述M为大于等于1的整数;
这里,所述终端包括手机、平板电脑等电子设备;
这里,所述N帧图像是针对同一对象所拍摄的N帧,在此隐含的条件是需要环境条件相差不大,例如是相同的地点和针对相同的对象,所述N帧图像可以是其他电子设备拍摄的,存储在该终端上。当然还可以是该终端自己的图像采集单元如摄像头所拍摄的,因此,在步骤S101之前,所述方法还包括:针对同一对象,连续拍摄N帧图像。
步骤S202,从所述N帧图像中确定一帧作为基准帧,将除所述基准帧之外的(N-1)帧图像确定为对比帧;
步骤S203,将基准帧在第一色彩分量上的第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)进行做差,得到差值z(i,j);
这里,所述第一像素点(i,j)为任意一个像素点,所述第一色彩分量为所述M个色彩分量的任意一个色彩分量,以YUV色彩模型为例,第一色彩分量可以为Y分量或U分量或V分量。
步骤S204,判断所述差值z(i,j)是否在预设的第一阈值范围内,得到判断结果。
步骤S205,当所述判断结果表明至少有一个所述差值z(i,j)在预设的第一阈值范围内时,将Q1(i,j)作为中心点选取一图像块;
这里,所述图像块为以下之一:
3个像素×3个像素、5个像素×5个像素、7个像素×7个像素、9个像素×9个像素。
步骤S206,从所述图像块内确定第二像素值集合,所述第二像素值集合为图像块内满足预设的第二阈值范围内的像素值的像素点;
步骤S207,将所述Q1(i,j)与第二像素值集合进行算术平均,得到第一色彩分量上第一像素点的像素值Q(i,j),依此得到第一色彩分量上剩余的全部像素点的像素值;
步骤S208,以得到第一色彩分量上像素值的方式类推,得到除所述第一色彩分量外的其他色彩分量上的全部像素点的像素值;
步骤S209,将所述M个色彩分量上全部像素点的像素值组成一帧图像。
实施例三
基于前述的实施例,本发明实施例提供一种图像处理方法,图2为本发明实施例三图像处理方法的实现流程示意图,如图2所示,该方法包括以下步骤:
步骤S301,从手机内存中获取连续的四帧图像YUV数据;
这里,一般来说,手机中图像的存储是采用YUV模型的,本发明实施例中以YUV数据为例,对于其他的色彩模型,与YUV模型类似,因此不再赘述。YUV数据是一种颜色编码方法,在现代彩色电视***中,通常采用三管彩色摄影机或彩色CCD摄影机进行取像,然后把取得的彩色图像信号经分色、分别放大校正后得到红绿蓝(RGB),再经过矩阵变换电路得到亮度信号Y和两个色差信号B-Y(即U)、R-Y(即V),最后发送端将亮度和色差三个信号分别进行编码,用同一信道发送出去。这种色彩的表示方法就是所谓的YUV色彩空间表示。采用YUV色彩空间的重要性是它的亮度信号Y和色度信号U、V是分离的。
这里,对手机图像YUV数据流,连续获取相邻四帧并锁定。
步骤S302,利用四帧图像进行YUV去噪;
这里,传统去噪算法包括均值、中值、高斯、双边滤波、带运动估计的3D降噪等等去噪算法,其中双边滤波能在去除噪声的同时较好的保留边缘,但是在噪声比较大的情况下滤波效果不明显,并且计算量很大;在滤波窗口增大的情况下,很难做到实时处理;均值、中值和高斯能较好的滤除噪声,但是很容易模糊掉边缘,并且随着滤波窗口的增大,也很难做到实时处理。现有的带运动估计的3D降噪,首先要进行运动估计,然后在进行3D去噪,而运动估计需要很大的计算量,并且也不能保证百分之百的准确性。在本步骤中所使用的3D去噪算法有效规避了运动估计,从而使得计算量小而且易于理解。
步骤S303,将去噪得到的YUV数据输出,作为结果图像;
下面对上述的步骤S302进行具体说明,步骤S302包括:
步骤S321,对得到的连续的四帧YUV图像,分别编码为img1、img2、img3和img4。
步骤S322,将四帧图像中任意一张作为基准图像,举例来说,以img1作为基准图像,然后利用img2、img3和img4对img1进行降噪处理。
这里,3D降噪的实质是同一个像素点,在不同时刻受噪声污染程度不一样,而噪声一般服从均值为零的高斯噪声,故对一个像素点不同时刻的值进行取平均操作,结果将趋向于该像素点的真实值。但由于手机进行拍照时,四帧图像之间会有或多或少的移动,即例如第一像素p1在img1中点(3,3)处,而其在img2中可能就会是(3,4)或者(2,3)抑或其他位置,其在img3和img4中位置也一样,均有可能不再位置(3,3);这样,如果不再同一个位置,直接进行取平均操作,势必会造成图像边缘错位;而如果直接使用运动估计不仅计算量大,而且在细节很多的场景中运动估计也会有偏差。而下面本实施例提出的一种降噪方法,绕过传统的运动估计,采用一种新的判断方法来替代运动估计,根据判断结果进行去噪。
步骤S323,分别遍历四帧图像的Y分量、U分量和V分量信息,对四帧图像的每一个对应像素进行判断,然后决定滤波方式。
这里,由于这三个分量计算起来过程都是类似的,因此在下面的实施例中,以Y分量为例进行说明,对于U分量和V分量,请参见Y分量即可。下面以像素点(i,j)为例进行说明,当像素点(i,j)处理完成之后,可以循环遍历整个图像数据,每一像素点都可以按照像素点(i,j)的方式进行去噪,将最终去噪结果作为输出即可。下面介绍像素点(i,j)的处理过程:
1)如果基准帧像素Y1(i,j)与Y2(i,j)、Y3(i,j)、Y4(i,j)的差值的绝对值三个值中,均在某一个范围内,则结果图像中当前像素点的值就等于四帧图像对应像素点的均值;其中,Y1(i,j)表示img1的像素点(i,j)的Y分量,Y2(i,j)表示img2的像素点(i,j)的Y分量,Y3(i,j)表示img3的像素点(i,j)的Y分量,Y4(i,j)表示img4的像素点(i,j)的Y分量。
2)如果基准帧像素Y1(i,j)与Y2(i,j)、Y3(i,j)、Y4(i,j)的差值的绝对值三个值中,只有某两个是在某一范围的,则结果图像中当前像素点的值就等于在此范围内的两帧和基准帧,三帧对应像素点的均值。例如Y1(i,j)与Y2(i,j)、Y3(i,j)差值绝对值在某个范围,而Y1(i,j)与Y4(i,j)差值绝对值不在该范围,结果图像中当前像素点的值就等于Y1(i,j)与Y2(i,j)、Y3(i,j)的均值。如果不在一个范围内的是Y2(i,j)和Y3(i,j),处理方法一样。
3)如果基准帧像素Y1(i,j)与Y2(i,j)、Y3(i,j)、Y4(i,j)的差值的绝对值三个值中,只有一个是在某一范围的,则结果图像中当前像素点的值就等于在此范围内的帧和基准帧,两帧对应像素点的均值。例如Y1(i,j)与Y2(i,j)差值绝对值在某个范围,而Y1(i,j)与Y3(i,j)、Y4(i,j)差值绝对值不在该范围,结果图像中当前像素点的值就等于Y1(i,j)与Y2(i,j)的均值。其他类似。
4)如果基准帧像素Y1(i,j)与Y2(i,j)、Y3(i,j)、Y4(i,j)的差值的绝对值三个值中,没有一个是在预设范围内,则对Y1(i,j)用下面的方法进行滤波,即选取Y1(i,j)周围一定大小区域,如3×3或5×5或7×7等。
以3×3大小区域为例进行讲解:如图3所示,P22为带滤波像素点Y1(i,j),其他为其周围的值。选取这九个值中与P22差值的绝对值在某一个范围的值对应的原始值参与滤波,将这些值取平均作为最终的滤波值,如图4所示,图4中待处理点为5,如果将差值的绝对值范围设定为2,即差值绝对值小于等于2对应的数值参与计算,即3、4、5、6和7五个数值参与计算,然后求这5个数的均值作为最终结果。
从以上的描述可以看出,本发明实施例的技术方案能够消除现有的去噪效果差和容易造成边缘细节的损失等缺点,使最终拍照得到图片有更好的视觉效果。
本发明实施例中,先从手机内存中连续获取四帧图像YUV数据;利用四帧图像进行YUV去噪;将去噪得到的YUV数据输出,作为结果图像。其中,重点在于对一个像素点不同时刻的值进行取平均操作,绕过了传统的运动估计,避免了传统的运动估计方法“不仅计算量大,而且在细节很多的场景中运动估计也会有偏差”的问题。在去噪的过程中,通过对比各帧图像相对应位置像素差值,来判断是否进行3D降噪;相较于现有的手机去噪方法和3D降噪方法,本方法不需要对图像进行运动估计,计算量小、成本低、算法易于理解,并且能在手机上进行实时拍照处理。
实施例四
基于前述的实施例,本发明实施例提供一种图像处理装置,该装置所包括的各单元,以及各单元所包括的各模块,都可以通过终端中的处理器来实现,当然也可通过具体的逻辑电路实现;在具体实施例的过程中,处理器可以为中央处理器(CPU)、微处理器(MPU)、数字信号处理器(DSP)或现场可编程门阵列(FPGA)等。
图5为本发明实施例四图像处理装置的组成结构示意图,如图5所示,该装置400包括获取单元401、第一确定单元402、对比单元403、第二确定单元404、第一处理单元405、第二处理单元406和组成单元407,其中:
所述获取单元401,用于获取连续的N帧图像,所述N为大于等于3的整数,所述N帧图像的数据采用颜色模型来表示,所述颜色模型包括M个色彩分量,所述M为大于等于1的整数;
所述第一确定单元402,用于从所述N帧图像中确定一帧作为基准帧,将除所述基准帧之外的(N-1)帧图像确定为对比帧;
所述对比单元403,用于将所述基准帧在第一色彩分量上第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)对比,得到对比结果;所述第一像素点为所述N帧图像中坐标为(i,j)的像素点,所述第一色彩分量为所述M个色彩分量的任意一个色彩分量;
所述第二确定单元404,用于根据所述对比结果确定在第一色彩分量上第一像素点的像素值;
所述第一处理单元405,用于根据所述对比单元和所述第二确定单元的处理过程,得到第一色彩分量上剩余的全部像素点的像素值;
所述第二处理单元406,用于根据所述对比单元、所述第二确定单元和第一处理单元的处理过程,得到除所述第一色彩分量外的其他色彩分量上的全部像素点的像素值;
所述组成单元407,用于将第一色彩分量上全部像素点的像素值和其他色彩分量上全部像素点的像素值组成一帧图像。
本发明实施例中,所述装置还包括拍摄单元,用于针对同一对象,连续拍摄N帧图像。
实施例五
基于前述的实施例,本发明实施例提供一种图像处理装置,该装置所包括的各单元,以及各单元所包括的各模块,都可以通过终端中的处理器来实现,当然也可通过具体的逻辑电路实现;在具体实施例的过程中,处理器可以为中央处理器(CPU)、微处理器(MPU)、数字信号处理器(DSP)或现场可编程门阵列(FPGA)等。
该装置400包括获取单元401、第一确定单元402、对比单元403、第二确定单元404、第一处理单元405、第二处理单元406和组成单元407,其中所对比单元403包括做差模块431和判断模块432,所述第二确定单元404包括第一确定模块441和第一平均模块442,其中:
所述获取单元401,用于获取连续的N帧图像,所述N为大于等于3的整数,所述N帧图像的数据采用颜色模型来表示,所述颜色模型包括M个色彩分量,所述M为大于等于1的整数;
所述第一确定单元402,用于从所述N帧图像中确定一帧作为基准帧,将除所述基准帧之外的(N-1)帧图像确定为对比帧;
所述做差模块431,用于将基准帧在第一色彩分量上的第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)进行做差,得到差值z(i,j);
这里,所述第一像素点为所述N帧图像中坐标为(i,j)的像素点,所述第一色彩分量为所述M个色彩分量的任意一个色彩分量;其中i和j为大于等于0的整数;
所述判断模块432,用于判断所述差值z(i,j)是否在预设的第一阈值范围内,得到判断结果。
所述第一确定模块441,用于当所述判断结果表明至少有一个所述差值z(i,j)在预设的第一阈值范围内时,确定第一像素值集合,所述第一像素集合为所述差值z(i,j)在预设的第一阈值范围内时对应的Q0(i,j);
所述第一平均模块442,用于将所述Q1(i,j)与第一像素值集合进行算术平均,得到第一色彩分量上第一像素点的像素值Q(i,j)。
所述第一处理单元405,用于根据所述对比单元和所述第二确定单元中各模块的处理过程,得到第一色彩分量上剩余的全部像素点的像素值;
所述第二处理单元406,用于根据所述对比单元、所述第二确定单元和第一处理单元中各模块的处理过程,得到除所述第一色彩分量外的其他色彩分量上的全部像素点的像素值;
所述组成单元407,用于将第一色彩分量上全部像素点的像素值和其他色彩分量上全部像素点的像素值组成一帧图像。
本发明实施例中,所述装置还包括拍摄单元,用于针对同一对象,连续拍摄N帧图像。
实施例四
基于前述的实施例,本发明实施例提供一种图像处理装置,该装置所包括的各单元,以及各单元所包括的各模块,都可以通过终端中的处理器来实现,当然也可通过具体的逻辑电路实现;在具体实施例的过程中,处理器可以为中央处理器(CPU)、微处理器(MPU)、数字信号处理器(DSP)或现场可编程门阵列(FPGA)等。
该装置400包括获取单元401、第一确定单元402、对比单元403、第二确定单元404、第一处理单元405、第二处理单元406和组成单元407,其中所对比单元403包括做差模块431和判断模块432,所述第二确定单元404包括选取模块443、第一确定模块444和第一平均模块445,其中:
所述获取单元401,用于获取连续的N帧图像,所述N为大于等于3的整数,所述N帧图像的数据采用颜色模型来表示,所述颜色模型包括M个色彩分量,所述M为大于等于1的整数;
所述第一确定单元402,用于从所述N帧图像中确定一帧作为基准帧,将除所述基准帧之外的(N-1)帧图像确定为对比帧;
所述做差模块431,用于将基准帧在第一色彩分量上的第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)进行做差,得到差值z(i,j);
这里,所述第一像素点为所述N帧图像中坐标为(i,j)的像素点,所述第一色彩分量为所述M个色彩分量的任意一个色彩分量;
所述判断模块432,用于判断所述差值z(i,j)是否在预设的第一阈值范围内,得到判断结果。
所述选取模块443,用于当所述判断结果表明至少有一个所述差值z(i,j)在预设的第一阈值范围内时,将Q1(i,j)作为中心点选取一图像块;
所述第二确定模块444,用于从所述图像块内确定第二像素值集合,所述第二像素值集合为图像块内满足预设的第二阈值范围内的像素值的像素点;
所述第二平均模块445,用于将所述Q1(i,j)与第二像素值集合进行算术平均,得到第一色彩分量上第一像素点的像素值Q(i,j)。
所述第一处理单元405,用于根据所述对比单元和所述第二确定单元中各模块的处理过程,得到第一色彩分量上剩余的全部像素点的像素值;
所述第二处理单元406,用于根据所述对比单元、所述第二确定单元和第一处理单元中各模块的处理过程,得到除所述第一色彩分量外的其他色彩分量上的全部像素点的像素值;
所述组成单元407,用于将第一色彩分量上全部像素点的像素值和其他色彩分量上全部像素点的像素值组成一帧图像。
本发明实施例中,所述装置还包括拍摄单元,用于针对同一对象,连续拍摄N帧图像。
本发明实施例中,所述图像块为以下之一:
3个像素×3个像素、5个像素×5个像素、7个像素×7个像素、9个像素×9个像素。
本发明实施例中,所述N为4。
这里需要指出的是:以上装置实施例的描述,与上述方法实施例的描述是类似的,具有同方法实施例相似的有益效果,因此不做赘述。对于本发明装置实施例中未披露的技术细节,请参照本发明方法实施例的描述而理解,为节约篇幅,因此不再赘述。
实施例六
基于前述的实施例,本发明实施例再提供一种终端,该终端包括图像采集单元、存储器和处理器,其中:
图像采集单元,用于针对同一对象,连续拍摄N帧图像,以便获取连续的N帧图像;
所述存储器,用于存储连续的N帧图像;
所述处理器,用于针对同一对象,调用图像采集单元连续拍摄N帧图像;从存储器获取连续的N帧图像,所述N为大于等于3的整数,所述N帧图像的数据采用颜色模型来表示,所述颜色模型包括M个色彩分量,所述M为大于等于1的整数;从所述N帧图像中确定一帧作为基准帧,将除所述基准帧之外的(N-1)帧图像确定为对比帧;将所述基准帧在第一色彩分量上第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)对比,得到对比结果;所述第一像素点为所述N帧图像中坐标为(i,j)的像素点,所述第一色彩分量为所述M个色彩分量的任意一个色彩分量;根据所述对比结果确定在第一色彩分量上第一像素点的像素值,依此得到第一色彩分量上剩余的全部像素点的像素值;以得到第一色彩分量上像素值的方式类推,得到除所述第一色彩分量外的其他色彩分量上的全部像素点的像素值;将所述M个色彩分量上全部像素点的像素值组成一帧图像。
这里需要指出的是:以上电子设备实施例项的描述,与上述方法描述是类似的,具有同方法实施例相同的有益效果,因此不做赘述。对于本发明电子设备实施例中未披露的技术细节,本领域的技术人员请参照本发明方法实施例的描述而理解,为节约篇幅,这里不再赘述。
应理解,说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外,这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。应理解,在本发明的各种实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
在本申请所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个***,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元;既可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以全部集成在一个处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器(ReadOnlyMemory,ROM)、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、ROM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。
Claims (10)
1.一种图像处理方法,其特征在于,所述方法包括:
获取连续的N帧图像,所述N为大于等于3的整数,所述N帧图像的数据采用颜色模型来表示,所述颜色模型包括M个色彩分量,所述M为大于等于1的整数;
从所述N帧图像中确定一帧作为基准帧,将除所述基准帧之外的(N-1)帧图像确定为对比帧;
将所述基准帧在第一色彩分量上第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)对比,得到对比结果;所述第一像素点为所述N帧图像中坐标为(i,j)的像素点,所述第一色彩分量为所述M个色彩分量的任意一个色彩分量;
根据所述对比结果确定在第一色彩分量上第一像素点的像素值,依此得到第一色彩分量上剩余的全部像素点的像素值;
以得到第一色彩分量上像素值的方式得到除所述第一色彩分量外的其他色彩分量上的全部像素点的像素值;
将所述M个色彩分量上全部像素点的像素值组成一帧图像。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
针对同一对象,连续拍摄N帧图像。
3.根据权利要求1或2所述的方法,其特征在于,所述将所述基准帧在第一色彩分量上第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)对比,得到对比结果,包括:
将基准帧在第一色彩分量上的第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)进行做差,得到差值z(i,j);
判断所述差值z(i,j)是否在预设的第一阈值范围内,得到判断结果。
4.根据权利要求3所述的方法,其特征在于,根据所述对比结果确定在第一色彩分量上第一像素点的像素值,包括:
当所述判断结果表明至少有一个所述差值z(i,j)在预设的第一阈值范围内时,确定第一像素值集合,所述第一像素集合为所述差值z(i,j)在预设的第一阈值范围内时对应的Q0(i,j);
将所述Q1(i,j)与第一像素值集合进行算术平均,得到第一色彩分量上第一像素点的像素值Q(i,j)。
5.根据权利要求4所述的方法,其特征在于,根据所述对比结果确定在第一色彩分量上第一像素点的像素值,包括:
当所述判断结果表明至少有一个所述差值z(i,j)在预设的第一阈值范围内时,将Q1(i,j)作为中心点选取一图像块;
从所述图像块内确定第二像素值集合,所述第二像素值集合为图像块内满足预设的第二阈值范围内的像素值的像素点;
将所述Q1(i,j)与第二像素值集合进行算术平均,得到第一色彩分量上第一像素点的像素值Q(i,j)。
6.根据权利要求5所述的方法,其特征在于,所述图像块为以下之一:
3个像素×3个像素、5个像素×5个像素、7个像素×7个像素、9个像素×9个像素。
7.根据权利要求1至6任一项所述的方法,其特征在于,所述N为4。
8.一种图像处理装置,其特征在于,所述装置包括获取单元、第一确定单元、对比单元、第二确定单元、第一处理单元、第二处理单元和组成单元,其中:
所述获取单元,用于获取连续的N帧图像,所述N为大于等于3的整数,所述N帧图像的数据采用颜色模型来表示,所述颜色模型包括M个色彩分量,所述M为大于等于1的整数;
所述第一确定单元,用于从所述N帧图像中确定一帧作为基准帧,将除所述基准帧之外的(N-1)帧图像确定为对比帧;
所述对比单元,用于将所述基准帧在第一色彩分量上第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)对比,得到对比结果;所述第一像素点为所述N帧图像中坐标为(i,j)的像素点,所述第一色彩分量为所述M个色彩分量的任意一个色彩分量;
所述第二确定单元,用于根据所述对比结果确定在第一色彩分量上第一像素点的像素值;
所述第一处理单元,用于根据所述对比单元和所述第二确定单元的处理过程,得到第一色彩分量上剩余的全部像素点的像素值;
所述第二处理单元,用于根据所述对比单元、所述第二确定单元和第一处理单元的处理过程,得到除所述第一色彩分量外的其他分量上的全部像素点的像素值;
所述组成单元,用于将第一色彩分量上全部像素点的像素值和其他色彩分量上全部像素点的像素值组成一帧图像。
9.根据权利要求8所述的装置,其特征在于,所述对比单元包括做差模块和判断模块,其中:
所述做差模块,用于将基准帧在第一色彩分量上的第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)进行做差,得到差值z(i,j);
所述判断模块,用于判断所述差值z(i,j)是否在预设的第一阈值范围内,得到判断结果。
10.一种终端,其特征在于,所述终端包括存储器和处理器,其中:
所述存储器,用于存储连续的N帧图像;
所述处理器,用于获取连续的N帧图像,所述N为大于等于3的整数,所述N帧图像的数据采用颜色模型来表示,所述颜色模型包括M个色彩分量,所述M为大于等于1的整数;从所述N帧图像中确定一帧作为基准帧,将除所述基准帧之外的(N-1)帧图像确定为对比帧;将所述基准帧在第一色彩分量上第一像素点的像素值Q1(i,j)与对比帧中在第一色彩分量上的第一像素点的像素值Q0(i,j)对比,得到对比结果;所述第一像素点为所述N帧图像中坐标为(i,j)的像素点,所述第一色彩分量为所述M个色彩分量的任意一个色彩分量;根据所述对比结果确定在第一色彩分量上第一像素点的像素值,依此得到第一色彩分量上剩余的全部像素点的像素值;以得到第一色彩分量上像素值的方式类推,得到除所述第一色彩分量外的其他色彩分量上的全部像素点的像素值;将所述M个色彩分量上全部像素点的像素值组成一帧图像。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510843465.8A CN105491358B (zh) | 2015-11-26 | 2015-11-26 | 一种图像处理方法及装置、终端 |
PCT/CN2016/099255 WO2017088564A1 (zh) | 2015-11-26 | 2016-09-18 | 一种图像处理方法及装置、终端、存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510843465.8A CN105491358B (zh) | 2015-11-26 | 2015-11-26 | 一种图像处理方法及装置、终端 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105491358A true CN105491358A (zh) | 2016-04-13 |
CN105491358B CN105491358B (zh) | 2018-11-16 |
Family
ID=55678035
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510843465.8A Active CN105491358B (zh) | 2015-11-26 | 2015-11-26 | 一种图像处理方法及装置、终端 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN105491358B (zh) |
WO (1) | WO2017088564A1 (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017088564A1 (zh) * | 2015-11-26 | 2017-06-01 | 努比亚技术有限公司 | 一种图像处理方法及装置、终端、存储介质 |
CN108540728A (zh) * | 2017-03-06 | 2018-09-14 | 中兴通讯股份有限公司 | 长曝光拍照方法及装置 |
CN109903260A (zh) * | 2019-01-30 | 2019-06-18 | 华为技术有限公司 | 图像处理方法及图像处理装置 |
CN110876014A (zh) * | 2018-08-31 | 2020-03-10 | 北京小米移动软件有限公司 | 图像处理方法及装置、电子设备及存储介质 |
CN112651056A (zh) * | 2019-10-11 | 2021-04-13 | 中国信息通信研究院 | 防截屏显示方法、装置及*** |
CN112817108A (zh) * | 2021-01-22 | 2021-05-18 | 浙江大华技术股份有限公司 | 一种滤光片间切换检测方法、装置、存储介质及电子装置 |
CN113962877A (zh) * | 2019-07-17 | 2022-01-21 | 中国电子科技集团公司第十三研究所 | 一种像素畸变的校正方法、校正装置及终端 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111243038B (zh) * | 2020-01-07 | 2024-02-09 | 芯瞳半导体技术(山东)有限公司 | 基于颜色特征的图形对比方法、装置及计算机存储介质 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009164857A (ja) * | 2007-12-29 | 2009-07-23 | Morpho Inc | 画像データ処理方法および画像処理装置 |
CN101658027A (zh) * | 2007-03-31 | 2010-02-24 | 索尼德国有限责任公司 | 用于图像帧的降噪方法和单元 |
CN101964110A (zh) * | 2009-07-23 | 2011-02-02 | 三星电子株式会社 | 用于创建图像的方法和*** |
CN102405482A (zh) * | 2009-04-22 | 2012-04-04 | 高通股份有限公司 | 图像选择与组合的方法与装置 |
JP2013081078A (ja) * | 2011-10-04 | 2013-05-02 | Sony Corp | 画像処理装置および方法、プログラム、並びに記録媒体 |
CN103098456A (zh) * | 2010-07-08 | 2013-05-08 | 株式会社理光 | 图像处理单元、图像处理方法和图像处理程序 |
CN103248902A (zh) * | 2012-02-08 | 2013-08-14 | 佳能株式会社 | 设置有用于合成多个所拍摄图像的功能的摄像设备 |
CN103959304A (zh) * | 2011-12-02 | 2014-07-30 | 索尼公司 | 图像处理装置、图像处理方法以及程序 |
CN104036471A (zh) * | 2013-03-05 | 2014-09-10 | 腾讯科技(深圳)有限公司 | 一种图像噪声估值方法及图像噪声估值装置 |
US20150010247A1 (en) * | 2012-03-30 | 2015-01-08 | Fujifilm Corporation | Image processing device, imaging device, computer-readable storage medium, and image processing method |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5691609B2 (ja) * | 2011-02-18 | 2015-04-01 | 富士通株式会社 | フィルムモード変換装置、フィルムモード変換方法、およびプログラム |
CN104318537B (zh) * | 2014-09-30 | 2017-07-28 | 中国科学院深圳先进技术研究院 | 大雨场景视频数据中雨滴的检测和去除方法及*** |
CN104299214B (zh) * | 2014-09-30 | 2017-12-29 | 中国科学院深圳先进技术研究院 | 小雨场景视频数据中雨滴的检测与去除方法和*** |
CN105491358B (zh) * | 2015-11-26 | 2018-11-16 | 努比亚技术有限公司 | 一种图像处理方法及装置、终端 |
CN105513021B (zh) * | 2015-11-27 | 2019-07-12 | 努比亚技术有限公司 | 图像去噪装置和方法 |
-
2015
- 2015-11-26 CN CN201510843465.8A patent/CN105491358B/zh active Active
-
2016
- 2016-09-18 WO PCT/CN2016/099255 patent/WO2017088564A1/zh active Application Filing
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101658027A (zh) * | 2007-03-31 | 2010-02-24 | 索尼德国有限责任公司 | 用于图像帧的降噪方法和单元 |
JP2009164857A (ja) * | 2007-12-29 | 2009-07-23 | Morpho Inc | 画像データ処理方法および画像処理装置 |
US20090185721A1 (en) * | 2007-12-29 | 2009-07-23 | Masaki Hiraga | Image data processing method and image processing apparatus |
CN102405482A (zh) * | 2009-04-22 | 2012-04-04 | 高通股份有限公司 | 图像选择与组合的方法与装置 |
CN101964110A (zh) * | 2009-07-23 | 2011-02-02 | 三星电子株式会社 | 用于创建图像的方法和*** |
CN103098456A (zh) * | 2010-07-08 | 2013-05-08 | 株式会社理光 | 图像处理单元、图像处理方法和图像处理程序 |
JP2013081078A (ja) * | 2011-10-04 | 2013-05-02 | Sony Corp | 画像処理装置および方法、プログラム、並びに記録媒体 |
CN103959304A (zh) * | 2011-12-02 | 2014-07-30 | 索尼公司 | 图像处理装置、图像处理方法以及程序 |
CN103248902A (zh) * | 2012-02-08 | 2013-08-14 | 佳能株式会社 | 设置有用于合成多个所拍摄图像的功能的摄像设备 |
US20150010247A1 (en) * | 2012-03-30 | 2015-01-08 | Fujifilm Corporation | Image processing device, imaging device, computer-readable storage medium, and image processing method |
CN104036471A (zh) * | 2013-03-05 | 2014-09-10 | 腾讯科技(深圳)有限公司 | 一种图像噪声估值方法及图像噪声估值装置 |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017088564A1 (zh) * | 2015-11-26 | 2017-06-01 | 努比亚技术有限公司 | 一种图像处理方法及装置、终端、存储介质 |
CN108540728A (zh) * | 2017-03-06 | 2018-09-14 | 中兴通讯股份有限公司 | 长曝光拍照方法及装置 |
CN110876014A (zh) * | 2018-08-31 | 2020-03-10 | 北京小米移动软件有限公司 | 图像处理方法及装置、电子设备及存储介质 |
CN110876014B (zh) * | 2018-08-31 | 2022-04-08 | 北京小米移动软件有限公司 | 图像处理方法及装置、电子设备及存储介质 |
CN109903260A (zh) * | 2019-01-30 | 2019-06-18 | 华为技术有限公司 | 图像处理方法及图像处理装置 |
CN109903260B (zh) * | 2019-01-30 | 2023-05-23 | 华为技术有限公司 | 图像处理方法及图像处理装置 |
US12020472B2 (en) | 2019-01-30 | 2024-06-25 | Huawei Technologies Co., Ltd. | Image processing method and image processing apparatus |
CN113962877A (zh) * | 2019-07-17 | 2022-01-21 | 中国电子科技集团公司第十三研究所 | 一种像素畸变的校正方法、校正装置及终端 |
CN113962877B (zh) * | 2019-07-17 | 2024-06-25 | 中国电子科技集团公司第十三研究所 | 一种像素畸变的校正方法、校正装置及终端 |
CN112651056A (zh) * | 2019-10-11 | 2021-04-13 | 中国信息通信研究院 | 防截屏显示方法、装置及*** |
CN112651056B (zh) * | 2019-10-11 | 2024-05-31 | 中国信息通信研究院 | 防截屏显示方法、装置及*** |
CN112817108A (zh) * | 2021-01-22 | 2021-05-18 | 浙江大华技术股份有限公司 | 一种滤光片间切换检测方法、装置、存储介质及电子装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2017088564A1 (zh) | 2017-06-01 |
CN105491358B (zh) | 2018-11-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6803982B2 (ja) | 光学撮像方法および装置 | |
CN105491358A (zh) | 一种图像处理方法及装置、终端 | |
TWI696146B (zh) | 影像處理方法、裝置、電腦可讀儲存媒體和行動終端 | |
CN111179282B (zh) | 图像处理方法、图像处理装置、存储介质与电子设备 | |
US10516860B2 (en) | Image processing method, storage medium, and terminal | |
CN105430295A (zh) | 图像处理装置及方法 | |
CN104380727B (zh) | 图像处理装置和图像处理方法 | |
CN112529775A (zh) | 一种图像处理的方法和装置 | |
CN105100481A (zh) | 拍摄方法、装置及移动终端 | |
JP6328275B2 (ja) | 画像タイプ識別方法、装置、プログラム及び記録媒体 | |
CN105578056A (zh) | 拍摄的终端及方法 | |
CN105245777A (zh) | 生成视频图片的方法及装置 | |
CN105513021A (zh) | 图像去噪装置和方法 | |
CN105704369A (zh) | 一种信息处理方法及装置、电子设备 | |
CN105472246A (zh) | 拍照装置及方法 | |
CN104796625A (zh) | 照片的合成方法及照片合成装置 | |
CN104660903A (zh) | 拍摄方法及拍摄装置 | |
CN108200347A (zh) | 一种图像处理方法、终端和计算机可读存储介质 | |
CN105611264B (zh) | 一种自动白平衡方法及装置 | |
CN112954251B (zh) | 视频处理方法、视频处理装置、存储介质与电子设备 | |
CN105120164A (zh) | 连拍照片的处理装置及方法 | |
CN105187724A (zh) | 一种处理图像的移动终端和方法 | |
CN105163035A (zh) | 移动终端拍摄***和移动终端拍摄方法 | |
CN105407295A (zh) | 移动终端拍摄装置和方法 | |
CN104967772A (zh) | 拍照方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |