CN116419044A - 媒体数据处理单元、方法以及电子设备 - Google Patents
媒体数据处理单元、方法以及电子设备 Download PDFInfo
- Publication number
- CN116419044A CN116419044A CN202111630382.2A CN202111630382A CN116419044A CN 116419044 A CN116419044 A CN 116419044A CN 202111630382 A CN202111630382 A CN 202111630382A CN 116419044 A CN116419044 A CN 116419044A
- Authority
- CN
- China
- Prior art keywords
- media data
- noise reduction
- processor
- processing
- illumination intensity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 248
- 238000000034 method Methods 0.000 title claims description 45
- 238000005286 illumination Methods 0.000 claims abstract description 129
- 238000003672 processing method Methods 0.000 claims abstract description 21
- 238000004891 communication Methods 0.000 claims description 18
- 238000003780 insertion Methods 0.000 claims description 8
- 230000037431 insertion Effects 0.000 claims description 8
- 230000006870 function Effects 0.000 description 10
- 230000000694 effects Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 5
- 230000003190 augmentative effect Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000005282 brightening Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000009365 direct transmission Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
本申请公开了一种媒体数据处理单元、方法以及电子设备,属于视频拍摄技术领域。该媒体数据处理单元包括:包括相连的处理器和媒体处理芯片;其中,处理器用于对摄像头拍摄的第一媒体数据进行第一图像处理,得到第二媒体数据,并基于当前拍摄环境的光照强度,将第二媒体数据输出至媒体处理芯片,媒体处理芯片用于基于第二媒体数据进行第二图像处理,得到目标媒体数据。
Description
技术领域
本申请属于视频拍摄技术领域,具体涉及一种媒体数据处理单元、方法以及电子设备。
背景技术
随着科技的发展,电子设备种类越来越多,电子设备的功能也越来越强大,电子设备已成为人们生活和工作不可或缺的一部分。
拍摄是电子设备中常见功能,通过拍摄可得到媒体数据,例如,图像或视频等,在拍摄环境比较暗的场景下,目前常见的媒体数据处理方式,一般是通过电子设备的处理器中集成的算法对摄像头拍摄的初始媒体数据进行简单提亮处理,这样,得到的媒体数据质量较差。
发明内容
本申请实施例的目的是提供一种媒体数据处理单元、方法以及电子设备,能够提高拍摄的媒体数据的质量。
第一方面,本申请实施例提供了一种媒体数据处理单元,包括相连的处理器和媒体处理芯片;
其中,所述处理器用于对摄像头拍摄的第一媒体数据进行第一图像处理,得到第二媒体数据,并基于当前拍摄环境的光照强度,将所述第二媒体数据输出至所述媒体处理芯片,所述媒体处理芯片用于基于所述第二媒体数据进行第二图像处理,得到目标媒体数据。
第二方面,本申请实施例提供了一种电子设备,包括显示单元以及本申请实施例的媒体数据处理单元,所述显示单元用于显示所述媒体数据处理单元得到的所述目标媒体数据。
第三方面,本申请实施例提供了一种媒体数据处理方法,所述方法本申请实施例提供的媒体数据处理单元执行,所述方法包括:
所述处理器对摄像头拍摄的第一媒体数据进行第一图像处理,得到第二媒体数据,并基于当前拍摄环境的光照强度,将所述第二媒体数据输出至所述媒体处理芯片;
所述媒体处理芯片基于所述第二媒体数据进行第二图像处理,得到目标媒体数据。
第四方面,本申请实施例提供了一种媒体数据处理装置,包括:
第一图像处理模块,用于对摄像头拍摄的第一媒体数据进行第一图像处理,得到第二媒体数据;
第二图像处理模块,用于基于所述电子设备当前拍摄环境的光照强度,对所述第二媒体数据进行第二图像处理,得到目标媒体数据。
第五方面,本申请实施例提供了一种电子设备,该电子设备包括处理器和存储器,所述存储器存储可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第三方面所述的方法的步骤。
第六方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第三方面所述的方法的步骤。
第七方面,本申请实施例提供了一种媒体处理芯片,所述图像处理芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述通信接口用于传输图像数据,所述处理器用于运行程序或指令,实现如第三方面所述的方法。
第八方面,本申请实施例提供了一种处理器芯片,所述处理器芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述通信接口用于传输图像数据,所述处理器用于运行程序或指令,实现如第三方面所述的方法。
第九方面,本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如第三方面所述的方法。
在本实施例中,首先通过处理器对摄像头拍摄的第一媒体数据进行第一图像处理,得到第一媒体数据,然后根据前拍摄环境的光照强度,将第二媒体数据输出至媒体处理芯片,媒体处理芯片基于第二媒体数据进行第二图像处理,得到目标媒体数据,这样,即使当前拍摄环境比较暗,光照强度较低,在处理器进行一次图像处理得到第二媒体数据的基础上,还可通过媒体处理芯片进行二次图像处理,得到目标媒体数据,从而可提高得到的目标媒体数据的质量。
附图说明
图1是本申请实施例提供的媒体数据处理单元的结构图之一;
图2是本申请实施例提供的媒体数据处理单元的结构图之二;
图3是本申请实施例提供的电子设备的结构图之一;
图4是本申请实施例提供的媒体数据处理方法的流程图;
图5是本申请实施例提供的媒体数据处理装置的模块示意图;
图6是本申请实施例提供的电子设备的结构示意图之二;
图7是本申请实施例提供的电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的媒体数据处理单元进行详细地说明。
如图1所示,本申请提供一种实施例的媒体数据处理单元100,可用于电子设备,媒体数据处理单元100包括相连的处理器101和媒体处理芯片102;
其中,处理器101用于对摄像头拍摄的第一媒体数据进行第一图像处理,得到第二媒体数据,并基于当前拍摄环境的光照强度,将第二媒体数据输出至媒体处理芯片102,媒体处理芯片102用于基于第二媒体数据进行第二图像处理,得到目标媒体数据。
处理器101可以是中央处理器101(CPU),在视频拍摄模式下,摄像头可拍摄视频,在图像拍摄模式下,可拍摄图像,第一媒体数据可以是第一图像或第一视频,媒体处理芯片102可以是图像处理芯片或视频处理芯片。在本实施例中,首先可通过处理器101对摄像头拍摄的第一媒体数据进行第一图像处理,即先进行一次图像处理,得到第二媒体数据,第二媒体数据可以是第二图像或第二视频。然后根据当前拍摄环境的光照强度,将第二媒体数据输出至媒体处理芯片102,媒体处理芯片102可基于第二媒体数据进行第二图像处理,即可进行二次图像处理,得到目标媒体数据,实现媒体数据拍摄,目标媒体数据可以是目标图像或目标视频。需要说明的是,上述光照强度,也可称为光照度,即照度,单位为lux(勒克斯),光照强度可通过光照传感器(可设置于电子设备)检测得到,光照传感器可与处理器101连接,光照传感器将检测的光照强度传输至处理器101。作为一个示例,上述第一图像处理可包括降噪处理,也还可包括提亮处理(即亮度增加处理)。
在本实施例中,首先通过处理器101对摄像头拍摄的第一媒体数据进行第一图像处理,得到第一媒体数据,然后根据前拍摄环境的光照强度,将第二媒体数据输出至媒体处理芯片102,媒体处理芯片102基于第二媒体数据进行第二图像处理,得到目标媒体数据,这样,即使当前拍摄环境比较暗,光照强度较低,在处理器101进行一次图像处理得到第二媒体数据的基础上,还可通过媒体处理芯片102进行二次图像处理,得到目标媒体数据,从而可提高得到的目标媒体数据的质量。
在一个实施例中,第二图像处理包括以下至少一项:
图像降噪;
图像插帧。
通过图像降噪,可降低图像中的噪声,提高图像的质量,通过对媒体数据进行图像降噪,即是对媒体数据中的每张图像进行降噪,从而可提高媒体数据的质量。通过对媒体数据进行图像插帧处理,可提高视媒体数据的流程性,从而可提高媒体数据的质量。在本实施例中,在处理器101对第一媒体数据进行第一图像处理得到第二媒体数据的基础上,进行包括图像降噪和图像插帧中的至少一项的二次图像处理,以提高得到的目标媒体数据的质量。
如图2所示,在一个实施例中,媒体处理芯片102包括第一接收端口1021以及降噪单元1022,第一接收端口1021连接于处理器101的第一输出端T1与降噪单元1022的输入端之间;
处理器101用于在光照强度小于或等于第一预设照度的情况下,将第二媒体数据输出至第一接收端口1021,第一接收端口1021将第二媒体数据传输至降噪单元1022,降噪单元1022用于对第二媒体数据进行降噪处理,得到目标媒体数据。
可以理解,降噪单元1022进行图像降噪,例如,降噪单元1022可以是3维数字降噪(3Digital Noise Reduction,3DNR)单元。在当前拍摄环境的光照强度小于或等于第一预设照度的情况下,表示当前拍摄环境较暗,处理器101是将第二媒体数据输出至第一接收端口1021,第一接收端口1021将第二媒体数据传输至降噪单元1022,即降噪单元1022通过第一接收端口1021接收处理器101输出的第二媒体数据,降噪单元1022对第二媒体数据进行图像降噪,降低第二媒体数据中图像的噪声,提高得到的目标媒体数据的质量。作为一个示例,第一预设照度可预先根据经验设置,具体取值在本申请实施例中不作限定,例如,第一预设照度可以取10lux。
在一个实施例中,媒体处理芯片102还包括第二接收端口1023和第一发送端口1024,第二接收端口1023连接于处理器101的第二输出端T2与降噪单元1022的输入端之间,第一发送端口1024与降噪单元1022的第一输出接口连接,第一发送端口1024还与处理器101的输入端R1连接;
处理器101用于在光照强度小于或等于第一预设照度,且大于或等于第二预设照度的情况下,将第二媒体数据输出至第一接收端口1021,第一接收端口1021将第二媒体数据传输至降噪单元1022,降噪单元1022用于对第二媒体数据进行降噪处理,得到目标媒体数据;或者,
处理器101用于在光照强度小于第二预设照度的情况下,将第二媒体数据输出至第二接收端口1023,第二接收端口1023将第二媒体数据传输至降噪单元1022,降噪单元1022用于对第二媒体数据进行降噪处理,得到第一降噪媒体数据,并将第一降噪媒体数据输出至第一发送端口1024,第一发送端口1024将第一降噪媒体数据输出至处理器101,处理器101对第一降噪媒体数据进行第一图像处理,得到目标媒体数据。
第二预设照度小于第一预设照度,可预先根据经验设置,具体取值在本申请实施例中不作限定,例如,第二预设照度可以取1lux。在本实施例中,在光照强度小于或等于第一预设照度,且大于或等于第二预设照度的情况下,表示当前拍摄环境的暗的程度较小,降噪单元1022对第二媒体数据进行降噪处理,得到目标媒体数据即可,提高目标媒体数据的质量。在光照强度小于第二预设照度的情况下,表示当前拍摄环境的暗的程度较大,降噪单元1022对第二媒体数据进行降噪处理,得到第一降噪媒体数据后,还需将第一降噪媒体数据通过第一发送端口1024回传至处理器101,即第一发送端口1024还与处理器101的输入端R1连接,通过第一发送端口1024将第一降噪媒体数据输出至处理器101的输入端R1,处理器101实现对第一降噪媒体数据的接收,处理器101需对第一降噪媒体数据再进行第一图像处理,得到目标媒体数据,提高目标媒体数据的质量。
在本实施例中,在光照强度小于或等于第一预设照度的情况下,表示当前拍摄环境较暗,需要进一步的图像处理,由于当前拍摄环境的暗的程度不同,拍摄的视频的噪声程度不同,从而可对第二媒体数据进行不同的二次图像处理。即在光照强度小于或等于第一预设照度,且大于或等于第二预设照度的情况下,降噪单元1022对第二媒体数据进行图像降噪即可,得到目标媒体数据,提高视频质量,在光照强度小于第二预设照度的情况下,降噪单元1022对第二媒体数据进行图像降噪得到第一降噪媒体数据后,还需将其回传给处理器101再进行第一图像处理,得到目标媒体数据,提高视频质量。这样,可根据当前环境的光照强度,灵活对第二媒体数据进行图像处理,提高对视频进行图像处理的灵活性的同时,可提高得到的目标媒体数据的质量。
在一个实施例中,媒体处理芯片102还包括插帧单元1025,插帧单元1025的输入端与处理器101的第三输出端T3连接;
其中,处理器101还用于在光照强度小于第二预设照度的情况下,降低视频拍摄帧率,第一媒体数据为摄像头基于降低后的视频拍摄帧率降低进行拍摄得到的视频;
处理器101用于接收第一发送端口1024输出的第一降噪媒体数据,并对第一降噪媒体数据进行第一图像处理,获得第三媒体数据,并通过第三输出端T3将第三媒体数据输出至插帧单元1025的输入端,插帧单元1025用于对第三媒体数据进行插帧处理,得到目标媒体数据。
通过处理器101可控制摄像头的视频拍摄帧率,视频拍摄帧率可以理解是每秒拍摄的帧数,在光照强度小于第二预设照度的情况下,处理器101可降低视频拍摄帧率,通过降低视频拍摄帧率,来实现提高曝光亮度,但同时可带来噪声以及导致画面不流畅,如此,在得到目标媒体数据的过程中,处理器101将经过第一图像处理得到的第二媒体数据传输至降噪单元1022,降噪单元1022对第二媒体数据再进行降噪得到第一降噪媒体数据,并将其回传至处理器101,处理器101对第一降噪媒体数据再进行第一图像处理,获得第三媒体数据,提高得到的视频的质量,可将第三媒体数据传输至插帧单元1025,插帧单元1025对第三媒体数据进行插帧处理,得到目标媒体数据,如此,可提高视频画面的流畅性,确保视频的质量。需要说明的是,本申请实施例中的插帧单元1025可以是MEMC(Motion Estimateand Motion Compensation,运动估计和运动补偿)单元,可对视频进行插帧,实现视频补偿。
本实施例的媒体数据处理单元,可通过其中的降噪单元和插帧单元实现夜景或极夜下拍摄的视频的降噪和插帧,使拍摄的效果提升,所见即所得,可提高用户的使用体验。
在一个实施例中,媒体处理芯片102还包括第二发送端口1026;
其中,第二发送端口1026与降噪单元1022的第二输出接口以及插帧单元1025的输出端连接,第二发送端口1026还与显示单元301连接;
第二发送端口1026用于将目标媒体数据输出至显示单元301进行显示。
需要说明的是,光照强度不同,得到目标图像的途径不同,第二发送端口1026接收的目标媒体数据可以是在光照强度小于或等于第一预设照度,且大于或等于第二预设照度的情况下,降噪单元1022对第二媒体数据进行降噪处理得到的目标媒体数据,或者是在光照强度小于第二预设照度的情况下,插帧单元1025对第三媒体数据进行插帧处理得到的目标媒体数据。
可以理解,第二发送端口1026还与显示单元301的第一输入端连接,第二发送端口1026可将接收的目标媒体数据输出至显示单元301进行显示,以便用户查看拍摄的目标媒体数据。
在一个实施例中,媒体处理芯片102还包括模拟通路(Analog bypass),模拟通路连接于处理器101的第四输出端T4与显示单元301的第一输入端之间。处理器101的在光照强度大于第一预设照度的情况下,处理器101将第二媒体数据输出至模拟通路,模拟通路将第二媒体数据传输至显示单元301的第一输入端,显示单元301接收第二媒体数据后,即可显示第二媒体数据。即可以理解,模拟通路为一条直传通路,进行第二媒体数据的传输即可,无需进行其他图像处理等,如此,提高视频显示的效率。
另外,需要说明的是,与模拟通路对应的则是数字通路(Digital bypass),如图2所示,数字通路可以包括处理器101的第三输出端T3通过插帧单元1025以及第二发送端口1026到显示单元301之间的通路,通过该数字通路,处理器101可将第一降噪媒体数据传输至插帧单元1025,插帧单元1025可将得到的目标媒体数据传输至显示单元301进行显示。
如图3所示,本申请还提供一种实施例的电子设备300,包括相连的显示单元301以及上述实施例提供的媒体数据处理单元100,显示单元301用于显示媒体数据处理单元100得到的目标媒体数据。
本实施例的电子设备300,通过媒体数据处理单元100的处理器101对摄像头拍摄的第一媒体数据进行第一图像处理,得到第一媒体数据,然后根据前拍摄环境的光照强度,将第二媒体数据输出至媒体处理芯片102,媒体处理芯片102基于第二媒体数据进行第二图像处理,得到目标媒体数据,这样,即使当前拍摄环境比较暗,光照强度较低,在处理器101进行一次图像处理得到第二媒体数据的基础上,还可通过媒体处理芯片102进行二次图像处理,得到目标媒体数据,从而可提高得到的目标媒体数据的质量。将目标媒体数据传输至显示单元301进行显示,以便用户查看拍摄的媒体数据。
需要说明的是,显示单元301的第一输入端可以与媒体数据处理单元100的第二发送端口1026连接,另外,显示单元301的第二输入端可以与模拟通路连接。
如图3所示,实施例中,电子设备300还可包括摄像头302、按键303、电源304、音频模块305、触摸屏306以及传感器307等,处理器101分别与摄像头302、按键303、电源304、音频模块305、触摸屏306以及传感器307进行连接,传感器307可包括但不限于加速度传感器、陀螺仪传感器、气压传感器以及光照传感器等,每个传感器307分别与处理器101连接。
如图4所示,本申请提供一种实施例的媒体数据处理方法,方法由如本申请实施例的媒体数据处理单元执行,方法包括:
步骤401:处理器对摄像头拍摄的第一媒体数据进行第一图像处理,得到第二媒体数据,并基于当前拍摄环境的光照强度,将第二媒体数据输出至媒体处理芯片;
步骤402:媒体处理芯片基于第二媒体数据进行第二图像处理,得到目标媒体数据。
在一个实施例中,第二图像处理包括以下至少一项:
图像降噪;
图像插帧。
在一个实施例中,基于当前拍摄环境的光照强度,将第二媒体数据输出至媒体处理芯片,包括:
处理器在光照强度小于或等于第一预设照度的情况下,将第二媒体数据输出至媒体处理芯片的第一接收端口;
媒体处理芯片基于第二媒体数据进行第二图像处理,得到目标媒体数据,包括:
第一接收端口将第二媒体数据传输至媒体处理芯片的降噪单元;
降噪单元对第二媒体数据进行降噪处理,得到目标媒体数据。
在一个实施例中,处理器在光照强度小于或等于第一预设照度的情况下,将第二媒体数据输出至媒体处理芯片的第一接收端口,包括:
处理器在光照强度小于或等于第一预设照度,且大于或等于第二预设照度的情况下,将第二媒体数据输出至第一接收端口。
在一个实施例中,基于当前拍摄环境的光照强度,将第二媒体数据输出至媒体处理芯片,包括:
处理器在光照强度小于第二预设照度的情况下,将第二媒体数据输出至媒体处理芯片的第二接收端口;
媒体处理芯片基于第二媒体数据进行第二图像处理,得到目标媒体数据,包括:
第二接收端口将第二媒体数据传输至降噪单元;
降噪单元对第二媒体数据进行降噪处理,得到第一降噪媒体数据,并将第一降噪媒体数据输出至第一发送端口;
第一发送端口将第一降噪媒体数据输出至处理器;
媒体处理芯片的插帧单元接收处理器发送的第三媒体数据,对第三媒体数据进行插帧处理,得到目标媒体数据,第三媒体数据为处理器对第一降噪媒体数据进行第一图像处理得到。
在一个实施例中,处理器对摄像头拍摄的第一媒体数据进行第一图像处理,得到第二媒体数据之前,还包括:处理器在光照强度小于第二预设照度的情况下,降低视频拍摄帧率;
其中,第一媒体数据为摄像头基于降低后的视频拍摄帧率进行拍摄得到的视频。
上述媒体数据处理方法可以是通过上述实施例的媒体数据处理单元实现的方法,技术特征一一对应,能达到相同的技术效果,在此不再赘述。
本申请实施例提供的媒体数据处理方法,执行主体可以为媒体数据处理装置。本申请实施例中以媒体数据处理装置执行媒体数据处理方法为例,说明本申请实施例提供的媒体数据处理装置。
如图5所示,提供一种实施例的媒体数据处理装置500,可用于电子设备,装置500包括:
第一图像处理模块501,用于对摄像头拍摄的第一媒体数据进行第一图像处理,得到第二媒体数据;
第二图像处理模块502,用于基于电子设备当前拍摄环境的光照强度,对第二媒体数据进行第二图像处理,得到目标媒体数据。
在一个实施例中,第二图像处理包括以下至少一项:
图像降噪;
图像插帧。
在一个实施例中,基于电子设备当前拍摄环境的光照强度,对第二媒体数据进行第二图像处理,得到目标媒体数据,包括:
在光照强度小于或等于第一预设照度的情况下,对第二媒体数据进行降噪处理,得到目标媒体数据。
在一个实施例中,第二图像处理模块,包括:
第一降噪处理模块,用于在光照强度小于或等于第一预设照度,且大于或等于第二预设照度的情况下,对第二媒体数据进行降噪处理,得到目标媒体数据;或者,
第二图像处理模块,包括:
第二降噪处理模块,用于在光照强度小于第二预设照度的情况下,对第二媒体数据进行降噪处理,得到第一降噪媒体数据;
图像处理子模块,用于对第一降噪媒体数据进行第一图像处理,得到目标媒体数据。
在一个实施例中,装置500还包括:
帧率调整模块,用于第一图像处理模块执行对摄像头拍摄的第一媒体数据进行第一图像处理,得到第二媒体数据之前,在光照强度小于第二预设照度的情况下,降低视频拍摄帧率;
其中,第一媒体数据为摄像头基于降低后的视频拍摄帧率进行拍摄得到的视频;
其中,图像处理子模块,包括:
媒体数据获得模块,用于对第一降噪媒体数据进行第一图像处理,获得第三媒体数据;
插帧模块,用于对第三媒体数据进行插帧处理,得到目标媒体数据。
在一个实施例中,装置500还包括:
第一显示模块,用于显示目标媒体数据。
在一个实施例中,装置500还包括:
第二显示模块,用于在光照强度大于第一预设照度的情况下,显示第二媒体数据。
本申请实施例的媒体数据处理装置为可实现上述实施例的媒体数据处理方法的装置,技术特征一一对应,能达到相同的技术效果,在此不再赘述。
本申请实施例中的媒体数据处理装置可以是电子设备,也可以是电子设备中的部件,例如,集成电路或芯片。该电子设备可以是终端,也可以是除终端之外的其他设备,电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(MobileInternet Device,MID)、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、机器人、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personal digital assistant,PDA)等,还可以为网络附属存储器(Network Attached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的媒体数据处理装置可以为具有操作***的装置。该操作***可以为安卓(Android)操作***,可以为ios操作***,还可以为其他可能的操作***,本申请实施例不作具体限定。
本申请实施例提供的媒体数据处理装置能够实现上述媒体数据处理方法实施例实现的各个过程,例如,能够实现图1至图3的方法实施例实现的各个过程,为避免重复,这里不再赘述。
可选地,如图6所示,本申请实施例还提供一种电子设备600,包括处理器601和存储器602,存储器602存储可在处理器601上运行的程序或指令,该程序或指令被处理器601执行时实现上述媒体数据处理方法实施例的各个步骤,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述的移动电子设备和非移动电子设备。
图7为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备700包括但不限于:射频单元701、网络模块702、音频输出单元703、输入单元704、传感器705、显示单元706、用户输入单元707、接口单元708、存储器709、以及处理器710等部件。
本领域技术人员可以理解,电子设备700还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理***与处理器710逻辑相连,从而通过电源管理***实现管理充电、放电、以及功耗管理等功能。图7中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,处理器710,用于:
获取摄像头拍摄的第一媒体数据;
对第一媒体数据进行第一图像处理,得到第二媒体数据;
基于电子设备当前拍摄环境的光照强度,对第二媒体数据进行第二图像处理,得到目标媒体数据。
在一个实施例中,第二图像处理包括以下至少一项:
图像降噪;
图像插帧。
在一个实施例中,基于电子设备当前拍摄环境的光照强度,对第二媒体数据进行第二图像处理,得到目标媒体数据,包括:
在光照强度小于或等于第一预设照度的情况下,对第二媒体数据进行降噪处理,得到目标媒体数据。
在一个实施例中,在光照强度小于或等于第一预设照度的情况下,对第二媒体数据进行降噪处理,得到目标媒体数据,包括以下任一项:
在光照强度小于或等于第一预设照度,且大于或等于第二预设照度的情况下,对第二媒体数据进行降噪处理,得到目标媒体数据;
在光照强度小于第二预设照度的情况下,对第二媒体数据进行降噪处理,得到第一降噪媒体数据,以及对第一降噪媒体数据进行第一图像处理,得到目标媒体数据。
在一个实施例中,处理器710,还用于:
处理器710执行第一图像处理模块执行对摄像头拍摄的第一媒体数据进行第一图像处理,得到第二媒体数据之前,在光照强度小于第二预设照度的情况下,降低视频拍摄帧率;
其中,第一媒体数据为摄像头基于降低后的视频拍摄帧率进行拍摄得到的视频;
其中,处理器710,还用于:
对第一降噪媒体数据进行第一图像处理,获得第三媒体数据;
对第三媒体数据进行插帧处理,得到目标媒体数据。
在一个实施例中,显示单元606,用于显示目标媒体数据。
在一个实施例中,显示单元606,还用于在光照强度大于第一预设照度的情况下,显示第二媒体数据。
应理解的是,本申请实施例中,输入单元704可以包括图形处理器(GraphicsProcessing Unit,GPU)7041和麦克风7042,图形处理器7041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元706可包括显示面板7061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板7061。用户输入单元707包括触控面板7071以及其他输入设备7072中的至少一种。触控面板7071,也称为触摸屏。触控面板7071可包括触摸检测装置和触摸控制器两个部分。其他输入设备7072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
存储器709可用于存储软件程序以及各种数据,存储器109可主要包括存储程序或指令的第一存储区和存储数据的第二存储区,其中,第一存储区可存储操作***、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外,存储器109可以包括易失性存储器或非易失性存储器,或者,存储器x09可以包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory,RAM),静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM,DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM,SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM,DRRAM)。本申请实施例中的存储器109包括但不限于这些和任意其它适合类型的存储器。
处理器110可包括一个或多个处理单元;可选的,包括但不限于应用程序和操作***。处理器710可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作***、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器710中。
本申请实施例还提供一种可读存储介质,可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述媒体数据处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,处理器为上述实施例中的电子设备中的处理器。可读存储介质,包括计算机可读存储介质,如计算机只读存储器ROM、随机存取存储器RAM、磁碟或者光盘等。
本申请实施例另提供了一种媒体处理芯片包括处理器和通信接口,通信接口和处理器耦合,通信接口用于传输图像数据,处理器用于运行程序或指令,实现上述媒体数据处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本申请实施例另提供了一种处理器芯片包括处理器和通信接口,通信接口和处理器耦合,通信接口用于传输图像数据,处理器用于运行程序或指令,实现上述媒体数据处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为***级芯片、***芯片、芯片***或片上***芯片等。
本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如上述媒体数据处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (22)
1.一种媒体数据处理单元,其特征在于,包括相连的处理器和媒体处理芯片;
其中,所述处理器用于对摄像头拍摄的第一媒体数据进行第一图像处理,得到第二媒体数据,并基于当前拍摄环境的光照强度,将所述第二媒体数据输出至所述媒体处理芯片,所述媒体处理芯片用于基于所述第二媒体数据进行第二图像处理,得到目标媒体数据。
2.根据权利要求1所述的媒体数据处理单元,其特征在于,所述第二图像处理包括以下至少一项:
图像降噪;
图像插帧。
3.根据权利要求2所述的媒体数据处理单元,其特征在于,所述媒体处理芯片包括第一接收端口以及降噪单元,所述第一接收端口连接于所述处理器的第一输出端与所述降噪单元的输入端之间;
所述处理器用于在所述光照强度小于或等于第一预设照度的情况下,将所述第二媒体数据输出至所述第一接收端口,所述第一接收端口将所述第二媒体数据传输至所述降噪单元,所述降噪单元用于对所述第二媒体数据进行降噪处理,得到所述目标媒体数据。
4.根据权利要求3所述的媒体数据处理单元,其特征在于,所述媒体处理芯片还包括第二接收端口和第一发送端口,所述第二接收端口连接于所述处理器的第二输出端与所述降噪单元的输入端之间,所述第一发送端口与所述降噪单元的第一输出接口连接;
所述处理器用于在所述光照强度小于或等于所述第一预设照度,且大于或等于第二预设照度的情况下,将所述第二媒体数据输出至所述第一接收端口,所述第一接收端口将所述第二媒体数据传输至所述降噪单元,所述降噪单元用于对所述第二媒体数据进行降噪处理,得到所述目标媒体数据;或者,
所述处理器用于在所述光照强度小于所述第二预设照度的情况下,将所述第二媒体数据输出至所述第二接收端口,所述第二接收端口将所述第二媒体数据传输至所述降噪单元,所述降噪单元用于对所述第二媒体数据进行降噪处理,得到第一降噪媒体数据,并将所述第一降噪媒体数据输出至所述第一发送端口,所述第一发送端口将所述第一降噪媒体数据输出至所述处理器,所述处理器用于对所述第一降噪媒体数据进行所述第一图像处理,得到所述目标媒体数据。
5.根据权利要求4所述的媒体数据处理单元,其特征在于,所述媒体处理芯片还包括插帧单元,所述插帧单元的输入端与所述处理器的第三输出端连接;
其中,所述处理器还用于在所述光照强度小于所述第二预设照度的情况下,降低视频拍摄帧率,所述第一媒体数据为所述摄像头基于降低后的视频拍摄帧率进行拍摄得到的视频;
所述处理器用于接收所述第一发送端口输出的所述第一降噪媒体数据,并对所述第一降噪媒体数据进行所述第一图像处理,获得第三媒体数据,并通过所述第三输出端将所述第三媒体数据输出至所述插帧单元的输入端,所述插帧单元用于对所述第三媒体数据进行插帧处理,得到所述目标媒体数据。
6.根据权利要求5所述的媒体数据处理单元,其特征在于,所述媒体处理芯片还包括第二发送端口;
其中,所述第二发送端口与所述降噪单元的第二输出接口以及所述插帧单元的输出端连接,所述第二发送端口还与显示单元连接;
所述第二发送端口用于将所述目标媒体数据输出至所述显示单元进行显示。
7.一种电子设备,其特征在于,包括显示单元以及如权利要求1-6中任一项所述的媒体数据处理单元,所述显示单元用于显示所述媒体数据处理单元得到的所述目标媒体数据。
8.一种媒体数据处理方法,其特征在于,所述方法由如权利要求1-6中任一项所述的媒体数据处理单元执行,所述方法包括:
所述处理器对摄像头拍摄的第一媒体数据进行第一图像处理,得到第二媒体数据,并基于当前拍摄环境的光照强度,将所述第二媒体数据输出至所述媒体处理芯片;
所述媒体处理芯片基于所述第二媒体数据进行第二图像处理,得到目标媒体数据。
9.根据权利要求8所述的方法,其特征在于,所述第二图像处理包括以下至少一项:
图像降噪;
图像插帧。
10.根据权利要求9所述的方法,其特征在于,所述基于当前拍摄环境的光照强度,将所述第二媒体数据输出至所述媒体处理芯片,包括:
所述处理器在所述光照强度小于或等于第一预设照度的情况下,将所述第二媒体数据输出至所述媒体处理芯片的第一接收端口;
所述媒体处理芯片基于所述第二媒体数据进行第二图像处理,得到目标媒体数据,包括:
所述第一接收端口将所述第二媒体数据传输至所述媒体处理芯片的降噪单元;
所述降噪单元对所述第二媒体数据进行降噪处理,得到所述目标媒体数据。
11.根据权利要求10所述的方法,其特征在于,所述处理器在所述光照强度小于或等于第一预设照度的情况下,将所述第二媒体数据输出至所述媒体处理芯片的第一接收端口,包括:
所述处理器在所述光照强度小于或等于所述第一预设照度,且大于或等于第二预设照度的情况下,将所述第二媒体数据输出至所述第一接收端口。
12.根据权利要求9所述的方法,其特征在于,所述基于当前拍摄环境的光照强度,将所述第二媒体数据输出至所述媒体处理芯片,包括:
所述处理器在所述光照强度小于第二预设照度的情况下,将所述第二媒体数据输出至所述媒体处理芯片的第二接收端口;
所述媒体处理芯片基于所述第二媒体数据进行第二图像处理,得到目标媒体数据,包括:
所述第二接收端口将所述第二媒体数据传输至所述降噪单元;
所述降噪单元对所述第二媒体数据进行降噪处理,得到第一降噪媒体数据,并将所述第一降噪媒体数据输出至所述媒体处理芯片的第一发送端口;
所述第一发送端口将所述第一降噪媒体数据输出至所述处理器;
所述媒体处理芯片的插帧单元接收所述处理器发送的第三媒体数据,对所述第三媒体数据进行插帧处理,得到所述目标媒体数据,所述第三媒体数据为所述处理器对所述第一降噪媒体数据进行所述第一图像处理得到。
13.根据权利要求12所述的方法,其特征在于,所述处理器对摄像头拍摄的第一媒体数据进行第一图像处理,得到第二媒体数据之前,还包括:所述处理器在所述光照强度小于所述第二预设照度的情况下,降低视频拍摄帧率;
其中,所述第一媒体数据为所述摄像头基于降低后的视频拍摄帧率进行拍摄得到的视频。
14.一种媒体数据处理装置,其特征在于,所述装置包括:
第一图像处理模块,用于对摄像头拍摄的第一媒体数据进行第一图像处理,得到第二媒体数据;
第二图像处理模块,用于基于当前拍摄环境的光照强度,对所述第二媒体数据进行第二图像处理,得到目标媒体数据。
15.根据权利要求14所述的装置,其特征在于,所述第二图像处理包括以下至少一项:
图像降噪;
图像插帧。
16.根据权利要求15所述的装置,其特征在于,所述基于当前拍摄环境的光照强度,对所述第二媒体数据进行第二图像处理,得到目标媒体数据,包括:
在所述光照强度小于或等于第一预设照度的情况下,对所述第二媒体数据进行降噪处理,得到所述目标媒体数据。
17.根据权利要求16所述的装置,其特征在于,所述第二图像处理模块,包括:
第一降噪处理模块,用于在所述光照强度小于或等于所述第一预设照度,且大于或等于第二预设照度的情况下,对所述第二媒体数据进行降噪处理,得到所述目标媒体数据;或者,
所述第二图像处理模块,包括:
第二降噪处理模块,用于在所述光照强度小于所述第二预设照度的情况下,对所述第二媒体数据进行降噪处理,得到第一降噪媒体数据;
图像处理子模块,用于对所述第一降噪媒体数据进行所述第一图像处理,得到所述目标媒体数据。
18.根据权利要求17所述的装置,其特征在于,还包括:
帧率调整模块,用于所述第一图像处理模块执行对摄像头拍摄的第一媒体数据进行第一图像处理,得到第二媒体数据之前,在所述光照强度小于所述第二预设照度的情况下,降低视频拍摄帧率;
其中,所述第一媒体数据为所述摄像头基于降低后的视频拍摄帧率进行拍摄得到的视频;
其中,所述图像处理子模块,包括:
媒体数据获得模块,用于对所述第一降噪媒体数据进行所述第一图像处理,获得第三媒体数据;
插帧模块,用于对所述第三媒体数据进行插帧处理,得到所述目标媒体数据。
19.一种电子设备,其特征在于,包括处理器和存储器,所述存储器存储可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求8-13任一项所述的媒体数据处理方法的步骤。
20.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求8-13任一项所述的媒体数据处理方法的步骤。
21.一种媒体处理芯片,其特征在于,所述媒体处理芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述通信接口用于传输图像数据,所述处理器用于运行程序或指令,实现如权利要求8-13任一项所述的媒体数据处理方法的步骤。
22.一种处理器芯片,其特征在于,所述处理器芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述通信接口用于传输图像数据,所述处理器用于运行程序或指令,实现如权利要求8-13任一项所述的媒体数据处理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111630382.2A CN116419044A (zh) | 2021-12-28 | 2021-12-28 | 媒体数据处理单元、方法以及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111630382.2A CN116419044A (zh) | 2021-12-28 | 2021-12-28 | 媒体数据处理单元、方法以及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116419044A true CN116419044A (zh) | 2023-07-11 |
Family
ID=87056380
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111630382.2A Pending CN116419044A (zh) | 2021-12-28 | 2021-12-28 | 媒体数据处理单元、方法以及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116419044A (zh) |
-
2021
- 2021-12-28 CN CN202111630382.2A patent/CN116419044A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113015007B (zh) | 视频插帧方法、装置及电子设备 | |
CN108702460B (zh) | 使用显示器光来改善前置相机性能 | |
CN110086998B (zh) | 一种拍摄方法及终端 | |
CN113721876A (zh) | 投屏处理方法及相关设备 | |
CN111835937A (zh) | 图像处理方法、装置及电子设备 | |
CN112437237A (zh) | 拍摄方法及装置 | |
CN115665562A (zh) | 图像处理方法、电路、设备及介质 | |
CN113393391B (zh) | 图像增强方法、图像增强装置、电子设备和存储介质 | |
CN114299014A (zh) | 图像处理架构、方法、电子设备及存储介质 | |
CN116419044A (zh) | 媒体数据处理单元、方法以及电子设备 | |
CN114285956A (zh) | 视频分享电路、方法、装置及电子设备 | |
CN114338874A (zh) | 电子设备的图像显示方法、图像处理电路和电子设备 | |
CN112672056A (zh) | 图像处理方法及装置 | |
CN112367470B (zh) | 图像处理方法、装置及电子设备 | |
EP3281173A1 (en) | System and method to refine image data | |
CN113037996A (zh) | 图像处理方法、装置和电子设备 | |
CN114143448B (zh) | 拍摄方法、装置、电子设备及可读存储介质 | |
CN114302057B (zh) | 图像参数确定方法、装置、电子设备及存储介质 | |
CN114302026B (zh) | 降噪方法、装置、电子设备和可读存储介质 | |
CN113923367B (zh) | 拍摄方法、拍摄装置 | |
CN114071016B (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN117714844A (zh) | 视频处理方法、装置 | |
CN116308987A (zh) | 图像处理芯片、图像处理方法及电子设备 | |
CN117278687A (zh) | 图像处理方法及其装置 | |
CN115103119A (zh) | 拍摄方法、装置和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |