CN117579819B - 一种图像通信数字媒体方法及*** - Google Patents
一种图像通信数字媒体方法及*** Download PDFInfo
- Publication number
- CN117579819B CN117579819B CN202410063956.XA CN202410063956A CN117579819B CN 117579819 B CN117579819 B CN 117579819B CN 202410063956 A CN202410063956 A CN 202410063956A CN 117579819 B CN117579819 B CN 117579819B
- Authority
- CN
- China
- Prior art keywords
- frame
- frequency
- frame image
- image
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 68
- 238000004891 communication Methods 0.000 title claims abstract description 31
- 238000001228 spectrum Methods 0.000 claims abstract description 130
- 238000009826 distribution Methods 0.000 claims abstract description 104
- 238000011156 evaluation Methods 0.000 claims abstract description 100
- 239000000463 material Substances 0.000 claims abstract description 62
- 230000008859 change Effects 0.000 claims abstract description 30
- 230000005540 biological transmission Effects 0.000 claims abstract description 26
- 230000008569 process Effects 0.000 claims description 14
- 238000004364 calculation method Methods 0.000 claims description 13
- 238000009499 grossing Methods 0.000 claims description 12
- UXFQFBNBSPQBJW-UHFFFAOYSA-N 2-amino-2-methylpropane-1,3-diol Chemical compound OCC(N)(C)CO UXFQFBNBSPQBJW-UHFFFAOYSA-N 0.000 claims description 9
- 101150035093 AMPD gene Proteins 0.000 claims description 9
- 238000000513 principal component analysis Methods 0.000 claims description 9
- 238000010606 normalization Methods 0.000 claims description 8
- 230000009466 transformation Effects 0.000 claims description 4
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000012545 processing Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011002 quantification Methods 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 238000010183 spectrum analysis Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
- H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
- H04N19/198—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters including smoothing of a sequence of encoding parameters, e.g. by averaging, by choice of the maximum, minimum or median value
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明涉及图像通信技术领域,提出了一种图像通信数字媒体方法及***,包括:采集数字媒体素材,获取若干帧图像;根据相邻帧图像的相似性获取若干关键帧及若干帧段;根据帧段中各帧图像的频谱中的频率分布,获取每个频率在每个帧段的波动评价;根据相邻帧图像的频谱中各频率的变化,以及各频率在各帧段的波动评价,获取每个频率在每张帧图像的平滑评价;通过相邻帧图像的频谱中频率的分布,结合平滑评价并通过傅里叶逆变换,对所有帧图像进行预测编码,得到数字媒体素材的待传输码流;对数字媒体素材的待传输码流进行传输。本发明旨在解决视频传输过程未考虑相邻帧图像相似性较大而导致传输效率较低的问题。
Description
技术领域
本发明涉及图像通信技术领域,具体涉及一种图像通信数字媒体方法及***。
背景技术
数字媒体方法是指利用数字技术对媒体数据进行处理、存储和传输的方法,而将图像通信运用于数字媒体方法过程中就能够将数字媒体进行流转,便于将数字媒体进行传播分享;而在数字媒体图像在进行通信前需要进行编码,编码是一种将图像数据转化为信号数据准备传输的过程。
而数字媒体图像的通信通常用于视频传输中,现有的视频传输过程中逐帧图像进行编码,导致视频传输效率低下;然而视频帧图像中,相邻帧的图像存在大量相同的信息,因此可以通过相邻帧图像中存在的差异信息进行编码,则可以考虑到相邻帧图像之间的较大相似性,进而提高图像通信之间的传输效率。现有方法中可以通过预测编码来实现视频的快速传输,然而对于变化快速且场景复杂的数字媒体图像信息所产生的剧烈非线性变化,差异信息会发生波动,因此需要通过预测方法对编码过程进行平滑,从而实现视频图像的快速通信传输。
发明内容
本发明提供一种图像通信数字媒体方法及***,以解决现有的视频传输过程未考虑相邻帧图像相似性较大而导致传输效率较低的问题,所采用的技术方案具体如下:
第一方面,本发明一个实施例提供了一种图像通信数字媒体方法,该方法包括以下步骤:
采集数字媒体素材,获取若干帧图像;
根据相邻帧图像的相似性获取若干关键帧及若干帧段;根据帧段中各帧图像的频谱中的频率分布,获取每个频率在每个帧段的波动评价;
根据相邻帧图像的频谱中各频率的变化,以及各频率在各帧段的波动评价,获取每个频率在每张帧图像的平滑评价;通过相邻帧图像的频谱中频率的分布,结合平滑评价并通过傅里叶逆变换,对所有帧图像进行预测编码,得到数字媒体素材的待传输码流;
对数字媒体素材的待传输码流进行传输。
可选的,所述若干关键帧及若干帧段,具体的获取方法为:
将帧图像按照时序排列,对相邻帧图像通过MSSIM平均结构相似性算法进行结构相似性计算,将所有得到的结构相似性按照获取顺序进行排列,得到结构相似性序列;对结构相似性序列获取极值点,将其中极小值点对应的两帧图像中后一帧图像作为关键帧,得到若干关键帧;
将每个关键帧作为一个帧段中的第一张帧图像,对所有帧图像划分为若干帧段,其中第一个帧段中第一张帧图像为所有帧图像中的第一张帧图像。
可选的,所述每个频率在每个帧段的波动评价,具体的获取方法为:
对每张帧图像通过傅里叶变换获取频谱,根据每张帧图像的频谱中的频率分布,获取每个频率在每个帧段的分布数据点、分布数量、分布因子及每个分布数据点的分布距离;
将任意一个帧段作为当前帧段,当前帧段中频率的波动评价/>的计算方法为:
其中,表示频率/>在当前帧段的分布因子,/>表示频率/>在当前帧段的分布数量,表示频率/>在当前帧段的第/>个分布数据点的分布距离,/>表示频率/>在当前帧段的第/>个分布数据点的振幅,/>表示频率/>在当前帧段的所有分布数据点的振幅均值,/>表示频率/>在当前帧段的所有分布数据点的振幅标准差;
将在当前帧段的分布数量为0的频率,在当前帧段的波动评价设置为0。
可选的,所述每个频率在每个帧段的分布数据点、分布数量、分布因子及每个分布数据点的分布距离,具体的获取方法为:
对于当前帧段中各帧图像的频谱中的任意一个频率,该频率在当前帧段的每个频谱中存在若干振幅不为0的数据点,记为该频率在当前帧段的分布数据点,统计分布数据点的数量,记为该频率在当前帧段的分布数量;
获取每个频率在当前帧段的分布数量,包括在当前帧段分布数量为0的频率,对所有频率对应的分布数量进行线性归一化,得到的结果记为每个频率在当前帧段的分布因子;
对于任意一个分布数据点,获取该分布数据点在对应频谱中与其他分布数据点的距离,将得到的距离的最小值作为该分布数据点的分布距离。
可选的,所述每个频率在每张帧图像的平滑评价,具体的获取方法为:
根据每个频率在每个帧段的波动评价,以及相邻帧图像的频谱中各频率的变化,获取每张帧图像在每个频率参考帧段、每个频率在每张帧图像的最大帧差方向及参考帧段中的最大帧差方向;
将任意一张帧图像作为当前帧图像,频率在当前帧图像的平滑评价/>的具体计算方法为:
其中,表示频率/>在当前帧图像的最大帧差方向,/>表示频率/>在当前帧图像的参考帧段中的最大帧差方向,/>表示两个最大帧差方向的余弦值,/>表示频率/>在当前帧图像所属帧段的波动评价,/>表示频率/>在当前帧图像的参考帧段中各帧图像所属帧段的波动评价最小值,/>表示频率/>在当前帧图像的参考帧段中各帧图像所属帧段的波动评价最大值。
可选的,所述每张帧图像在每个频率参考帧段、每个频率在每张帧图像的最大帧差方向及参考帧段中的最大帧差方向,具体的获取方法为:
将频率在每个帧段中的波动评价按照帧段的时间顺序进行排列,得到的序列记为频率/>的帧段波动序列;对该帧段波动序列通过AMPD算法获取若干峰值点,将峰值点对应的帧段中的关键帧,作为该频率的变化关键帧;
获取与当前帧图像在频率的若干变化关键帧中相隔帧数最小的变化关键帧,记为当前帧图像在频率/>的参考关键帧,将当前帧图像到参考关键帧的所有帧图像,作为当前帧图像在频率/>的参考帧段;
对当前帧图像的频谱与当前帧图像的相邻前一帧图像的频谱进行差分,差分方法为对相同位置的数据点获取相应振幅下的差值绝对值,得到的结果记为当前帧图像的帧差频谱,对帧差频谱中频率的振幅不为0的数据点进行PCA分析,获取最大主方向,记为频率/>在当前帧图像的最大帧差方向;
对当前帧图像的参考帧段中每张帧图像的频谱都与相邻前一帧图像的频谱进行差分,获取每张帧图像的帧差频谱,并获取频率在参考帧段中每张帧图像的最大帧差方向,PCA分析过程中最大主方向对应投影长度,将参考帧段中所有帧图像的最大帧差方向对应的投影长度最大值所对应的最大帧差方向,作为频率/>在当前帧图像的参考帧段中的最大帧差方向。
可选的,所述通过相邻帧图像的频谱中频率的分布,结合平滑评价并通过傅里叶逆变换,对所有帧图像进行预测编码,得到数字媒体素材的待传输码流,包括的具体方法为:
获取频率在每张帧图像的平滑评价;对于任意一个在每张帧图像的频谱中频率/>上相同位置的数据点,获取该数据点在每张帧图像的频谱中的振幅及频率分辨率;将该数据点在任意一张帧图像的频谱中的振幅及频率分辨率构成***状态向量,并输入到EKF滤波器中,输出相邻下一帧图像的预测状态向量,获取相邻下一帧图像的振幅与预测状态向量中振幅的差值绝对值,作为该数据点在相邻下一帧图像的振幅预测差异;获取该数据点在除第一张帧图像之外每张帧图像的振幅预测差异,将振幅预测差异按照帧图像的时序进行排列,作为该数据点的振幅预测序列;对振幅预测序列通过AMPD算法获取若干峰值,将峰值对应的帧图像作为该数据点的待平滑帧图像;对频率/>在所有帧图像的平滑评价进行premnmx归一化,得到的结果记为频率/>在每张帧图像的平滑因子;对于任意一张待平滑帧图像,将该待平滑帧图像的相邻前一帧图像对应的***状态向量输入到EKF滤波器的过程中,振幅对应的增益与平滑因子相乘,输出得到新的预测状态向量,记为待平滑帧图像的更新预测状态向量,通过更新预测状态向量中的振幅对该数据点在待平滑帧图像的频谱中的振幅进行替换;
对该数据点的每张待平滑帧图像的频谱中的振幅完成替换,作为该数据点在所有帧图像的频谱的更新;对频率上的每个数据点在所有帧图像的频谱完成更新;
获取每个频率在每张帧图像的平滑评价,并对每个频谱上的每个数据点在所有帧图像的频谱完成更新,将各帧图像全部更新完的频谱,记为每张帧图像的更新频谱,对更新频谱进行傅里叶逆变换,得到的图像记为每张帧图像的重构图像;通过DPCM算法对第一张帧图像及其他帧图像的重构图像,按照帧图像的顺序进行预测编码,生成码流并记为数字媒体素材的待传输码流。
可选的,所述获取若干帧图像,包括的具体方法为:
获取数字媒体素材中每一帧的图像,记为若干帧图像。
可选的,所述对数字媒体素材的待传输码流进行传输,包括的具体方法为:
将数字媒体素材的待传输码流通过通信渠道传输给用户的智能设备。
第二方面,本发明另一个实施例提供了一种图像通信数字媒体***,该***包括:
数字媒体素材采集模块,用于采集数字媒体素材,获取若干帧图像;
数字媒体素材编码模块,用于根据相邻帧图像的相似性获取若干关键帧及若干帧段;根据帧段中各帧图像的频谱中的频率分布,获取每个频率在每个帧段的波动评价;
根据相邻帧图像的频谱中各频率的变化,以及各频率在各帧段的波动评价,获取每个频率在每张帧图像的平滑评价;通过相邻帧图像的频谱中频率的分布,结合平滑评价并通过傅里叶逆变换,对所有帧图像进行预测编码,得到数字媒体素材的待传输码流;
数字媒体传输通信模块,用于对数字媒体素材的待传输码流进行传输。
本发明的有益效果是:本发明通过对数字媒体素材进行预测编码,并基于帧图像的频谱进行预测过程中的平滑,从而通过一定地有损压缩来提高数字媒体素材的传输效率,进而完成数字媒体素材的快速通信;其中通过获取关键帧及帧段,用以反映数字媒体素材的相邻帧图像中发生剧烈变化的关键帧,并基于帧段中各帧图像的频谱进行各频率的波动评价的量化,通过波动评价来反映各频率需要调整的程度,为后续对各帧图像的频谱进行更新提供基础;再通过波动评价及相邻帧图像的频谱中频率的变化,量化各频率在各帧图像的平滑评价,基于平滑评价对相邻帧图像的频谱中各频率的分布及变化进行平滑,并最终完成预测编码得到码流,从而在预测编码考虑相邻帧图像的相似性的同时,对相邻帧图像中剧烈变化的部分进行一定程度地损失,从而提高数字媒体素材的压缩效率及传输效率,最终完成数字媒体图像的快速通信。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一个实施例所提供的一种图像通信数字媒体方法流程示意图;
图2为本发明另一个实施例所提供的一种图像通信数字媒体***结构框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,其示出了本发明一个实施例所提供的一种图像通信数字媒体方法流程图,该方法包括以下步骤:
步骤S001、采集数字媒体素材,获取若干帧图像。
本实施例的目的是对数字媒体素材通过预测编码进行传输,从而实现对于数字媒体素材中图像的快速通信,因此首先需要获取待传输的数字媒体素材。
具体的,用户在获取数字媒体素材过程中,通过用户的智能设备向服务器发送数据请求,服务器接收到用户的数据调用请求后,通过对用户的验证信息进行识别,确定用户所需的具体数字媒体素材文件;后续即对该数字媒体素材进行编码并传输,数字媒体素材通常为视频形式,获取数字媒体素材中每一帧的图像,记为若干帧图像,并将帧图像按照在数字媒体素材中的时序关系进行排列。
至此,获取到了数字媒体素材及若干帧图像。
步骤S002、根据相邻帧图像的相似性获取若干关键帧及若干帧段;根据帧段中各帧图像的频谱中的频率分布,获取每个频率在每个帧段的波动评价。
需要说明的是,获取到若干帧图像后,由于数字媒体素材即视频中相邻帧图像的相似性通常较大,同时存在变化较大的相邻帧图像,因此通过分析相邻帧图像的相似性来获取关键帧,关键帧即为发生较大变化的相邻帧图像,同时通过关键帧对所有帧图像按照时序进行分段,得到若干帧段,同一帧段中相邻帧图像的相似性均较大;而获取到帧段后,由于后续需要分析相邻帧图像的变化,则对各帧段中帧图像获取频谱,对频谱上的各频率进行波动评价量化,通过波动评价初步反映帧段内帧图像的变化波动,为后续对各帧图像的频谱进行平滑判断提供基础。
具体的,将帧图像按照时序排列后,对相邻帧图像通过MSSIM(Mean StructuralSimilarity)平均结构相似性算法进行结构相似性计算,将所有得到的结构相似性按照获取顺序进行排列,得到结构相似性序列;对结构相似性序列获取极值点,将其中极小值点对应的两帧图像中后一帧图像作为关键帧,则得到若干关键帧;将每个关键帧作为一个帧段中的第一张帧图像,则对所有帧图像划分为若干帧段,其中第一个帧段中第一张帧图像即为所有帧图像中的第一张帧图像;需要说明的是,MSSIM算法及极值点获取均为公知技术,本实施例不再赘述。
进一步的,将任意一个帧段作为当前帧段,对当前帧段中每张帧图像通过傅里叶变换获取频谱;对于当前帧段中各帧图像的频谱中的任意一个频率,该频率在当前帧段的每个频谱中存在若干振幅不为0的数据点,记为该频率在当前帧段的分布数据点,统计分布数据点的数量,记为该频率在当前帧段的分布数量;获取每个频率在当前帧段的分布数量,包括在当前帧段不存在分布数据点,即分布数量为0的频率,对所有频率对应的分布数量进行线性归一化,得到的结果记为每个频率在当前帧段的分布因子;对于任意一个分布数据点,获取该分布数据点在对应频谱中与其他分布数据点的距离(频谱图中的欧式距离),将得到的距离的最小值作为该分布数据点的分布距离;则当前帧段中频率(分布数量不为0)的波动评价/>的计算方法为:
其中,表示频率/>在当前帧段的分布因子,/>表示频率/>在当前帧段的分布数量,表示频率/>在当前帧段的第/>个分布数据点的分布距离,/>表示频率/>在当前帧段的第/>个分布数据点的振幅,/>表示频率/>在当前帧段的所有分布数据点的振幅均值,/>表示频率/>在当前帧段的所有分布数据点的振幅标准差。
所需说明的是,频率在当前帧段中的分布数量及分布因子越大,即分布数据点越多,同时各分布数据点的分布距离及振幅差异越小,频率在当前帧段各帧图像的频谱中越稳定,越能代表帧图像中一定的信息,则其波动评价越小。
进一步的,按照上述方法对每个帧段中每张帧图像获取频谱,获取每个频率在每个帧段的分布数量及分布因子,得到在对应帧段中分布数量不为0的频率在对应帧段的波动评价;将在对应帧段中分布数量为0的频率,在对应帧段的波动评价设置为0。
至此,得到了若干关键帧及各个帧段,并对每个帧段中各帧图像通过傅里叶变换的频谱分析,得到每个频率在每个帧段的波动评价。
步骤S003、根据相邻帧图像的频谱中各频率的变化,以及各频率在各帧段的波动评价,获取每个频率在每张帧图像的平滑评价;通过相邻帧图像的频谱中频率的分布,结合平滑评价并通过傅里叶逆变换,对所有帧图像进行预测编码,得到数字媒体素材的待传输码流。
需要说明的是,通过预测编码对相邻帧图像进行预测及差分以及编码,则需要进行一定程度地平滑,需要针对相邻帧图像对各频率进行平滑评价的获取;而平滑评价则基于频率在各帧段的波动评价,以及相邻帧图像之间频率的变化进行量化,使得变化越大且波动评价越大的评率,平滑评价越大,从而通过一定程度地损失来进行预测编码,进而提高对数字媒体素材的压缩效率,从而提高传输效率。
具体的,对于频率,将该频率在每个帧段中的波动评价按照帧段的时间顺序进行排列,得到的序列记为该频率的帧段波动序列;对该帧段波动序列通过AMPD算法获取若干峰值点,将峰值点对应的帧段中的关键帧,作为该频率的变化关键帧,AMPD算法为公知技术,本实施例不再赘述;将任意一张帧图像作为当前帧图像,获取与当前帧图像在该频率的若干变化关键帧中相隔帧数最小的变化关键帧,记为当前帧图像在该频率的参考关键帧,将当前帧图像到参考关键帧的所有帧图像(包括当前帧图像及参考关键帧),作为当前帧图像在该频率的参考帧段;对当前帧图像的频谱与当前帧图像的相邻前一帧图像的频谱进行差分,差分方法为对相同位置的数据点获取相应振幅下的差值绝对值,得到的结果记为当前帧图像的帧差频谱,对帧差频谱中该频率振幅不为0的数据点进行PCA分析,获取最大主方向,记为该频率在当前帧图像的最大帧差方向,PCA分析为公知技术,本实施例不再赘述;按照上述方法对当前帧图像的参考帧段中每张帧图像的频谱都与相邻前一帧图像的频谱进行差分,获取每张帧图像的帧差频谱,并获取该频率在参考帧段中每张帧图像的最大帧差方向,同时PCA分析过程中最大主方向对应了投影长度,则将参考帧段中所有帧图像(包括当前帧图像)的最大帧差方向对应的投影长度最大值所对应的最大帧差方向,作为该频率在当前帧图像的参考帧段中的最大帧差方向;则频率/>在当前帧图像的平滑评价/>的具体计算方法为:
其中,表示频率/>在当前帧图像的最大帧差方向,/>表示频率/>在当前帧图像的参考帧段中的最大帧差方向,/>表示两个最大帧差方向的余弦值,/>表示频率/>在当前帧图像所属帧段的波动评价,/>表示频率/>在当前帧图像的参考帧段中各帧图像所属帧段的波动评价最小值,/>表示频率/>在当前帧图像的参考帧段中各帧图像所属帧段的波动评价最大值;特别说明的是,若当前帧图像在频率/>的参考帧段中所有帧图像均属于同一帧段,则将频率/>在当前帧图像的平滑评价设置为0,不再进行上述计算。
所需说明的是,当前帧图像在该频率的最大帧差方向与参考帧段中的最大帧差方向的夹角越小,则余弦值越大,则该频率在当前帧图像的帧间差异越大,则越需要调整,平滑评价越大;同时结合该频率在当前帧图像所属帧段的波动评价,波动评价越大则越需要调整,平滑评价越大。
进一步的,按照上述方法获取频率在每张帧图像的平滑评价,其中第一张帧图像不进行各频率的平滑评价计算;对于任意一个在每张帧图像的频谱中频率/>上相同位置的数据点,获取该数据点在每张帧图像的频谱中的振幅及频率分辨率,频率分辨率为频谱中的公知内容,本实施例不再赘述;将该数据点在任意一张帧图像的频谱中的振幅及频率分辨率构成***状态向量,并输入到EKF滤波器中,输出相邻下一帧图像的预测状态向量,获取相邻下一帧图像的振幅与预测状态向量中振幅的差值绝对值,作为该数据点在相邻下一帧图像的振幅预测差异;按照上述方法获取该数据点在除第一张帧图像之外每张帧图像的振幅预测差异,将振幅预测差异按照帧图像的时序进行排列,作为该数据点的振幅预测序列;对振幅预测序列通过AMPD算法获取若干峰值,将峰值对应的帧图像作为该数据点的待平滑帧图像;对频率/>在所有帧图像的平滑评价进行premnmx归一化,得到的结果记为频率/>在每张帧图像的平滑因子;对于任意一张待平滑帧图像,将该待平滑帧图像的相邻前一帧图像对应的***状态向量输入到EKF滤波器的过程中,振幅对应的增益与平滑因子相乘,输出得到新的预测状态向量,记为待平滑帧图像的更新预测状态向量,通过更新预测状态向量中的振幅对该数据点在待平滑帧图像的频谱中的振幅进行替换;按照上述方法对该数据点的每张待平滑帧图像的频谱中的振幅完成替换,作为该数据点在所有帧图像的频谱的更新;按照上述方法对频率/>上的每个数据点在所有帧图像的频谱完成更新。
进一步的,按照上述方法获取每个频率在每张帧图像的平滑评价,并对每个频谱上的每个数据点在所有帧图像的频谱完成更新,将各帧图像全部更新完的频谱,记为每张帧图像的更新频谱,对更新频谱进行傅里叶逆变换,得到的图像记为每张帧图像的重构图像;需要说明的是,所有帧图像中的第一张帧图像不进行上述处理,则不获取重构图像;通过DPCM算法对第一张帧图像及其他帧图像的重构图像,按照帧图像的顺序进行预测编码,生成码流并记为数字媒体素材的待传输码流。
至此,通过相邻帧图像的频谱中各频率的变化,结合频率在帧段中的波动评价,实现对变化剧烈的相邻帧图像进行基于频域的平滑,进而在预测编码的过程中通过有损压缩来提高数字媒体素材的压缩效率,进而提升传输效率。
步骤S004、对数字媒体素材的待传输码流进行传输。
需要说明的是,获取到待传输码流后,则将待传输码流传输给用户,用户的智能设备通过对待传输码流进行解码重构得到若干帧图像,通过对得到的帧图像进行排序,则完成对数字媒体素材的传输。
具体的,将数字媒体素材的待传输码流通过通信渠道传输给用户的智能设备,传输渠道包括互联网、局域网及无线网络,采用的传输协议和技术有多种,包括TCP/IP、UDP及HTTP,本实施例采用HTTP协议进行传输;用户的智能设备在接收到待传输码流后,通过DPCM算法的逆运算进行解码重构并排序,则完成数字媒体素材的传输。
至此,完成对数字媒体素材的传输,并提高了数字媒体素材的通信传输效率。
请参阅图2,其示出了本发明另一个实施例所提供的一种图像通信数字媒体***,该***包括:
数字媒体素材采集模块101,用于采集数字媒体素材,获取若干帧图像。
数字媒体素材编码模块102:
(1)根据相邻帧图像的相似性获取若干关键帧及若干帧段;根据帧段中各帧图像的频谱中的频率分布,获取每个频率在每个帧段的波动评价;
(2)根据相邻帧图像的频谱中各频率的变化,以及各频率在各帧段的波动评价,获取每个频率在每张帧图像的平滑评价;通过相邻帧图像的频谱中频率的分布,结合平滑评价并通过傅里叶逆变换,对所有帧图像进行预测编码,得到数字媒体素材的待传输码流。
数字媒体传输通信模块103,用于对数字媒体素材的待传输码流进行传输。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (5)
1.一种图像通信数字媒体方法,其特征在于,该方法包括以下步骤:
采集数字媒体素材,获取若干帧图像;
根据相邻帧图像的相似性获取若干关键帧及若干帧段;根据帧段中各帧图像的频谱中的频率分布,获取每个频率在每个帧段的波动评价;关键帧即为发生较大变化的相邻帧图像,同时通过关键帧对所有帧图像按照时序进行分段,得到若干帧段,同一帧段中相邻帧图像的相似性均较大;
根据相邻帧图像的频谱中各频率的变化,以及各频率在各帧段的波动评价,获取每个频率在每张帧图像的平滑评价;通过相邻帧图像的频谱中频率的分布,结合平滑评价并通过傅里叶逆变换,对所有帧图像进行预测编码,得到数字媒体素材的待传输码流;
对数字媒体素材的待传输码流进行传输;
所述每个频率在每个帧段的波动评价,具体的获取方法为:
对每张帧图像通过傅里叶变换获取频谱,根据每张帧图像的频谱中的频率分布,获取每个频率在每个帧段的分布数据点、分布数量、分布因子及每个分布数据点的分布距离;
将任意一个帧段作为当前帧段,当前帧段中频率的波动评价/>的计算方法为:
其中,表示频率/>在当前帧段的分布因子,/>表示频率/>在当前帧段的分布数量,表示频率/>在当前帧段的第/>个分布数据点的分布距离,/>表示频率/>在当前帧段的第/>个分布数据点的振幅,/>表示频率/>在当前帧段的所有分布数据点的振幅均值,/>表示频率/>在当前帧段的所有分布数据点的振幅标准差;
将在当前帧段的分布数量为0的频率,在当前帧段的波动评价设置为0;
所述每个频率在每个帧段的分布数据点、分布数量、分布因子及每个分布数据点的分布距离,具体的获取方法为:
对于当前帧段中各帧图像的频谱中的任意一个频率,该频率在当前帧段的每个频谱中存在若干振幅不为0的数据点,记为该频率在当前帧段的分布数据点,统计分布数据点的数量,记为该频率在当前帧段的分布数量;
获取每个频率在当前帧段的分布数量,包括在当前帧段分布数量为0的频率,对所有频率对应的分布数量进行线性归一化,得到的结果记为每个频率在当前帧段的分布因子;
对于任意一个分布数据点,获取该分布数据点在对应频谱中与其他分布数据点的距离,将得到的距离的最小值作为该分布数据点的分布距离;
所述每个频率在每张帧图像的平滑评价,具体的获取方法为:
根据每个频率在每个帧段的波动评价,以及相邻帧图像的频谱中各频率的变化,获取每张帧图像在每个频率参考帧段、每个频率在每张帧图像的最大帧差方向及参考帧段中的最大帧差方向;
将任意一张帧图像作为当前帧图像,频率在当前帧图像的平滑评价/>的具体计算方法为:
其中,表示频率/>在当前帧图像的最大帧差方向,/>表示频率/>在当前帧图像的参考帧段中的最大帧差方向,/>表示两个最大帧差方向的余弦值,/>表示频率/>在当前帧图像所属帧段的波动评价,/>表示频率/>在当前帧图像的参考帧段中各帧图像所属帧段的波动评价最小值,/>表示频率/>在当前帧图像的参考帧段中各帧图像所属帧段的波动评价最大值;
所述每张帧图像在每个频率参考帧段、每个频率在每张帧图像的最大帧差方向及参考帧段中的最大帧差方向,具体的获取方法为:
将频率在每个帧段中的波动评价按照帧段的时间顺序进行排列,得到的序列记为频率/>的帧段波动序列;对该帧段波动序列通过AMPD算法获取若干峰值点,将峰值点对应的帧段中的关键帧,作为该频率的变化关键帧;
获取与当前帧图像在频率的若干变化关键帧中相隔帧数最小的变化关键帧,记为当前帧图像在频率/>的参考关键帧,将当前帧图像到参考关键帧的所有帧图像,作为当前帧图像在频率/>的参考帧段;
对当前帧图像的频谱与当前帧图像的相邻前一帧图像的频谱进行差分,差分方法为对相同位置的数据点获取相应振幅下的差值绝对值,得到的结果记为当前帧图像的帧差频谱,对帧差频谱中频率的振幅不为0的数据点进行PCA分析,获取最大主方向,记为频率/>在当前帧图像的最大帧差方向;
对当前帧图像的参考帧段中每张帧图像的频谱都与相邻前一帧图像的频谱进行差分,获取每张帧图像的帧差频谱,并获取频率在参考帧段中每张帧图像的最大帧差方向,PCA分析过程中最大主方向对应投影长度,将参考帧段中所有帧图像的最大帧差方向对应的投影长度最大值所对应的最大帧差方向,作为频率/>在当前帧图像的参考帧段中的最大帧差方向;
所述通过相邻帧图像的频谱中频率的分布,结合平滑评价并通过傅里叶逆变换,对所有帧图像进行预测编码,得到数字媒体素材的待传输码流,包括的具体方法为:
获取频率在每张帧图像的平滑评价;对于任意一个在每张帧图像的频谱中频率/>上相同位置的数据点,获取该数据点在每张帧图像的频谱中的振幅及频率分辨率;将该数据点在任意一张帧图像的频谱中的振幅及频率分辨率构成***状态向量,并输入到EKF滤波器中,输出相邻下一帧图像的预测状态向量,获取相邻下一帧图像的振幅与预测状态向量中振幅的差值绝对值,作为该数据点在相邻下一帧图像的振幅预测差异;获取该数据点在除第一张帧图像之外每张帧图像的振幅预测差异,将振幅预测差异按照帧图像的时序进行排列,作为该数据点的振幅预测序列;对振幅预测序列通过AMPD算法获取若干峰值,将峰值对应的帧图像作为该数据点的待平滑帧图像;对频率/>在所有帧图像的平滑评价进行premnmx归一化,得到的结果记为频率/>在每张帧图像的平滑因子;对于任意一张待平滑帧图像,将该待平滑帧图像的相邻前一帧图像对应的***状态向量输入到EKF滤波器的过程中,振幅对应的增益与平滑因子相乘,输出得到新的预测状态向量,记为待平滑帧图像的更新预测状态向量,通过更新预测状态向量中的振幅对该数据点在待平滑帧图像的频谱中的振幅进行替换;
对该数据点的每张待平滑帧图像的频谱中的振幅完成替换,作为该数据点在所有帧图像的频谱的更新;对频率上的每个数据点在所有帧图像的频谱完成更新;
获取每个频率在每张帧图像的平滑评价,并对每个频谱上的每个数据点在所有帧图像的频谱完成更新,将各帧图像全部更新完的频谱,记为每张帧图像的更新频谱,对更新频谱进行傅里叶逆变换,得到的图像记为每张帧图像的重构图像;通过DPCM算法对第一张帧图像及其他帧图像的重构图像,按照帧图像的顺序进行预测编码,生成码流并记为数字媒体素材的待传输码流。
2.根据权利要求1所述的一种图像通信数字媒体方法,其特征在于,所述若干关键帧及若干帧段,具体的获取方法为:
将帧图像按照时序排列,对相邻帧图像通过MSSIM平均结构相似性算法进行结构相似性计算,将所有得到的结构相似性按照获取顺序进行排列,得到结构相似性序列;对结构相似性序列获取极值点,将其中极小值点对应的两帧图像中后一帧图像作为关键帧,得到若干关键帧;
将每个关键帧作为一个帧段中的第一张帧图像,对所有帧图像划分为若干帧段,其中第一个帧段中第一张帧图像为所有帧图像中的第一张帧图像。
3.根据权利要求1所述的一种图像通信数字媒体方法,其特征在于,所述获取若干帧图像,包括的具体方法为:
获取数字媒体素材中每一帧的图像,记为若干帧图像。
4.根据权利要求1所述的一种图像通信数字媒体方法,其特征在于,所述对数字媒体素材的待传输码流进行传输,包括的具体方法为:
将数字媒体素材的待传输码流通过通信渠道传输给用户的智能设备。
5.一种图像通信数字媒体***,其特征在于,该***包括:
数字媒体素材采集模块,用于采集数字媒体素材,获取若干帧图像;
数字媒体素材编码模块,用于根据相邻帧图像的相似性获取若干关键帧及若干帧段;根据帧段中各帧图像的频谱中的频率分布,获取每个频率在每个帧段的波动评价;关键帧即为发生较大变化的相邻帧图像,同时通过关键帧对所有帧图像按照时序进行分段,得到若干帧段,同一帧段中相邻帧图像的相似性均较大;
根据相邻帧图像的频谱中各频率的变化,以及各频率在各帧段的波动评价,获取每个频率在每张帧图像的平滑评价;通过相邻帧图像的频谱中频率的分布,结合平滑评价并通过傅里叶逆变换,对所有帧图像进行预测编码,得到数字媒体素材的待传输码流;
所述每个频率在每个帧段的波动评价,具体的获取方法为:
对每张帧图像通过傅里叶变换获取频谱,根据每张帧图像的频谱中的频率分布,获取每个频率在每个帧段的分布数据点、分布数量、分布因子及每个分布数据点的分布距离;
将任意一个帧段作为当前帧段,当前帧段中频率的波动评价/>的计算方法为:
其中,表示频率/>在当前帧段的分布因子,/>表示频率/>在当前帧段的分布数量,表示频率/>在当前帧段的第/>个分布数据点的分布距离,/>表示频率/>在当前帧段的第/>个分布数据点的振幅,/>表示频率/>在当前帧段的所有分布数据点的振幅均值,/>表示频率/>在当前帧段的所有分布数据点的振幅标准差;
将在当前帧段的分布数量为0的频率,在当前帧段的波动评价设置为0;
所述每个频率在每个帧段的分布数据点、分布数量、分布因子及每个分布数据点的分布距离,具体的获取方法为:
对于当前帧段中各帧图像的频谱中的任意一个频率,该频率在当前帧段的每个频谱中存在若干振幅不为0的数据点,记为该频率在当前帧段的分布数据点,统计分布数据点的数量,记为该频率在当前帧段的分布数量;
获取每个频率在当前帧段的分布数量,包括在当前帧段分布数量为0的频率,对所有频率对应的分布数量进行线性归一化,得到的结果记为每个频率在当前帧段的分布因子;
对于任意一个分布数据点,获取该分布数据点在对应频谱中与其他分布数据点的距离,将得到的距离的最小值作为该分布数据点的分布距离;
所述每个频率在每张帧图像的平滑评价,具体的获取方法为:
根据每个频率在每个帧段的波动评价,以及相邻帧图像的频谱中各频率的变化,获取每张帧图像在每个频率参考帧段、每个频率在每张帧图像的最大帧差方向及参考帧段中的最大帧差方向;
将任意一张帧图像作为当前帧图像,频率在当前帧图像的平滑评价/>的具体计算方法为:
其中,表示频率/>在当前帧图像的最大帧差方向,/>表示频率/>在当前帧图像的参考帧段中的最大帧差方向,/>表示两个最大帧差方向的余弦值,/>表示频率/>在当前帧图像所属帧段的波动评价,/>表示频率/>在当前帧图像的参考帧段中各帧图像所属帧段的波动评价最小值,/>表示频率/>在当前帧图像的参考帧段中各帧图像所属帧段的波动评价最大值;
所述每张帧图像在每个频率参考帧段、每个频率在每张帧图像的最大帧差方向及参考帧段中的最大帧差方向,具体的获取方法为:
将频率在每个帧段中的波动评价按照帧段的时间顺序进行排列,得到的序列记为频率/>的帧段波动序列;对该帧段波动序列通过AMPD算法获取若干峰值点,将峰值点对应的帧段中的关键帧,作为该频率的变化关键帧;
获取与当前帧图像在频率的若干变化关键帧中相隔帧数最小的变化关键帧,记为当前帧图像在频率/>的参考关键帧,将当前帧图像到参考关键帧的所有帧图像,作为当前帧图像在频率/>的参考帧段;
对当前帧图像的频谱与当前帧图像的相邻前一帧图像的频谱进行差分,差分方法为对相同位置的数据点获取相应振幅下的差值绝对值,得到的结果记为当前帧图像的帧差频谱,对帧差频谱中频率的振幅不为0的数据点进行PCA分析,获取最大主方向,记为频率/>在当前帧图像的最大帧差方向;
对当前帧图像的参考帧段中每张帧图像的频谱都与相邻前一帧图像的频谱进行差分,获取每张帧图像的帧差频谱,并获取频率在参考帧段中每张帧图像的最大帧差方向,PCA分析过程中最大主方向对应投影长度,将参考帧段中所有帧图像的最大帧差方向对应的投影长度最大值所对应的最大帧差方向,作为频率/>在当前帧图像的参考帧段中的最大帧差方向;
所述通过相邻帧图像的频谱中频率的分布,结合平滑评价并通过傅里叶逆变换,对所有帧图像进行预测编码,得到数字媒体素材的待传输码流,包括的具体方法为:
获取频率在每张帧图像的平滑评价;对于任意一个在每张帧图像的频谱中频率/>上相同位置的数据点,获取该数据点在每张帧图像的频谱中的振幅及频率分辨率;将该数据点在任意一张帧图像的频谱中的振幅及频率分辨率构成***状态向量,并输入到EKF滤波器中,输出相邻下一帧图像的预测状态向量,获取相邻下一帧图像的振幅与预测状态向量中振幅的差值绝对值,作为该数据点在相邻下一帧图像的振幅预测差异;获取该数据点在除第一张帧图像之外每张帧图像的振幅预测差异,将振幅预测差异按照帧图像的时序进行排列,作为该数据点的振幅预测序列;对振幅预测序列通过AMPD算法获取若干峰值,将峰值对应的帧图像作为该数据点的待平滑帧图像;对频率/>在所有帧图像的平滑评价进行premnmx归一化,得到的结果记为频率/>在每张帧图像的平滑因子;对于任意一张待平滑帧图像,将该待平滑帧图像的相邻前一帧图像对应的***状态向量输入到EKF滤波器的过程中,振幅对应的增益与平滑因子相乘,输出得到新的预测状态向量,记为待平滑帧图像的更新预测状态向量,通过更新预测状态向量中的振幅对该数据点在待平滑帧图像的频谱中的振幅进行替换;
对该数据点的每张待平滑帧图像的频谱中的振幅完成替换,作为该数据点在所有帧图像的频谱的更新;对频率上的每个数据点在所有帧图像的频谱完成更新;
获取每个频率在每张帧图像的平滑评价,并对每个频谱上的每个数据点在所有帧图像的频谱完成更新,将各帧图像全部更新完的频谱,记为每张帧图像的更新频谱,对更新频谱进行傅里叶逆变换,得到的图像记为每张帧图像的重构图像;通过DPCM算法对第一张帧图像及其他帧图像的重构图像,按照帧图像的顺序进行预测编码,生成码流并记为数字媒体素材的待传输码流;
数字媒体传输通信模块,用于对数字媒体素材的待传输码流进行传输。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410063956.XA CN117579819B (zh) | 2024-01-17 | 2024-01-17 | 一种图像通信数字媒体方法及*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410063956.XA CN117579819B (zh) | 2024-01-17 | 2024-01-17 | 一种图像通信数字媒体方法及*** |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117579819A CN117579819A (zh) | 2024-02-20 |
CN117579819B true CN117579819B (zh) | 2024-03-29 |
Family
ID=89895910
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410063956.XA Active CN117579819B (zh) | 2024-01-17 | 2024-01-17 | 一种图像通信数字媒体方法及*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117579819B (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004112382A (ja) * | 2002-09-19 | 2004-04-08 | Ricoh Co Ltd | 符号列変換装置、画像処理装置、画像記録装置、プログラム、記憶媒体および符号量削減方法 |
CN1984327A (zh) * | 2006-05-16 | 2007-06-20 | 华为技术有限公司 | 一种视频压缩方法 |
CN101145345A (zh) * | 2006-09-13 | 2008-03-19 | 华为技术有限公司 | 音频分类方法 |
CN106060539A (zh) * | 2016-06-16 | 2016-10-26 | 深圳风景网络科技有限公司 | 一种低传输带宽的视频编码方法 |
CN112106355A (zh) * | 2018-04-13 | 2020-12-18 | 浙江大学 | 一种信息保持编解码方法与装置 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017130640A1 (ja) * | 2016-01-28 | 2017-08-03 | 株式会社リコー | 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム |
CN115701709A (zh) * | 2021-08-02 | 2023-02-10 | 腾讯科技(深圳)有限公司 | 视频编码方法、装置、计算机可读介质及电子设备 |
-
2024
- 2024-01-17 CN CN202410063956.XA patent/CN117579819B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004112382A (ja) * | 2002-09-19 | 2004-04-08 | Ricoh Co Ltd | 符号列変換装置、画像処理装置、画像記録装置、プログラム、記憶媒体および符号量削減方法 |
CN1984327A (zh) * | 2006-05-16 | 2007-06-20 | 华为技术有限公司 | 一种视频压缩方法 |
CN101145345A (zh) * | 2006-09-13 | 2008-03-19 | 华为技术有限公司 | 音频分类方法 |
CN106060539A (zh) * | 2016-06-16 | 2016-10-26 | 深圳风景网络科技有限公司 | 一种低传输带宽的视频编码方法 |
CN112106355A (zh) * | 2018-04-13 | 2020-12-18 | 浙江大学 | 一种信息保持编解码方法与装置 |
Non-Patent Citations (2)
Title |
---|
H.264视频流传输策略分析及优化;雷林凯;中国优秀硕士学位论文全文数据库;20160331;全文 * |
No-Reference Quality Assessment of H.264/AVC Encoded Video;Tomas Brandao;IEEE Transactions on Circuits and Systems for Video Technology;20100920;全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN117579819A (zh) | 2024-02-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110198444B (zh) | 视频帧编码方法、视频帧编码设备及具有存储功能的装置 | |
CN108960333B (zh) | 基于深度学习的高光谱图像无损压缩方法 | |
CN1146241C (zh) | 用于对目标轮廓的视频信号进行编码的方法和装置 | |
CN113259676B (zh) | 一种基于深度学习的图像压缩方法和装置 | |
Helminger et al. | Lossy image compression with normalizing flows | |
US9615101B2 (en) | Method and apparatus for signal encoding producing encoded signals of high fidelity at minimal sizes | |
CN111464815B (zh) | 一种基于神经网络的视频编码方法及*** | |
CN112565777B (zh) | 基于深度学习模型视频数据传输方法、***、介质及设备 | |
Jia et al. | Layered image compression using scalable auto-encoder | |
WO2021262053A1 (en) | Method and system for image compressing and coding with deep learning | |
JP3521412B2 (ja) | オリエンテーション補間ノードの符号化装置及び方法 | |
CN114449276A (zh) | 一种基于学习的超先验边信息补偿图像压缩方法 | |
CN115883670A (zh) | 一种医疗数据分析采集方法及装置 | |
CN117579819B (zh) | 一种图像通信数字媒体方法及*** | |
US10609405B2 (en) | Optimal signal encoding based on experimental data | |
CN111816197B (zh) | 音频编码方法、装置、电子设备和存储介质 | |
US6850572B2 (en) | Encoding/decoding apparatus and method for orientation interpolator node data | |
Zemliachenko et al. | Compression ratio prediction in lossy compression of noisy images | |
KR102245682B1 (ko) | 영상 압축 장치, 이의 학습 장치 및 방법 | |
JP4132091B2 (ja) | ビデオ信号帯域幅割当方法及びその装置 | |
KR100601846B1 (ko) | 동영상 압축 부호화기의 왜곡 최적화 장치 및 방법 | |
CN109618155B (zh) | 压缩编码方法 | |
US5754703A (en) | Method for encoding a contour of an object in a video signal | |
US20140269907A1 (en) | Method and apparatus for signal encoding realizing optimal fidelity | |
KR100590522B1 (ko) | 오리엔테이션 보간 노드의 부호화 장치 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |