CN113554574A - 一种压缩感知图像恢复方法、装置、设备及介质 - Google Patents

一种压缩感知图像恢复方法、装置、设备及介质 Download PDF

Info

Publication number
CN113554574A
CN113554574A CN202111110482.2A CN202111110482A CN113554574A CN 113554574 A CN113554574 A CN 113554574A CN 202111110482 A CN202111110482 A CN 202111110482A CN 113554574 A CN113554574 A CN 113554574A
Authority
CN
China
Prior art keywords
matrix
group
compressed sensing
operations
calculation steps
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111110482.2A
Other languages
English (en)
Inventor
尹云峰
史宏志
任智新
金良
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Inspur Intelligent Technology Co Ltd
Original Assignee
Suzhou Inspur Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Inspur Intelligent Technology Co Ltd filed Critical Suzhou Inspur Intelligent Technology Co Ltd
Priority to CN202111110482.2A priority Critical patent/CN113554574A/zh
Publication of CN113554574A publication Critical patent/CN113554574A/zh
Priority to PCT/CN2022/078489 priority patent/WO2023045257A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/10Complex mathematical operations
    • G06F17/16Matrix or vector computation, e.g. matrix-matrix or matrix-vector multiplication, matrix factorization

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Theoretical Computer Science (AREA)
  • Pure & Applied Mathematics (AREA)
  • Mathematical Optimization (AREA)
  • Mathematical Analysis (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Mathematics (AREA)
  • Computing Systems (AREA)
  • Algebra (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本申请公开了一种压缩感知图像恢复方法、装置、设备及介质,包括:对压缩感知恢复算法中的测量矩阵进行分解得到多个小尺寸矩阵;分别确定压缩感知恢复算法中的感知矩阵与每个小尺寸矩阵之间的矩阵运算得到多组矩阵运算;分别对每组矩阵运算进行分解得到每组矩阵运算对应的所有计算步骤,并将每组矩阵运算中存在数据依赖关系的不同计算步骤划分至不同的运算模块;通过具有并行运算能力的处理芯片对每组矩阵运算对应的运算模块集进行处理,并对每组运算结果进行合并得到压缩感知图像恢复结果。通过将压缩感知中的大尺寸矩阵运算进行拆分解耦,并将解耦后得到的模块在具有并行运算能力的处理芯片上执行,能够缩短运算时间,提高图像恢复的速度。

Description

一种压缩感知图像恢复方法、装置、设备及介质
技术领域
本申请涉及图像处理技术领域,特别涉及一种压缩感知图像恢复方法、装置、设备及介质。
背景技术
目前,由于具有高探测效率、低噪声、低成本、结构简单等优势,压缩感知(CS,Compressed Sensing)在空间遥感、光学加密传输、医学成像等领域展现出了巨大的应用前景。压缩感知成像技术是一种利用光场强度关联特性恢复待测场景信息的新型成像技术。不同于传统面阵探测器直接成像,压缩感知仅利用无空间分辨力的单点探测器,通过关联光场涨落及回波总光强变化即可实现目标场景信息的重建。
压缩感知成像过程主要包括数据采集和图像恢复两个独立的模块,其中图像恢复模块通常是整个压缩感知成像过程中耗时最长的模块,当前压缩感知图像恢复过程主要存在以下三大问题:第一,矩阵运算的数据量很大且都是串行执行;第二,运算过程复杂且运算步骤多,第三,数据运算中间结果之间存在严重依赖。
由于目前压缩感知图像恢复技术存在上述问题,导致成像时间过长、难以实现大画面成像,不利于压缩感知的实际应用。因此,如何缩短矩阵运算的时间、降低运算过程的复杂度、解除数据运算中间结果的依赖是本领域有待解决的问题。
发明内容
有鉴于此,本申请的目的在于提供一种压缩感知图像恢复方法、装置、设备及介质,能够极大地缩短矩阵运算时间,提高压缩感知图像的恢复速度。其具体方案如下:
第一方面,本申请公开了一种压缩感知图像恢复方法,包括:
对压缩感知恢复算法中的测量矩阵进行分解以得到多个小尺寸矩阵;
分别确定所述压缩感知恢复算法中的感知矩阵与每个所述小尺寸矩阵之间的矩阵运算,得到多组所述矩阵运算;
分别对每组所述矩阵运算进行分解以得到每组所述矩阵运算对应的所有计算步骤,并将每组所述矩阵运算中存在数据依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集;
通过具有并行运算能力的处理芯片对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果,并对每组所述矩阵运算的运算结果进行合并以得到压缩感知图像恢复结果。
可选的,所述对压缩感知恢复算法中的测量矩阵进行分解以得到多个小尺寸矩阵,包括:
对压缩感知恢复算法中的测量矩阵按列进行分解,以得到与所述测量矩阵的列数相同的多个列向量;
相应的,所述分别确定所述压缩感知恢复算法中的感知矩阵与每个所述小尺寸矩阵之间的矩阵运算,得到多组所述矩阵运算,包括:
分别确定所述压缩感知恢复算法中的感知矩阵与每个所述列向量之间的矩阵运算,得到多组所述矩阵运算。
可选的,所述分别对每组所述矩阵运算进行分解以得到每组所述矩阵运算对应的所有计算步骤,包括:
分别确定每组所述矩阵运算所包含的全部运算功能;
基于一个运算功能对应一个计算步骤的分解方式,分别对每组所述矩阵运算进行分解,以得到每组所述矩阵运算对应的所有计算步骤。
可选的,所述将每组所述矩阵运算中存在数据依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集,包括:
确定每个计算步骤之间的输入输出数据的依赖关系;
基于所述输入输出数据的依赖关系,分别对每组所述矩阵运算中的不同计算步骤进行划分,以将存在所述依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集。
可选的,所述通过具有并行运算能力的处理芯片对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果,包括:
基于不同计算步骤之间的数据依赖关系,确定出所述运算模块集中每个运算模块的运算优先级;
通过具有并行运算能力的处理芯片并按照所述运算优先级,对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果。
可选的,所述对每组所述矩阵运算的运算结果进行合并以得到压缩感知图像恢复结果,包括:
按照所述矩阵运算对应的所述小尺寸矩阵在所述测量矩阵中的位置先后顺序,对每组所述矩阵运算的运算结果进行依次合并以得到压缩感知图像恢复结果。
可选的,所述通过具有并行运算能力的处理芯片对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果,包括:
将每组所述矩阵运算对应的所述运算模块集装载至现场可编程逻辑门阵列芯片的片上存储,以利用所述现场可编程逻辑门阵列芯片对每组所述矩阵运算对应的所述运算模块集进行流水并行处理,得到每组所述矩阵运算的运算结果。
第二方面,本申请公开了一种压缩感知图像恢复装置,包括:
矩阵分解模块,用于对压缩感知恢复算法中的测量矩阵进行分解以得到多个小尺寸矩阵;
运算确定模块,用于分别确定所述压缩感知恢复算法中的感知矩阵与每个所述小尺寸矩阵之间的矩阵运算,得到多组所述矩阵运算;
步骤划分模块,用于分别对每组所述矩阵运算进行分解以得到每组所述矩阵运算对应的所有计算步骤,并将每组所述矩阵运算中存在数据依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集;
合并模块,用于通过具有并行运算能力的处理芯片对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果,并对每组所述矩阵运算的运算结果进行合并以得到压缩感知图像恢复结果。
第三方面,本申请公开了一种电子设备,包括处理器和存储器;其中,所述处理器执行所述存储器中保存的计算机程序时实现前述的压缩感知图像恢复方法。
第四方面,本申请公开了一种计算机可读存储介质,用于存储计算机程序;其中,所述计算机程序被处理器执行时实现前述的压缩感知图像恢复方法。
可见,本申请先对压缩感知恢复算法中的测量矩阵进行分解以得到多个小尺寸矩阵,然后分别确定所述压缩感知恢复算法中的感知矩阵与每个所述小尺寸矩阵之间的矩阵运算,得到多组所述矩阵运算,再分别对每组所述矩阵运算进行分解以得到每组所述矩阵运算对应的所有计算步骤,并将每组所述矩阵运算中存在数据依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集,最后通过具有并行运算能力的处理芯片对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果,并对每组所述矩阵运算的运算结果进行合并以得到压缩感知图像恢复结果。可见,本申请通过对压缩感知中的大尺寸测量矩阵进行拆分,得到的多个小尺寸运算,并将上述小尺寸矩阵与感知矩阵之间的矩阵运算进行细化分解,得到多个计算步骤,并根据计算步骤数据之间的依赖关系,将上述计算步骤划分至不同的运算模块,再将上述运算模块中的计算步骤在具有并行运算能力的处理芯片上并行执行,能够极大地缩短矩阵运算时间,提高压缩感知图像恢复的速度。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请公开的一种压缩感知图像恢复方法流程图;
图2为本申请公开的一种具体的压缩感知图像恢复方法流程图;
图3为本申请公开的一种具体的压缩感知测量矩阵拆分示意图;
图4为本申请公开的一种具体的小尺寸矩阵运算分解示意图;
图5为本申请公开的一种具体的模块划分示意图;
图6为本申请公开的一种具体的FPGA流水并行执行示意图;
图7为本申请公开的一种具体的小尺寸矩阵运算结果合并示意图;
图8为本申请公开的一种压缩感知图像恢复装置结构示意图;
图9为本申请公开的一种电子设备结构图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例公开了一种压缩感知图像恢复方法,参见图1所示,该方法包括:
步骤S11:对压缩感知恢复算法中的测量矩阵进行分解以得到多个小尺寸矩阵。
本实施例中,保持不因图像差异而变化的压缩感知恢复算法中的感知矩阵不变,将因图像差异而不同的压缩感知恢复算法中的测量矩阵进行拆分,得到相应的多个小尺寸矩阵。需要指出的是,在对上述测量矩阵进行拆分时,可以根据实际的应用情况进行拆分,可以对测量矩阵按列进行拆分,也可以按行进行拆分,并且,在按行或按列进行拆分时,既可以拆分为单列或单行,也可以拆分为多列或多行。
步骤S12:分别确定所述压缩感知恢复算法中的感知矩阵与每个所述小尺寸矩阵之间的矩阵运算,得到多组所述矩阵运算。
本实施例中,在对压缩感知恢复算法中的测量矩阵进行分解得到多个小尺寸矩阵之后,可以分别确定出所述感知矩阵与每个上述小尺寸矩阵之间的矩阵运算的类型,进一步的可以利用确定出的矩阵运算的类型对上述感知矩阵与每个上述小尺寸矩阵进行矩阵运算,得到与上述小尺寸矩阵数量相同的多组所述矩阵运算。
步骤S13:分别对每组所述矩阵运算进行分解以得到每组所述矩阵运算对应的所有计算步骤,并将每组所述矩阵运算中存在数据依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集。
本实施例中,在分别确定所述压缩感知恢复算法中的感知矩阵与每个所述小尺寸矩阵之间的矩阵运算,得到多组所述矩阵运算之后,分别对每组上述矩阵运算的运算过程进行细化分解,得到与每组上述矩阵运算对应的细化展开后的计算步骤,在得到上述计算步骤之后,对每组上述矩阵运算对应的计算步骤中的数据之间的关系进行分析,依据运算过程中数据的关联性,判断每组中不同计算步骤之间是否存在数据依赖关系,其中,上述数据依赖关系包括但不限于数据输入输出之间的依赖关系,若上述不同的计算步骤之间存在数据依赖关系,则将存在数据依赖关系的不同的计算步骤划分到不同的运算模块,通过对所有每组所述矩阵运算中的计算步骤进行上述划分处理,得到每组所述矩阵运算对应的运算模块集。
步骤S14:通过具有并行运算能力的处理芯片对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果,并对每组所述矩阵运算的运算结果进行合并以得到压缩感知图像恢复结果。
本实施例中,在分别对每组所述矩阵运算进行分解以得到每组所述矩阵运算对应的所有计算步骤,并将每组所述矩阵运算中存在数据依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集之后,将所有的每组上述矩阵运算中经过拆分后包含不存在数据依赖关系的不同运算模块移植到具有并行运算能力的处理芯片上,并在上述具有并行运算能力的处理芯片上流水并行执行上述运算模块中所包含的计算步骤,得到对应的每组上述矩阵运算的运算结果,在得到每组上述矩阵运算的运算结果之后,可以将上述矩阵运算的运算结果进行合并,通过上述合并之后得到的结果,可以实现对压缩感知图像的恢复。
本实施例中,所述对每组所述矩阵运算的运算结果进行合并以得到压缩感知图像恢复结果,具体可以包括:按照所述矩阵运算对应的所述小尺寸矩阵在所述测量矩阵中的位置先后顺序,对每组所述矩阵运算的运算结果进行依次合并以得到压缩感知图像恢复结果。可以理解的是,在得到每组所述矩阵运算的运算结果之后,可以按照上述矩阵运算对应的小尺寸矩阵在压缩感知恢复算法中测量矩阵所处位置的先后顺序,对每组所述矩阵运算的运算结果进行依次合并,并将上述合并结果作为压缩感知图像恢复的结果。
可见,本申请实施例先对压缩感知恢复算法中的测量矩阵进行分解以得到多个小尺寸矩阵,然后分别确定所述压缩感知恢复算法中的感知矩阵与每个所述小尺寸矩阵之间的矩阵运算,得到多组所述矩阵运算,再分别对每组所述矩阵运算进行分解以得到每组所述矩阵运算对应的所有计算步骤,并将每组所述矩阵运算中存在数据依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集,最后通过具有并行运算能力的处理芯片对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果,并对每组所述矩阵运算的运算结果进行合并以得到压缩感知图像恢复结果。可见,本申请实施例通过对压缩感知中的大尺寸测量矩阵进行拆分,得到的多个小尺寸运算,并将上述小尺寸矩阵与感知矩阵之间的矩阵运算进行细化分解,得到多个计算步骤,并根据计算步骤数据之间的依赖关系,将上述计算步骤划分至不同的运算模块,再将上述运算模块中的计算步骤在具有并行运算能力的处理芯片上并行执行,能够极大地缩短矩阵运算时间,提高压缩感知图像恢复的速度。
本申请实施例公开了一种具体的压缩感知图像恢复方法,参见图2所示,该方法包括:
步骤S21:对压缩感知恢复算法中的测量矩阵按列进行分解,以得到与所述测量矩阵的列数相同的多个列向量。
本实施例中,在对压缩感知恢复算法中的测量矩阵进行分解时,保持不因图像差异而变化的压缩感知恢复算法中的感知矩阵不变,将因图像差异而不同的压缩感知恢复算法中的测量矩阵按列进行拆分,得到与所述测量矩阵的列数相同的多个列向量。具体的,如图3所示,保持尺寸大小为M×N的感知矩阵A不变,将因图像而异的尺寸大小为N×K的测量矩阵B按列进行拆分,得到K列尺寸大小为N×1的列向量BX(1≤X≤K)。
步骤S22:分别确定所述压缩感知恢复算法中的感知矩阵与每个所述列向量之间的矩阵运算,得到多组所述矩阵运算。
本实施例中,在对压缩感知恢复算法中的测量矩阵按列进行分解,得到与所述测量矩阵的列数相同的多个列向量之后,可以进一步的分别确定出所述压缩感知恢复算法中的感知矩阵与每个上述列向量之间的矩阵运算地类型,得到与上述测量矩阵的列数相同的多组所述矩阵运算。例如图3所示,在对尺寸大小为N×K的测量矩阵B按列进行拆分得到K列尺寸大小为N×1的列向量BX(1≤BX≤K)之后,可以分别将压缩感知恢复算法中的感知矩阵A与每个上述列向量BX之间进行矩阵运算,得到K组所述矩阵运算 。
步骤S23:分别确定每组所述矩阵运算所包含的全部运算功能。
本实施例中,在分别确定所述压缩感知恢复算法中的感知矩阵与每个所述列向量之间的矩阵运算,得到多组所述矩阵运算之后,将每组所述矩阵运算的运算过程进行展开,并进一步的根据展开后的运算过程确定出每组所述矩阵运算中所包含的全部运算功能。
步骤S24:基于一个运算功能对应一个计算步骤的分解方式,分别对每组所述矩阵运算进行分解,以得到每组所述矩阵运算对应的所有计算步骤。
本实施例中,在分别确定每组所述矩阵运算所包含的全部运算功能之后,可以根据上述运算功能对每组所述矩阵运算的运算过程进行分解,具体的,可以基于一个运算功能对应一个计算步骤的分解方式将每组所述矩阵运算分解为功能单一的多个独立的计算步骤。例如,参见图4所示,图4为将感知矩阵A与按列拆分后的测量矩阵B的任一列向量BX进行矩阵运算,并将上述矩阵运算的运算过程基于一个运算功能对应一个计算步骤的分解方式进行分解,得到粒度很小的一个一个功能单一的计算步骤,如步骤1、步骤2、步骤W。
步骤S25:确定每个计算步骤之间的输入输出数据的依赖关系。
本实施例中,在基于一个运算功能对应一个计算步骤的分解方式,分别对每组所述矩阵运算进行分解,得到每组所述矩阵运算对应的所有计算步骤之后,则对不同的上述计算步骤进行分析,并确定出每个计算步骤之间的输入输出数据的依赖关系。具体的,若任一计算步骤中的输入数据和/或输出数据作为另一个计算步骤的输入数据和/或输出数据,则可以确定出这两个计算步骤之间的输入输出数据存在依赖关系。例如,参见图4所示,图4中步骤4是由步骤1的得到的,则可以确定步骤1与步骤4之间存在输入输出数据的依赖关系。
步骤S26:基于所述输入输出数据的依赖关系,分别对每组所述矩阵运算中的不同计算步骤进行划分,以将存在所述依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集。
本实施例中,在确定每个计算步骤之间的输入输出数据的依赖关系之后,可以基于确定出的上述输入输出数据的依赖关系分别对每组上述矩阵运算中的不同计算步骤进行划分。具体的,若确定出不同计算步骤之间存在输入输出数据的依赖关系,则表明上述不同计算步骤中的某个计算步骤的输入数据和/或输出数据与上述不同计算步骤中的另一个计算步骤的输入数据和/或输出数据之间存在关联,则将存在输入输出数据的依赖关系的计算步骤划分到不同的运算模块,进而得到每组矩阵运算对应的运算模块集。例如,参见图5所示,将图4中存在数据依赖关系的计算步骤划分到不同的运算模块中,将不存在数据依赖关系的计算步骤划分到同一个运算模块。如计算步骤1的输入输出数据与计算步骤2的输入输出数据没有依赖关系,则将计算步骤1和计算步骤2划分到相同的运算模块中,即划分到模块1中;计算步骤4的输入数据是计算步骤1的输出数据,则将计算步骤1和计算步骤4划分到不同的运算模块中,即分别划分到模块1和模块2中。
步骤S27:基于不同计算步骤之间的数据依赖关系,确定出所述运算模块集中每个运算模块的运算优先级。
本实施例中,在基于所述输入输出数据的依赖关系,分别对每组所述矩阵运算中的不同计算步骤进行划分,以将存在所述依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集之后,可以进一步的根据不同计算步骤之间的数据依赖关系的先后顺序确定出上述运算模块集中每个运算模块的运算优先级。例如图5所示,在将存在输入输出数据的依赖关系的计算步骤1和计算步骤4分别划分到不同的两个运算模块之后,由于计算步骤1的输出为计算步骤4的输入,则计算步骤1所在的运算模块优先于计算步骤4所在的运算模块执行。
步骤S28:通过具有并行运算能力的处理芯片并按照所述运算优先级,对每组所述矩阵运算对应的所述运算模块集进行处理,并对每组所述矩阵运算的运算结果进行合并以得到压缩感知图像恢复结果。
本实施例中,在基于不同计算步骤之间的数据依赖关系,确定出所述运算模块集中每个运算模块的运算优先级之后,可以将每组所述矩阵运算对应的所述运算模块集移植到具有并行运算能力的处理芯片上,并在上述具有并行运算能力的处理芯片上按照上述运算优先级执行上述运算模块集中所有运算模块对应的计算步骤,得到每组所述矩阵运算的运算结果,并按照所述矩阵运算对应的所述列向量在所述测量矩阵中位置的先后顺序,对每组所述矩阵运算的运算结果进行依次合并,并将合并后的结果作为压缩感知图像恢复的结果。
在一种具体的实施例中,所述通过具有并行运算能力的处理芯片对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果,可以包括:将每组所述矩阵运算对应的所述运算模块集装载至FPGA(即Field Programmable Gate Array,现场可编程逻辑门阵列)芯片的片上存储,以利用所述FPGA芯片对每组所述矩阵运算对应的所述运算模块集进行流水并行处理,得到每组所述矩阵运算的运算结果。可以理解的是,在获取到上述运算模块集并确定出所述运算模块集中每个运算模块的运算优先级之后,可以将上述运算模块集中的每个运算模块移植到FPGA芯片上进行片上存储,并利用FPGA芯片强大的并行处理特性对上述数运算模块中的计算步骤进行流水并行处理,从而得到每组所述矩阵运算的运算结果。具体的,参见图6所示,将经过解除依赖关系后的图5中的各个运算模块移植到FPGA芯片的cycle单元上并流水并行处理,如图6中第一个cycle单元执行模块1的步骤1,第二个cycle单元并行执行模块1的步骤2和模块2的步骤4,第三个cycle单元并行执行模块1的步骤3、模块2的步骤5和模块3的步骤7,第四个cycle单元并行执行模块2的步骤6同时执行模块3的步骤8,第五个cycle单元执行模块3的步骤9,执行完毕后得到整个小尺寸矩阵的运算结果Rx(1≤X≤K)。进一步的,将所有运算矩阵在FPGA芯片上流水并行处理,并参照图7所示,按照每个矩阵运算在运算模块集中的运算优先级进行合并,得到尺寸大小为M×K的最终合并结果R,上述矩阵R即为压缩感知图像恢复结果。
可见,本申请实施例先对压缩感知恢复算法中的测量矩阵按列进行分解,得到与所述测量矩阵的列数相同的多个列向量,然后分别确定所述压缩感知恢复算法中的感知矩阵与每个所述列向量之间的矩阵运算,得到多组所述矩阵运算,并分别确定每组所述矩阵运算所包含的全部运算功能,然后基于一个运算功能对应一个计算步骤的分解方式,分别对每组所述矩阵运算进行分解,得到每组所述矩阵运算对应的所有计算步骤,并确定出每个计算步骤之间的输入输出数据的依赖关系,再基于所述输入输出数据的依赖关系,分别对每组所述矩阵运算中的不同计算步骤进行划分,以将存在所述依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集,最后基于不同计算步骤之间的数据依赖关系,确定出所述运算模块集中每个运算模块的运算优先级,通过具有并行运算能力的处理芯片并按照所述运算优先级,对每组所述矩阵运算对应的所述运算模块集进行处理,并对每组所述矩阵运算的运算结果进行合并以得到压缩感知图像恢复结果。可见,本申请实施例通过对压缩感知中的大尺寸测量矩阵按列进行拆分,得到功能单一的多个独立的小尺寸列向量,并将上述列向量分别与压缩感知恢复算法中的感知矩阵进行矩阵运算,然后将上述矩阵运算进行细化分解,得到多个计算步骤,并根据计算步骤数据之间的依赖关系,将上述计算步骤划分至不同的运算模块,再将上述运算模块中的计算步骤在具有并行运算能力的处理芯片上并行执行,能够极大缩短矩阵运算时间,提高压缩感知图像恢复的速度。
相应的,本申请实施例还公开了一种压缩感知图像恢复装置,参见图8所示,该装置包括:
矩阵分解模块11,用于对压缩感知恢复算法中的测量矩阵进行分解以得到多个小尺寸矩阵;
运算确定模块12,用于分别确定所述压缩感知恢复算法中的感知矩阵与每个所述小尺寸矩阵之间的矩阵运算,得到多组所述矩阵运算;
步骤划分模块13,用于分别对每组所述矩阵运算进行分解以得到每组所述矩阵运算对应的所有计算步骤,并将每组所述矩阵运算中存在数据依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集;
合并模块14,用于通过具有并行运算能力的处理芯片对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果,并对每组所述矩阵运算的运算结果进行合并以得到压缩感知图像恢复结果。
其中,关于上述各个模块的具体工作流程可以参考前述实施例中公开的相应内容,在此不再进行赘述。
可见,本申请实施例先对压缩感知恢复算法中的测量矩阵进行分解以得到多个小尺寸矩阵,然后分别确定所述压缩感知恢复算法中的感知矩阵与每个所述小尺寸矩阵之间的矩阵运算,得到多组所述矩阵运算,再分别对每组所述矩阵运算进行分解以得到每组所述矩阵运算对应的所有计算步骤,并将每组所述矩阵运算中存在数据依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集,最后通过具有并行运算能力的处理芯片对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果,并对每组所述矩阵运算的运算结果进行合并以得到压缩感知图像恢复结果。可见,本申请实施例通过对压缩感知中的大尺寸测量矩阵进行拆分,得到的多个小尺寸运算,并将上述小尺寸矩阵与感知矩阵之间的矩阵运算进行细化分解,得到多个计算步骤,并根据计算步骤数据之间的依赖关系,将上述计算步骤划分至不同的运算模块,再将上述运算模块中的计算步骤在具有并行运算能力的处理芯片上并行执行,能够极大地缩短矩阵运算时间,提高压缩感知图像恢复的速度。
在一些具体实施例中,所述矩阵分解模块11,具体可以包括:
第一矩阵分解单元,用于对压缩感知恢复算法中的测量矩阵按列进行分解,以得到与所述测量矩阵的列数相同的多个列向量;
相应的,所述运算确定模块12,具体可以包括:
运算确定单元,用于分别确定所述压缩感知恢复算法中的感知矩阵与每个所述列向量之间的矩阵运算,得到多组所述矩阵运算。
在一些具体实施例中,所述步骤划分模块13,具体可以包括:
第一确定单元,用于分别确定每组所述矩阵运算所包含的全部运算功能;
运算分解单元,用于基于一个运算功能对应一个计算步骤的分解方式,分别对每组所述矩阵运算进行分解,以得到每组所述矩阵运算对应的所有计算步骤。
在一些具体实施例中,所述步骤划分模块13,具体可以包括:
第二确定单元,用于确定每个计算步骤之间的输入输出数据的依赖关系;
步骤划分单元,用于基于所述输入输出数据的依赖关系,分别对每组所述矩阵运算中的不同计算步骤进行划分,以将存在所述依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集。
在一些具体实施例中,所述合并模块14,具体可以包括:
优先级确定单元,用于基于不同计算步骤之间的数据依赖关系,确定出所述运算模块集中每个运算模块的运算优先级;
模块集处理单元,用于通过具有并行运算能力的处理芯片并按照所述运算优先级,对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果。
在一些具体实施例中,所述合并模块14,具体可以包括:
合并单元,用于按照所述矩阵运算对应的所述小尺寸矩阵在所述测量矩阵中的位置先后顺序,对每组所述矩阵运算的运算结果进行依次合并以得到压缩感知图像恢复结果。
在一些具体实施例中,所述合并模块14,具体可以包括:
装载单元,用于将每组所述矩阵运算对应的所述运算模块集装载至FPGA芯片的片上存储,以利用所述FPGA芯片对每组所述矩阵运算对应的所述运算模块集进行流水并行处理,得到每组所述矩阵运算的运算结果。
进一步的,本申请实施例还公开了一种电子设备,图9是根据一示例性实施例示出的电子设备20结构图,图中的内容不能认为是对本申请的使用范围的任何限制。
图9为本申请实施例提供的一种电子设备20的结构示意图。该电子设备 20,具体可以包括:至少一个处理器21、至少一个存储器22、电源23、通信接口24、输入输出接口25和通信总线26。其中,所述存储器22用于存储计算机程序,所述计算机程序由所述处理器21加载并执行,以实现前述任一实施例公开的压缩感知图像恢复方法中的相关步骤。另外,本实施例中的电子设备20具体可以为电子计算机。
本实施例中,电源23用于为电子设备20上的各硬件设备提供工作电压;通信接口24能够为电子设备20创建与外界设备之间的数据传输通道,其所遵循的通信协议是能够适用于本申请技术方案的任意通信协议,在此不对其进行具体限定;输入输出接口25,用于获取外界输入数据或向外界输出数据,其具体的接口类型可以根据具体应用需要进行选取,在此不进行具体限定。
另外,存储器22作为资源存储的载体,可以是只读存储器、随机存储器、 磁盘或者光盘等,其上所存储的资源可以包括操作***221、计算机程序222 等,存储方式可以是短暂存储或者永久存储。
其中,操作***221用于管理与控制电子设备20上的各硬件设备以及计算机程序222,其可以是Windows Server、Netware、Unix、Linux等。计算机程序222除了包括能够用于完成前述任一实施例公开的由电子设备20执行的压缩感知图像恢复方法的计算机程序之外,还可以进一步包括能够用于完成其他特定工作的计算机程序。
进一步的,本申请还公开了一种计算机可读存储介质,用于存储计算机程序;其中,所述计算机程序被处理器执行时实现前述公开的压缩感知图像恢复方法。关于该方法的具体步骤可以参考前述实施例中公开的相应内容,在此不再进行赘述。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上对本申请所提供的一种压缩感知图像恢复方法、装置、设备及介质进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种压缩感知图像恢复方法,其特征在于,包括:
对压缩感知恢复算法中的测量矩阵进行分解以得到多个小尺寸矩阵;
分别确定所述压缩感知恢复算法中的感知矩阵与每个所述小尺寸矩阵之间的矩阵运算,得到多组所述矩阵运算;
分别对每组所述矩阵运算进行分解以得到每组所述矩阵运算对应的所有计算步骤,并将每组所述矩阵运算中存在数据依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集;
通过具有并行运算能力的处理芯片对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果,并对每组所述矩阵运算的运算结果进行合并以得到压缩感知图像恢复结果。
2.根据权利要求1所述的压缩感知图像恢复方法,其特征在于,所述对压缩感知恢复算法中的测量矩阵进行分解以得到多个小尺寸矩阵,包括:
对压缩感知恢复算法中的测量矩阵按列进行分解,以得到与所述测量矩阵的列数相同的多个列向量;
相应的,所述分别确定所述压缩感知恢复算法中的感知矩阵与每个所述小尺寸矩阵之间的矩阵运算,得到多组所述矩阵运算,包括:
分别确定所述压缩感知恢复算法中的感知矩阵与每个所述列向量之间的矩阵运算,得到多组所述矩阵运算。
3.根据权利要求1所述的压缩感知图像恢复方法,其特征在于,所述分别对每组所述矩阵运算进行分解以得到每组所述矩阵运算对应的所有计算步骤,包括:
分别确定每组所述矩阵运算所包含的全部运算功能;
基于一个运算功能对应一个计算步骤的分解方式,分别对每组所述矩阵运算进行分解,以得到每组所述矩阵运算对应的所有计算步骤。
4.根据权利要求1所述的压缩感知图像恢复方法,其特征在于,所述将每组所述矩阵运算中存在数据依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集,包括:
确定每个计算步骤之间的输入输出数据的依赖关系;
基于所述输入输出数据的依赖关系,分别对每组所述矩阵运算中的不同计算步骤进行划分,以将存在所述依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集。
5.根据权利要求1所述的压缩感知图像恢复方法,其特征在于,所述通过具有并行运算能力的处理芯片对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果,包括:
基于不同计算步骤之间的数据依赖关系,确定出所述运算模块集中每个运算模块的运算优先级;
通过具有并行运算能力的处理芯片并按照所述运算优先级,对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果。
6.根据权利要求1所述的压缩感知图像恢复方法,其特征在于,所述对每组所述矩阵运算的运算结果进行合并以得到压缩感知图像恢复结果,包括:
按照所述矩阵运算对应的所述小尺寸矩阵在所述测量矩阵中的位置先后顺序,对每组所述矩阵运算的运算结果进行依次合并以得到压缩感知图像恢复结果。
7.根据权利要求1至6任一项所述的压缩感知图像恢复方法,其特征在于,所述通过具有并行运算能力的处理芯片对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果,包括:
将每组所述矩阵运算对应的所述运算模块集装载至现场可编程逻辑门阵列芯片的片上存储,以利用所述现场可编程逻辑门阵列芯片对每组所述矩阵运算对应的所述运算模块集进行流水并行处理,得到每组所述矩阵运算的运算结果。
8.一种压缩感知图像恢复装置,其特征在于,包括:
矩阵分解模块,用于对压缩感知恢复算法中的测量矩阵进行分解以得到多个小尺寸矩阵;
运算确定模块,用于分别确定所述压缩感知恢复算法中的感知矩阵与每个所述小尺寸矩阵之间的矩阵运算,得到多组所述矩阵运算;
步骤划分模块,用于分别对每组所述矩阵运算进行分解以得到每组所述矩阵运算对应的所有计算步骤,并将每组所述矩阵运算中存在数据依赖关系的不同计算步骤划分至不同的运算模块,得到每组所述矩阵运算对应的运算模块集;
合并模块,用于通过具有并行运算能力的处理芯片对每组所述矩阵运算对应的所述运算模块集进行处理,得到每组所述矩阵运算的运算结果,并对每组所述矩阵运算的运算结果进行合并以得到压缩感知图像恢复结果。
9.一种电子设备,其特征在于,包括处理器和存储器;其中,所述处理器执行所述存储器中保存的计算机程序时实现如权利要求1至7任一项所述的压缩感知图像恢复方法。
10.一种计算机可读存储介质,其特征在于,用于存储计算机程序;其中,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的压缩感知图像恢复方法。
CN202111110482.2A 2021-09-23 2021-09-23 一种压缩感知图像恢复方法、装置、设备及介质 Pending CN113554574A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202111110482.2A CN113554574A (zh) 2021-09-23 2021-09-23 一种压缩感知图像恢复方法、装置、设备及介质
PCT/CN2022/078489 WO2023045257A1 (zh) 2021-09-23 2022-02-28 一种压缩感知图像恢复方法、装置、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111110482.2A CN113554574A (zh) 2021-09-23 2021-09-23 一种压缩感知图像恢复方法、装置、设备及介质

Publications (1)

Publication Number Publication Date
CN113554574A true CN113554574A (zh) 2021-10-26

Family

ID=78106502

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111110482.2A Pending CN113554574A (zh) 2021-09-23 2021-09-23 一种压缩感知图像恢复方法、装置、设备及介质

Country Status (2)

Country Link
CN (1) CN113554574A (zh)
WO (1) WO2023045257A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114022580A (zh) * 2022-01-06 2022-02-08 苏州浪潮智能科技有限公司 用于图像压缩的数据处理方法、装置、设备和存储介质
WO2023045257A1 (zh) * 2021-09-23 2023-03-30 苏州浪潮智能科技有限公司 一种压缩感知图像恢复方法、装置、设备及介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090278539A1 (en) * 2008-05-06 2009-11-12 Philip James Beatty System and method for using parallel imaging with compressed sensing
CN108199714A (zh) * 2017-12-22 2018-06-22 北京工业大学 一种应用于aic结构信号恢复的改进omp算法的电路***
CN108280818A (zh) * 2018-01-19 2018-07-13 清华大学深圳研究生院 一种基于压缩感知的快速目标成像方法和***
CN109194959A (zh) * 2018-09-28 2019-01-11 中国科学院长春光学精密机械与物理研究所 一种压缩感知成像方法、装置、设备、***及存储介质
CN110148139A (zh) * 2019-04-25 2019-08-20 电信科学技术研究院有限公司 一种图像恢复方法及装置
CN110659070A (zh) * 2018-06-29 2020-01-07 赛灵思公司 高并行度计算***及其指令调度方法
CN112231630A (zh) * 2020-10-26 2021-01-15 国家超级计算无锡中心 基于fpga并行加速的稀疏矩阵求解方法
CN113365014A (zh) * 2021-05-11 2021-09-07 中国科学院国家空间科学中心 一种并行压缩感知gpu加速实时成像***与方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8788556B2 (en) * 2011-05-12 2014-07-22 Microsoft Corporation Matrix computation framework
CN104537278A (zh) * 2014-12-01 2015-04-22 中国人民解放军海军工程大学 对带假结的rna二级结构预测进行硬件加速的方法
WO2018094087A1 (en) * 2016-11-17 2018-05-24 The Mathworks, Inc. Systems and methods for generating code for parallel processing units
CN113554574A (zh) * 2021-09-23 2021-10-26 苏州浪潮智能科技有限公司 一种压缩感知图像恢复方法、装置、设备及介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090278539A1 (en) * 2008-05-06 2009-11-12 Philip James Beatty System and method for using parallel imaging with compressed sensing
CN108199714A (zh) * 2017-12-22 2018-06-22 北京工业大学 一种应用于aic结构信号恢复的改进omp算法的电路***
CN108280818A (zh) * 2018-01-19 2018-07-13 清华大学深圳研究生院 一种基于压缩感知的快速目标成像方法和***
CN110659070A (zh) * 2018-06-29 2020-01-07 赛灵思公司 高并行度计算***及其指令调度方法
CN109194959A (zh) * 2018-09-28 2019-01-11 中国科学院长春光学精密机械与物理研究所 一种压缩感知成像方法、装置、设备、***及存储介质
CN110148139A (zh) * 2019-04-25 2019-08-20 电信科学技术研究院有限公司 一种图像恢复方法及装置
CN112231630A (zh) * 2020-10-26 2021-01-15 国家超级计算无锡中心 基于fpga并行加速的稀疏矩阵求解方法
CN113365014A (zh) * 2021-05-11 2021-09-07 中国科学院国家空间科学中心 一种并行压缩感知gpu加速实时成像***与方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
苗壮 等,: "采用GPU加速的压缩感知图像恢复算法", 《微电子学与计算机》 *
董蕾 等,: "基于CUDA的压缩感知重构算法并行化研究", 《信息技术》 *
陈帅 等,: "SAR图像压缩采样恢复的GPU并行实现", 《电子与信息学报》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023045257A1 (zh) * 2021-09-23 2023-03-30 苏州浪潮智能科技有限公司 一种压缩感知图像恢复方法、装置、设备及介质
CN114022580A (zh) * 2022-01-06 2022-02-08 苏州浪潮智能科技有限公司 用于图像压缩的数据处理方法、装置、设备和存储介质
CN114022580B (zh) * 2022-01-06 2022-04-19 苏州浪潮智能科技有限公司 用于图像压缩的数据处理方法、装置、设备和存储介质

Also Published As

Publication number Publication date
WO2023045257A1 (zh) 2023-03-30

Similar Documents

Publication Publication Date Title
US10210189B2 (en) Root cause analysis of performance problems
CN113554574A (zh) 一种压缩感知图像恢复方法、装置、设备及介质
CN109902002B (zh) 组合测试用例的生成方法及装置、存储介质、计算机设备
WO2019042200A1 (zh) 执行机器学习的分布式***及其方法
EP3113020A1 (en) Data processing device and method for processing serial tasks
US9612876B2 (en) Method and apparatus for estimating a completion time for mapreduce jobs
CN109344062A (zh) 页面跨域跳转测试的方法及终端设备
US11405413B2 (en) Anomaly lookup for cyber security hunting
CN114626503A (zh) 模型的训练方法、目标检测方法、装置、电子设备及介质
CN111784000A (zh) 数据处理方法、装置和服务器
CN111625422B (zh) 线程监控方法、装置、电子设备及计算机可读存储介质
CN113190576A (zh) 数据处理方法、装置、计算机设备和可读存储介质
CN110704099B (zh) 联盟链的构建方法、装置和电子设备
US10909021B2 (en) Assistance device, design assistance method, and recording medium storing design assistance program
KR20160072851A (ko) 대용량 고해상도 위성영상 분석 시스템 및 방법
CN114549945A (zh) 遥感影像变化检测方法及相关装置
CN114330719A (zh) 从事件的时序图中发现关联规则的方法及电子设备
Li et al. Hyperspectral video processing on resource-constrained platforms
CN113220646A (zh) 一种数据解析方法、装置、计算机设备和存储介质
CN112800425A (zh) 一种基于图计算的代码分析的方法和装置
CN105095071A (zh) 一种用于获得应用的场景性能信息方法、装置和***
Cheng et al. A new randomized algorithm for group testing with unknown number of defective items
CN112506944B (zh) 业务***间的数据标准转换取数方法、装置、设备和介质
Pujari et al. Slicing Based on Web Scrapped Concurrent Component
CN112817813B (zh) 基于react hooks的数据收集方法、装置及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20211026

RJ01 Rejection of invention patent application after publication