CN109543139A - 卷积运算方法、装置、计算机设备及计算机可读存储介质 - Google Patents
卷积运算方法、装置、计算机设备及计算机可读存储介质 Download PDFInfo
- Publication number
- CN109543139A CN109543139A CN201710866060.5A CN201710866060A CN109543139A CN 109543139 A CN109543139 A CN 109543139A CN 201710866060 A CN201710866060 A CN 201710866060A CN 109543139 A CN109543139 A CN 109543139A
- Authority
- CN
- China
- Prior art keywords
- data
- time
- permutatation
- depth
- extracted
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004422 calculation algorithm Methods 0.000 title claims abstract description 87
- 238000000034 method Methods 0.000 title claims abstract description 51
- 238000013507 mapping Methods 0.000 claims abstract description 49
- 238000013527 convolutional neural network Methods 0.000 claims abstract description 36
- 238000000605 extraction Methods 0.000 claims description 34
- 238000004891 communication Methods 0.000 claims description 19
- 239000000284 extract Substances 0.000 claims description 17
- 238000004590 computer program Methods 0.000 claims description 10
- 238000012545 processing Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000013075 data extraction Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/10—Complex mathematical operations
- G06F17/15—Correlation function computation including computation of convolution operations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/10—Complex mathematical operations
- G06F17/15—Correlation function computation including computation of convolution operations
- G06F17/153—Multidimensional correlation or convolution
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/213—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/2163—Partitioning the feature space
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F7/00—Methods or arrangements for processing data by operating upon the order or content of the data handled
- G06F7/22—Arrangements for sorting or merging computer data on continuous record carriers, e.g. tape, drum, disc
- G06F7/36—Combined merging and sorting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
- G06N20/10—Machine learning using kernel methods, e.g. support vector machines [SVM]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/06—Physical realisation, i.e. hardware implementation of neural networks, neurons or parts of neurons
- G06N3/063—Physical realisation, i.e. hardware implementation of neural networks, neurons or parts of neurons using electronic means
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computing Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Mathematical Analysis (AREA)
- Pure & Applied Mathematics (AREA)
- Mathematical Optimization (AREA)
- Computational Mathematics (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Molecular Biology (AREA)
- General Health & Medical Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Algebra (AREA)
- Databases & Information Systems (AREA)
- Medical Informatics (AREA)
- Computer Hardware Design (AREA)
- Neurology (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
本发明实施例提供了一种卷积运算方法、装置、计算机设备及计算机可读存储介质,其中,卷积运算方法包括:获取卷积神经网络中网络层的输入数据;按照预设步长,每次从输入数据中提取多个数据点;将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据;利用预设尺寸的卷积核对重排列后的数据进行卷积运算,得到卷积结果。通过本发明可以提高卷积神经网络的运算效率。
Description
技术领域
本发明涉及深度学习技术领域,特别是涉及一种卷积运算方法、装置、计算机设备及计算机可读存储介质。
背景技术
在CNN(Convolutional Neural Network,卷积神经网络)中,对于每个网络层而言,由于输入数据的大小往往是不同的,因此,每个网络层进行卷积运算的卷积核也相应的设置为不同尺寸。然而,卷积核的尺寸大小直接影响到CNN对应硬件平台的设计,如果CNN中具有多种尺寸的卷积核,则需要设计复杂的硬件平台以支持CNN的运行,导致硬件资源的开销较大。
针对上述问题,相应的卷积运算方法中,对于采用较大尺寸的卷积核的网络层,利用两个小尺寸的卷积核代替该较大尺寸的卷积核,对输入数据进行卷积运算,例如,利用两个3×3的卷积核代替一个5×5的卷积核,对输入数据进行卷积运算。但是,对于一个网络层而言,原本通过一个卷积核完成卷积运算,而该方法需要通过两个卷积核才可以完成卷积运算,该方法增加了卷积运算的运算量,影响卷积运算的运算效率。
发明内容
本发明实施例的目的在于提供一种卷积运算方法、装置、计算机设备及计算机可读存储介质,以提高卷积神经网络的运算效率。具体技术方案如下:
第一方面,本发明实施例提供了一种卷积运算方法,所述方法包括:
获取卷积神经网络中网络层的输入数据;
按照预设步长,每次从所述输入数据中提取多个数据点;
将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据;
利用预设尺寸的卷积核对所述重排列后的数据进行卷积运算,得到卷积结果。
第二方面,本发明实施例提供了一种卷积运算装置,所述装置包括:
获取模块,用于获取卷积神经网络中网络层的输入数据;
提取模块,用于按照预设步长,每次从所述输入数据中提取多个数据点;
映射模块,用于将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据;
运算模块,用于利用预设尺寸的卷积核对所述重排列后的数据进行卷积运算,得到卷积结果。
第三方面,本发明实施例提供了一种计算机设备,包括处理器、通信接口、存储器和通信总线,其中,所述处理器,所述通信接口,所述存储器通过所述通信总线完成相互间的通信;
所述存储器,用于存放计算机程序;
所述处理器,用于执行所述存储器上所存放的程序时,实现如第一方面所述的方法步骤。
第四方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面所述的方法步骤。
本发明实施例提供的一种卷积运算方法、装置、计算机设备及计算机可读存储介质,通过按照预设步长,每次从获取的卷积神经网络中网络层的输入数据中提取多个数据点,并将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据,最后利用预设尺寸的卷积核对重排列后的数据进行卷积运算,得到卷积结果。由于对网络层的输入数据进行多个数据点的提取及映射操作,将输入数据在深度方向进行扩展,并且减小了每个深度的尺寸,由于输入数据的尺寸变小,则可以利用更小的卷积核对该输入数据进行卷积运算,通过该方法,将各网络层的输入数据进行处理,得到的重排列后的数据均可以利用相同的预设尺寸的卷积核进行卷积运算,从而可以减小硬件资源的开销,并且,针对每个网络层,利用相同的更小尺寸的卷积核进行卷积运算,可以提高卷积神经网络的运算效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例的卷积运算方法的一种流程示意图;
图2为本发明实施例的卷积运算方法的另一种流程示意图;
图3为本发明实施例的输入数据重排列的示意图;
图4为本发明实施例的卷积运算装置的一种结构示意图;
图5为本发明实施例的卷积运算装置的另一种结构示意图;
图6为本发明实施例的计算机设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
为了提高卷积神经网络的运算效率,本发明实施例提供了一种卷积运算方法、装置、计算机设备及计算机可读存储介质。
下面首先对本发明实施例所提供的一种卷积运算方法进行介绍。
本发明实施例所提供的一种卷积运算方法的执行主体可以为一种执行卷积运算的计算机设备,例如,图像处理器、具有图像处理功能的摄像机等等。执行主体中至少包括具有数据处理能力的核心处理芯片,其中,核心处理芯片可以为DSP(Digital SignalProcessor,数字信号处理器)、ARM(Advanced Reduced Instruction Set ComputerMachines,精简指令集计算机微处理器)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)等核心处理芯片中的任一种。实现本发明实施例所提供的一种卷积运算方法的方式,可以为设置于执行主体中的软件、硬件电路和逻辑电路中的至少一种方式。
如图1所示,本发明实施例所提供的一种卷积运算方法,可以包括如下步骤:
S101,获取卷积神经网络中网络层的输入数据。
卷积神经网络中每个网络层的输入数据为一个三维数据,输入数据的大小可以表示为W×H×I,其中,I为输入数据的深度,W×H为每个深度的数据尺寸,即每个深度的数据的宽和高,由于卷积神经网络中每个网络层的输入数据的大小不同,尤其是每个深度的数据尺寸不同,为了提高运算速率,针对大尺寸的输入数据,可以选择大尺寸的卷积核进行卷积运算,针对小尺寸的输入数据,可以选择小尺寸的卷积核进行卷积运算。但是,这样就要求复杂的硬件平台支持多种卷积核对不同网络层的输入数据分别进行卷积运算,影响了卷积神经网络的运算效率。基于上述输入数据对卷积核选择的影响,可以考虑将输入数据每个深度的数据尺寸减少,这样的话,就可以选择尺寸较小的卷积核对输入数据进行卷积运算,这样,针对不同的网络层,可以使用相同的较小尺寸的卷积核,既保证了卷积运算的运算速率,又提高了卷积神经网络的运算效率。因此,本发明实施例中,通过对输入数据进行处理,达到提高卷积神经网络的运算效率的目的。
S102,按照预设步长,每次从输入数据中提取多个数据点。
为了能够减少网络层的输入数据中每个深度的数据尺寸,同时又不影响输入数据原本的数据量,可以考虑将输入数据的深度增加,即将输入数据中多个数据点映射至不同深度的同一位置,这样就可以减少输入数据每个深度的数据尺寸,而又不影响输入数据原始的数据量。在映射前,需要确定映射至不同深度的同一位置的数据点,为了不影响卷积运算的结果,可以对相邻的数据进行映射,也就是说,可以按照预设步长,每次从输入数据中提取多个数据点,该预设步长可以为预先设定的提取多个数据点的规则,例如,预设步长为2×2,则按照2×2的规则,每次提取各深度上的四个数据点。在提取多个数据的过程中,可以一次提取所有深度上满足预设步长的多个数据点,例如,输入数据的深度为256,预设步长为2×2,则一次提取的数据点为2×2×256个;也可以一次提取一个深度中满足预设步长的多个数据点,例如,预设步长为2×2,则一次提取的数据点为2×2个;还可以一次提取多个深度上满足预设步长的多个数据点,例如,预设步长为2×2,一次提取10个深度的数据点,则一次提取的数据点为2×2×10个。
S103,将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据。
在提取了多个数据点后,可以将多个数据点进行映射,即排列至三维数据中不同深度的同一位置,例如,通过上述步骤提取到a、b、c、d四个数据点,则可以按照a、b、c、d四个数据点的任一排列顺序,将该四个数据点排列至连续四个深度的同一位置处,排列顺序可以为[a→b→c→d]、[a→b→d→c]、[a→c→b→d]、[a→c→d→b]、[a→d→b→c]、[a→d→c→b]、[b→a→c→d]、[b→a→d→c]、[b→d→a→c]、[b→d→c→a]、[b→c→a→d]、[b→c→d→a]、[c→a→b→d]、[c→a→d→b]、[c→b→a→d]、[c→b→d→a]、[c→d→a→b]、[c→d→b→a]、[d→a→b→c]、[d→a→c→b]、[d→b→a→c]、[d→b→c→a]、[d→c→a→b]、[d→c→b→a]中的任一种,其中箭头表示了数据排列的顺序。
如果一次提取输入数据的一个深度中满足预设步长的多个数据点,则可以直接根据上述映射方式,将提取的多个数据点排列至新建三维数据中不同深度的同一位置;如果一次提取输入数据的多个深度或者所有深度上满足预设步长的多个数据点,则可以将提取的每个深度的数据点先进行排列,再按深度的顺序将多个数据点排列至新建三维数据中不同深度的同一位置。举例说明,如果输入数据的大小为26×26×10,按照2×2的预设步长进行数据的提取,则得到重排列后的数据的大小为13×13×40,或者每间隔一行/一列提取,则得到重排列后的数据的大小为25×25×40。
或者,还可以是多次提取输入数据的一个深度中满足预设步长的多个数据点,然后将每次从各深度中提取的多个数据点映射至新建三维数据中不同深度的同一位置,得到多个待合并数据,最后沿深度方向,将多个待合并数据进行排列,得到重排列后的数据。例如,如果输入数据的大小为26×26×10,按照2×2的预设步长对每个深度进行数据提取,得到每个深度分别对应的13×13×4的待合并数据,再对10个深度的待合并数据进行合并,得到13×13×40的重排列后的数据。具体的合并方式可以为对各深度对应的待合并数据进行任意排列,通过排列得到的重排列后的数据。针对上述深度为10的输入数据,可以有10!=3628800种排列方式,可以从这些排列方式中任选一种作为各深度对应的待合并数据的合并方式。
S104,利用预设尺寸的卷积核对重排列后的数据进行卷积运算,得到卷积结果。
由于利用上述步骤对输入数据进行处理,输入数据每个深度的数据尺寸减小,则可以利用预设尺寸的卷积核对重排列后的数据进行卷积运算,预设尺寸的卷积核可以为较小尺寸的卷积核,例如3×3的卷积核,或者更小尺寸的卷积核。并且,通过对每个网络层的输入数据进行上述步骤的处理,可以利用相同尺寸的卷积核分别进行卷积运算,则对于卷积神经网络而言,可以利用小尺寸的卷积核对各网络层的输入数据进行卷积运算,因此,可以实现利用简单的硬件平台实现卷积运算,从而提高卷积神经网络的运算效率。
应用本实施例,通过按照预设步长,每次从获取的卷积神经网络中网络层的输入数据中提取多个数据点,并将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据,最后利用预设尺寸的卷积核对重排列后的数据进行卷积运算,得到卷积结果。由于对网络层的输入数据进行多个数据点的提取及映射操作,将输入数据在深度方向进行扩展,并且减小了每个深度的尺寸,由于输入数据的尺寸变小,则可以利用更小的卷积核对该输入数据进行卷积运算,通过该方法,将各网络层的输入数据进行处理,得到的重排列后的数据均可以利用相同的预设尺寸的卷积核进行卷积运算,从而可以减小硬件资源的开销,并且,针对每个网络层,利用相同的更小尺寸的卷积核进行卷积运算,可以提高卷积神经网络的运算效率。
基于图1所示实施例,本发明实施例还提供了一种卷积运算方法,如图2所示,该卷积运算方法包括如下步骤:
S201,获取卷积神经网络中网络层的输入数据。
S202,将输入数据沿深度方向进行划分,得到多个切片。
S203,针对各切片,每次按照预设步长,分别提取该切片中各深度的数据点,得到多个数据点。
在提取多个数据点的过程中,如果一次提取所有深度上满足预设步长的多个数据点,由于一次提取和映射的运算量过大,各深度的运算无法并行运行,容易影响运算的速率。因此,可以将输入数据沿深度方向进行划分,得到多个切片。在对输入数据进行划分的过程中,可以将每个深度划分为一个切片,也可以将多个深度划分为一个切片,划分之后,对各切片中数据点的提取可以并行执行,从而可以提高运算的速率。
S204,将每次从各切片中提取的多个数据点映射至三维数据中不同深度的同一位置,分别得到各切片对应的待合并数据。
针对各切片,在每次提取了多个数据点后,可以将多个数据点进行映射,即排列至三维数据中不同深度的同一位置,映射的过程如图1所示实施例相同,这里不再赘述。
如果一次提取一个深度中满足预设步长的多个数据点,则可以直接将提取的多个数据点排列至不同深度的同一位置;如果一次提取多个深度上满足预设步长的多个数据点,则可以将提取的每个深度的数据点先进行排列,再按深度的顺序将多个数据点排列至不同深度的同一位置。
S205,沿深度方向,将多个待合并数据进行排列,得到重排列后的数据。
将每次从各切片中提取的多个数据点映射至三维数据中不同深度的同一位置,得到多个待合并数据,然后沿深度方向,将多个待合并数据进行排列,得到重排列后的数据。例如,如果输入数据的大小为26×26×10,将该输入数据沿深度方向进行划分,得到26×26×1、26×26×3、26×26×6三个切片,分别按照2×2预设步长对各切片进行数据提取,得到13×13×4、13×13×12、13×13×24的待合并数据,再将这三个待合并数据进行合并,得到13×13×40的重排列后的数据。合并方式可以为对各切片对应的待合并数据进行任意排列,通过排列得到的重排列后的数据。针对上述输入数据,可以有3!=6种排列方式,可以从这些排列方式中任选一种作为各切片对应的待合并数据的合并方式。
S206,利用预设尺寸的卷积核对重排列后的数据进行卷积运算,得到卷积结果。
应用本实施例,通过将输入数据沿深度方向进行划分,得到多个切片,然后按照预设步长,每次从各切片中提取多个数据点,并将每次提取的多个数据点映射至三维数据中不同深度的同一位置,并通过合并得到重排列后的数据,最后利用预设尺寸的卷积核对重排列后的数据进行卷积运算,得到卷积结果。对输入数据进行划分之后,各切片中多个数据点的提取可以并行执行,从而可以提高运算的速率;并且,由于对各切片进行多个数据点的提取及映射操作,将各切片在深度方向进行扩展,减小了每个深度的尺寸,则可以利用更小的卷积核对该输入数据进行卷积运算,通过该方法,将各网络层的输入数据进行处理,得到的重排列后的数据均可以利用相同的预设尺寸的卷积核进行卷积运算,从而可以减小硬件资源的开销,并且,针对每个网络层,利用相同的更小尺寸的卷积核进行卷积运算,可以提高卷积神经网络的运算效率。
为了便于理解,下面结合具体的应用实例,对发明实施例所提供的卷积运算方法进行介绍。
第一步,对于需要将卷积核替换为更小尺寸的卷积核的网络层,记该网络层的输入数据为A,其中,A为大小为W×H×I的一个三维数据。
第二步,将A在深度方向上划分为I个切片,分别记录各切片为Ai,如图3所示,其中,i∈[1,I]。
第三步,在Ai内按照2×2的步长,每次提取4个数据点aj,如图3的Ai中虚线框所示,其中,j∈[1,4]。
第四步,将提取的数据点映射到三维数据Ai *对应的同一位置,其中,Ai *的大小为W*×H*×4,数据点的排列顺序可以为4!=24种排列顺序中的任一种。
第五步,将Ai *在深度方向上进行合并,得到重排列后的数据A*,其中,A*的大小为W*×H*×4I,Ai *的合并方式可以为对各Ai *进行排列合并,排列顺序可以为I!种排列顺序中的任一种。
第六步,基于重排列后的数据A*,可以利用预设尺寸的卷积核Kr×Kr×Ir×O进行卷积运算,得到卷积结果。
本方案中,通过将输入数据沿深度方向进行划分,得到多个切片,然后按照2×2的步长,每次从各切片中提取多个数据点,并将每次提取的多个数据点映射至三维数据中不同深度的同一位置,并通过合并得到重排列后的数据,最后利用预设尺寸的卷积核对重排列后的数据进行卷积运算,得到卷积结果。在对输入数据进行划分的过程中,将每个深度划分为一个切片,划分之后,各切片中多个数据点的提取可以并行执行,从而可以提高运算的速率;并且,由于对各切片进行多个数据点的提取及映射操作,将各切片在深度方向进行扩展,减小了每个深度的尺寸,则可以利用更小的卷积核对该输入数据进行卷积运算,通过该方法,将各网络层的输入数据进行处理,得到的重排列后的数据均可以利用相同的预设尺寸的卷积核进行卷积运算,从而可以减小硬件资源的开销,并且,针对每个网络层,利用相同的更小尺寸的卷积核进行卷积运算,可以提高卷积神经网络的运算效率。
相应于上述卷积运算方法实施例,如图4所示,本发明实施例还提供了一种卷积运算装置,该卷积运算装置可以包括:
获取模块410,用于获取卷积神经网络中网络层的输入数据;
提取模块420,用于按照预设步长,每次从所述输入数据中提取多个数据点;
映射模块430,用于将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据;
运算模块440,用于利用预设尺寸的卷积核对所述重排列后的数据进行卷积运算,得到卷积结果。
应用本实施例,通过按照预设步长,每次从获取的卷积神经网络中网络层的输入数据中提取多个数据点,并将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据,最后利用预设尺寸的卷积核对重排列后的数据进行卷积运算,得到卷积结果。由于对网络层的输入数据进行多个数据点的提取及映射操作,将输入数据在深度方向进行扩展,并且减小了每个深度的尺寸,由于输入数据的尺寸变小,则可以利用更小的卷积核对该输入数据进行卷积运算,通过该方法,将各网络层的输入数据进行处理,得到的重排列后的数据均可以利用相同的预设尺寸的卷积核进行卷积运算,从而可以减小硬件资源的开销,并且,针对每个网络层,利用相同的更小尺寸的卷积核进行卷积运算,可以提高卷积神经网络的运算效率。
可选的,所述提取模块420,具体可以用于:
针对所述输入数据的每个深度,每次按照预设步长,分别提取多个数据点;
所述映射模块430,具体可以用于:
将每次从所述输入数据中各深度提取的多个数据点映射至三维数据中不同深度的同一位置,得到多个待合并数据;
沿深度方向,将多个待合并数据进行排列,得到重排列后的数据。
可选的,所述提取模块420,具体还可以用于:
对每次提取的多个数据点进行排列;
按照排列的顺序,将每次提取的多个数据点存储至三维数据中不同深度的同一位置,得到重排列后的数据。
本实施例所提供的卷积运算装置为应用如图1所示实施例的卷积运算方法的装置,因此,上述卷积运算方法的所有实施例均适用于本卷积运算装置,且具有相同或相似的有益效果,这里不再赘述。
基于图4所示实施例,本发明实施例还提供了另一种卷积运算装置,如图5所示,该卷积运算装置可以包括:
获取模块510,用于获取卷积神经网络中网络层的输入数据;
划分模块520,用于将所述输入数据沿深度方向进行划分,得到多个切片;
提取模块530,用于针对各切片,每次按照预设步长,分别提取该切片中各深度的数据点,得到多个数据点;
映射模块540,用于将每次从各切片中提取的多个数据点映射至三维数据中不同深度的同一位置,分别得到各切片对应的待合并数据;沿深度方向,将多个待合并数据进行排列,得到重排列后的数据;
运算模块550,用于利用预设尺寸的卷积核对所述重排列后的数据进行卷积运算,得到卷积结果。
应用本实施例,通过将输入数据沿深度方向进行划分,得到多个切片,然后按照预设步长,每次从各切片中提取多个数据点,并将每次提取的多个数据点映射至三维数据中不同深度的同一位置,并通过合并得到重排列后的数据,最后利用预设尺寸的卷积核对重排列后的数据进行卷积运算,得到卷积结果。对输入数据进行划分之后,各切片中多个数据点的提取可以并行执行,从而可以提高运算的速率;并且,由于对各切片进行多个数据点的提取及映射操作,将各切片在深度方向进行扩展,减小了每个深度的尺寸,则可以利用更小的卷积核对该输入数据进行卷积运算,通过该方法,将各网络层的输入数据进行处理,得到的重排列后的数据均可以利用相同的预设尺寸的卷积核进行卷积运算,从而可以减小硬件资源的开销,并且,针对每个网络层,利用相同的更小尺寸的卷积核进行卷积运算,可以提高卷积神经网络的运算效率。
本发明实施例还提供了一种计算机设备,如图6所示,包括处理器601、通信接口602、存储器603和通信总线604,其中,处理器601,通信接口602,存储器603通过通信总线604完成相互间的通信,
存储器603,用于存放计算机程序;
处理器601,用于执行存储器603上所存放的程序时,实现如下步骤:
获取卷积神经网络中网络层的输入数据;
按照预设步长,每次从所述输入数据中提取多个数据点;
将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据;
利用预设尺寸的卷积核对所述重排列后的数据进行卷积运算,得到卷积结果。
可选的,所述处理器601还可以实现:
将所述输入数据沿深度方向进行划分,得到多个切片;
所述处理器601在实现所述按照预设步长,每次从所述输入数据中提取多个数据点的步骤中,具体可以实现:
针对各切片,每次按照预设步长,分别提取该切片中各深度的数据点,得到多个数据点;
所述处理器601在实现所述将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据的步骤中,具体可以实现:
将每次从各切片中提取的多个数据点映射至三维数据中不同深度的同一位置,分别得到各切片对应的待合并数据;
沿深度方向,将多个待合并数据进行排列,得到重排列后的数据。
可选的,所述处理器601在实现所述按照预设步长,每次从所述输入数据中提取多个数据点的步骤中,具体可以实现:
针对所述输入数据的每个深度,每次按照预设步长,分别提取多个数据点;
所述处理器601在实现所述将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据的步骤中,具体可以实现:
将每次从所述输入数据中各深度提取的多个数据点映射至三维数据中不同深度的同一位置,得到多个待合并数据;
沿深度方向,将多个待合并数据进行排列,得到重排列后的数据。
可选的,所述处理器601在实现所述将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据的步骤中,具体可以实现:
对每次提取的多个数据点进行排列;
按照排列的顺序,将每次提取的多个数据点存储至三维数据中不同深度的同一位置,得到重排列后的数据。
上述计算机设备提到的通信总线可以是PCI(Peripheral ComponentInterconnect,外设部件互连标准)总线或EISA(Extended Industry StandardArchitecture,扩展工业标准结构)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述计算机设备与其他设备之间的通信。
存储器可以包括RAM(Random Access Memory,随机存取存储器),也可以包括NVM(Non-Volatile Memory,非易失性存储器),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括CPU(Central Processing Unit,中央处理器)、NP(Network Processor,网络处理器)等;还可以是DSP(Digital Signal Processing,数字信号处理器)、ASIC(Application Specific Integrated Circuit,专用集成电路)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
本实施例中,该计算机设备的处理器通过读取存储器中存储的计算机程序,并通过运行该计算机程序,能够实现:通过将输入数据沿深度方向进行划分,得到多个切片,然后按照预设步长,每次从各切片中提取多个数据点,并将每次提取的多个数据点映射至三维数据中不同深度的同一位置,并通过合并得到重排列后的数据,最后利用预设尺寸的卷积核对重排列后的数据进行卷积运算,得到卷积结果。对输入数据进行划分之后,各切片中多个数据点的提取可以并行执行,从而可以提高运算的速率;并且,由于对各切片进行多个数据点的提取及映射操作,将各切片在深度方向进行扩展,减小了每个深度的尺寸,则可以利用更小的卷积核对该输入数据进行卷积运算,通过该方法,将各网络层的输入数据进行处理,得到的重排列后的数据均可以利用相同的预设尺寸的卷积核进行卷积运算,从而可以减小硬件资源的开销,并且,针对每个网络层,利用相同的更小尺寸的卷积核进行卷积运算,可以提高卷积神经网络的运算效率。
另外,相应于上述实施例所提供的卷积运算方法,本发明实施例提供了一种计算机可读存储介质,用于存储计算机程序,所述计算机程序被处理器执行时,实现如下步骤:
获取卷积神经网络中网络层的输入数据;
按照预设步长,每次从所述输入数据中提取多个数据点;
将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据;
利用预设尺寸的卷积核对所述重排列后的数据进行卷积运算,得到卷积结果。
可选的,所述处理器还可以实现:
将所述输入数据沿深度方向进行划分,得到多个切片;
所述处理器具体可以实现:
针对各切片,每次按照预设步长,分别提取该切片中各深度的数据点,得到多个数据点;
所述处理器具体可以实现:
将每次从各切片中提取的多个数据点映射至三维数据中不同深度的同一位置,分别得到各切片对应的待合并数据;
沿深度方向,将多个待合并数据进行排列,得到重排列后的数据。
可选的,所述处理器具体可以实现:
针对所述输入数据的每个深度,每次按照预设步长,分别提取多个数据点;
所述处理器具体可以实现:
将每次从所述输入数据中各深度提取的多个数据点映射至三维数据中不同深度的同一位置,得到多个待合并数据;
沿深度方向,将多个待合并数据进行排列,得到重排列后的数据。
可选的,所述处理器具体可以实现:
对每次提取的多个数据点进行排列;
按照排列的顺序,将每次提取的多个数据点存储至三维数据中不同深度的同一位置,得到重排列后的数据。
本实施例中,计算机可读存储介质存储有在运行时执行本申请实施例所提供的卷积运算方法的应用程序,因此能够实现:通过将输入数据沿深度方向进行划分,得到多个切片,然后按照预设步长,每次从各切片中提取多个数据点,并将每次提取的多个数据点映射至三维数据中不同深度的同一位置,并通过合并得到重排列后的数据,最后利用预设尺寸的卷积核对重排列后的数据进行卷积运算,得到卷积结果。对输入数据进行划分之后,各切片中多个数据点的提取可以并行执行,从而可以提高运算的速率;并且,由于对各切片进行多个数据点的提取及映射操作,将各切片在深度方向进行扩展,减小了每个深度的尺寸,则可以利用更小的卷积核对该输入数据进行卷积运算,通过该方法,将各网络层的输入数据进行处理,得到的重排列后的数据均可以利用相同的预设尺寸的卷积核进行卷积运算,从而可以减小硬件资源的开销,并且,针对每个网络层,利用相同的更小尺寸的卷积核进行卷积运算,可以提高卷积神经网络的运算效率。
对于计算机设备以及计算机可读存储介质实施例而言,由于其所涉及的方法内容基本相似于前述的方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于***实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。
Claims (10)
1.一种卷积运算方法,其特征在于,所述方法包括:
获取卷积神经网络中网络层的输入数据;
按照预设步长,每次从所述输入数据中提取多个数据点;
将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据;
利用预设尺寸的卷积核对所述重排列后的数据进行卷积运算,得到卷积结果。
2.根据权利要求1所述的方法,其特征在于,在所述按照预设步长,每次从所述输入数据中提取多个数据点之前,所述方法还包括:
将所述输入数据沿深度方向进行划分,得到多个切片;
所述按照预设步长,每次从所述输入数据中提取多个数据点,包括:
针对各切片,每次按照预设步长,分别提取该切片中各深度的数据点,得到多个数据点;
所述将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据,包括:
将每次从各切片中提取的多个数据点映射至三维数据中不同深度的同一位置,分别得到各切片对应的待合并数据;
沿深度方向,将多个待合并数据进行排列,得到重排列后的数据。
3.根据权利要求1所述的方法,其特征在于,所述按照预设步长,每次从所述输入数据中提取多个数据点,包括:
针对所述输入数据的每个深度,每次按照预设步长,分别提取多个数据点;
所述将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据,包括:
将每次从所述输入数据中各深度提取的多个数据点映射至三维数据中不同深度的同一位置,得到多个待合并数据;
沿深度方向,将多个待合并数据进行排列,得到重排列后的数据。
4.根据权利要求1所述的方法,其特征在于,所述将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据,包括:
对每次提取的多个数据点进行排列;
按照排列的顺序,将每次提取的多个数据点存储至三维数据中不同深度的同一位置,得到重排列后的数据。
5.一种卷积运算装置,其特征在于,所述装置包括:
获取模块,用于获取卷积神经网络中网络层的输入数据;
提取模块,用于按照预设步长,每次从所述输入数据中提取多个数据点;
映射模块,用于将每次提取的多个数据点映射至三维数据中不同深度的同一位置,得到重排列后的数据;
运算模块,用于利用预设尺寸的卷积核对所述重排列后的数据进行卷积运算,得到卷积结果。
6.根据权利要求5所述的装置,其特征在于,所述装置还包括:
划分模块,用于将所述输入数据沿深度方向进行划分,得到多个切片;
所述提取模块,具体用于:
针对各切片,每次按照预设步长,分别提取该切片中各深度的数据点,得到多个数据点;
所述映射模块,具体用于:
将每次从各切片中提取的多个数据点映射至三维数据中不同深度的同一位置,分别得到各切片对应的待合并数据;
沿深度方向,将多个待合并数据进行排列,得到重排列后的数据。
7.根据权利要求5所述的装置,其特征在于,所述提取模块,具体用于:
针对所述输入数据的每个深度,每次按照预设步长,分别提取多个数据点;
所述映射模块,具体用于:
将每次从所述输入数据中各深度提取的多个数据点映射至三维数据中不同深度的同一位置,得到多个待合并数据;
沿深度方向,将多个待合并数据进行排列,得到重排列后的数据。
8.根据权利要求5所述的装置,其特征在于,所述提取模块,具体用于:
对每次提取的多个数据点进行排列;
按照排列的顺序,将每次提取的多个数据点存储至三维数据中不同深度的同一位置,得到重排列后的数据。
9.一种计算机设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,所述处理器,所述通信接口,所述存储器通过所述通信总线完成相互间的通信;
所述存储器,用于存放计算机程序;
所述处理器,用于执行所述存储器上所存放的程序时,实现权利要求1-4任一所述的方法步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1-4任一所述的方法步骤。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710866060.5A CN109543139B (zh) | 2017-09-22 | 2017-09-22 | 卷积运算方法、装置、计算机设备及计算机可读存储介质 |
PCT/CN2018/106600 WO2019057097A1 (zh) | 2017-09-22 | 2018-09-20 | 卷积运算方法、装置、计算机设备及计算机可读存储介质 |
US16/649,306 US11645357B2 (en) | 2017-09-22 | 2018-09-20 | Convolution operation method and apparatus, computer device, and computer-readable storage medium |
EP18859234.9A EP3686760A4 (en) | 2017-09-22 | 2018-09-20 | CONVOLUTIONAL OPERATIONAL METHOD AND DEVICE, COMPUTER DEVICE, AND COMPUTER READABLE STORAGE MEDIUM |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710866060.5A CN109543139B (zh) | 2017-09-22 | 2017-09-22 | 卷积运算方法、装置、计算机设备及计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109543139A true CN109543139A (zh) | 2019-03-29 |
CN109543139B CN109543139B (zh) | 2021-09-17 |
Family
ID=65811068
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710866060.5A Active CN109543139B (zh) | 2017-09-22 | 2017-09-22 | 卷积运算方法、装置、计算机设备及计算机可读存储介质 |
Country Status (4)
Country | Link |
---|---|
US (1) | US11645357B2 (zh) |
EP (1) | EP3686760A4 (zh) |
CN (1) | CN109543139B (zh) |
WO (1) | WO2019057097A1 (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112836803A (zh) * | 2021-02-04 | 2021-05-25 | 珠海亿智电子科技有限公司 | 一种提高卷积运算效率的数据摆放方法 |
CN113297570A (zh) * | 2021-05-21 | 2021-08-24 | 浙江工业大学 | 一种基于卷积神经网络的应用程序在线攻击方法 |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109543139B (zh) * | 2017-09-22 | 2021-09-17 | 杭州海康威视数字技术股份有限公司 | 卷积运算方法、装置、计算机设备及计算机可读存储介质 |
CN111008040B (zh) * | 2019-11-27 | 2022-06-14 | 星宸科技股份有限公司 | 缓存装置及缓存方法、计算装置及计算方法 |
CN113128688B (zh) * | 2021-04-14 | 2022-10-21 | 北京航空航天大学 | 通用型ai并行推理加速结构以及推理设备 |
Citations (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090034871A1 (en) * | 2007-07-31 | 2009-02-05 | Renato Keshet | Method and system for enhancing image signals and other signals to increase perception of depth |
US20110299752A1 (en) * | 2010-06-04 | 2011-12-08 | Uchicago Argonne, Llc | Method for implementing depth deconvolution algorithm for enhanced thermal tomography 3d imaging |
CN104809426A (zh) * | 2014-01-27 | 2015-07-29 | 日本电气株式会社 | 卷积神经网络的训练方法、目标识别方法及装置 |
CN105260773A (zh) * | 2015-09-18 | 2016-01-20 | 华为技术有限公司 | 一种图像处理装置以及图像处理方法 |
CN105320965A (zh) * | 2015-10-23 | 2016-02-10 | 西北工业大学 | 基于深度卷积神经网络的空谱联合的高光谱图像分类方法 |
US20160117587A1 (en) * | 2014-10-27 | 2016-04-28 | Zhicheng Yan | Hierarchical deep convolutional neural network for image classification |
CN105787488A (zh) * | 2016-03-02 | 2016-07-20 | 浙江宇视科技有限公司 | 由全局向局部传递的图像特征提取方法及装置 |
WO2016186811A1 (en) * | 2015-05-21 | 2016-11-24 | Google Inc. | Computing convolutions using a neural network processor |
US9589374B1 (en) * | 2016-08-01 | 2017-03-07 | 12 Sigma Technologies | Computer-aided diagnosis system for medical images using deep convolutional neural networks |
CN106845635A (zh) * | 2017-01-24 | 2017-06-13 | 东南大学 | 基于级联形式的cnn卷积核硬件设计方法 |
CN106874955A (zh) * | 2017-02-24 | 2017-06-20 | 深圳市唯特视科技有限公司 | 一种基于深度卷积神经网络的三维形状分类方法 |
CN106898011A (zh) * | 2017-01-06 | 2017-06-27 | 广东工业大学 | 一种基于边缘检测来确定卷积神经网络卷积核数量的方法 |
CN106980896A (zh) * | 2017-03-16 | 2017-07-25 | 武汉理工大学 | 遥感分类卷积神经网络的关键卷积层超参数确定方法 |
CN106991372A (zh) * | 2017-03-02 | 2017-07-28 | 北京工业大学 | 一种基于混合深度学习模型的动态手势识别方法 |
CN107103277A (zh) * | 2017-02-28 | 2017-08-29 | 中科唯实科技(北京)有限公司 | 一种基于深度相机和3d卷积神经网络的步态识别方法 |
CN107145939A (zh) * | 2017-06-21 | 2017-09-08 | 北京图森未来科技有限公司 | 一种神经网络优化方法及装置 |
US20170262737A1 (en) * | 2016-03-11 | 2017-09-14 | Magic Leap, Inc. | Structure learning in convolutional neural networks |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110222752A1 (en) * | 2008-04-08 | 2011-09-15 | Three Palm Software | Microcalcification enhancement from digital mammograms |
KR101740464B1 (ko) * | 2016-10-20 | 2017-06-08 | (주)제이엘케이인스펙션 | 뇌졸중 진단 및 예후 예측 방법 및 시스템 |
KR20180073118A (ko) * | 2016-12-22 | 2018-07-02 | 삼성전자주식회사 | 컨볼루션 신경망 처리 방법 및 장치 |
CN109543139B (zh) * | 2017-09-22 | 2021-09-17 | 杭州海康威视数字技术股份有限公司 | 卷积运算方法、装置、计算机设备及计算机可读存储介质 |
US11709911B2 (en) * | 2018-10-03 | 2023-07-25 | Maxim Integrated Products, Inc. | Energy-efficient memory systems and methods |
-
2017
- 2017-09-22 CN CN201710866060.5A patent/CN109543139B/zh active Active
-
2018
- 2018-09-20 US US16/649,306 patent/US11645357B2/en active Active
- 2018-09-20 WO PCT/CN2018/106600 patent/WO2019057097A1/zh unknown
- 2018-09-20 EP EP18859234.9A patent/EP3686760A4/en active Pending
Patent Citations (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090034871A1 (en) * | 2007-07-31 | 2009-02-05 | Renato Keshet | Method and system for enhancing image signals and other signals to increase perception of depth |
US20110299752A1 (en) * | 2010-06-04 | 2011-12-08 | Uchicago Argonne, Llc | Method for implementing depth deconvolution algorithm for enhanced thermal tomography 3d imaging |
CN104809426A (zh) * | 2014-01-27 | 2015-07-29 | 日本电气株式会社 | 卷积神经网络的训练方法、目标识别方法及装置 |
US20160117587A1 (en) * | 2014-10-27 | 2016-04-28 | Zhicheng Yan | Hierarchical deep convolutional neural network for image classification |
WO2016186811A1 (en) * | 2015-05-21 | 2016-11-24 | Google Inc. | Computing convolutions using a neural network processor |
CN105260773A (zh) * | 2015-09-18 | 2016-01-20 | 华为技术有限公司 | 一种图像处理装置以及图像处理方法 |
CN105320965A (zh) * | 2015-10-23 | 2016-02-10 | 西北工业大学 | 基于深度卷积神经网络的空谱联合的高光谱图像分类方法 |
CN105787488A (zh) * | 2016-03-02 | 2016-07-20 | 浙江宇视科技有限公司 | 由全局向局部传递的图像特征提取方法及装置 |
US20170262737A1 (en) * | 2016-03-11 | 2017-09-14 | Magic Leap, Inc. | Structure learning in convolutional neural networks |
US9589374B1 (en) * | 2016-08-01 | 2017-03-07 | 12 Sigma Technologies | Computer-aided diagnosis system for medical images using deep convolutional neural networks |
CN106898011A (zh) * | 2017-01-06 | 2017-06-27 | 广东工业大学 | 一种基于边缘检测来确定卷积神经网络卷积核数量的方法 |
CN106845635A (zh) * | 2017-01-24 | 2017-06-13 | 东南大学 | 基于级联形式的cnn卷积核硬件设计方法 |
CN106874955A (zh) * | 2017-02-24 | 2017-06-20 | 深圳市唯特视科技有限公司 | 一种基于深度卷积神经网络的三维形状分类方法 |
CN107103277A (zh) * | 2017-02-28 | 2017-08-29 | 中科唯实科技(北京)有限公司 | 一种基于深度相机和3d卷积神经网络的步态识别方法 |
CN106991372A (zh) * | 2017-03-02 | 2017-07-28 | 北京工业大学 | 一种基于混合深度学习模型的动态手势识别方法 |
CN106980896A (zh) * | 2017-03-16 | 2017-07-25 | 武汉理工大学 | 遥感分类卷积神经网络的关键卷积层超参数确定方法 |
CN107145939A (zh) * | 2017-06-21 | 2017-09-08 | 北京图森未来科技有限公司 | 一种神经网络优化方法及装置 |
Non-Patent Citations (2)
Title |
---|
IRO LAINA 等: "Deeper Depth Prediction with Fully Convolutional Residual Networks", 《2016 FOURTH INTERNATIONAL CONFERENCE ON 3D VISION》 * |
*** 等: "一种基于卷积神经网络深度学习的人体行为识别方法", 《计算机科学》 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112836803A (zh) * | 2021-02-04 | 2021-05-25 | 珠海亿智电子科技有限公司 | 一种提高卷积运算效率的数据摆放方法 |
CN112836803B (zh) * | 2021-02-04 | 2024-07-23 | 珠海亿智电子科技有限公司 | 一种提高卷积运算效率的数据摆放方法 |
CN113297570A (zh) * | 2021-05-21 | 2021-08-24 | 浙江工业大学 | 一种基于卷积神经网络的应用程序在线攻击方法 |
Also Published As
Publication number | Publication date |
---|---|
EP3686760A4 (en) | 2020-11-18 |
CN109543139B (zh) | 2021-09-17 |
EP3686760A1 (en) | 2020-07-29 |
WO2019057097A1 (zh) | 2019-03-28 |
US11645357B2 (en) | 2023-05-09 |
US20200265306A1 (en) | 2020-08-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109543139A (zh) | 卷积运算方法、装置、计算机设备及计算机可读存储介质 | |
CN107392842B (zh) | 图像风格化处理方法、装置、计算设备及计算机存储介质 | |
CN108520247A (zh) | 对图像中的对象节点的识别方法、装置、终端及可读介质 | |
JP6141262B2 (ja) | 対象のあいまい性の除去及び修正 | |
CN107957831A (zh) | 一种展示界面内容的数据处理方法、装置和处理设备 | |
US20150109290A1 (en) | Device and method for removing noise points in point clouds | |
CN109710362B (zh) | 截图处理方法、计算设备及计算机存储介质 | |
KR102135477B1 (ko) | 이미지 자동분류 방법 및 시스템 | |
CN104809684A (zh) | 图形处理方法、装置及*** | |
WO2020199476A1 (zh) | 基于脉动阵列的神经网络加速方法、装置、计算机设备及存储介质 | |
CN108734052A (zh) | 文字检测方法、装置和*** | |
EP3093757A2 (en) | Multi-dimensional sliding window operation for a vector processor | |
CN104794116A (zh) | 一种页面中元素的布局方法和装置 | |
US20180165405A1 (en) | Timing based net constraints tagging with zero wire load validation | |
CN106611401A (zh) | 一种在纹理内存中存储图像的方法及装置 | |
CN114254584A (zh) | 芯片产品的对比方法、建模方法、装置及存储介质 | |
US9886541B2 (en) | Process for improving capacitance extraction performance | |
KR20180117619A (ko) | 컴퓨팅 장치를 이용한 객체 관리 및 시각화 | |
CN103870563B (zh) | 确定给定文本的主题分布的方法和装置 | |
US10719982B2 (en) | Surface extrction method, apparatus, and non-transitory computer readable storage medium thereof | |
CN111027670B (zh) | 特征图处理方法、装置、电子设备及存储介质 | |
CN108198125A (zh) | 一种图像处理方法及装置 | |
RU2016140336A (ru) | Платформа рабочего процесса приложения | |
US20160232275A1 (en) | Method and apparatus for logical design connectivity-based automatic macro placement | |
EP2916245A1 (en) | Data processing device and data processing method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |