CN110516714A - 一种特征预测方法、***及引擎 - Google Patents

一种特征预测方法、***及引擎 Download PDF

Info

Publication number
CN110516714A
CN110516714A CN201910716917.4A CN201910716917A CN110516714A CN 110516714 A CN110516714 A CN 110516714A CN 201910716917 A CN201910716917 A CN 201910716917A CN 110516714 A CN110516714 A CN 110516714A
Authority
CN
China
Prior art keywords
request
prediction
prediction result
feature
prediction model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910716917.4A
Other languages
English (en)
Other versions
CN110516714B (zh
Inventor
沈建发
林立
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wangsu Science and Technology Co Ltd
Original Assignee
Wangsu Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wangsu Science and Technology Co Ltd filed Critical Wangsu Science and Technology Co Ltd
Priority to CN201910716917.4A priority Critical patent/CN110516714B/zh
Priority to PCT/CN2019/110153 priority patent/WO2021022660A1/zh
Priority to US17/630,529 priority patent/US20220245487A1/en
Priority to EP19940238.9A priority patent/EP4009233A1/en
Publication of CN110516714A publication Critical patent/CN110516714A/zh
Application granted granted Critical
Publication of CN110516714B publication Critical patent/CN110516714B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N5/00—Computing arrangements using knowledge-based models
    • G06N5/04—Inference or reasoning models
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/906—Clustering; Classification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/25—Fusion techniques
    • G06F18/253—Fusion techniques of extracted features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G06N20/20—Ensemble learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N99/00—Subject matter not provided for in other groups of this subclass

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Biology (AREA)
  • Mathematical Physics (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种特征预测方法、***及引擎，其中，所述方法包括：接收携带输入数据的特征预测请求，并识别所述特征预测请求中包含的子请求；分别选择与各个所述子请求相匹配的预测模型，并通过选择的所述预测模型对所述输入数据分别进行预测，以得到各个所述子请求对应的预测结果；将各个所述子请求对应的预测结果按照预设融合算法进行融合，以得到并展示所述特征预测请求的最终预测结果。本申请提供的技术方案，能够提高特征预测的精度。

Description

一种特征预测方法、***及引擎
技术领域
本发明涉及互联网技术领域，特别涉及一种特征预测方法、***及引擎。
背景技术
随着云计算、大数据、人工智能等技术的快速发展，以及各种应用场景的不断成熟，越来越多的数据需要上传到云端进行处理，给云端带来相当多的工作负载。为了减轻云端的工作负载，以及越来越多的应用需要更快的反应速度，边缘智能(Edge Intelligence)应运而生。边缘智能可以使得大部分数据的收集、处理、分析、决策的过程都能在靠近数据源的一侧完成，从而极大地减轻了云端的工作负载，并且由于距离数据源较近，因此反应速度更快。
目前的边缘智能在进行特征预测时，通常只能采用单一的模型进行预测。然而，在实际应用中，针对相同的数据，可能需要进行多个特征的预测。在这种情况下，现有的边缘智能在进行特征预测时，往往具备较低的精度。
发明内容
本申请的目的在于提供一种特征预测方法、***及引擎，能够提高特征预测的精度。
为实现上述目的，本申请一方面提供一种特征预测方法，所述方法包括：接收携带输入数据的特征预测请求，并识别所述特征预测请求中包含的子请求；分别选择与各个所述子请求相匹配的预测模型，并通过选择的所述预测模型对所述输入数据分别进行预测，以得到各个所述子请求对应的预测结果；将各个所述子请求对应的预测结果按照预设融合算法进行融合，以得到并展示所述特征预测请求的最终预测结果。
为实现上述目的，本申请另一方面还提供一种特征预测***，所述***包括应用层、模型层、平台层以及资源层，其中：所述应用层，用于接收携带输入数据的特征预测请求，并识别所述特征预测请求中包含的子请求；以及展示所述特征预测请求的最终预测结果；所述模型层，用于分别选择与各个所述子请求相匹配的预测模型，并通过选择的所述预测模型对所述输入数据分别进行预测，以得到各个所述子请求对应的预测结果；以及将各个所述子请求对应的预测结果按照预设融合算法进行融合，以得到所述特征预测请求的最终预测结果；所述平台层，用于在训练各个所述预测模型，以及通过选择的预测模型对所述输入数据分别进行预测时，创建对应的任务，并为创建的所述任务分配所需的计算资源；其中，所述计算资源至少包括中央处理器资源、图形处理器资源和内存资源；所述资源层，用于统计当前的计算资源，并响应于所述平台层的调度请求，将所述计算资源提供给对应的任务。
为实现上述目的，本申请另一方面还提供一种特征预测引擎，所述特征预测引擎包括处理器和存储器，所述存储器用于存储计算机程序，所述计算机程序被所述处理器执行时，实现上述的特征预测方法。
由上可见，本申请提供的技术方案，在接收到特征预测请求时，可以识别该特征预测请求中包含的各个子请求。然后，可以从预先训练得到的多个预测模型中，选择与各个所述子请求相匹配的预测模型，并通过选择的预测模型分别针对各个子请求进行预测，从而得到各自的预测结果。后续，为了得到特征预测请求的最终预测结果，可以按照预设融合算法，对得到的各个预测结果进行融合。这样，通过多个预测模型协同运作，以及将多个预测结果进行融合，能够得到较高精度的预测结果，从而更好地满足边缘智能的需求。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施方式中特征预测方法的步骤示意图；
图2是本发明实施方式中特征预测***的结构示意图；
图3是本发明实施方式中特征预测方法的流程示意图；
图4是本发明实施方式中特征预测引擎的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。
本申请提供一种特征预测方法，该方法可以应用于边缘智能***中的各个边缘节点处，该可以应用于具备数据处理功能的电子设备中。请参阅图1，本申请提供的特征预测方法，可以包括以下步骤。
S1：接收携带输入数据的特征预测请求，并识别所述特征预测请求中包含的子请求。
在本实施方式中，请参阅图2，用于执行上述的特征预测方法的特征预测***，可以包括四层结构。具体地，如图2所示，该***中可以包括应用层、模型层、平台层以及资源层。其中，所述应用层中可以提供可被外部设备访问的接口，通过该接口，可以接收到携带输入数据的特征预测请求。在实际应用中，该接口可以是RESTful API模块，该RESTful API模块可以通过JAVA、C#，C/C++等编程语言实现，并可以采用HTTP(s)等通讯协议。
在本实施方式中，所述输入数据可以是用于特征预测的图片、视频帧等数据，所述特征预测请求可以根据实际情况的不同，划分为多种不同类型的请求。例如，所述特征预测请求可以是人脸特征预测请求、环境特征预测请求、目标对象预测请求等。在实际应用中，接收到的特征预测请求中，还可以进一步地细分为更多类型的子请求。例如对于人脸特征预测请求中，可以包括人脸的1比1验证请求、人脸的1比N验证请求、人脸定位验证请求、人脸搜寻请求、人脸布控请求等等。又例如，在人脸特征预测请求中，还可以同时存在目标对象的预测请求。具体地，在进行人脸识别时，可能还需要同时识别出人脸所处环境中的某个对象。这样，特征预测请求可以是各个子请求的合集，通过对该合集进行解析，从而可以识别出其中包含的各个子请求。
S3：分别选择与各个所述子请求相匹配的预测模型，并通过选择的所述预测模型对所述输入数据分别进行预测，以得到各个所述子请求对应的预测结果。
由于不同的子请求对特征的识别精度和方式均可能不同，因此不能统一采用相同的预测模型进行预测。在本实施方式中，可以在特征预测***中预先针对不同的子请求，训练得到对应的预测模型，这些预测模型可供上述的模型层使用。这样，当应用层接收到特征预测请求，并识别出特征预测请求中包含的子请求后，可以通过模型层，分别选择与各个所述子请求相匹配的预测模型，并通过选择的所述预测模型对所述输入数据分别进行预测，以得到各个所述子请求对应的预测结果。
具体地，请参阅图2和图3，在模型层中可以包括算法分发模块以及由不同的算法SDK(Software Development Kit，软件开发工具包)构成的边缘智能应用(或者算法仓)。其中，不同的算法SDK中，可以包含不同的预测模型。当模型层接收到应用层发来的各个子请求后，可以根据各个子请求的类型，从众多的算法SDK中选择出类型相匹配的多个目标算法SDK，并通过目标算法SDK中的预测模型分别对相应的子请求进行预测。在进行预测时，可以将上述的输入数据分别输入不同的目标算法SDK中，从而通过不同的预测模型对输入数据进行预测，得到各个子请求对应的预测结果。
在一个实施方式中，考虑到后续需要按照预设融合算法将各个子请求对应的预测结果进行融合，那么在通过选择的所述预测模型对所述输入数据分别进行预测时，可以按照所述预设融合算法，确定各个所述预测模型的执行顺序。在实际应用中，所述执行顺序可以包括并行执行和/或串行执行。其中，该执行顺序可以由预设融合算法的类型确定。具体地，所述预设融合算法可以包括投票融合算法、线性加权融合算法、交叉融合算法、瀑布融合算法以及预测融合算法等等。不同的融合算法，对预测结果的处理方式也不同，从而决定了各个预测模型的执行顺序。例如，对于投票融合算法和线性加权融合算法而言，往往是针对各个预测模型的预测结果进行综合分析，在这种情况下，模型层中选择的各个预测模型可以并行执行。而对于瀑布融合算法而言，通常需要将当前的预测模型的预测结果，作为输入下一个预测模型的候选数据，在这种情况下，模型层中选择的各个预测模型就需要串行执行。当然，根据融合算法的不同，还可能需要将部分预测模型并行执行，以及将部分预测模型串行执行，这里就不再列举了。在本实施方式中，当确定了各个所述预测模型的执行顺序后，可以按照所述执行顺序分别对所述输入数据进行预测。
在一个实施方式中，由于所述输入数据通常是用户提供的，因此输入数据的格式与各个算法SDK中预测模型要求的格式可能并不一致。在这种情况下，在对输入数据进行预测之前，可以将所述输入数据的格式转换为与当前的预测模型相匹配的输入格式，并将转换后的输入数据输入所述当前的预测模型。该格式转换的过程，可以通过协议转换适配器来实现。这样便可以保证预测模型能够正确地识别并分析输入的数据。
在一个实施方式中，在训练各个所述预测模型时，所述应用层中的RESTful API模块可以接收导入的训练数据，并且所述应用层中还可以包括数据标注模块，该数据标注模块可以标注所述训练数据中的特征类型。这样，标注了特征类型的训练数据便可以作为训练各个所述预测模型的训练样本。其中，所述特征类型可以根据实际情况而定。例如，针对缺陷识别的场景而言，该特征类型可以是重皮、折叠、压痕、锯齿折叠等缺陷类型。在进行特征标注时，可以借用LabelImg等标注工具来完成训练样本的构建。
在本实施方式中，在标注得到大量的训练样本后，便可以利用这些训练样本训练得到各个预测模型。在实际应用中，这些预测模型可以基于一定的分类算法进行训练，这些分类算法例如可以是支持向量机、随机森林算法、较大熵算法、梯度提升树算法等。
需要说明的是，请参阅图2和图3，在模型层中还可以包括模型更新模块，该模块可以用于定期获取预测出错或者预测精度不够高的样本数据以及新出现的样本数据，并利用这部分样本数据和人工矫正后的真实预测结果，对现有的预测模型再次进行训练，以使得训练后的预测模型能够针对这部分样本数据进行准确的预测。这样，通过不断更新已经完成训练的预测模型，能够保证预测结果的准确性。
S5：将各个所述子请求对应的预测结果按照预设融合算法进行融合，以得到并展示所述特征预测请求的最终预测结果。
在本实施方式中，在得到各个子请求的预测结果后，为了向用户提供一个最终的预测结果，可以按照预设融合算法对这些预测结果进行融合。在实际应用中，不同的融合算法可以执行不同的融合步骤。
举例来说，在选用投票融合算法时，可以在各个所述子请求对应的预测结果中统计重复次数最多的目标预测结果，并将所述目标预测结果作为所述特征预测请求的最终预测结果。在确定出最终预测结果后，可以通过应用层中的结果展示模块展示该最终预测结果。在实际应用中，可以通过声光设备、短信、邮件以及消息推送等方式来展示最终预测结果。
又例如，在选用线性加权融合算法时，可以为各个所述预测结果分配各自的权重值，并按照分配的权重值对各个所述预测结果的数值加权求平均值，并将所述平均值对应的预测结果作为所述特征预测请求的最终预测结果。具体地，各个预测模型可以针对输入数据计算得到一个概率向量，该概率向量中可以包括多个概率值，每个概率值可以表征一种可能的预测结果。最终，预测模型可以将概率值最大的预测结果，作为输出的子请求的预测结果。在该应用场景下，在各个预测模型计算得到各个概率向量后，可以将该概率向量中包含的概率值与预测模型的权重值进行乘积运算，并将乘积运算后的各个概率向量相加，从而得到一个总的概率向量。接着，可以将该总的概率向量中的各个向量值除以概率向量的总数，从而得到各个向量值的加权平均值。最终，通过筛选出最加权平均值最大的概率值，从而可以确定出所述特征预测请求的最终预测结果。
又例如，在选用交叉融合算法时，可以从不同角度分别展示各个不同的预测结果。具体地，可以计算各个所述子请求对应的预测结果的并集，并将所述并集作为所述特征预测请求的最终预测结果。通过这种融合算法，可以向用户展示多个方面的不同预测结果，以供用户自己选择。当然，在实际应用中，多个不同的预测结果可能存在相悖的情况，因此，在计算得到预测结果的并集后，还可以消除这些相悖的预测结果，并将剩下的预测结果提供给用户。在消除相悖的预测结果时，可以将相悖的多个预测结果全部剔除，还可以从相悖的多个预测结果中保留置信度较高的一个预测结果。
又例如，在选用瀑布融合算法时，可以将当前的预测模型的预测结果作为候选数据，与所述输入数据一并输入下一个预测模型。这样，下一个预测模型在对输入数据进行预测时，可以利用候选数据进行辅助判定，从而通过层层递进的方式，得到最优的最终预测结果。
又例如，在选用预测融合算法时，可以针对各个子请求的预测结果进行二次训练。具体地，可以将各个所述子请求对应的预测结果作为二次数据，并根据针对所述二次数据的反馈数据，构建二次训练的训练样本。其中，各个子请求对应的预测结果可以作为原始的样本数据。用户可以针对这些样本数据，选择出自身感兴趣的数据，或者是从这些样本数据中挑选出具备某种缺陷类型的数据，这样，用户选择或者挑选的数据便可以作为上述的反馈数据。原始的样本数据和反馈数据可以共同构成二次训练的训练样本。后续，利用所述训练样本可以训练得到二层预测模型，并通过所述二层预测模型预测得到所述特征预测请求的最终预测结果。其中，可以按照步骤S3中描述的模型预测方式来训练二层预测模型，这里便不再赘述。
在一个实施方式中，各个预测模型得到的预测结果的格式，可能与融合算法的输入格式并不一致，在这种情况下，需要将各个所述预测结果的格式转换为与所述预设融合算法相匹配的输入格式，并按照所述预设融合算法对转换后的预设结果进行融合。具体地，可以在每个算法SDK中配置一个用于结果转换的适配器，该适配器可以通过Java、Python等编程语言实现，并可以将预测结果的数据格式(例如JSON数据格式)转换为预设融合算法的输入格式(例如XML格式、二进制流格式等等)。
在进行边缘智能的运算时，通常需要为运算过程分配硬件资源。而当前的边缘智能技术，通常只能将硬件资源与特定的运算过程绑定。一旦该运算过程没有执行，这部分硬件资源便无法被其它运算过程使用，这样无疑会造成资源的闲置和浪费。在本实施方式中，上述的平台层可以负责进行任务的创建和资源的调度。具体地，所述平台层可以在训练各个所述预测模型，以及通过选择的预测模型对所述输入数据分别进行预测时，创建对应的任务，并为创建的所述任务分配所需的计算资源。其中，所述计算资源至少包括中央处理器资源、图形处理器资源和内存资源，可调用的计算资源可以由上述的资源层提供。
具体地，平台层在创建了对应的任务后，还可以对创建的任务进行监控，监控的内容可以包括任务的运行状态、硬件资源的使用情况、任务的执行时间等。在为任务调度计算资源时，可以采用多种调度算法来实现。具体地，以图形处理器资源为例。在一个实施方式中，可以统计所述任务所需的图形处理器的目标数量，为所述任务分配所述目标数量的图形处理器。在另一个实施方式中，除了注重任务所需的资源数量，通常还需要注重资源的位置。具体地，平台层可以获取图形处理器的位置信息，并根据所述位置信息确定所述任务所需的图形处理器的目标位置，并将位于所述目标位置处的图形处理器分配给所述任务。举例来说，图形处理器的位置信息可以记录于固定长度的字节中，并且字节中的每一位可以代表一个图形处理器，每一位的数值可以代表图形处理器当前的可使用状态。例如，图形处理器的位置信息可以具备64位，其中每一位代表一个图形处理器，并且1可以表示当前位置的图形处理器可用，0则表示当前位置的图形处理器不可用。这样，通过位置信息，可以清晰地记载各个图形处理器的位置以及可使用状态。后续，可以根据任务所需的图形处理器的数量，以及对应的位置描述要求，筛选出相匹配的多个图形处理器，以供任务使用。在另一个实施方式中，图形处理器还可以具备各自的标签信息。该标签信息可以由一个或者多个标签构成。该标签例如可以是工作频率、CUDA核数、显存、工作温度、所处位置等。这样，通过识别所述任务所需的图形处理器的目标标签，并可以将标签信息中具备所述目标标签的图形处理器分配给所述任务，从而向任务提供符合要求的图形处理器。举例来说，如果某个任务占用的显存较高，则可以为之调配显存高的图形处理器资源，而如果某个任务要求较高的工作频率，则可以选择频率高的图形处理器资源等等。
在实际应用中，所述平台层可以通过openPAI(open Platform for AI，人工智能集群管理平台)实现。具体地，openPAI可提供深度学习、机器学习及大数据任务的大规模图形处理器集群调度、集群监控、任务监控、分布式存储等功能。openPAI在工作时，可以通过Web Portal调用REST Server的API接口提交作业(Job)，随后REST Server可以与Launcher交互，以执行各种作业，再由Launcher Server处理作业请求并将作业请求提交至HadoopYARN进行资源分配与调度。OpenPAI给Hadoop YARN添加了图形处理器支持，使Hadoop YARN能将图形处理器作为可计算资源调度，其中，Hadoop YARN负责作业的管理，其它静态资源则由Kubernetes进行管理。
请参阅图2，本申请还提供一种特征预测***，所述***包括应用层、模型层、平台层以及资源层，其中：
所述应用层，用于接收携带输入数据的特征预测请求，并识别所述特征预测请求中包含的子请求；以及展示所述特征预测请求的最终预测结果；
所述模型层，用于分别选择与各个所述子请求相匹配的预测模型，并通过选择的所述预测模型对所述输入数据分别进行预测，以得到各个所述子请求对应的预测结果；以及将各个所述子请求对应的预测结果按照预设融合算法进行融合，以得到所述特征预测请求的最终预测结果；
所述平台层，用于在训练各个所述预测模型，以及通过选择的预测模型对所述输入数据分别进行预测时，创建对应的任务，并为创建的所述任务分配所需的计算资源；其中，所述计算资源至少包括中央处理器资源、图形处理器资源和内存资源；
所述资源层，用于统计当前的计算资源，并响应于所述平台层的调度请求，将所述计算资源提供给对应的任务。
在一个实施方式中，所述应用层还用于接收导入的训练数据，并标注所述训练数据中的特征类型，以构建用于训练各个所述预测模型的训练样本。
在一个实施方式中，所述模型层还用于将所述输入数据的格式转换为与当前的预测模型相匹配的输入格式，并将转换后的输入数据输入所述当前的预测模型。
请参阅图4，本申请还提供一种特征预测引擎，所述特征预测引擎包括处理器和存储器，所述存储器用于存储计算机程序，所述计算机程序被所述处理器执行时，可以实现上述的特征预测方法。
由上可见，本申请提供的技术方案，在接收到特征预测请求时，可以识别该特征预测请求中包含的各个子请求。然后，可以从预先训练得到的多个预测模型中，选择与各个所述子请求相匹配的预测模型，并通过选择的预测模型分别针对各个子请求进行预测，从而得到各自的预测结果。后续，为了得到特征预测请求的最终预测结果，可以按照预设融合算法，对得到的各个预测结果进行融合。这样，通过多个预测模型协同运作，以及将多个预测结果进行融合，能够得到较高精度的预测结果，从而更好地满足边缘智能的需求。
本说明书中的各个实施方式均采用递进的方式描述，各个实施方式之间相同相似的部分互相参见即可，每个实施方式重点说明的都是与其他实施方式的不同之处。尤其，针对***和引擎的实施方式来说，均可以参照前述方法的实施方式的介绍对照解释。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (13)

1.一种特征预测方法，其特征在于，所述方法包括：
接收携带输入数据的特征预测请求，并识别所述特征预测请求中包含的子请求；
分别选择与各个所述子请求相匹配的预测模型，并通过选择的所述预测模型对所述输入数据分别进行预测，以得到各个所述子请求对应的预测结果；
将各个所述子请求对应的预测结果按照预设融合算法进行融合，以得到并展示所述特征预测请求的最终预测结果。
2.根据权利要求1所述的方法，其特征在于，通过选择的所述预测模型对所述输入数据分别进行预测包括：
按照所述预设融合算法，确定各个所述预测模型的执行顺序，并按照所述执行顺序分别对所述输入数据进行预测；其中，所述执行顺序包括并行执行和/或串行执行。
3.根据权利要求2所述的方法，其特征在于，通过选择的所述预测模型对所述输入数据分别进行预测包括：
若所述执行顺序为串行执行，将当前的预测模型的预测结果作为候选数据，与所述输入数据一并输入下一个预测模型。
4.根据权利要求1所述的方法，其特征在于，通过选择的所述预测模型对所述输入数据分别进行预测之前，所述方法还包括：
将所述输入数据的格式转换为与当前的预测模型相匹配的输入格式，并将转换后的输入数据输入所述当前的预测模型。
5.根据权利要求1所述的方法，其特征在于，将各个所述子请求对应的预测结果按照预设融合算法进行融合包括：
将各个所述预测结果的格式转换为与所述预设融合算法相匹配的输入格式，并按照所述预设融合算法对转换后的预设结果进行融合。
6.根据权利要求1所述的方法，其特征在于，将各个所述子请求对应的预测结果按照预设融合算法进行融合包括：
在各个所述子请求对应的预测结果中统计重复次数最多的目标预测结果，并将所述目标预测结果作为所述特征预测请求的最终预测结果；
或者
为各个所述预测结果分配各自的权重值，并按照分配的权重值对各个所述预测结果的数值加权求平均值，并将所述平均值对应的预测结果作为所述特征预测请求的最终预测结果；
或者
计算各个所述子请求对应的预测结果的并集，并将所述并集作为所述特征预测请求的最终预测结果。
7.根据权利要求1或5所述的方法，其特征在于，将各个所述子请求对应的预测结果按照预设融合算法进行融合包括：
将各个所述子请求对应的预测结果作为二次数据，并根据针对所述二次数据的反馈数据，构建二次训练的训练样本；
利用所述训练样本训练得到二层预测模型，并通过所述二层预测模型预测得到所述特征预测请求的最终预测结果。
8.根据权利要求1所述的方法，其特征在于，所述方法还包括：
在训练各个所述预测模型，以及通过选择的预测模型对所述输入数据分别进行预测时，创建对应的任务，并为创建的所述任务分配所需的计算资源；其中，所述计算资源至少包括中央处理器资源、图形处理器资源和内存资源。
9.根据权利要求8所述的方法，其特征在于，为创建的所述任务分配所需的计算资源包括：
统计所述任务所需的图形处理器的目标数量，为所述任务分配所述目标数量的图形处理器；
或者
获取图形处理器的位置信息，并根据所述位置信息确定所述任务所需的图形处理器的目标位置，并将位于所述目标位置处的图形处理器分配给所述任务；或者
获取图形处理器的标签信息，并识别所述任务所需的图形处理器的目标标签，并将标签信息中具备所述目标标签的图形处理器分配给所述任务。
10.一种特征预测***，其特征在于，所述***包括应用层、模型层、平台层以及资源层，其中：
所述应用层，用于接收携带输入数据的特征预测请求，并识别所述特征预测请求中包含的子请求；以及展示所述特征预测请求的最终预测结果；
所述模型层，用于分别选择与各个所述子请求相匹配的预测模型，并通过选择的所述预测模型对所述输入数据分别进行预测，以得到各个所述子请求对应的预测结果；以及将各个所述子请求对应的预测结果按照预设融合算法进行融合，以得到所述特征预测请求的最终预测结果；
所述平台层，用于在训练各个所述预测模型，以及通过选择的预测模型对所述输入数据分别进行预测时，创建对应的任务，并为创建的所述任务分配所需的计算资源；其中，所述计算资源至少包括中央处理器资源、图形处理器资源和内存资源；
所述资源层，用于统计当前的计算资源，并响应于所述平台层的调度请求，将所述计算资源提供给对应的任务。
11.根据权利要求10所述的***，其特征在于，所述应用层还用于接收导入的训练数据，并标注所述训练数据中的特征类型，以构建用于训练各个所述预测模型的训练样本。
12.根据权利要求10所述的***，其特征在于，所述模型层还用于将所述输入数据的格式转换为与当前的预测模型相匹配的输入格式，并将转换后的输入数据输入所述当前的预测模型。
13.一种特征预测引擎，其特征在于，所述特征预测引擎包括处理器和存储器，所述存储器用于存储计算机程序，所述计算机程序被所述处理器执行时，实现如权利要求1至9中任一所述的方法。
CN201910716917.4A 2019-08-05 2019-08-05 一种特征预测方法、***及引擎 Active CN110516714B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201910716917.4A CN110516714B (zh) 2019-08-05 2019-08-05 一种特征预测方法、***及引擎
PCT/CN2019/110153 WO2021022660A1 (zh) 2019-08-05 2019-10-09 一种特征预测方法、***及引擎
US17/630,529 US20220245487A1 (en) 2019-08-05 2019-10-09 Feature prediction method, system and engine
EP19940238.9A EP4009233A1 (en) 2019-08-05 2019-10-09 Feature prediction method and system, and engine

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910716917.4A CN110516714B (zh) 2019-08-05 2019-08-05 一种特征预测方法、***及引擎

Publications (2)

Publication Number Publication Date
CN110516714A true CN110516714A (zh) 2019-11-29
CN110516714B CN110516714B (zh) 2022-04-01

Family

ID=68625123

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910716917.4A Active CN110516714B (zh) 2019-08-05 2019-08-05 一种特征预测方法、***及引擎

Country Status (4)

Country Link
US (1) US20220245487A1 (zh)
EP (1) EP4009233A1 (zh)
CN (1) CN110516714B (zh)
WO (1) WO2021022660A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111209077A (zh) * 2019-12-26 2020-05-29 中科曙光国际信息产业有限公司 深度学习框架设计方法

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11928607B2 (en) * 2020-10-30 2024-03-12 AstrumU, Inc. Predictive learner recommendation platform
US11074509B1 (en) 2020-10-30 2021-07-27 AstrumU, Inc. Predictive learner score
US11847172B2 (en) 2022-04-29 2023-12-19 AstrumU, Inc. Unified graph representation of skills and acumen

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090292755A1 (en) * 2008-05-20 2009-11-26 Raytheon Company Methods and apparatus for signature prediction and feature level fusion
CN107885762A (zh) * 2017-09-19 2018-04-06 北京百度网讯科技有限公司 智能大数据***、提供智能大数据服务的方法和设备
CN109255359A (zh) * 2018-09-27 2019-01-22 南京邮电大学 一种基于复杂网络分析方法的视觉问答问题解决方法
CN109919928A (zh) * 2019-03-06 2019-06-21 腾讯科技（深圳）有限公司 医学影像的检测方法、装置和存储介质
CN109935338A (zh) * 2019-03-07 2019-06-25 平安科技（深圳）有限公司 基于机器学习的数据预测处理方法、装置和计算机设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090292755A1 (en) * 2008-05-20 2009-11-26 Raytheon Company Methods and apparatus for signature prediction and feature level fusion
CN107885762A (zh) * 2017-09-19 2018-04-06 北京百度网讯科技有限公司 智能大数据***、提供智能大数据服务的方法和设备
CN109255359A (zh) * 2018-09-27 2019-01-22 南京邮电大学 一种基于复杂网络分析方法的视觉问答问题解决方法
CN109919928A (zh) * 2019-03-06 2019-06-21 腾讯科技（深圳）有限公司 医学影像的检测方法、装置和存储介质
CN109935338A (zh) * 2019-03-07 2019-06-25 平安科技（深圳）有限公司 基于机器学习的数据预测处理方法、装置和计算机设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111209077A (zh) * 2019-12-26 2020-05-29 中科曙光国际信息产业有限公司 深度学习框架设计方法

Also Published As

Publication number Publication date
WO2021022660A1 (zh) 2021-02-11
US20220245487A1 (en) 2022-08-04
CN110516714B (zh) 2022-04-01
EP4009233A1 (en) 2022-06-08

Similar Documents

Publication Publication Date Title
CN111024708B (zh) 产品缺陷检测数据处理方法、装置、***和设备
CN110610240B (zh) 基于人工智能的虚拟自动化辅助
CN110516714A (zh) 一种特征预测方法、***及引擎
Van der Aalst et al. Business process simulation
US20200097847A1 (en) Hyperparameter tuning using visual analytics in a data science platform
CN108984284A (zh) 基于离线计算平台的dag任务调度方法及装置
CN108711030A (zh) 带有人工智能整合的端到端项目管理平台
CN111985755B (zh) 使用机器学习技术使风险最小化的方法和***
CN110442737A (zh) 基于图数据库的数字孪生方法及***
CN109885624A (zh) 数据处理方法、装置、计算机设备和存储介质
US20200372428A1 (en) Automated and efficient personal transportation vehicle sharing
Mourtzis et al. Knowledge capturing and reuse to support manufacturing of customised products: A case study from the mould making industry
CN107343164A (zh) 视频监控任务的分配方法及装置
Park et al. Investigating a machine breakdown genetic programming approach for dynamic job shop scheduling
CN112149838A (zh) 实现自动构建模型的方法、装置、电子设备和存储介质
CN115423289A (zh) 智能板材加工车间数据处理方法及终端
Markov et al. Looper: An end-to-end ml platform for product decisions
Shahoud et al. A meta learning approach for automating model selection in big data environments using microservice and container virtualization technologies
Grabis et al. Application of Microservices for Digital Transformation of Data-Intensive Business Processes.
Li et al. Learning to bundle proactively for on-demand meal delivery
KR102315428B1 (ko) 데이터 병합을 활용한 프로젝트 관리 방법 및 장치
US20220214864A1 (en) Efficient deployment of machine learning and deep learning model's pipeline for serving service level agreement
WO2022140650A2 (en) Systems and methods for building and deploying machine learning applications
de Smet et al. Queue mining: Combining process mining and queueing analysis to understand bottlenecks, to predict delays, and to suggest process improvements
KR102315432B1 (ko) 데이터 포인터를 활용한 프로젝트 관리 방법 및 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant