CN109978356A - 标注任务分配方法、装置、介质和计算机设备 - Google Patents
标注任务分配方法、装置、介质和计算机设备 Download PDFInfo
- Publication number
- CN109978356A CN109978356A CN201910199040.6A CN201910199040A CN109978356A CN 109978356 A CN109978356 A CN 109978356A CN 201910199040 A CN201910199040 A CN 201910199040A CN 109978356 A CN109978356 A CN 109978356A
- Authority
- CN
- China
- Prior art keywords
- mark
- task
- personnel
- attribute information
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
- G06Q10/06311—Scheduling, planning or task assignment for a person or group
Landscapes
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Engineering & Computer Science (AREA)
- Strategic Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Economics (AREA)
- Operations Research (AREA)
- Game Theory and Decision Science (AREA)
- Development Economics (AREA)
- Marketing (AREA)
- Educational Administration (AREA)
- Quality & Reliability (AREA)
- Tourism & Hospitality (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明提供了一种标注任务分配方法、装置、计算机存储介质和计算机设备；该方法包括：响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单；确定所述待标注任务数据的任务属性信息；获取所述标注人员名单中各个标注人员对应的标注能力属性信息；根据所述各个标注人员对应的标注能力属性信息和所述任务属性信息为各个标注人员分配标注任务。通过本发明技术方案，在分配标注任务时考虑到标注人员自身的标注能力，并为其分配与其标注能力匹配的标注任务，能够显著提高标注人员的标注准确率。
Description
技术领域
本发明涉及数据标注领域，具体而言，本发明涉及一种标注任务分配方法、装置、介质和计算机设备。
背景技术
数据标注即是为数据打标签，打了标签后的数据可以用作机器学***台，由数据众包公司或数据标注平台安排标注人员来对接收到的待标注数据打标签。其中，标注人员为待标注数据打的标签的准确率对于机器最终的识别准确率有深刻影响，因此需要对标注人员的标注准确率进行严格把控。
目前对标注人员的标注准确率的把控通常是在标注人员完成标注任务之后对其标注的标注数据进行准确与否的判断，但是在为标注人员分配标注任务时却通常是将待标注数据平均分配给标注人员，并没有考虑到标注人员身上存在的客观的影响标注准确率的因素。
发明内容
本发明针对现有技术的缺点，提供了一种标注任务分配方法、装置、介质和计算机设备，通过本发明技术方案，在分配标注任务时考虑到标注人员自身的标注能力，并为其分配与其标注能力匹配的标注任务，能够显著提高标注人员的标注准确率。
本发明实施例根据第一方面提供了一种标注任务分配方法，包括：
响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单；
确定所述待标注任务数据的任务属性信息；
获取所述标注人员名单中各个标注人员对应的标注能力属性信息；
根据所述各个标注人员对应的标注能力属性信息和所述任务属性信息为各个标注人员分配标注任务。
进一步地，所述任务属性信息包括所述待标注任务数据的技术标签信息、任务时限信息、任务题型信息、任务数量信息和任务数据类型信息；
所述标注能力属性信息包括多个能力字段序列以及对应的能力值。
进一步地，所述根据所述各个标注人员对应的标注能力属性信息和所述任务属性信息为各个标注人员分配标注任务，包括：
根据所述任务属性信息确定所述待标注任务数据对应的第一关键能力字段序列；
从所述各个标注人员对应的标注能力属性信息中确定所述第一关键能力字段序列对应的第一关键能力值；
根据所述第一关键能力值为所述各个标注人员分配标注任务。
进一步地，所述响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单，之前包括：
获取所有标注人员各自对应的历史标注任务完成信息；
根据所述历史标注任务完成信息为各个标注人员生成对应的标注能力属性信息。
进一步地，所述响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单，之前包括：
接收来自管理者客户端的标注人员名单获取请求，所述标注人员名单获取请求包括待标注任务数据的任务属性信息；
获取所有标注人员对应的标注能力属性信息；
根据所述任务属性信息确定所述待标注任务数据对应的第二关键能力字段序列；
从所述所有标注人员各自对应的标注能力属性信息中确定所述第二关键能力字段序列对应的第二关键能力值；
将所述第二关键能力值高于预设阈值的标注人员作为待定标注人员返回给所述管理者客户端。
进一步地，所述响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单，之前包括：
接收来自管理者客户端的标注人员名单确认指令，所述标注人员名单确认指令包括管理者从所述待定标注人员中选出的指定标注人员信息；
根据所述指定标注人员信息生成标注人员名单；
确定所述管理者客户端的身份标识；
为所述身份标识与所述标注人员名单建立映射关系。
进一步地，所述根据所述各个标注人员对应的标注能力属性信息和所述任务属性信息为各个标注人员分配标注任务，之后包括：
接收标注人员客户端反馈的任务标注结果；
将所述任务标注结果发送给审核客户端，接收所述审核客户端对所述任务标注结果的评分信息；
根据所述评分信息更新所述标识人员客户端对应的标注人员所对应的标注能力属性信息。
本发明实施例根据第二方面提供了一种标注任务分配装置，包括：
数据名单获取模块，用于响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单；
任务属性确定模块，用于确定所述待标注任务数据的任务属性信息；
能力属性获取模块，用于获取所述标注人员名单中各个标注人员对应的标注能力属性信息；
任务分配模块，用于根据所述各个标注人员对应的标注能力属性信息和所述任务属性信息为各个标注人员分配标注任务。
本发明实施例根据第三方面提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述的标注任务分配方法。
本发明实施例根据第四方面提供了一种计算机设备，所述计算机设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现上述的标注任务分配方法。
在本发明实施例中，通过响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单；确定所述待标注任务数据的任务属性信息；获取所述标注人员名单中各个标注人员对应的标注能力属性信息；根据所述各个标注人员对应的标注能力属性信息和所述任务属性信息为各个标注人员分配标注任务，能够在分配标注任务时考虑到标注人员自身的标注能力，并为其分配与其标注能力匹配的标注任务，能够显著提高标注人员的标注准确率。
本发明附加的方面和优点将在下面的描述中部分给出，这些将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
图1为本发明一个实施例的标注任务分配方法流程示意图；
图2为本发明一个实施例的网络拓扑图；
图3为本发明一个实施例的标注任务分配装置的结构示意图；
图4为本发明一种实施例的计算机设备的结构示意图。
具体实施方式
下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本发明，而不能解释为对本发明的限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式，这里使用的“第一”、“第二”仅用于区别同一技术特征，并不对该技术特征的顺序和数量等加以限定。应该进一步理解的是，本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。
本技术领域技术人员可以理解，除非另外定义，这里使用的所有术语(包括技术术语和科学术语)，具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是，诸如通用字典中定义的那些术语，应该被理解为具有与现有技术的上下文中的意义一致的意义，并且除非像这里一样被特定定义，否则不会用理想化或过于正式的含义来解释。
本发明实施例提供了一种标注任务分配方法，以下结合附图对本发明的具体实施方式进行详细介绍。如图1所示，本发明实施例提供的标注任务分配方法包括以下步骤：
S110：响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单。
S120：确定所述待标注任务数据的任务属性信息。
S130：获取所述标注人员名单中各个标注人员对应的标注能力属性信息。
S140：根据所述各个标注人员对应的标注能力属性信息和所述任务属性信息为各个标注人员分配标注任务。
需要先说明的是，如图2所示，管理者客户端可以到云端服务器发布标注任务，而云端服务器在接收到管理者客户端发布的标注任务后，就将标注任务关联的待标注任务数据分配给标注人员客户端，其中，管理者是指有数据需要标注的人员，而标注人员是指对数据进行标注的人员，当标注人员完成对分配到标注任务的标注处理后，标注人员客户端会将标注处理的结果上传到云端服务器，由云端服务器将其进行整理后，发送给给跟标注任务相应的管理者客户端。
在本实施例中，云端服务器在接收到管理者客户端发送的标注任务分配指令之后，获取与所述标注任务分配指令关联的待标注任务数据以及标注人员名单，其中，所述待标注任务数据是管理者客户端上传的到云端服务器的需要标注的原始数据，而所述标注人员名单用于确定要对所述管理者客户端发布的标注任务进行标注处理的标注人员。
之后云端服务器确定所述待标注任务数据的任务属性信息，以及获取所述标注人员名单中各个标注人员对应的标注能力属性信息，最后云端服务器根据所述各个标注人员对应的标注能力属性信息和所述任务属性信息为各个标注人员分配标注任务，从而能够在分配标注任务时考虑到标注人员自身的标注能力，并为其分配与其标注能力匹配的标注任务，进而提高标注人员的标注准确率。
需要说明的是，所述任务属性信息和所述标注能力属性信息的确定方式可以根据具体的应用场景来确定。
在一个可能的具体实施方式中，所述任务属性信息包括所述待标注任务数据的技术标签信息、任务时限信息、任务题型信息、任务数量信息和任务数据类型信息。所述技术标签信息是所述待标注任务数据所属的技术领域信息；所述任务时限信息是管理者客户端发布标注任务时规定的标注任务完成时间长度，比如要求在三天内或一周内完成标注任务等；所述任务题型信息是对所述待标注任务数据进行标注时使用的标注形式；所述任务数量信息是指所述待标注任务数据包含的题目数量；所述任务数据类型字段是指所述待标注任务数据的数据类型。
所述标注人员对应的标注能力属性信息是根据标注人员历史完成的标注任务的完成情况统计出来的信息，其中包括多个能力字段序列以及对应的能力值，所述能力字段序列，用于表示不同的任务要求，而所述能力值包括标注人员在具体的任务要求中能够处理的预估题目数量和标注准确率。
其中，所述能力字段包括技术标签字段、任务题型字段、任务数据类型字段，所述技术标签字段是指标注数据所属的技术领域信息、所述任务题型字段是指对数据标注时使用的标注形式，所述任务数据类型字段是指标注数据的数据类型。每个能力字段中包含若干个具体类型。比如，所述技术标签字段中包含脸龄识别类、情绪识别类、性别识别类等，所述任务题型字段中包含分类标注类、标框标注类、区域标注类等，所述任务数据类型中包括文本、音频、视频、图像等。
具体地，所述能力字段序列由多个能力字段构成，格式可以是技术标签字段-任务题型字段-任务数据类型等形式，比如某个能力字段序列为性别识别类-标框标注类-图像。
在一个实施例中，所述S110：响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单，之前包括：
S210：获取所有标注人员各自对应的历史标注任务完成信息。
S220：根据所述历史标注任务完成信息为各个标注人员生成对应的标注能力属性信息。
在一个实施例中，所述历史标注任务完成信息包括标注人员在预设时间区间内完成的所有标注任务对应的任务属性信息，以及与标注任务对应的标注准确率以及完成处理的题目数量。
具体地，S220：根据所述历史标注任务完成信息为各个标注人员生成对应的标注能力属性信息，包括：
从所述所有标注任务对应的任务属性信息确定与所述各个标注人员对应的多个能力字段序列；
根据所述与标注任务对应的标注准确率以及完成处理的题目数量为所述各个标注人员对应的多个能力字段序列分别确定对应的能力值；
将所述各个标注人员对应的多个能力字段序列，以及各个能力字段序列对应的能力值作为所述各个标注人员对应的标注能力属性信息。
在本实施例中，将所述任务属性信息中的技术标签信息、任务题型信息和任务数据类型信息作为能力字段序列。所述预设时间区间可以由开发人员根据业务应用情况预先配置。所述能力值包括标注人员在具体的任务要求中能够处理的预估题目数量和标注准确率。
比如，标注人员P在一个月内完成了三个标注任务：
标注任务A对应的任务属性信息中，技术标签信息是性别识别类、任务时限信息是3天、任务题型信息是标框标注类、任务数量信息是1000道题目和任务数据类型信息是图像类，该标注人员在3天内标注了900道题目，100道题没有进行标注，标注的900道题目中正确的题目有810道；
标注任务B对应的任务属性信息中，技术标签信息是情绪识别类、任务时限信息是7天、任务题型信息是分类标注类、任务数量信息是3000道题目和任务数据类型信息是图像类，该标注人员在7天内标注了3000道题目，标注的3000道题目中正确的题目有2880道；
标注任务C对应的任务属性信息中，技术标签信息是情绪识别类、任务时限信息是5天、任务题型信息是分类标注类、任务数量信息是2500道题目和任务数据类型信息是图像类，该标注人员,5天内标注了2200道题目，标注的2200道题目中正确的题目有2000道；
其中，可以确定标注任务A对应的能力字段序列为性别识别类-标框标注类-图像类，标注人员P在标注任务A对应的单位时间内完成的题目数量为900道/3天＝300道，由于没有与标注任务A的能力字段序列相同的标注任务，则能力字段序列为性别识别类-标框标注类-图像类对应的能力字段序列的预估题目数量为300道，标注准确率为810/900＝90％；
标注任务B和标注任务C对应的能力字段序列都为情绪识别类-分类标注类-图像类，标注任务B和标注任务C的单位时间内完成的题目数量分别为3000/7＝428.6道，2200/5＝440道，之后将428.6道和440道相加除以同一能力字段序列的标注任务的数量得到最终的预估题目数量为654.3道，标注任务B和标注任务C对应的标注准确率分别为2880/3000＝96％，2000/2200＝91％，将两者相加后除以标注任务数量得到最终的标注准确率为93.5％。
在本实施例中，所述标注能力属性信息能够体现出每个标注人员在各个能力字段序列即不同任务要求下对应的任务处理能力，这部分信息是后续云端服务器在分配标注任务时的重要依据，也是提高标注人员标注准确率的重要基础。
在一个实施例中，所述S140：根据所述各个标注人员对应的标注能力属性信息和所述任务属性信息为各个标注人员分配标注任务，包括：
S141：根据所述任务属性信息确定所述待标注任务数据对应的第一关键能力字段序列。
S142：从所述各个标注人员对应的标注能力属性信息中确定所述第一关键能力字段序列对应的第一关键能力值。
S143：根据所述第一关键能力值为所述各个标注人员分配标注任务。
在本实施例中，由于每个标注人员都有对应的多个能力字段序列，而每个能力字段序列又有对应的能力值，因此云端服务器在接收到待标注任务数据后，可以将所述待标注任务数据对应的任务属性信息中的技术标签信息、任务题型信息和任务数据类型信息作为第一关键能力字段序列，然后将所述第一关键能力字段序列与标注人员名单中的每一个标注人员对应的多个能力字段序列进行匹配，然后将匹配到的能力字段序列对应的能力值作为第一关键能力值，根据各个标注人员对应的第一关键能力值就能为所述各个标注人员分配标注任务，而分配方式可以根据具体应用情况来设置。
在一个可能的具体实施方式中，云端服务器接收到的待标注任务数据对应的任务属性信息为技术标签信息是情绪识别类、任务时限信息是5天、任务题型信息是分类标注类、任务数量信息是10000道题目和任务数据类型信息是图像类，可以确定待标注任务数据对应的关键能力字段序列为情绪识别类-分类标注类-图像类，则平均每天需要完成10000/5＝2000道题目，而标注人员名单中包含有2个标注人员A和B，已经确定A的关键能力值是预估题目数量为1200道，标注准确率为90％，而B的两个数据为1100道和95％由于B的准确率高，则每天为B分配的题目数量是与其预估题目数量一致的题目，即1100道题目，从而保证待标注任务的标注准确率比较高，而剩下的900道题目则分配给A。
在一个实施例中，所述S140：根据所述各个标注人员对应的标注能力属性信息和所述任务属性信息为各个标注人员分配标注任务，之后包括：
S150：接收标注人员客户端反馈的任务标注结果。
S160：将所述任务标注结果发送给审核客户端，接收所述审核客户端对所述任务标注结果的评分信息。
S170：根据所述评分信息更新所述标识人员客户端对应的标注人员所对应的标注能力属性信息。
在本实施例中，标注人员对分配到的标注任务进行标注处理，并将为标注任务中的待标注任务数据做的任务标注结果上传到云端服务器，云端服务器将所述任务标注结果发送给审核客户端，由审核客户端对所述任务标注结果的准确性进行评分，之后将评分信息反馈给云端服务器，云端服务器再根据所述评分信息更新所述标识人员客户端对应的标注人员所对应的标注能力属性信息。
本发明实施例能够实时对标注人员的标注能力属性信息进行更新，保证标注能力属性信息能够反映标注人员的最新任务处理能力，间接提高了标注人员的标注准确率。
在一个实施例中，所述S110：响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单，之前包括：
S410：接收来自管理者客户端的标注人员名单获取请求，所述标注人员名单获取请求包括待标注任务数据的任务属性信息。
S420：获取所有标注人员对应的标注能力属性信息。
S430：根据所述任务属性信息确定所述待标注任务数据对应的第二关键能力字段序列。
S440：从所述所有标注人员各自对应的标注能力属性信息中确定所述第二关键能力字段序列对应的第二关键能力值。
S450：将所述第二关键能力值高于预设阈值的标注人员作为待定标注人员返回给所述管理者客户端。
在本实施例中，所述标注人员名单可以是由管理者来指定，具体地通过管理者客户端向云端服务器发送标注人员名单获取请求，所述标注人员名单获取请求包含的待标注任务数据的任务属性信息需要由管理者确定，而云端服务器接收标注人员名单获取请求之后，就获取已经存储的所有标注人员对应的标注能力属性信息，根据所述任务属性信息确定所述待标注任务数据对应的第二关键能力字段序列，从所述所有标注人员各自对应的标注能力属性信息中确定所述第二关键能力字段序列对应的第二关键能力值，再将所述第二关键能力值高于预设阈值的标注人员作为待定标注人员返回给所述管理者客户端。
需要说明的是，本实施例中云端服务器确定所述第二关键能力字段序列和第二关键能力值的方式与上述实施例中描述的一致，因此在本实施例中不再赘述。
所述预设阈值可以是一个阈值，用于与第二关键能力值中的预估题目数量或标注准确率进行比较的阈值；也可以是两个阈值，分别用于与第二关键能力值中的预估题目数量或标注准确率进行比较的阈值，具体可以根据实际应用场景来设置，或者由管理者选择，并将选择的设置方式包含在所述标注人员名单获取请求中。
基于上述实施例，在一个实施例中，所述S110：响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单，之前包括：
接收来自管理者客户端的标注人员名单确认指令，所述标注人员名单确认指令包括管理者从所述待定标注人员中选出的指定标注人员信息；
根据所述指定标注人员信息生成标注人员名单；
确定所述管理者客户端的身份标识；
为所述身份标识与所述标注人员名单建立映射关系。
在本实施例中，管理者在接收到云端服务器反馈的待定标注人员之后，从中指定让其处理标注人员名单的指定标注人员信息，通过管理者客户端发送给云端服务器，从而云端服务器能够根据所述指定标注人员信息生成标注人员名单，并为所述管理者客户端的身份标识与所述标注人员名单建立映射关系。
在另一个实施例中，如果管理者客户端没有指定处理待标注任务数据的标注人员名单，云端服务器则在接收到管理者客户端的标注任务分配指令之后，确定所述标注任务分配指令关联的待标注任务数据对应的任务属性信息，然后利用所述任务属性信息来从已经存储的所有标注人员中挑选出处理该待标注任务数据的标注人员，并将挑选出来的标注人员的信息生成标注人员名单。
为了更好地理解本发明技术方案，本发明还提供了一种标注任务分配装置，如图3所示，包括以下模块：
数据名单获取模块110，用于响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单。
任务属性确定模块120，用于确定所述待标注任务数据的任务属性信息。
能力属性获取模块130，用于获取所述标注人员名单中各个标注人员对应的标注能力属性信息。
任务分配模块140，用于根据所述各个标注人员对应的标注能力属性信息和所述任务属性信息为各个标注人员分配标注任务。
在一个实施例中，所述任务属性信息包括所述待标注任务数据的技术标签信息、任务时限信息、任务题型信息和任务数据类型信息；
所述标注能力属性信息包括多个能力字段序列以及对应的能力值。
在一个实施例中，所述任务分配模块140，包括：
第一序列确定子模块141，用于根据所述任务属性信息确定所述待标注任务数据对应的第一关键能力字段序列；
第一能力值确定子模块142，用于从所述各个标注人员对应的标注能力属性信息中确定所述第一关键能力字段序列对应的第一关键能力值；
任务分配子模块143，用于根据所述第一关键能力值为所述各个标注人员分配标注任务。
在一个实施例中，本发明提供的标注任务分配装置在执行所述数据名单获取模块110模块对应的功能之前，还执行以下模块对应的功能：
历史完成信息获取模块210，用于获取所有标注人员各自对应的历史标注任务完成信息；
能力属性生成模块220，用于根据所述历史标注任务完成信息为各个标注人员生成对应的标注能力属性信息。
在一个实施例中，本发明提供的标注任务分配装置在执行所述数据名单获取模块110模块对应的功能之前，还执行以下模块对应的功能：
获取请求接收模块410，用于接收来自管理者客户端的标注人员名单获取请求，所述标注人员名单获取请求包括待标注任务数据的任务属性信息；
所有能力属性获取模块420，用于获取所有标注人员对应的标注能力属性信息；
第二序列确定模块430，用于根据所述任务属性信息确定所述待标注任务数据对应的第二关键能力字段序列；
第二能力值确定模块440，用于从所述所有标注人员各自对应的标注能力属性信息中确定所述第二关键能力字段序列对应的第二关键能力值；
待定人员返回模块450，用于将所述第二关键能力值高于预设阈值的标注人员作为待定标注人员返回给所述管理者客户端。
在一个实施例中，本发明提供的标注任务分配装置在执行所述数据名单获取模块110模块对应的功能之前，还执行以下模块对应的功能：
确认指令接收模块310，用于接收来自管理者客户端的标注人员名单确认指令，所述标注人员名单确认指令包括管理者从所述待定标注人员中选出的指定标注人员信息；
人员名单生成模块320，用于根据所述指定标注人员信息生成标注人员名单；
身份标识确定模块330，用于确定所述管理者客户端的身份标识；
映射关系建立模块340，用于为所述身份标识与所述标注人员名单建立映射关系。
在一个实施例中，本发明提供的标注任务分配装置在执行所述任务分配模块140模块对应的功能之后，还执行以下模块对应的功能：
标注结果接收模块150，用于接收标注人员客户端反馈的任务标注结果；
评分信息接收模块160，用于将所述任务标注结果发送给审核客户端，接收所述审核客户端对所述任务标注结果的评分信息；
能力属性更新模块170，用于根据所述评分信息更新所述标识人员客户端对应的标注人员所对应的标注能力属性信息。
在另一个实施例中，如果管理者客户端没有指定处理待标注任务数据的标注人员名单，云端服务器则在接收到管理者客户端的标注任务分配指令之后，确定所述标注任务分配指令关联的待标注任务数据对应的任务属性信息，然后利用所述任务属性信息来从已经存储的所有标注人员中挑选出处理该待标注任务数据的标注人员，并将挑选出来的标注人员的信息生成标注人员名单。
需要说明的是，本发明实施例提供的标注任务分配装置能够实现上述标注任务分配方法实施例所实现的功能，功能的具体实现参照上述标注任务分配方法中的描述，在此不再赘述。
本发明实施例还提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述标注任务分配方法。其中，所述存储介质包括但不限于任何类型的盘(包括软盘、硬盘、光盘、CD-ROM、和磁光盘)、ROM(Read-Only Memory，只读存储器)、RAM(Random AcceSS Memory，随即存储器)、EPROM(EraSable Programmable Read-OnlyMemory，可擦写可编程只读存储器)、EEPROM(Electrically EraSable ProgrammableRead-Only Memory，电可擦可编程只读存储器)、闪存、磁性卡片或光线卡片。也就是，存储介质包括由设备(例如，计算机)以能够读的形式存储或传输信息的任何介质。可以是只读存储器，磁盘或光盘等。
本发明实施例还提供一种计算机设备，所述计算机设备包括：
一个或多个处理器710；
存储装置720，用于存储一个或多个程序700，
当所述一个或多个程序700被所述一个或多个处理器710执行，使得所述一个或多个处理器710实现上述标注任务分配方法。
如图4所示为本发明计算机设备的结构示意图，包括处理器710、存储装置720、输入单元730以及显示单元740等器件。本领域技术人员可以理解，图4示出的结构器件并不构成对所有计算机设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件。存储装置720可用于存储应用程序700以及各功能模块，处理器710运行存储在存储装置720的应用程序700，从而执行设备的各种功能应用以及数据处理。存储装置720可以是内存储器或外存储器，或者包括内存储器和外存储器两者。内存储器可以包括只读存储器、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦写可编程ROM(EEPROM)、快闪存储器、或者随机存储器。外存储器可以包括硬盘、软盘、ZIP盘、U盘、磁带等。本发明所公开的存储装置包括但不限于这些类型的存储装置。本发明所公开的存储装置720只作为例子而非作为限定。
输入单元730用于接收信号的输入，以及接收用户输入的选择语音文件等相关请求。输入单元730可包括触控面板以及其它输入设备。触控面板可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板上或在触控面板附近的操作)，并根据预先设定的程序驱动相应的连接装置；其它输入设备可以包括但不限于物理键盘、功能键(比如播放控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。显示单元740可用于显示用户输入的信息或提供给用户的信息以及计算机设备的各种菜单。显示单元740可采用液晶显示器、有机发光二极管等形式。处理器710是计算机设备的控制中心，利用各种接口和线路连接整个电脑的各个部分，通过运行或执行存储在存储装置720内的软件程序和/或模块，以及调用存储在存储装置内的数据，执行各种功能和处理数据。
在一实施方式中，计算机设备包括一个或多个处理器710，以及一个或多个存储装置720，一个或多个应用程序700，其中所述一个或多个应用程序700被存储在存储装置720中并被配置为由所述一个或多个处理器710执行，所述一个或多个应用程序700配置用于执行以上实施例所述的标注任务分配方法。
应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
应该理解的是，在本发明各实施例中的各功能单元可集成在一个处理模块中，也可以各个单元单独物理存在，也可以两个或两个以上单元集成于一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。
以上所述仅是本发明的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种标注任务分配方法，其特征在于，包括：
响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单；
确定所述待标注任务数据的任务属性信息；
获取所述标注人员名单中各个标注人员对应的标注能力属性信息；
根据所述各个标注人员对应的标注能力属性信息和所述任务属性信息为各个标注人员分配标注任务。
2.如权利要求1所述的标注任务分配方法，其特征在于，
所述任务属性信息包括所述待标注任务数据的技术标签信息、任务时限信息、任务题型信息、任务数量信息和任务数据类型信息；
所述标注能力属性信息包括多个能力字段序列对应的能力值。
3.如权利要求1所述的标注任务分配方法，其特征在于，
所述根据所述各个标注人员对应的标注能力属性信息和所述任务属性信息为各个标注人员分配标注任务，包括：
根据所述任务属性信息确定所述待标注任务数据对应的第一关键能力字段序列；
从所述各个标注人员对应的标注能力属性信息中确定所述第一关键能力字段序列对应的第一关键能力值；
根据所述第一关键能力值为所述各个标注人员分配标注任务。
4.如权利要求1所述的标注任务分配方法，其特征在于，
所述响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单，之前包括：
获取所有标注人员各自对应的历史标注任务完成信息；
根据所述历史标注任务完成信息为各个标注人员生成对应的标注能力属性信息。
5.如权利要求1所述的标注任务分配方法，其特征在于，
所述响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单，之前包括：
接收来自管理者客户端的标注人员名单获取请求，所述标注人员名单获取请求包括待标注任务数据的任务属性信息；
获取所有标注人员对应的标注能力属性信息；
根据所述任务属性信息确定所述待标注任务数据对应的第二关键能力字段序列；
从所述所有标注人员各自对应的标注能力属性信息中确定所述第二关键能力字段序列对应的第二关键能力值；
将所述第二关键能力值高于预设阈值的标注人员作为待定标注人员返回给所述管理者客户端。
6.如权利要求5所述的标注任务分配方法，其特征在于，
所述响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单，之前包括：
接收来自管理者客户端的标注人员名单确认指令，所述标注人员名单确认指令包括管理者从所述待定标注人员中选出的指定标注人员信息；
根据所述指定标注人员信息生成标注人员名单；
确定所述管理者客户端的身份标识；
为所述身份标识与所述标注人员名单建立映射关系。
7.如权利要求1所述的标注任务分配方法，其特征在于，
所述根据所述各个标注人员对应的标注能力属性信息和所述任务属性信息为各个标注人员分配标注任务，之后包括：
接收标注人员客户端反馈的任务标注结果；
将所述任务标注结果发送给审核客户端，接收所述审核客户端对所述任务标注结果的评分信息；
根据所述评分信息更新所述标识人员客户端对应的标注人员所对应的标注能力属性信息。
8.一种标注任务分配装置，其特征在于，包括：
数据名单获取模块，用于响应于标注任务分配指令，获取与所述标注任务分配指令关联的待标注任务数据，以及标注人员名单；
任务属性确定模块，用于确定所述待标注任务数据的任务属性信息；
能力属性获取模块，用于获取所述标注人员名单中各个标注人员对应的标注能力属性信息；
任务分配模块，用于根据所述各个标注人员对应的标注能力属性信息和所述任务属性信息为各个标注人员分配标注任务。
9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-7任一项所述的标注任务分配方法。
10.一种计算机设备，其特征在于，所述计算机设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7任一项所述的标注任务分配方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910199040.6A CN109978356A (zh) | 2019-03-15 | 2019-03-15 | 标注任务分配方法、装置、介质和计算机设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910199040.6A CN109978356A (zh) | 2019-03-15 | 2019-03-15 | 标注任务分配方法、装置、介质和计算机设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109978356A true CN109978356A (zh) | 2019-07-05 |
Family
ID=67079137
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910199040.6A Pending CN109978356A (zh) | 2019-03-15 | 2019-03-15 | 标注任务分配方法、装置、介质和计算机设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109978356A (zh) |
Cited By (29)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110334961A (zh) * | 2019-07-10 | 2019-10-15 | 诺亚阿客(上海)网络科技有限公司 | 一种任务分配方法及*** |
| CN110378617A (zh) * | 2019-07-26 | 2019-10-25 | 中国工商银行股份有限公司 | 一种样本标注方法、装置、存储介质及设备 |
| CN110443476A (zh) * | 2019-07-23 | 2019-11-12 | 国家计算机网络与信息安全管理中心 | 基于知识标注评价的任务分配方法及*** |
| CN110490444A (zh) * | 2019-08-13 | 2019-11-22 | 新华智云科技有限公司 | 标注任务分配方法、装置、***及存储介质 |
| CN110826915A (zh) * | 2019-11-07 | 2020-02-21 | 中国联合网络通信集团有限公司 | 资源调度方法、设备及计算机可读存储介质 |
| CN110991808A (zh) * | 2019-11-06 | 2020-04-10 | 中国建设银行股份有限公司 | 一种任务分配方法和装置 |
| CN111080092A (zh) * | 2019-11-29 | 2020-04-28 | 北京云聚智慧科技有限公司 | 数据标注管理方法及装置、电子设备和可读存储介质 |
| CN111259251A (zh) * | 2020-01-21 | 2020-06-09 | 北京爱数智慧科技有限公司 | 一种推荐标注任务的方法和装置 |
| CN111754121A (zh) * | 2020-06-28 | 2020-10-09 | 北京百度网讯科技有限公司 | 任务分配的方法、装置、设备以及存储介质 |
| CN111881106A (zh) * | 2020-07-30 | 2020-11-03 | 北京智能工场科技有限公司 | 基于ai检验的数据标注和处理方法 |
| CN111899838A (zh) * | 2020-07-16 | 2020-11-06 | 万达信息股份有限公司 | 一种审方任务的分配方法、终端设备和存储介质 |
| CN111985855A (zh) * | 2020-09-11 | 2020-11-24 | 武汉空心科技有限公司 | 一种基于互联网平台的多角色任务分配***及分配方法 |
| CN112330163A (zh) * | 2020-11-09 | 2021-02-05 | 北京元心科技有限公司 | 任务分配方法、***、电子设备及计算机可读存储介质 |
| CN112528609A (zh) * | 2019-08-29 | 2021-03-19 | 北京声智科技有限公司 | 一种标注数据质检方法、***、设备及介质 |
| CN112686009A (zh) * | 2020-12-23 | 2021-04-20 | 中国人民解放军战略支援部队信息工程大学 | 一种语音标注***及方法 |
| CN112884303A (zh) * | 2021-02-02 | 2021-06-01 | 深圳市欢太科技有限公司 | 数据标注方法、装置、电子设备及计算机可读存储介质 |
| CN112988727A (zh) * | 2021-03-25 | 2021-06-18 | 北京百度网讯科技有限公司 | 数据标注方法、装置、设备、存储介质及计算机程序产品 |
| CN112990625A (zh) * | 2019-12-13 | 2021-06-18 | 北京金山云网络技术有限公司 | 标注任务的分配方法、装置及服务器 |
| CN113032649A (zh) * | 2019-12-24 | 2021-06-25 | 华为技术有限公司 | 标注数据的方法、装置、终端设备和存储介质 |
| CN113240126A (zh) * | 2021-01-13 | 2021-08-10 | 深延科技(北京)有限公司 | 标注管理方法、装置、设备及存储介质 |
| CN113255339A (zh) * | 2021-05-06 | 2021-08-13 | 网易（杭州）网络有限公司 | 标注任务的处理方法、装置、电子设备及存储介质 |
| CN113326890A (zh) * | 2021-06-17 | 2021-08-31 | 北京百度网讯科技有限公司 | 标注数据处理方法、相关装置及计算机程序产品 |
| CN113326888A (zh) * | 2021-06-17 | 2021-08-31 | 北京百度网讯科技有限公司 | 标注能力信息确定方法、相关装置及计算机程序产品 |
| CN113435800A (zh) * | 2021-08-26 | 2021-09-24 | 平安科技（深圳）有限公司 | 基于大数据的标注任务执行方法、装置、电子设备及介质 |
| CN113434266A (zh) * | 2020-03-23 | 2021-09-24 | 杭州海康威视数字技术股份有限公司 | 任务分发方法、***、电子设备及介质 |
| CN113449142A (zh) * | 2021-06-30 | 2021-09-28 | 北京百度网讯科技有限公司 | 信息处理方法及装置、电子设备、存储介质及产品 |
| CN113570286A (zh) * | 2021-09-24 | 2021-10-29 | 平安科技（深圳）有限公司 | 基于人工智能的资源分配方法、装置、电子设备及介质 |
| CN113641838A (zh) * | 2021-08-11 | 2021-11-12 | 上海明略人工智能(集团)有限公司 | 用于数据标注的装置及方法、电子设备、可读存储介质 |
| CN115204760A (zh) * | 2022-09-16 | 2022-10-18 | 创新奇智(合肥)科技有限公司 | 一种数据标注方法及装置 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108228320A (zh) * | 2016-12-14 | 2018-06-29 | 平安科技（深圳）有限公司 | 任务分配的方法和装置 |
| CN108846544A (zh) * | 2018-04-27 | 2018-11-20 | 淘然视界(杭州)科技有限公司 | 一种标注任务的分配方法及*** |
| CN109151023A (zh) * | 2018-08-21 | 2019-01-04 | 平安科技（深圳）有限公司 | 任务分配方法、装置及存储介质 |
-
2019
- 2019-03-15 CN CN201910199040.6A patent/CN109978356A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108228320A (zh) * | 2016-12-14 | 2018-06-29 | 平安科技（深圳）有限公司 | 任务分配的方法和装置 |
| CN108846544A (zh) * | 2018-04-27 | 2018-11-20 | 淘然视界(杭州)科技有限公司 | 一种标注任务的分配方法及*** |
| CN109151023A (zh) * | 2018-08-21 | 2019-01-04 | 平安科技（深圳）有限公司 | 任务分配方法、装置及存储介质 |
Cited By (39)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110334961A (zh) * | 2019-07-10 | 2019-10-15 | 诺亚阿客(上海)网络科技有限公司 | 一种任务分配方法及*** |
| CN110443476A (zh) * | 2019-07-23 | 2019-11-12 | 国家计算机网络与信息安全管理中心 | 基于知识标注评价的任务分配方法及*** |
| CN110378617A (zh) * | 2019-07-26 | 2019-10-25 | 中国工商银行股份有限公司 | 一种样本标注方法、装置、存储介质及设备 |
| CN110490444A (zh) * | 2019-08-13 | 2019-11-22 | 新华智云科技有限公司 | 标注任务分配方法、装置、***及存储介质 |
| CN112528609A (zh) * | 2019-08-29 | 2021-03-19 | 北京声智科技有限公司 | 一种标注数据质检方法、***、设备及介质 |
| CN110991808A (zh) * | 2019-11-06 | 2020-04-10 | 中国建设银行股份有限公司 | 一种任务分配方法和装置 |
| CN110991808B (zh) * | 2019-11-06 | 2022-06-28 | 中国建设银行股份有限公司 | 一种任务分配方法和装置 |
| CN110826915A (zh) * | 2019-11-07 | 2020-02-21 | 中国联合网络通信集团有限公司 | 资源调度方法、设备及计算机可读存储介质 |
| CN110826915B (zh) * | 2019-11-07 | 2022-07-29 | 中国联合网络通信集团有限公司 | 资源调度方法、设备及计算机可读存储介质 |
| CN111080092A (zh) * | 2019-11-29 | 2020-04-28 | 北京云聚智慧科技有限公司 | 数据标注管理方法及装置、电子设备和可读存储介质 |
| CN111080092B (zh) * | 2019-11-29 | 2023-04-18 | 北京云聚智慧科技有限公司 | 数据标注管理方法及装置、电子设备和可读存储介质 |
| CN112990625A (zh) * | 2019-12-13 | 2021-06-18 | 北京金山云网络技术有限公司 | 标注任务的分配方法、装置及服务器 |
| CN113032649A (zh) * | 2019-12-24 | 2021-06-25 | 华为技术有限公司 | 标注数据的方法、装置、终端设备和存储介质 |
| CN111259251A (zh) * | 2020-01-21 | 2020-06-09 | 北京爱数智慧科技有限公司 | 一种推荐标注任务的方法和装置 |
| CN113434266A (zh) * | 2020-03-23 | 2021-09-24 | 杭州海康威视数字技术股份有限公司 | 任务分发方法、***、电子设备及介质 |
| CN111754121A (zh) * | 2020-06-28 | 2020-10-09 | 北京百度网讯科技有限公司 | 任务分配的方法、装置、设备以及存储介质 |
| CN111754121B (zh) * | 2020-06-28 | 2024-02-06 | 北京百度网讯科技有限公司 | 任务分配的方法、装置、设备以及存储介质 |
| CN111899838B (zh) * | 2020-07-16 | 2023-11-21 | 万达信息股份有限公司 | 一种审方任务的分配方法、终端设备和存储介质 |
| CN111899838A (zh) * | 2020-07-16 | 2020-11-06 | 万达信息股份有限公司 | 一种审方任务的分配方法、终端设备和存储介质 |
| CN111881106A (zh) * | 2020-07-30 | 2020-11-03 | 北京智能工场科技有限公司 | 基于ai检验的数据标注和处理方法 |
| CN111881106B (zh) * | 2020-07-30 | 2024-03-29 | 北京智能工场科技有限公司 | 基于ai检验的数据标注和处理方法 |
| CN111985855A (zh) * | 2020-09-11 | 2020-11-24 | 武汉空心科技有限公司 | 一种基于互联网平台的多角色任务分配***及分配方法 |
| CN112330163A (zh) * | 2020-11-09 | 2021-02-05 | 北京元心科技有限公司 | 任务分配方法、***、电子设备及计算机可读存储介质 |
| CN112686009A (zh) * | 2020-12-23 | 2021-04-20 | 中国人民解放军战略支援部队信息工程大学 | 一种语音标注***及方法 |
| CN113240126A (zh) * | 2021-01-13 | 2021-08-10 | 深延科技(北京)有限公司 | 标注管理方法、装置、设备及存储介质 |
| CN112884303A (zh) * | 2021-02-02 | 2021-06-01 | 深圳市欢太科技有限公司 | 数据标注方法、装置、电子设备及计算机可读存储介质 |
| US11604766B2 (en) | 2021-03-25 | 2023-03-14 | Beijing Baidu Netcom Science And Technology Co., Ltd. | Method, apparatus, device, storage medium and computer program product for labeling data |
| CN112988727A (zh) * | 2021-03-25 | 2021-06-18 | 北京百度网讯科技有限公司 | 数据标注方法、装置、设备、存储介质及计算机程序产品 |
| CN113255339A (zh) * | 2021-05-06 | 2021-08-13 | 网易（杭州）网络有限公司 | 标注任务的处理方法、装置、电子设备及存储介质 |
| CN113255339B (zh) * | 2021-05-06 | 2023-09-19 | 网易（杭州）网络有限公司 | 标注任务的处理方法、装置、电子设备及存储介质 |
| CN113326890B (zh) * | 2021-06-17 | 2023-07-28 | 北京百度网讯科技有限公司 | 标注数据处理方法、相关装置及计算机程序产品 |
| CN113326888B (zh) * | 2021-06-17 | 2023-10-31 | 北京百度网讯科技有限公司 | 标注能力信息确定方法、相关装置及计算机程序产品 |
| CN113326888A (zh) * | 2021-06-17 | 2021-08-31 | 北京百度网讯科技有限公司 | 标注能力信息确定方法、相关装置及计算机程序产品 |
| CN113326890A (zh) * | 2021-06-17 | 2021-08-31 | 北京百度网讯科技有限公司 | 标注数据处理方法、相关装置及计算机程序产品 |
| CN113449142A (zh) * | 2021-06-30 | 2021-09-28 | 北京百度网讯科技有限公司 | 信息处理方法及装置、电子设备、存储介质及产品 |
| CN113641838A (zh) * | 2021-08-11 | 2021-11-12 | 上海明略人工智能(集团)有限公司 | 用于数据标注的装置及方法、电子设备、可读存储介质 |
| CN113435800A (zh) * | 2021-08-26 | 2021-09-24 | 平安科技（深圳）有限公司 | 基于大数据的标注任务执行方法、装置、电子设备及介质 |
| CN113570286A (zh) * | 2021-09-24 | 2021-10-29 | 平安科技（深圳）有限公司 | 基于人工智能的资源分配方法、装置、电子设备及介质 |
| CN115204760A (zh) * | 2022-09-16 | 2022-10-18 | 创新奇智(合肥)科技有限公司 | 一种数据标注方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109978356A (zh) | 标注任务分配方法、装置、介质和计算机设备 | |
| CN110610240B (zh) | 基于人工智能的虚拟自动化辅助 | |
| US20170337287A1 (en) | Intelligent integrating system for crowdsourcing and collaborative intelligence in human- and device- adaptive query-response networks | |
| CN104657828B (zh) | 数据化和数据匹配方法和代码推荐方法及相关装置 | |
| US20090158161A1 (en) | Collaborative search in virtual worlds | |
| CN106095842B (zh) | 在线课程搜索方法和装置 | |
| CN109831531A (zh) | 求职简历推送方法与装置以及任务推送方法与装置 | |
| CN110471750A (zh) | 定时任务控制方法、装置、介质和计算机设备 | |
| US20210256644A1 (en) | Skill acquisition platform | |
| US9959470B2 (en) | System and method for contexually interpreting image sequences | |
| KR20190023316A (ko) | 대화 모델 기반의 질의응답 시스템 | |
| CN109872795A (zh) | 健身运动管理方法、装置、服务器和存储介质 | |
| CN109829064A (zh) | 媒体资源分享及播放方法和装置、存储介质及电子装置 | |
| CN111246257B (zh) | 视频推荐方法、装置、设备及存储介质 | |
| CN110837549B (zh) | 一种信息处理方法、装置及存储介质 | |
| CN111814443A (zh) | 结合rpa和ai的表格生成方法及装置、计算设备、存储介质 | |
| Brown et al. | Tools and methods for building watson | |
| CN110225102A (zh) | 推送信息的方法、设备及*** | |
| CN110309753A (zh) | 一种赛事进程判别方法、装置和计算机设备 | |
| CN115879469B (zh) | 文本数据处理方法、模型训练方法、装置及介质 | |
| CN111918073A (zh) | 直播间的管理方法和装置 | |
| CN111178846A (zh) | 一种工作流文件生成方法、装置、设备及存储介质 | |
| CN106294395A (zh) | 一种任务处理的方法及装置 | |
| CN115062629A (zh) | 会话信息的识别方法及装置、存储介质、计算机设备 | |
| CN109522203B (zh) | 一种软件产品的评测方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |