CN114817409A - 一种标签生成方法、装置、设备及介质 - Google Patents
一种标签生成方法、装置、设备及介质 Download PDFInfo
- Publication number
- CN114817409A CN114817409A CN202210529372.8A CN202210529372A CN114817409A CN 114817409 A CN114817409 A CN 114817409A CN 202210529372 A CN202210529372 A CN 202210529372A CN 114817409 A CN114817409 A CN 114817409A
- Authority
- CN
- China
- Prior art keywords
- real
- time
- main body
- data
- request
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 238000005192 partition Methods 0.000 claims abstract description 83
- 238000004364 calculation method Methods 0.000 claims abstract description 28
- 230000004044 response Effects 0.000 claims description 25
- 238000004590 computer program Methods 0.000 claims description 15
- 238000010586 diagram Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 230000009471 action Effects 0.000 description 4
- 238000013475 authorization Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000013480 data collection Methods 0.000 description 2
- 239000013307 optical fiber Substances 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
- G06F16/278—Data partitioning, e.g. horizontal or vertical partitioning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/219—Managing data history or versioning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
- G06F16/2379—Updates performed during online database operations; commit processing
- G06F16/2386—Bulk updating operations
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本申请公开了一种标签生成方法、装置、设备及介质,当接收到某一主体的实时数据时,生成第一请求,该第一请求用于请求生成第一主体的实时标签。根据第一请求从实时存储分区中获取第一主体的实时数据以及从历史存储分区中获取第一主体的第一历史数据。根据实时数据和第一历史数据确定第一主体对应的实时标签。其中,实时存储分区和历史存储分区位于同一存储引擎,从而提高读取实时数据和第一历史数据的效率,进而加快实时标签的计算速度。而且,在计算实时标签时,将根据实时数据和一些历史数据进行计算,不再仅根据实时数据,从而使得实时标签更加能够反映第一主体的特征,提高实时标签的准确性。
Description
技术领域
本申请涉及计算机技术领域,具体涉及一种标签生成方法、装置、设备及介质。
背景技术
通常情况下,用户运营中使用的是T-1日主体标签,而T-1日主体标签不能完全反应主体当前的特征。如何在主体的数据发生变化时,能够实时、准确地获取该主体的标签,以便有针对性地应对主体的变化,是急需解决的技术问题。
发明内容
有鉴于此,本申请实施例提供一种标签生成方法、装置、设备及介质,以实现在主体的数据发生变化时,可以获取更加准确的实时标签。
为实现上述目的,本申请实施例提供的技术方案如下:
在本申请第一方面,提供了一种标签生成方法,该方法包括:
响应于获取到第一主体的实时数据,生成第一请求,所述第一请求用于请求所述第一主体的实时标签;
根据所述第一请求从实时存储分区中获取所述第一主体的实时数据以及从历史存储分区中获取所述第一主体的第一历史数据,所述实时存储分区和所述历史存储分区位于同一存储引擎;
根据所述实时数据和所述第一历史数据确定所述第一主体对应的实时标签。
在本申请第二方面,提供了一种标签生成装置,所述装置包括:
生成单元,用于响应于获取到第一主体的实时数据,生成第一请求,所述第一请求用于请求所述第一主体的实时标签;
获取单元,用于根据所述第一请求从实时存储分区中获取所述第一主体的实时数据以及从历史存储分区中获取所述第一主体的第一历史数据,所述实时存储分区和所述历史存储分区位于同一存储引擎;
确定单元,用于根据所述实时数据和所述第一历史数据确定所述第一主体对应的实时标签。
在本申请第三方面,提供了一种电子设备,所述设备包括:处理器和存储器;所述存储器,用于存储指令或计算机程序;所述处理器,用于执行所述存储器中的所述指令或计算机程序,以使得所述电子设备执行第一方面所述的方法。
在本申请第四方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当所述指令在设备上运行时,使得所述设备第一方面所述的方法。
在本申请第五方面,提供了一种计算机程序产品,所述计算机程序产品包括计算机程序/指令,所述计算机程序/指令被处理器执行时实现第一方面所述的方法。
由此可见,本申请实施例具有如下有益效果:
本申请中,当接收到某一主体的实时数据时,生成第一请求,该第一请求用于请求生成第一主体的实时标签。根据第一请求从实时存储分区中获取第一主体的实时数据以及从历史存储分区中获取第一主体的第一历史数据。根据实时数据和第一历史数据确定第一主体对应的实时标签。其中,实时存储分区和历史存储分区位于同一存储引擎,从而提高读取实时数据和第一历史数据的效率,进而加快实时标签的计算速度。而且,在计算实时标签时,将根据实时数据和一些历史数据进行计算,不再仅根据实时数据,从而使得实时标签更加能够反映第一主体的特征,提高实时标签的准确性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种标签生成方法流程图;
图2为本申请实施例提供的一种应用场景示意图;
图3为本申请实施例提供的另一种应用场景示意图;
图4为本申请实施例提供的一种标签生成装置结构示意图;
图5为本申请实施例提供的一种电子设备结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请为提高实时标签计算的速度和准确性,提供了一种标签生成方法,具体为,将主体的实时数据和历史数据存储在同一列式存储区域的不同分区,且在计算该主体的实时标签时,将利用该主体对应的实时数据和部分历史数据进行确定,从而提高实时标签的准确性。由于实时数据和历史数据存储在同一列式存储区域中,从使得在读取数据时,提高读取效率,进而提高实时标签的计算速度。
其中,主体的具体表现形式可以根据实际应用的场景的需要进行确定,例如主体可以为人、物体等。当主体为人时,其对应的数据是在用户授权的前提下获取的。
可以理解的是,在使用本申请各实施例公开的技术方案之前,均应当依据相关法律法规通过恰当的方式对本申请所涉及个人信息的类型、使用范围、使用场景等告知用户并获得用户的授权。
例如,在响应于接收到用户的主动请求时,向用户发送提示信息,以明确地提示用户,其请求执行的操作将需要获取和使用到用户的个人信息。从而,使得用户可以根据提示信息来自主地选择是否向执行本公开技术方案的操作的电子设备、应用程序、服务器或存储介质等软件或硬件提供个人信息。
作为一种可选的但非限定性的实现方式,响应于接收到用户的主动请求,向用户发送提示信息的方式例如可以是弹窗的方式,弹窗中可以以文字的方式呈现提示信息。此外,弹窗中还可以承载供用户选择“同意”或者“不同意”向电子设备提供个人信息的选择控件。
可以理解的是,上述通知和获取用户授权过程仅是示意性的,不对本公开的实现方式构成限定,其它满足相关法律法规的方式也可应用于本公开的实现方式中。
为便于理解本申请实施例提供的技术方案,下面将结合附图进行说明。
参见图1,该图为本申请实施例提供的一种标签生成方法,该方法可以由标签生成设备执行,该标签生成设备可以为服务器,也可以为电子设备,还可以为其他设备,在此不作限制。其中,服务器可以是云服务器或者服务器集群等具有存储及计算功能的设备。电子设备可以包括移动电话、平板电脑、台式计算机、笔记本电脑、车载终端、可穿戴电子设备、一体机、智能家居设备等具有通信功能的设备,也可以是虚拟机或者模拟器模拟的设备。如图1所示,该方法可以包括如下步骤:
S101:响应于获取到第一主体的实时数据,生成第一请求,该第一请求用于请求生成第一主体的实时标签。
本实施例中,当标签生成设备获取到第一主体的一条实时数据时,则生成第一请求,以通过该第一请求触发生成第一主体的实时标签。即,标签生成设备可以实时检测各主体的实时数据,当获取到某一主体的实时数据时,则触发生成该主体的实时标签。
可选地,响应于获取到第一主体的实时数据,获取该第一主体的主体标识;将第一主体的标识添加主体标识队列;根据主体标识队列生成第一请求。其中,主体表述队列用于触发实时标签的计算。即,当标签生成设备获取到第一主体的实时数据时,通过该实时数据中的某些信息确定第一主体的主体标识,该主体标识用于唯一地指示第一主体。在获取第一主体的主体标识后,将该主体标识添加到主体标识队列。标签生成设备在监测到主体标识队列中有新增的主体标识时,则表明有新增的实时数据,则根据主体标识队列生成第一请求。其中,第一请求中可以包括第一主体的主体标识。即,本实施例通过采集主体标识触发实时标签的计算。
可选地,考虑到如果每来一条实时数据均触发实时标签的计算,将占用设备资源,基于此,本实施例通过积累小批量的实时数据后,触发实时标签计算,以提高每秒查询率(Queries-per-second,QPS)。具体地,响应于获取到第一主体的实时数据且请求时间到达预设时间,生成第一请求。该第一请求中包括预设时间之前所获取的任一实时数据所对应的主体标识。或者,响应于获取到实时数据的第一主体的数量达到预设数量且请求时间尚未到达预设时间,生成第一请求。其中,第一请求中包括预设数量个主体的主体标识。其中,预设时间和预设数量可以根据实际应用情况进行设定,本实施例在此不再赘述。
即,将预设时间内积累的主体标识进行批量请求或将预设时间内累计到预设数量的主体标识进行批量请求。例如,考虑到实时标签的时效性较高,可以设备预设时间为200毫秒、预设数量为100,如果200毫秒内累计到100个主体标识,则批量请求;如果200毫秒没有累计到100个主体标识,则到时间后也批量去请求,确保时效性的情况下,将访问存储空间的压力降到最低。
S102:根据第一请求从实时存储分区中获取第一主体的实时数据以及从历史存储分区中获取第一主体的第一历史数据。
本实施例中,将用于存储主体的数据的存储引擎划分为实时存储分区和历史存储分区,从而利用实时存储分区存储主体的实时数据和历史数据。标签生成设备根据第一请求从实时存储分区中获取第一主体的实施数据以及从历史存储分区中获取第一主体的第一历史数据。其中,实时存储分区所存储的实时数据的时间根据实际情况进行设定,例如,实时存储分区用于存储当天所产生的数据。
可选地,存储引擎为列式存储引擎,通过列式存储引擎存储数据可以提高后续查询速度,提高实时标签的计算效率。例如,列式存储引擎为clickhouse,则将一张clickhouse表划分为实时存储分区和历史存储分区。
可选地,由于在大数据场景下,通常采用分布式存储方式存储所获取的数据,为确保同一主体不同时刻的数据存储在同一存储节点上,本实施例将采用分桶的方式对各主体的数据进行存储,具体地,响应于获取到某一主体的实时数据,确定该实施数据对应的主体标识;根据该主体标识确定该主体对应的目标实时存储分区;将该实时数据存储到目标实时存储分区中。具体地,响应于实时数据对应的主体标识为第一主体的主体标识,将实时数据存储至第一实时存储分区;响应于实时数据对应的主体标识为第二主体的主体标识,将实时数据存储至第二实时存储分区。
同理,对于历史数据,确定该历史数据对应的主体标识;根据该主体标识确定目标历史存储分区;将历史数据存储至该目标历史存储分区。
例如图2所示的分桶示意图,对于离线业务数据,将进行T+1的方式计算,在获取到历史数据后,计算该历史数据对应的主体标识(one id),通过哈希计算确定其对应的存储区域。当hash(one id)%2=0时,该历史数据被存储到clickhouse local 0中;当hash(oneid)%2=1时,该历史数据被存储到clickhouse local 1中;当hash(one id)%2=2时,该历史数据被存储到clickhouse local 2中,依次类推。对于实时数据,也需计算该实时数据对应的主体标识(one id),并通过哈希计算确定其对应的存储区域。通过图2可知,对应同一主体标识的历史数据和实时数据将被存储到同一clickhouse local表中。而且,对于实时数据,还将根据主体标识确定其对应的id流,以便将该主体标识添加到对应的id流中,进而触发实时标签的计算。
需要说明的是,为提高实时标签的计算速度,可以在分桶的前提下,做批量请求。即将主体标识进行汇聚,定时定量去请求查询clickhouse,从而一次性获取一批主体的实时标签。
可选地,在根据第一请求从实时存储分区中获取第一主体的实时数据时,根据第一请求中的主体标识确定第一主体对应的第一实时存储分区;从第一实时存储分区中获取第一主体的实施数据。其中,第一实时存储分区用于存储第一主体的实时数据。即,某一主体的实时数据存储在自身对应的实时存储分区中。
可选地,在根据第一请求从历史存储分区中获取第一主体的历史数据时,根据第一请求中的主体标识确定第一主体对应的第一历史存储分区;从第一历史存储分区中获取第一主体的第一历史数据。其中,第一历史存储分区用于存储第一主体的第一历史数据。即,某一主体的历史数据存储在自身对应的历史存储分区中。
其中,所获取的第一历史数据是根据实时标签计算规则确定的,例如,实时标签计算规则为获取前6天的历史数据,则第一历史数据为第一历史存储分区中第一主体前6天的历史数据。再例如,实时标签计算规则为获取前10天的历史数据,则第一历史数据为第一历史存储分区中第一主体前10天的历史数据。
S103:根据实时数据和第一历史数据确定第一主体对应的实时标签。
在获取第一主体对应的实时数据和第一历史数据后,根据该实时数据和第一历史数据确定第一主体对应的实时标签。
可选地,在确定出第一书体对应的实时标签后,将该实时标签存储在实时标签集合中。
可选地,本实施例还支持离线标签的计算,具体地,响应于用户的触发操作,生成第二请求,该第二请求用于请求第一主体的离线标签;根据第二请求从历史存储分区中获取第一主体的第二历史数据;根据第二历史数据确定第一主体对应的离线标签。其中,第二历史数据是根据离线标签计算规则确定的,第二历史数据与第一历史数据可以相同,也可以不同。例如离线标签计算规则为根据前1个月的历史数据确定离线标签,则第二历史数据为第一主体在前1个月所产生的数据。在获取离线标签后,可以将离线标签存储至离线标签集合中。
另外,为避免所存储的实时标签与离线标签重合,浪费存储空间,在存储实时标签时,先将第一主体的实时标签与第一主体的离线标签进行比较,响应于二者不同,则将第一主体的实时标签存储在实时标签集合中。
在实际应用时,当用户需要获取第一主体的实时标签时,从实时标签集合中读取第一主体的实时标签;当用户需要获取第一主体的离线标签时,从离线标签集合中读取第一主体的离线标签。
可见,当接收到某一主体的实时数据时,生成第一请求,该第一请求用于请求生成第一主体的实时标签。根据第一请求从实时存储分区中获取第一主体的实时数据以及从历史存储分区中获取第一主体的第一历史数据。根据实时数据和第一历史数据确定第一主体对应的实时标签。其中,实时存储分区和历史存储分区位于同一存储引擎,从而提高读取实时数据和第一历史数据的效率,进而加快实时标签的计算速度。而且,在计算实时标签时,将根据实时数据和一些历史数据进行计算,不再仅根据实时数据,从而使得实时标签更加能够反映第一主体的特征,提高实时标签的准确性。
为便于理解本申请,参见图3所示的应用场景示意图,在该图中共存在3个主体的实时数据,每个主体的实时数据的通路为kafka-etl-kafka-数据存储-实时标签计算。即每个主体的实时数据的主体标识均被加入到id流中,从而触发标签计算。由于数据存储采用列式存储引擎,可以支持多个主体的实时数据的存储。
基于上述方法实例,本申请实施例提供了一种标签生成装置,下面将结合附图进行说明。
参见图4,该图为本申请实施例提供的一种标签生成装置结构图,如图4所示,该装置400可以包括:生成单元401、获取单元402和确定单元403。
生成单元401,用于响应于获取到第一主体的实时数据,生成第一请求,所述第一请求用于请求所述第一主体的实时标签;
获取单元402,用于根据所述第一请求从实时存储分区中获取所述第一主体的实时数据以及从历史存储分区中获取所述第一主体的第一历史数据,所述实时存储分区和所述历史存储分区位于同一存储引擎;
确定单元403,用于根据所述实时数据和所述第一历史数据确定所述第一主体对应的实时标签。
在一种可选的实现方式中,所述生成单元401,具体用于响应于获取到第一主体的实时数据,获取所述第一主体的主体标识;将所述第一主体的主体标识添加至主体标识队列;根据所述主体标识队列生成第一请求,所述主体标识队列用于触发实时标签的计算。
在一种可选的实现方式中,所述获取单元402,具体用于根据所述第一请求中的主体标识确定所述第一主体对应的第一实时存储分区,所述第一实时存储分区用于存储所述第一主体的实时数据;从所述第一实时存储分区中获取所述第一主体的实时数据。
在一种可选的实现方式中,所述装置还包括:存储单元;
所述确定单元403,还用于响应于获取到实时数据,确定所述实时数据对应的主体标识;
所述存储单元,用于响应于所述实时数据对应的主体标识为第一主体的主体标识,将所述实时数据存储至所述第一实时存储分区。
在一种可选的实现方式中,所述生成单元401,具体用于响应于获取到第一主体的实时数据且请求时间到达预设时间,生成第一请求;或者,响应于获取到实时数据的第一主体的数量达到预设数量且请求时间尚未到达所述预设时间,生成第一请求。
在一种可选的实现方式中,所述获取单元402,具体用于根据所述第一请求中的主体标识确定所述第一主体对应的第一历史存储分区,所述第一历史存储分区用于存储所述第一主体的第一历史数据;从所述第一历史存储分区中获取所述第一主体的第一历史数据。
在一种可选的实现方式中,所述装置还包括:存储单元;
所述确定单元403,还用于针对任一历史数据,确定所述历史数据对应的主体标识;
所述存储单元,用于响应于所述历史数据对应的主体标识为所述第一主体的主体标识,将所述历史数据存储至所述第一历史存储分区中。
在一种可选的实现方式中,所述生成单元401,还用于响应于用户的触发操作,生成第二请求,所述第二请求用于请求所述第一主体的离线标签;
所述获取单元402,还用于根据所述第二请求从所述历史存储分区中获取所述第一主体的第二历史数据;
所述确定单元403,还用于根据所述第二历史数据确定所述第二主体对应的离线标签。
在一种可选的实现方式中,所述装置还包括:存储单元;
所述存储单元,还用于将所述第一主体对应的实时标签存储在实时标签集合中。
在一种可选的实现方式中,所述存储单元,具体用于响应于所述第一主体对应的实时标签与离线标签不同时,将所述第一主体的实时标签存储在实时标签集合中。
需要说明的是,本实施例中各个单元的实现可以参见上述方法实施例中的相关描述,本实施例在此不再赘述。
本申请实施例中对单元的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。本申请实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。例如,上述实施例中,处理单元和发送单元可以是同一个单元,也可以是不同的单元。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
参见图5,其示出了适于用来实现本申请实施例的电子设备500的结构示意图。本申请实施例中的终端设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(Personal Digital Assistant,个人数字助理)、PAD(portable android device,平板电脑)、PMP(Portable Media Player,便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV(television,电视机)、台式计算机等等的固定终端。图5示出的电子设备仅仅是一个示例,不应对本申请实施例的功能和使用范围带来任何限制。
如图5所示,电子设备500可以包括处理装置(例如中央处理器、图形处理器等)501,其可以根据存储在只读存储器(ROM)502中的程序或者从存储装置508加载到随机访问存储器(RAM)503中的程序而执行各种适当的动作和处理。在RAM503中,还存储有电子设备500操作所需的各种程序和数据。处理装置501、ROM 502以及RAM 503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。
通常,以下装置可以连接至I/O接口505:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置506;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置507;包括例如磁带、硬盘等的存储装置508;以及通信装置509。通信装置509可以允许电子设备500与其他设备进行无线或有线通信以交换数据。虽然图5示出了具有各种装置的电子设备500,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本申请的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本申请的实施例包括一种计算机程序产品,其包括承载在非暂态计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置509从网络上被下载和安装,或者从存储装置508被安装,或者从ROM502被安装。在该计算机程序被处理装置501执行时,执行本申请实施例的方法中限定的上述功能。
本申请实施例提供的电子设备与上述实施例提供的方法属于同一发明构思,未在本实施例中详尽描述的技术细节可参见上述实施例,并且本实施例与上述实施例具有相同的有益效果。
本申请实施例提供一种计算机可读介质,其上存储有计算机程序,其中,所述程序被处理器执行时实现如上述任一实施例所述的方法。
需要说明的是,本申请上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行***、装置或者器件使用或者与其结合使用。而在本申请中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
在一些实施方式中,客户端、服务器可以利用诸如HTTP(Hyper Text TransferProtocol,超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信,并且可以与任意形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”),广域网(“WAN”),网际网(例如,互联网)以及端对端网络(例如,ad hoc端对端网络),以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备执行上述方法。
可以以一种或多种程序设计语言或其组合来编写用于执行本申请的操作的计算机程序代码,上述程序设计语言包括但不限于面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本申请各种实施例的***、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的***来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元/模块的名称在某种情况下并不构成对该单元本身的限定,例如,语音数据采集模块还可以被描述为“数据采集模块”。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上***(SOC)、复杂可编程逻辑设备(CPLD)等等。
在本申请的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行***、装置或设备使用或与指令执行***、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体***、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
需要说明的是,本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的***或装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
应当理解,在本申请中,“至少一个(项)”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,用于描述关联对象的关联关系,表示可以存在三种关系,例如,“A和/或B”可以表示:只存在A,只存在B以及同时存在A和B三种情况,其中A,B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达,是指这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a,b或c中的至少一项(个),可以表示:a,b,c,“a和b”,“a和c”,“b和c”,或“a和b和c”,其中a,b,c可以是单个,也可以是多个。
还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (13)
1.一种标签生成方法,其特征在于,所述方法包括:
响应于获取到第一主体的实时数据,生成第一请求,所述第一请求用于请求所述第一主体的实时标签;
根据所述第一请求从实时存储分区中获取所述第一主体的实时数据以及从历史存储分区中获取所述第一主体的第一历史数据,所述实时存储分区和所述历史存储分区位于同一存储引擎;
根据所述实时数据和所述第一历史数据确定所述第一主体对应的实时标签。
2.根据权利要求1所述的方法,其特征在于,所述响应于获取到第一主体的实时数据,生成第一请求,包括:
响应于获取到第一主体的实时数据,获取所述第一主体的主体标识;
将所述第一主体的主体标识添加至主体标识队列;
根据所述主体标识队列生成第一请求,所述主体标识队列用于触发实时标签的计算。
3.根据权利要求1或2所述的方法,其特征在于,所述根据所述第一请求从实时存储分区中获取所述第一主体的实时数据,包括:
根据所述第一请求中的主体标识确定所述第一主体对应的第一实时存储分区,所述第一实时存储分区用于存储所述第一主体的实时数据;
从所述第一实时存储分区中获取所述第一主体的实时数据。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
响应于获取到实时数据,确定所述实时数据对应的主体标识;
响应于所述实时数据对应的主体标识为第一主体的主体标识,将所述实时数据存储至所述第一实时存储分区。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述响应于获取到第一主体的实时数据,生成第一请求,包括:
响应于获取到第一主体的实时数据且请求时间到达预设时间,生成第一请求;或者,
响应于获取到实时数据的第一主体的数量达到预设数量且请求时间尚未到达所述预设时间,生成第一请求。
6.根据权利要求1或2所述的方法,其特征在于,所述根据所述第一请求从历史存储分区中获取所述第一主体的第一历史数据,包括:
根据所述第一请求中的主体标识确定所述第一主体对应的第一历史存储分区,所述第一历史存储分区用于存储所述第一主体的第一历史数据;
从所述第一历史存储分区中获取所述第一主体的第一历史数据。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
针对任一历史数据,确定所述历史数据对应的主体标识;
响应于所述历史数据对应的主体标识为所述第一主体的主体标识,将所述历史数据存储至所述第一历史存储分区中。
8.根据权利要求1所述的方法,其特征在于,所述方法还包括:
响应于用户的触发操作,生成第二请求,所述第二请求用于请求所述第一主体的离线标签;
根据所述第二请求从所述历史存储分区中获取所述第一主体的第二历史数据;
根据所述第二历史数据确定所述第二主体对应的离线标签。
9.根据权利要求1所述的方法,其特征在于,所述方法还包括:
将所述第一主体对应的实时标签存储在实时标签集合中。
10.根据权利要求9所述的方法,所述将所述第一主体对应的实时标签存储在实时标签集合中,包括:
响应于所述第一主体对应的实时标签与离线标签不同时,将所述第一主体的实时标签存储在实时标签集合中。
11.一种标签生成装置,其特征在于,所述装置包括:
生成单元,用于响应于获取到第一主体的实时数据,生成第一请求,所述第一请求用于请求所述第一主体的实时标签;
获取单元,用于根据所述第一请求从实时存储分区中获取所述第一主体的实时数据以及从历史存储分区中获取所述第一主体的第一历史数据,所述实时存储分区和所述历史存储分区位于同一存储引擎;
确定单元,用于根据所述实时数据和所述第一历史数据确定所述第一主体对应的实时标签。
12.一种电子设备,其特征在于,所述设备包括:处理器和存储器;
所述存储器,用于存储指令或计算机程序;
所述处理器,用于执行所述存储器中的所述指令或计算机程序,以使得所述电子设备执行权利要求1-10任一项所述的方法。
13.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有指令,当所述指令在设备上运行时,使得所述设备执行权利要求1-10任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210529372.8A CN114817409A (zh) | 2022-05-16 | 2022-05-16 | 一种标签生成方法、装置、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210529372.8A CN114817409A (zh) | 2022-05-16 | 2022-05-16 | 一种标签生成方法、装置、设备及介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114817409A true CN114817409A (zh) | 2022-07-29 |
Family
ID=82515771
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210529372.8A Pending CN114817409A (zh) | 2022-05-16 | 2022-05-16 | 一种标签生成方法、装置、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114817409A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115062233A (zh) * | 2022-08-18 | 2022-09-16 | 中航信移动科技有限公司 | 一种用于民航数据的组合标签生成方法 |
-
2022
- 2022-05-16 CN CN202210529372.8A patent/CN114817409A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115062233A (zh) * | 2022-08-18 | 2022-09-16 | 中航信移动科技有限公司 | 一种用于民航数据的组合标签生成方法 |
CN115062233B (zh) * | 2022-08-18 | 2022-11-04 | 中航信移动科技有限公司 | 一种用于民航数据的组合标签生成方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109299348B (zh) | 一种数据查询方法、装置、电子设备及存储介质 | |
CN111198859B (zh) | 数据处理方法、装置、电子设备及计算机可读存储介质 | |
CN111800513B (zh) | 用于推送信息的方法、装置、电子设备计算机可读介质 | |
CN111163324B (zh) | 信息处理方法、装置和电子设备 | |
CN112379982B (zh) | 任务处理方法、装置、电子设备及计算机可读存储介质 | |
CN110781373A (zh) | 榜单更新方法、装置、可读介质和电子设备 | |
CN111432001B (zh) | 用于跳转场景的方法、装置、电子设备和计算机可读介质 | |
CN109933508B (zh) | 用于发送信息的方法和装置 | |
CN111309496A (zh) | 延时任务实现方法、***、装置、设备、存储介质 | |
EP3879795A1 (en) | Method and apparatus for acquiring information, device, medium and computer program product | |
CN114817409A (zh) | 一种标签生成方法、装置、设备及介质 | |
CN113139082A (zh) | 多媒体内容处理方法、装置、设备及介质 | |
CN111798251A (zh) | 房源数据的验证方法、装置和电子设备 | |
CN114827750B (zh) | 视角的预测方法、装置、设备及存储介质 | |
CN111274104B (zh) | 数据处理方法、装置、电子设备及计算机可读存储介质 | |
CN111628913B (zh) | 在线时长的确定方法、装置、可读介质和电子设备 | |
CN111949528A (zh) | 内存泄漏的检测方法、装置、电子设备和存储介质 | |
CN111222048A (zh) | 用户数量的查询计算方法、装置、电子设备、及存储介质 | |
CN115185667B (zh) | 可视化应用的加速方法、装置、电子设备和存储介质 | |
CN112799863A (zh) | 用于输出信息的方法和装置 | |
CN111047229A (zh) | 一种订单配送信息的处理方法和*** | |
CN113495908B (zh) | 一种数据统计方法和装置 | |
CN111625707B (zh) | 推荐应答方法、装置、介质和设备 | |
CN113554385B (zh) | 配送机器人控制方法、装置、电子设备和计算机可读介质 | |
CN110855767B (zh) | 一种操作请求的响应方法、装置、设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |