CN112181755A - 一种确定搜索服务中参数阈值的方法及相关设备 - Google Patents
一种确定搜索服务中参数阈值的方法及相关设备 Download PDFInfo
- Publication number
- CN112181755A CN112181755A CN201910590186.3A CN201910590186A CN112181755A CN 112181755 A CN112181755 A CN 112181755A CN 201910590186 A CN201910590186 A CN 201910590186A CN 112181755 A CN112181755 A CN 112181755A
- Authority
- CN
- China
- Prior art keywords
- search
- parameter
- parameter threshold
- server
- preset
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 102
- 230000008569 process Effects 0.000 claims abstract description 37
- 230000008859 change Effects 0.000 abstract description 9
- 238000012423 maintenance Methods 0.000 abstract description 5
- 238000012544 monitoring process Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 238000012545 processing Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 230000004044 response Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000013479 data entry Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/3024—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a central processing unit [CPU]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computing Systems (AREA)
- Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Debugging And Monitoring (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种确定搜索服务中参数阈值的方法及相关设备,其中,确定搜索服务中参数阈值的方法包括:实时获取搜索服务器在提供搜索服务过程中的性能数据;确定所述性能数据所对应的性能指标;将所述性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值;将所述目标搜索参数的第一参数阈值发送给所述搜索服务器,以使所述搜索服务器根据所述目标搜索参数的第一参数阈值提供搜索服务。本发明将目标搜索参数的第一参数阈值与搜索服务中搜索服务器的实时性能数据相关联,实现动态变化,不仅可以有效的调整搜索服务器的负荷,而且参数阈值的改变完全自动,过程简单、易于维护。
Description
技术领域
本发明涉及计算机技术领域,特别涉及一种确定搜索服务中参数阈值的方法及相关设备。
背景技术
在进行在线搜索召回时,考虑到数据量的庞大,一般会在配置文件或者相关代码中设置搜索服务中的一些参数的阈值,例如设置搜索服务中遍历数据量的阈值,当搜索过程中遍历的数据量达到设置的上述阈值时不再遍历其他的数据,以达到减少搜索服务器负荷的目的。
相关技术中,搜索服务中的一些参数的阈值均是通过配置文件或者在相关代码中设置,这种设置方式使得上述参数的阈值比较固化,一旦设置后,在进行线上搜索服务时只能使用固化的参数阈值,如果需要使用新的参数阈值,则需要修改相关代码或者修改配置文件,并且还需要重新发布服务,过程繁琐、耗时长而且不易维护。
发明内容
为了解决现有技术的问题,本发明实施例提供了一种确定搜索服务中参数阈值的方法及相关设备。所述技术方案如下:
一方面,提供了一种确定搜索服务中参数阈值的方法,所述方法包括:
实时获取搜索服务器在提供搜索服务过程中的性能数据;
确定所述性能数据所对应的性能指标;
将所述性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值;
将所述目标搜索参数的第一参数阈值发送给所述搜索服务器,以使所述搜索服务器根据所述目标搜索参数的第一参数阈值提供搜索服务。
一方面,提供了一种确定搜索服务中参数阈值的方法,所述方法包括:
阈值服务器实时获取搜索服务器在提供搜索服务过程中的性能数据,确定所述性能数据所对应的性能指标,将所述性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值,将所述目标搜索参数的第一参数阈值发送给所述搜索服务器;
所述搜索服务器接收所述目标搜索参数的第一参数阈值;响应于搜索服务提供请求,根据所述目标搜索参数的第一参数阈值提供所述搜索服务。
另一方面,提供了一种确定搜索服务中参数阈值的装置,所述装置包括:
第一获取模块,用于实时获取搜索服务器在提供搜索服务过程中的性能数据;
第一确定模块,用于确定所述性能数据所对应的性能指标;
生成模块,用于将所述性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值;
第一发送模块,用于将所述目标搜索参数的第一参数阈值发送给所述搜索服务器,以使所述搜索服务器根据所述目标搜索参数的第一参数阈值提供搜索服务。
可选的,所述装置还包括:
第二获取模块,用于响应于参数阈值输入操作,获取输入的预设搜索参数的预设参数阈值;
相应的,所述第一发送模块包括:
第二确定模块,用于确定所述目标搜索参数中与所述预设搜索参数相对应的候选搜索参数;
替换模块,用于将所述候选搜索参数的第一参数阈值替换为所述预设搜索参数的预设参数阈值;
第一发送子模块,用于将替换后的所述目标搜索参数的第一参数阈值发送给所述搜索服务器。
可选的,所述第一发送子模块,具体用于:响应于所述搜索服务器每隔预设时间间隔发送的搜索参数阈值获取请求,将所述目标搜索参数的第一参数阈值发送给所述搜索服务器;或者,每隔预设时间间隔将所述目标搜索参数的第一参数阈值发送给所述搜索服务器。
可选的,所述性能数据包括:单位时间段内的搜索服务次数、单位时间段内的多个时间戳对应的CPU占用率;
相应的,所述第一确定模块包括:
第三确定模块,用于根据所述单位时间段内的搜索服务次数,确定单次搜索服务的耗时;
第四确定模块,用于根据所述单位时间段内的多个时间戳对应的CPU占用率,确定平均CPU占用率;
第五确定模块,用于将所述单次搜索服务的耗时和所述平均CPU占用率作为所述性能指标。
可选的,所述生成模块包括:
第一判断模块,用于判断所述性能指标是否与预设性能指标相匹配;
第六确定模块,用于在第一判断模块的判断的结果为是时,确定比对结果满足预设条件;
第一生成子模块,用于生成目标搜索参数的第一参数阈值。
可选的,所述第一生成子模块包括:
第三获取模块,用于获取所述目标搜索参数的当前参数阈值;
第二判断模块,用于判断所述当前参数阈值是否达到目标极值;
第二生成子模块,用于在第二判断模块的判断的结果为否时,根据所述当前参数阈值与预设调整值生成所述目标搜索参数的第一参数阈值。
另一方面,提供了一种确定搜索服务中参数阈值的***,所述***包括阈值服务器和搜索服务器,其中,
所述阈值服务器,用于实时获取搜索服务器在提供搜索服务过程中的性能数据,确定所述性能数据所对应的性能指标,将所述性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值,将所述目标搜索参数的第一参数阈值发送给所述搜索服务器;
所述搜索服务器,用于接收所述目标搜索参数的第一参数阈值;响应于搜索服务提供请求,根据所述目标搜索参数的第一参数阈值提供所述搜索服务。
可选的,所述搜索服务器还用于:获取搜索过程中所述目标搜索参数的实时参数值;判断所述目标搜索参数的实时参数值是否与所述第一参数阈值相匹配;在判断的结果为是时,结束搜索并获取搜索结果;返回所述搜索结果。
另一方面,提供了一种服务器,包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现上述确定搜索服务中参数阈值的方法。
另一方面,提供了一种计算机可读存储介质,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如上述的确定搜索服务中参数阈值的方法。
本发明实施例的阈值服务器通过实时获取搜索服务器在提供搜索服务过程中的性能数据,确定该性能数据所对应的性能指标,并将性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值,将该目标搜索参数的第一参数阈值发送给搜索服务器,从而搜索服务器可以根据该目标搜索参数的第一参数阈值提供搜索服务,可见本发明实施例的上述方案中目标搜索参数的第一参数阈值与搜索服务中搜索服务器的实时性能数据相关联,可以动态变化,不仅可以更加有效的调整搜索服务器的负荷,而且参数阈值的改变完全自动,过程简单、易于维护。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种实施环境的示意图;
图2是本发明实施例提供的确定搜索服务中参数阈值的方法的流程示意图;
图3是本发明实施例提供的另一种确定搜索服务中参数阈值的方法的流程示意图;
图4是本发明实施例提供的生成目标搜索参数的第一参数阈值的一种方法流程示意图;
图5是本发明实施例提供的另一种确定搜索服务中参数阈值的方法的流程示意图;
图6是本发明实施例提供的一种确定搜索服务中参数阈值的方法的时序图;
图7是本发明实施例提供的另一种确定搜索服务中参数阈值的方法的时序图;
图8是本发明实施例提供的一种确定搜索服务中参数阈值的装置的结构示意图;
图9是本发明实施例提供的另一种确定搜索服务中参数阈值的装置的结构示意图;
图10是本发明实施例提供的一种服务器的硬件结构框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、***、产品或服务器不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
请参阅图1,其所示为本发明实施例提供的一种实施环境示意图,该实施环境可以包括终端110,搜索服务器120和阈值服务器130。
其中,终端110可以向搜索服务器120发送搜索服务提供请求,搜索服务器120可以响应该搜索服务提供请求进行相关数据的搜索召回并将搜索结果返回给终端110,以使得终端110将搜索结果显示给用户。终端110与搜索服务器120可以通过有线或者无线网络相连接,该终端110可以但不限于是智能手机、台式电脑、平板电脑、笔记本电脑、数字助理、智能可穿戴设备等等,搜索服务器120可以是一个独立运行的服务器,或者分布式服务器,或者由多个服务器组成的服务器集群。
阈值服务器130可以通过有线或者无线网络与搜索服务器120相连接,用于动态地确定搜索服务器120在搜索过程中涉及到的搜索参数的阈值。在本说明书实施例中,阈值服务器130可以提供上述阈值确定过程中涉及到的多种服务,实际应用中,上述阈值确定过程中涉及到的多种服务可以在一个服务器中完成,也可以分布于不同的服务器中完成,也就是说,阈值服务器130可以是一个独立运行的服务器,也可以是由多个服务器组成的服务器集群。
请参阅图2,其所示为本发明实施例提供的一种确定搜索服务中参数阈值的方法的流程示意图,该方法可以应用于图1中的阈值服务器侧。需要说明的是,本说明书提供了如实施例或流程图所述的方法操作步骤,但基于常规或者无创造性的劳动可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式,不代表唯一的执行顺序。在实际中的***或产品执行时,可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境)。具体的如图2所示,所述方法可以包括:
S201,实时获取搜索服务器在提供搜索服务过程中的性能数据。
在本说明书实施例中,阈值服务器可以提供实时监测服务,该实时监测服务可以对搜索服务器进行实时监测以获取搜索服务器在提供搜索召回服务过程中的性能数据。其中,实时监测可以是按照预设的时间间隔进行,该预设的时间间隔可以是毫秒级,如10毫秒监测一次等等。
性能数据为能够表征服务器运行性能的数据,例如,性能数据可以但不限于包括CPU(Central Processing Unit,中央处理器,)占用率、单位时间段内的搜索服务次数、磁盘读取速率等等。实际应用中,可以通过性能数据监测工具来实现实时监测服务,该性能数据监测工具可以但不限于包括top,vmstat,iostat,netstat等等。
S203,确定所述性能数据所对应的性能指标。
在本说明书实施例中,性能指标是指对性能数据处理后得到的数据,该性能指标可以直接用于后续对搜索服务器的性能进行评价。对于性能数据的具体处理方式可以因性能数据的类别不同而不同,对于性能数据的处理也可以由阈值服务器的实时监测服务来完成。
在一个具体的实施例中,实时监测服务获取的性能数据可以为单位时间段内的搜索服务次数和单位时间段内的多个时间戳对应的CPU占用率。其中,单位时间段可以根据实际需要进行设定,例如,可以设定为1分钟、3分钟等等;单位时间段内的CPU占用率的数量也可以根据实际需要进行设定,例如,可以设定为间隔的3或5个时间戳对应的CPU占用率。
在该实施例中,步骤S203在实际执行时可以包括以下步骤:
根据单位时间段内的搜索服务次数,确定单次搜索服务的耗时。具体的,可以采用单位时间段除以该单位时间段内的搜索服务次数,从而得到单次搜索服务的耗时。实际应用中,可以将单次搜索服务的耗时表示为毫秒级,例如,单位时间段为1分钟,则在计算单次搜索服务的耗时时,采用60000毫秒/搜索服务次数。
根据单位时间段内的多个时间戳对应的CPU占用率,确定平均CPU占用率,对应的计算公式如下:
将上述的单次搜索服务的耗时和平均CPU占用率作为性能指标,用于后续对搜索服务器的性能状况进行评价。
S205,将所述性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值。
其中,目标搜索参数是指搜索服务器在搜索召回过程中涉及到的一个或者多个参数,这些参数的阈值可以对搜索过程产生影响,例如影响一次搜索的时长,或者也可以对搜索结果产生影响,例如影响搜索结果的准确性。具体的,目标搜索参数可以但不限于包括搜索过程中遍历的数据条目、数据相关性得分、热度得分等等。实际应用中,可以通过阈值服务器提供的动态决策服务,来完成上述步骤S205。
在一个具体的实施例中,可以采用图3所示的方法实现将所述性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值,如图3所示,该方法可以包括:
S301,判断所述性能指标是否与预设性能指标相匹配。
其中,预设性能指标可以根据实际情况进行设定,或者根据对搜索服务器的测试情况来设定。
在本说明书实施例中,预设性能指标可以包括预设最大性能指标和预设最小性能指标。当性能指标大于预设最大性能指标,或者性能指标小于预设最小性能指标时,即表明该性能指标与预设性能指标相匹配,可以执行步骤S303;当性能指标位于预设最大性能指标与预设最小性能指标之间时,即表明性能指标与预设性能指标不匹配,此时可以不进行目标搜索参数的参数阈值的调整。
实际应用中,由于性能指标可能包含对应于多个类别的性能数据的指标,例如性能指标可以同时包括前述的单次搜索服务的耗时和平均CPU占用率,因此,性能指标与预设性能指标相匹配的条件可以但不限于包括:当所有的性能指标均大于相应的预设最大性能指标,或者所有的性能指标均小于相应的预设最小性能指标时,认为性能指标与预设性能指标相匹配,即当有任意一个性能指标位于预设最大性能指标与预设最小性能指标之间时,即表明性能指标与预设性能指标不匹配。
在一个具体的实施例中,当单次搜索服务的耗时大于预设最大单次搜索服务的耗时且平均CPU占用率大于预设最大平均CPU占用率时,认为性能指标与预设性能指标相匹配;当单次搜索服务的耗时小于预设最小单次搜索服务的耗时且平均CPU占用率小于预设最小平均CPU占用率时,认为性能指标与预设性能指标相匹配。
S303,确定比对结果满足预设条件。
本说明书实施例中,当判断的结果为性能指标与预设性能指标相匹配时,认为性能指标与预设性能指标比对的比对结果满足预设条件。
在本说明书实施例中,预设条件可以包括第一预设条件和第二预设条件,其中,第一预设条件为性能指标大于预设最大性能指标;第二预设条件为性能指标小于预设最小性能指标。
S305,生成目标搜索参数的第一参数阈值。
具体的,执行生成目标搜索参数的第一参数阈值时,可以包括如图4所示的步骤:
S401,获取所述目标搜索参数的当前参数阈值。目标搜索参数的当前参数阈值可以理解为上一次调整得到的目标搜索参数的参数阈值,实际应用中,阈值服务器在每次调整目标搜索参数的参数阈值后,可以对调整后的目标搜索参数的参数阈值进行存储,具体存储时可以存储目标搜索参数的参数名与参数阈值的对应关系。
可以理解的,一个目标搜索参数的参数名可以对应于多个参数阈值,每个参数阈值对应于一次调整动作,为了在生成目标搜索参数的第一参数阈值时,能够更加快速的获取到目标搜索参数的当前参数阈值,可以按照调整动作的时间戳对一个目标搜索参数的参数名对应的多个参数阈值进行排序,从而后续可以获取与当前时间戳最近的一个时间戳对应的参数阈值作为当前参数阈值。
S403,判断所述当前参数阈值是否达到目标极值。
具体的,目标极值可以包括目标极大值和目标极小值,该目标极大值和目标极小值可以根据实际搜索服务器的具体情况进行设定。
实际应用中,在判断当前参数阈值是否大于目标极值时,可以结合具体满足的预设条件进行,具体为:
当满足第一预设条件即性能指标大于预设最大性能指标时,可以判断当前参数阈值是否达到目标极小值,若判断的结果为当前参数阈值未达到目标极小值,则可以执行步骤S405,否则可以不进行目标搜索参数的参数阈值的调整;当满足第二预设条件即性能指标小于预设最小性能指标时,可以判断当前参数阈值是否达到目标极大值,若判断的结果为当前参数阈值未达到目标极大值,则可以执行步骤S405,否则可以不进行目标搜索参数的参数阈值的调整。
S405,根据所述当前参数阈值与预设调整值生成所述目标搜索参数的第一参数阈值。
本说明书实施例中,根据当前参数阈值与预设调整值生成目标搜索参数的第一参数阈值可以继续结合满足的预设条件进行,具体为:
当满足第一预设条件即性能指标大于预设最大性能指标时,可以计算当前参数阈值与预设调整值的差值,并将该差值作为目标搜索参数的第一参数阈值,从而达到减少参数阈值进而降低搜索服务器负荷的目的;当满足第二预设条件即性能指标小于预设最小性能指标时,可以计算当前参数阈值与预设调整值的和值,并将该和值作为目标搜索参数的第一参数阈值,从而达到增大参数阈值进而提升搜索服务器的处理能力的目的。
需要说明的是,预设调整值可以是根据实际需要预先设定的值。实际应用中,当满足第一预设条件即性能指标大于预设最大性能指标时,若计算的当前参数阈值与预设调整值的差值小于目标极小值的情况,则将目标极小值作为目标搜索参数的第一参数阈值;同理,当满足第二预设条件即性能指标小于预设最小性能指标时,若计算的当前参数阈值与预设调整值的和值大于目标极大值,则将目标极大值作为目标搜索参数的第一参数阈值。
S207,将所述目标搜索参数的第一参数阈值发送给所述搜索服务器,以使所述搜索服务器根据所述目标搜索参数的第一参数阈值提供搜索服务。
在本说明书实施例中,搜索服务器可以每隔预设时间间隔向阈值服务器发送参数阈值获取请求,相应的,阈值服务器可以响应于该请求,将目标搜索参数的第一参数阈值发送给搜索服务器,以使得搜索服务器根据该目标搜索参数的第一参数阈值提供搜索服务。当然,阈值服务器也可以每隔预设时间间隔将目标搜索参数的第一参数阈值发送给搜索服务器。
需要说明的是,预设时间间隔可以根据实际需要进行设定,例如可以设定为1分钟或者30秒等等。
在一个具体的实施例中,阈值服务器在将目标搜索参数的第一参数阈值发送给搜索服务器之前,还可以判断目标搜索参数的参数阈值是否发生了调整,若判断的结果为发生了调整,则将调整后的第一参数阈值发送给搜索服务器;反之,若判断的结果为未发生调整,则阈值服务器可以向搜索服务器发送参数阈值未调整的指示,相应的,搜索服务器在收到该指示后将会依据当前已经的参数阈值提供搜索服务。
实际应用中,阈值服务器还可以提供名字服务,该名字服务是指能够提供查询和写入功能的计算机应用程序,其可以是一个文件、数据库(如Redis)或者一个应用程序等等。动态决策服务在生成目标搜索参数的第一参数阈值之后,可以周期性的将决策数据写入到名字服务,该决策数据可以包括生成的目标搜索参数的第一参数阈值或者参数阈值未发生调整的指示信息,后续搜索服务器可以从该名字服务获取该决策数据。
由本发明实施例的上述技术方案可见,本发明实施例中的目标搜索参数的第一参数阈值与搜索服务中搜索服务器的实时性能数据相关联,实现了目标搜索参数的第一参数阈值的动态变化,从而不仅可以更加有效的调整搜索服务器的负荷,而且参数阈值的改变完全自动,过程简单、易于维护。
实际应用中,为了避免阈值服务器的动态决策服务故障等突发情况导致的无法及时对搜索服务器的目标搜索参数的参数阈值进行调整的问题,本发明实施例还提供了另一种确定搜索服务中参数阈值的方法,如图5所示,该方法还可以包括:
S501,响应于参数阈值输入操作,获取输入的预设搜索参数的预设参数阈值。
在本说明书实施例中,阈值服务器还可以提供人工决策服务,当需要强制设定某个搜索参数的参数阈值时,可以通过人工决策服务输入预设搜索参数的预设参数阈值,相应的,阈值服务器可以响应于参数阈值输入操作,获取输入的预设搜索参数的预设参数阈值。其中,预设搜索参数可以是目标搜索参数中的一个或者多个,预设参数阈值可以根据实际需要进行设定。实际应用中,人工决策服务可以通过阈值服务器提供的web访问来实现。
S503,确定所述目标搜索参数中与所述预设搜索参数相对应的候选搜索参数。
S505,将所述候选搜索参数的第一参数阈值替换为所述预设搜索参数的预设参数阈值。
S507,将替换后的所述目标搜索参数的第一参数阈值发送给所述搜索服务器。
在本说明书实施例中,通过人工决策服务输入的预设参数阈值的优先级要高于相应的目标搜索参数的第一参数阈值,因此,通过步骤S503至步骤S507将目标搜索参数中对应于预设搜索参数的第一参数阈值替换为预设参数阈值,并将替换后的目标搜索参数的第一参数阈值发送给搜索服务器,从而使得搜索服务器能够以相应目标搜索参数的预设参数阈值提供搜索召回服务,可以很好的避免阈值服务器的动态决策服务故障等情况导致的无法及时对搜索服务器的目标搜索参数的参数阈值进行调整的问题,具有很大的灵活性。
本发明实施例还提供了另一种确定搜索服务中参数阈值的方法,该方法可以应用于图1的实施环境,该方法包括:
阈值服务器实时获取搜索服务器在提供搜索服务过程中的性能数据,确定所述性能数据所对应的性能指标,将所述性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值,将所述目标搜索参数的第一参数阈值发送给所述搜索服务器;
搜索服务器接收所述目标搜索参数的第一参数阈值;响应于搜索服务提供请求,根据所述目标搜索参数的第一参数阈值提供所述搜索服务。
实际应用中,阈值服务器可以提供实时监测服务、动态决策服务、名字服务和人工决策服务,基于阈值服务器提供的上述各种服务,本实施例的确定搜索服务中参数阈值的方法的时序图如图6所示,可以包括:
S601,实时监测服务实时获取搜索服务器在提供搜索服务过程中的性能数据。
S603,实时监测服务确定获取的性能数据所对应的性能指标,并将该性能指标发送给动态决策服务。
相应的,动态决策服务接收性能指标。
S605,动态决策服务将性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值。
S607,动态决策服务将目标搜索参数的第一参数阈值写入名字服务。
S609,名字服务将上述目标搜索参数的第一参数阈值发送给搜索服务器。
相应的,搜索服务器接收所述目标搜索参数的第一参数阈值。
S611,搜索服务器响应于搜索服务提供请求,根据所述目标搜索参数的第一参数阈值提供所述搜索服务。
具体的,搜索服务器在根据目标搜索参数的第一参数阈值提供搜索服务时,可以获取搜索过程中目标搜索参数的实时参数值,并判断该目标搜索参数的实时参数值是否与第一参数阈值相匹配,在判断的结果为是时结束搜索并获取搜索结果,将该搜索结果返回。以目标搜索参数为搜索过程中遍历的数据条目为例,搜索服务器在提供与搜索服务提供请求相对应的搜索服务过程中,记录遍历的数据条目的数量,当该数量达到第一数量阈值时即结束搜索,获取搜索结果并返回搜索结果。
在另一个具体的实施例中,如图7所示,该方法还可以包括步骤S613,人工决策服务响应于参数阈值输入操作,获取输入的预设搜索参数的预设参数阈值,并将该预设搜索参数的预设参数阈值写入名字服务。
相应的,名字服务接收预设搜索参数的预设参数阈值。
S615,名字服务确定所述目标搜索参数中与所述预设搜索参数相对应的候选搜索参数;
S617,名字服务将所述候选搜索参数的第一参数阈值替换为所述预设搜索参数的预设参数阈值;
相应的,在步骤S609中,名字服务将替换后的所述目标搜索参数的第一参数阈值发送给所述搜索服务器。
相应的,搜索服务器接收所述目标搜索参数的第一参数阈值。
由本发明实施例的上述技术方案可见,本发明实施例中的目标搜索参数的第一参数阈值与搜索服务中搜索服务器的实时性能数据相关联,实现了目标搜索参数的第一参数阈值的动态变化,从而不仅可以更加有效的调整搜索服务器的负荷,而且参数阈值的改变完全自动,过程简单、易于维护。此外,本发明实施例还可以动态决策服务故障等情况导致的无法及时对搜索服务器的目标搜索参数的参数阈值进行调整的问题,提高了***的灵活性。
与上述几种实施例提供的确定搜索服务中参数阈值的方法相对应,本发明实施例还提供一种确定搜索服务中参数阈值的装置,由于本发明实施例提供的确定搜索服务中参数阈值的装置与上述几种实施例提供的确定搜索服务中参数阈值的方法相对应,因此前述确定搜索服务中参数阈值的方法的实施方式也适用于本实施例提供的确定搜索服务中参数阈值的装置,在本实施例中不再详细描述。
请参阅图8,其所示为本发明实施例提供的一种确定搜索服务中参数阈值的装置的结构示意图,该装置具有实现上述方法实施例中确定搜索服务中参数阈值的方法的功能,所述功能可以由硬件实现,也可以由硬件执行相应的软件实现。如图8所示,该装置可以包括:
第一获取模块810,用于实时获取搜索服务器在提供搜索服务过程中的性能数据;
第一确定模块820,用于确定所述性能数据所对应的性能指标;
生成模块830,用于将所述性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值;
第一发送模块840,用于将所述目标搜索参数的第一参数阈值发送给所述搜索服务器,以使所述搜索服务器根据所述目标搜索参数的第一参数阈值提供搜索服务。
在一些实施例中,如图9所示,该装置还可以包括:
第二获取模块850,用于响应于参数阈值输入操作,获取输入的预设搜索参数的预设参数阈值;
相应的,第一发送模块840可以包括:
第二确定模块,用于确定所述目标搜索参数中与所述预设搜索参数相对应的候选搜索参数;
替换模块,用于将所述候选搜索参数的第一参数阈值替换为所述预设搜索参数的预设参数阈值;
第一发送子模块,用于将替换后的所述目标搜索参数的第一参数阈值发送给所述搜索服务器。
可选的,第一发送子模块,具体用于:响应于所述搜索服务器每隔预设时间间隔发送的搜索参数阈值获取请求,将所述目标搜索参数的第一参数阈值发送给所述搜索服务器;或者,每隔预设时间间隔将所述目标搜索参数的第一参数阈值发送给所述搜索服务器。
可选的,所述性能数据可以包括:单位时间段内的搜索服务次数、单位时间段内的多个时间戳对应的CPU占用率;
相应的,第一确定模块820可以包括:
第三确定模块,用于根据所述单位时间段内的搜索服务次数,确定单次搜索服务的耗时;
第四确定模块,用于根据所述单位时间段内的多个时间戳对应的CPU占用率,确定平均CPU占用率;
第五确定模块,用于将所述单次搜索服务的耗时和所述平均CPU占用率作为所述性能指标。
可选的,生成模块830可以包括:
第一判断模块,用于判断所述性能指标是否与预设性能指标相匹配;
第六确定模块,用于在第一判断模块的判断的结果为是时,确定比对结果满足预设条件;
第一生成子模块,用于生成目标搜索参数的第一参数阈值。
可选的,第一生成子模块可以包括:
第三获取模块,用于获取所述目标搜索参数的当前参数阈值;
第二判断模块,用于判断所述当前参数阈值是否达到目标极值;
第二生成子模块,用于在第二判断模块的判断的结果为否时,根据所述当前参数阈值与预设调整值生成所述目标搜索参数的第一参数阈值。
本发明实施例还提供了一种确定搜索服务中参数阈值的***,该***可以包括阈值服务器和搜索服务器,其中,
阈值服务器,用于实时获取搜索服务器在提供搜索服务过程中的性能数据,确定所述性能数据所对应的性能指标,将所述性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值,将所述目标搜索参数的第一参数阈值发送给所述搜索服务器;
搜索服务器,用于接收所述目标搜索参数的第一参数阈值;响应于搜索服务提供请求,根据所述目标搜索参数的第一参数阈值提供所述搜索服务。
可选的,所述搜索服务器还用于:获取搜索过程中所述目标搜索参数的实时参数值;判断所述目标搜索参数的实时参数值是否与所述第一参数阈值相匹配;在判断的结果为是时,结束搜索并获取搜索结果;返回所述搜索结果。
需要说明的是,上述实施例提供的装置,在实现其功能时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的装置与方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
本发明实施例的确定搜索服务中参数阈值的装置及***通过将目标搜索参数的第一参数阈值与搜索服务中搜索服务器的实时性能数据相关联,实现了目标搜索参数的第一参数阈值的动态变化,从而不仅可以更加有效的调整搜索服务器的负荷,而且参数阈值的改变完全自动,过程简单、易于维护。
本发明实施例提供了一种服务器,该服务器包括处理器和存储器,该存储器中存储有至少一条指令、至少一段程序、代码集或指令集,该至少一条指令、该至少一段程序、该代码集或指令集由该处理器加载并执行以实现如上述方法实施例所提供的确定搜索服务中参数阈值的方法。
存储器可用于存储软件程序以及模块,处理器通过运行存储在存储器的软件程序以及模块,从而执行各种功能应用以及确定搜索服务中参数阈值。存储器可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作***、功能所需的应用程序等;存储数据区可存储根据所述设备的使用所创建的数据等。此外,存储器可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器还可以包括存储器控制器,以提供处理器对存储器的访问。
本发明实施例所提供的方法实施例可以在计算机终端、服务器或者类似的运算装置中执行。以运行在服务器上为例,图10是本发明实施例提供的运行一种确定搜索服务中参数阈值的方法的服务器的硬件结构框图。如图10所示,该服务器1000可因配置或性能不同而产生比较大的差异,可以包括一个或一个以***处理器(Central ProcessingUnits,CPU)1010(处理器1010可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)、用于存储数据的存储器1030,一个或一个以上存储应用程序1023或数据1022的存储介质1020(例如一个或一个以上海量存储设备)。其中,存储器1030和存储介质1020可以是短暂存储或持久存储。存储在存储介质1020的程序可以包括一个或一个以上模块,每个模块可以包括对服务器中的一系列指令操作。更进一步地,中央处理器1010可以设置为与存储介质1020通信,在服务器1000上执行存储介质1020中的一系列指令操作。服务器1000还可以包括一个或一个以上电源1060,一个或一个以上有线或无线网络接口1050,一个或一个以上输入输出接口1040,和/或,一个或一个以上操作***1021,例如WindowsServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM等等。
输入输出接口1040可以用于经由一个网络接收或者发送数据。上述的网络具体实例可包括服务器1000的通信供应商提供的无线网络。在一个实例中,输入输出接口1040包括一个网络适配器(Network Interface Controller,NIC),其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中,输入输出接口1040可以为射频(RadioFrequency,RF)模块,其用于通过无线方式与互联网进行通讯。
本领域普通技术人员可以理解,图10所示的结构仅为示意,其并不对上述电子装置的结构造成限定。例如,服务器1000还可包括比图10中所示更多或者更少的组件,或者具有与图10所示不同的配置。
本发明的实施例还提供了一种计算机可读存储介质,所述存储介质可设置于服务器之中以保存用于实现一种文本分类方法相关的至少一条指令、至少一段程序、代码集或指令集,该至少一条指令、该至少一段程序、该代码集或指令集由该处理器加载并执行以实现上述方法实施例提供的确定搜索服务中参数阈值的方法。
可选地,在本实施例中,上述存储介质可以包括但不限于:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
需要说明的是:上述本发明实施例先后顺序仅仅为了描述,不代表实施例的优劣。且上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种确定搜索服务中参数阈值的方法,其特征在于,所述方法包括:
实时获取搜索服务器在提供搜索服务过程中的性能数据;
确定所述性能数据所对应的性能指标;
将所述性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值;
将所述目标搜索参数的第一参数阈值发送给所述搜索服务器,以使所述搜索服务器根据所述目标搜索参数的第一参数阈值提供搜索服务。
2.根据权利要求1所述的确定搜索服务中参数阈值的方法,其特征在于,所述方法还包括:
响应于参数阈值输入操作,获取输入的预设搜索参数的预设参数阈值;
相应的,所述将所述目标搜索参数的第一参数阈值发送给所述搜索服务器包括:
确定所述目标搜索参数中与所述预设搜索参数相对应的候选搜索参数;
将所述候选搜索参数的第一参数阈值替换为所述预设搜索参数的预设参数阈值;
将替换后的所述目标搜索参数的第一参数阈值发送给所述搜索服务器。
3.根据权利要求1所述的确定搜索服务中参数阈值的方法,其特征在于,所述性能数据包括:单位时间段内的搜索服务次数、单位时间段内的多个时间戳对应的CPU占用率;
相应的,所述确定所述性能数据所对应的性能指标包括:
根据所述单位时间段内的搜索服务次数,确定单次搜索服务的耗时;
根据所述单位时间段内的多个时间戳对应的CPU占用率,确定平均CPU占用率;
将所述单次搜索服务的耗时和所述平均CPU占用率作为所述性能指标。
4.根据权利要求1所述的确定搜索服务中参数阈值的方法,其特征在于,所述将所述性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值包括:
判断所述性能指标是否与预设性能指标相匹配;
在判断的结果为是时,确定比对结果满足预设条件;
生成目标搜索参数的第一参数阈值。
5.根据权利要求4所述的确定搜索服务中参数阈值的方法,其特征在于,所述生成目标搜索参数的第一参数阈值包括:
获取所述目标搜索参数的当前参数阈值;
判断所述当前参数阈值是否达到目标极值;
在判断的结果为否时,根据所述当前参数阈值与预设调整值生成所述目标搜索参数的第一参数阈值。
6.一种确定搜索服务中参数阈值的方法,其特征在于,所述方法包括:
阈值服务器实时获取搜索服务器在提供搜索服务过程中的性能数据,确定所述性能数据所对应的性能指标,将所述性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值,将所述目标搜索参数的第一参数阈值发送给所述搜索服务器;
所述搜索服务器接收所述目标搜索参数的第一参数阈值;响应于搜索服务提供请求,根据所述目标搜索参数的第一参数阈值提供所述搜索服务。
7.根据权利要求6所述的确定搜索服务中参数阈值的方法,其特征在于,所述搜索服务器根据所述目标搜索参数的第一参数阈值提供所述搜索服务包括:
所述搜索服务器获取搜索过程中所述目标搜索参数的实时参数值;判断所述目标搜索参数的实时参数值是否与所述第一参数阈值相匹配;在判断的结果为是时,结束搜索并获取搜索结果;返回所述搜索结果。
8.一种确定搜索服务中参数阈值的装置,其特征在于,所述装置包括:
第一获取模块,用于实时获取搜索服务器在提供搜索服务过程中的性能数据;
第一确定模块,用于确定所述性能数据所对应的性能指标;
生成模块,用于将所述性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值;
第一发送模块,用于将所述目标搜索参数的第一参数阈值发送给所述搜索服务器,以使所述搜索服务器根据所述目标搜索参数的第一参数阈值提供搜索服务。
9.一种确定搜索服务中参数阈值的***,其特征在于,所述***包括阈值服务器和搜索服务器,其中,
所述阈值服务器,用于实时获取搜索服务器在提供搜索服务过程中的性能数据,确定所述性能数据所对应的性能指标,将所述性能指标与预设性能指标进行比对,在比对结果满足预设条件时生成目标搜索参数的第一参数阈值,将所述目标搜索参数的第一参数阈值发送给所述搜索服务器;
所述搜索服务器,用于接收所述目标搜索参数的第一参数阈值;响应于搜索服务提供请求,根据所述目标搜索参数的第一参数阈值提供所述搜索服务。
10.一种服务器,其特征在于,包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现上述权利要求1~5中任一项所述的确定搜索服务中参数阈值的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910590186.3A CN112181755B (zh) | 2019-07-02 | 2019-07-02 | 一种确定搜索服务中参数阈值的方法及相关设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910590186.3A CN112181755B (zh) | 2019-07-02 | 2019-07-02 | 一种确定搜索服务中参数阈值的方法及相关设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112181755A true CN112181755A (zh) | 2021-01-05 |
CN112181755B CN112181755B (zh) | 2024-05-10 |
Family
ID=73914302
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910590186.3A Active CN112181755B (zh) | 2019-07-02 | 2019-07-02 | 一种确定搜索服务中参数阈值的方法及相关设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112181755B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050213570A1 (en) * | 2004-03-26 | 2005-09-29 | Stacy John K | Hardware filtering support for denial-of-service attacks |
CN103678624A (zh) * | 2013-12-18 | 2014-03-26 | 百度在线网络技术(北京)有限公司 | 搜索方法、搜索服务器、搜索请求执行方法及终端 |
CN106202581A (zh) * | 2016-08-30 | 2016-12-07 | 北京奇艺世纪科技有限公司 | 一种数据搜索方法及装置 |
CN109829098A (zh) * | 2017-08-28 | 2019-05-31 | 广东神马搜索科技有限公司 | 搜索结果优化方法、装置及服务器 |
-
2019
- 2019-07-02 CN CN201910590186.3A patent/CN112181755B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050213570A1 (en) * | 2004-03-26 | 2005-09-29 | Stacy John K | Hardware filtering support for denial-of-service attacks |
CN103678624A (zh) * | 2013-12-18 | 2014-03-26 | 百度在线网络技术(北京)有限公司 | 搜索方法、搜索服务器、搜索请求执行方法及终端 |
CN106202581A (zh) * | 2016-08-30 | 2016-12-07 | 北京奇艺世纪科技有限公司 | 一种数据搜索方法及装置 |
CN109829098A (zh) * | 2017-08-28 | 2019-05-31 | 广东神马搜索科技有限公司 | 搜索结果优化方法、装置及服务器 |
Also Published As
Publication number | Publication date |
---|---|
CN112181755B (zh) | 2024-05-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109981744B (zh) | 数据的分发方法、装置、存储介质及电子设备 | |
CN107656807B (zh) | 一种虚拟资源的自动弹性伸缩方法及装置 | |
CN103401937B (zh) | 日志数据处理方法及*** | |
CN109710612B (zh) | 向量索引的召回方法、装置、电子设备和存储介质 | |
CN112751726B (zh) | 一种数据处理方法、装置、电子设备和存储介质 | |
CN110209549B (zh) | 数据处理方法、相关装置、相关设备和*** | |
US9807008B2 (en) | Tournament scheduling | |
CN108875035B (zh) | 分布式文件***的数据存储方法及相关设备 | |
CN104102646B (zh) | 数据处理的方法、装置及*** | |
CN112367384A (zh) | 基于Kafka集群的动态限速方法、装置以及计算机设备 | |
US9384051B1 (en) | Adaptive policy generating method and system for performance optimization | |
CN107193749B (zh) | 测试方法、装置及设备 | |
CN112181755B (zh) | 一种确定搜索服务中参数阈值的方法及相关设备 | |
CN112817719A (zh) | 线程池的参数调整方法、装置、设备及可读存储介质 | |
CN112612929A (zh) | 数据处理方法及装置 | |
CN113448747B (zh) | 数据传输方法、装置、计算机设备和存储介质 | |
US20140214826A1 (en) | Ranking method and system | |
US9052952B1 (en) | Adaptive backup model for optimizing backup performance | |
CN106686082B (zh) | 存储资源调整方法及管理节点 | |
CN114138617B (zh) | 自学习的变频监控方法、***、电子设备和存储介质 | |
CN110543509A (zh) | 用户访问数据的监控***、方法、装置及电子设备 | |
CN113032225B (zh) | 数据中心的监控数据处理方法、装置、设备及存储介质 | |
CN115525394A (zh) | 容器数量的调整方法及装置 | |
CN110134575B (zh) | 一种服务器集群的服务能力计算方法及装置 | |
CN103942129A (zh) | 数据中心bmc管理***及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |