CN113177169A - 网络地址的类别获取方法、装置、设备及存储介质 - Google Patents

网络地址的类别获取方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN113177169A
CN113177169A CN202110540044.3A CN202110540044A CN113177169A CN 113177169 A CN113177169 A CN 113177169A CN 202110540044 A CN202110540044 A CN 202110540044A CN 113177169 A CN113177169 A CN 113177169A
Authority
CN
China
Prior art keywords
network address
target
category
local
classification library
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110540044.3A
Other languages
English (en)
Other versions
CN113177169B (zh
Inventor
梁志红
姚磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Topsec Technology Co Ltd
Beijing Topsec Network Security Technology Co Ltd
Beijing Topsec Software Co Ltd
Original Assignee
Beijing Topsec Technology Co Ltd
Beijing Topsec Network Security Technology Co Ltd
Beijing Topsec Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Topsec Technology Co Ltd, Beijing Topsec Network Security Technology Co Ltd, Beijing Topsec Software Co Ltd filed Critical Beijing Topsec Technology Co Ltd
Priority to CN202110540044.3A priority Critical patent/CN113177169B/zh
Publication of CN113177169A publication Critical patent/CN113177169A/zh
Application granted granted Critical
Publication of CN113177169B publication Critical patent/CN113177169B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/955Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本公开提供了一种网络地址的类别获取方法、装置、设备及存储介质,方法包括:响应于目标网络地址的分类请求,获取分类请求的目标请求地区;获取预设的与目标请求地区对应的本地分类库;判断本地分类库中是否包含目标网络地址对应的目标网址类别;若不包含目标网址类别,则查询预设的远程分类库以获取目标网络地址的网址类别。本公开实施例,通过获取与目标请求地区对应的本地分类库,降低了远程分类库的使用率,提高了网络地址的查询效率。

Description

网络地址的类别获取方法、装置、设备及存储介质
技术领域
本公开涉及互联网技术领域,尤其涉及一种网络地址的类别获取方法、装置、设备及存储介质。
背景技术
随着互联网的发展,互联网在工作和生活等各个领域迅速普及,使得信息的获取、共享、传播更加方便。但是,与此同时,用户会接收到自己不想获取的信息。
为了剔除掉用户不想获取的信息,可以将信息对应的网络地址进行分类,从而根据网络地址的类别对网络地址进行筛选,剔除掉用户不想接收的类别。现有的网络地址的类别获取技术中,需要在远程分类库中查询获取网络地址的类别,而远程分类库中包含了大量的网络地址,遍历查询导致获取网址类别的效率较低。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题,本公开提供了一种网络地址的类别获取方法、装置、设备及存储介质。
第一方面,本公开提供了一种网络地址的类别获取方法,所述方法包括:
响应于目标网络地址的分类请求,获取所述分类请求的目标请求地区;
获取预设的与所述目标请求地区对应的本地分类库;
判断所述本地分类库中是否包含所述目标网络地址对应的目标网址类别;
若不包含所述目标网址类别,则查询预设的远程分类库以获取所述目标网络地址的网址类别。
一种可选的实施方式中,在所述判断所述本地分类库中是否包含所述目标网络地址对应的目标网址类别之后,还包括:
若包含所述目标网址类别,则确定所述目标网址类别为所述目标网络地址的网址类别。
一种可选的实施方式中,还包括:
获取预存的与所述目标请求地区对应的远程查询热度值集合,
其中,所述远程查询热度值集合中包括来源于所述目标请求地区的,在所述远程分类库查询的所有网络地址,及所述所有网络地址对应的第一历史查询热度值;
根据所述远程查询热度值集合,获取所述目标网络地址的第一历史查询热度值;
计算预设的单位热度值和所述目标网络地址的第一历史查询热度值的相加和,根据所述相加和更新所述目标网络地址的第一历史查询热度值。
一种可选的实施方式中,还包括:
判断更新后的所述远程查询热度值集合中,是否包括所述第一历史查询热度值超过预设热度阈值的第一网络地址;
若包括所述第一网络地址,则在所述本地分类库中存储所述第一网络地址和对应的网址类别。
一种可选的实施方式中,还包括:
获取预存的与所述目标请求地区对应的本地查询热度值集合,
其中,所述本地查询热度值集合中包括来源于所述目标请求地区的,在所述本地分类库查询的所有网络地址,及所述所有网络地址对应的第二历史查询热度值;
按照所述第二历史查询热度值由高到低的顺序,对所述本地查询热度值集合中的所有网络地址排序;
删除位于排序结果最后一位的第二网络地址和对应的网址类别。
一种可选的实施方式中,在所述获取预设的与所述目标请求地区对应的本地分类库之前,还包括:
获取预设时段内来源于所述目标请求地区的所有分类请求;
统计所述所有分类请求对应的所有第三网络地址和对应的请求次数;
按照所述请求次数由高到低的顺序对所述第三网络地址排序;
获取位于排序结果前预设位数的多个第三网络地址的网址类别;
根据所述多个第三网络地址和对应的网址类别生成所述本地分类库。
第二方面,本公开还提供了一种网络地址的类别获取装置,所述装置包括:
第一获取模块,用于响应于目标网络地址的分类请求,获取所述分类请求的目标请求地区;
第二获取模块,用于获取预设的与所述目标请求地区对应的本地分类库;
第一判断模块,用于判断所述本地分类库中是否包含所述目标网络地址对应的目标网址类别;
第一查询模块,用于若不包含所述目标网址类别,则查询预设的远程分类库以获取所述目标网络地址的网址类别。
第三方面,本公开提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当所述指令在终端设备上运行时,使得所述终端设备实现上述的方法。
第四方面,本公开提供了一种电子设备,所述电子设备包括:处理器;用于存储所述处理器可执行指令的存储器;所述处理器,用于从所述存储器中读取所述可执行指令,并执行所述指令以实现上述的方法。
第五方面,本公开提供了一种计算机程序产品,所述计算机程序产品包括计算机程序/指令,所述计算机程序/指令被处理器执行时实现上述的方法。
本公开实施例提供的技术方案与现有技术相比具有如下优点:
本公开实施例提供的网络地址的类别获取方法,通过获取与目标请求地区对应的本地分类库,降低了远程分类库的使用率,提高了网络地址的查询效率。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的一种网络地址的类别获取方法的流程示意图;
图2为本公开实施例提供的另一种网络地址的类别获取方法的流程示意图;
图3为本公开实施例提供的一种网络地址的类别获取的示意图;
图4为本公开实施例提供的一种网络地址的类别获取装置的结构示意图;
图5为本公开实施例提供的一种电子设备的结构示意图。
具体实施方式
为了能够更清楚地理解本公开的上述目的、特征和优点,下面将对本公开的方案进行进一步描述。需要说明的是,在不冲突的情况下,本公开的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本公开,但本公开还可以采用其他不同于在此描述的方式来实施;显然,说明书中的实施例只是本公开的一部分实施例,而不是全部的实施例。
图1为本公开实施例提供的一种网络地址的类别获取方法的流程示意图。该方法可以由网络地址的类别获取装置执行,其中该装置可以采用软件和/或硬件实现,一般可集成在电子设备中。
如图1所示,该网络地址的类别获取方法可以包括:
步骤101,响应于目标网络地址的分类请求,获取分类请求的目标请求地区。
从互联网获取信息时,通常需要根据网络地址对互联网中的资源进行访问,网络地址可以包括信息的位置、信息的访问方法等内容。例如:URL(uniform resourcelocator,统一资源定位符)。
可以将网络地址根据其对应的信息进行分类,分类的种类及分类的颗粒度可以根据具体的应用场景进行设定,本实施例不作限制,例如:购物、新闻。
在一些应用场景中,按照用户的需求,需要获取目标网络地址的类别,并对目标网络地址进行过滤,从而剔除掉某些类型的信息,其中,目标网络地址包括但不限于:用户访问的网络地址、自动跳转到的网络地址中的任一种。
可以理解地,在本公开一些实施例中,不同地区的用户通常有不同的浏览偏好,因而,不同地区的用户经常访问的网络地址通常是不同的。举例而言,以青年为主的社区中的用户经常访问的网络地址的类别包括游戏、动漫;以老年为主的社区中的用户经常访问的网络地址的类别包括养生、医疗。
在本公开一些实施例中,可以记录目标请求地区,该目标请求地区用于标记发出该分类请求的地区,需要说明的是,目标请求地区的颗粒度可以根据应用场景的不同进行设置,本实施例不作限制,例如:辖区级别、街道级别。
一种可选的实施方式中,可以在目标网络地址对应的信息呈现给用户之前,针对目标网络地址发出分类请求,响应于对目标网络地址的分类请求,获取分类请求的目标请求地区。
步骤102,获取预设的与目标请求地区对应的本地分类库。
在本公开一些实施例中,可以预设与目标请求地区对应的本地分类库,可以理解地,本地分类库可以用于反应目标请求地区的用户访问习惯,本地分类库中可以存在多个网络地址及其对应的网址分类,该网络地址可以是目标请求地区中的用户访问次数较多的网络地址。
生成该本地分类库的方法有多种,可以根据具体的应用场景进行选择,本实施例不做限制,示例如下:
示例一:可以通过预设时间段内目标请求地区的网络地址访问次数生成本地分类库。
示例二:可以通过预设时间段内目标请求地区的网络地址分类请求次数生成本地分类库,包括如下步骤:
步骤1,获取预设时段内来源于目标请求地区的所有分类请求。
在本公开一些实施例中,可以预设时间段,时间段的长短可以根据应用场景进行设置,获取预设时段内来源于目标请求地区的所有分类请求。可以理解地,可以以这个时间段为样本,对分类请求进行统计,获取分类请求频率高的网络地址。
步骤2,统计所有分类请求对应的所有第三网络地址和对应的请求次数,按照请求次数由高到低的顺序对第三网络地址排序,获取位于排序结果前预设位数的多个第三网络地址的网址类别。
在本公开一些实施例中,第三网络地址可以为分类请求对应的网络地址,在预设时间段内,目标请求地区对同一个第三网络地址的分类请求可以为多次,可以对所有第三网络地址进行统计,统计每个第三网络地址对应的请求次数。
一种可选的实施方式中,可以按照请求次数的降序,对第三网络地址进行排序,获取位于排序结果前预设位数的多个第三网络地址的网址类别。其中,预设位数可以根据应用场景进行设定,本实施例不作限制。
一种可选的实施方式中,可以预设次数阈值,获取请求次数大于预设次数阈值的多个第三网络地址的网络类别。其中,预设次数阈值可以根据应用场景进行设定,本实施例不作限制。
步骤3,根据多个第三网络地址和对应的网址类别生成本地分类库。
在本公开一些实施例中,可以根据筛选获取的多个第三网络地址及其对应的网络类别生成本地分类库。
该本地分类库和目标请求地区相对应,可以根据目标请求地区获取对应的本地分类库。
步骤103,判断本地分类库中是否包含目标网络地址对应的目标网址类别。
在本公开一些实施例中,可以根据目标网络地址,对本地分类库进行查询,从而判断本地分类库中是否包含目标网络地址对应的目标网址类别。
步骤104,若不包含目标网址类别,则查询预设的远程分类库以获取目标网络地址的网址类别。
可以理解地,对本地分类库进行查询的结果包括:本地分类库包含目标网址类别、本地分类库不包含目标网址类别。
在本公开一些实施例中,本地分类库不包含目标网址类别,则查询预设的远程分类库以获取目标网络地址的网址类别。
需要说明的是,预设的远程分类库可以为一个分类库,也可以是由多个分类库组成的。远程分类库通常为非本地的分类库。相较于本地分类库,远程分类库占用的存储空间较大,并且远程分类库中的网络地址及其对应的网络类别较为全面。因而,若本地分类库不包含目标网络类别,可以对预设的远程分类库进行查询,从而获取目标网络地址的网络类别。
在本公开一些实施例中,本地分类库包含目标网址类别,则确定目标网址类别为目标网络地址的网址类别。
举例而言,若本地分类库包含目网址类别,则根据目标网络地址对本地分类库进行查询可以获取目标网络地址类别,该目标网络地址类别可以为目标网络地址的网址类别。
本公开实施例的网络地址的类别获取方法,通过获取与目标请求地区对应的本地分类库,降低了对远程分类库的使用频率,从而提高了网络地址的查询效率,维护可以在本地进行,从而提高了可维护性以及稳定性;减少了加载到内存中的信息,从而减少了内存的占用,降低了网络地址的类别获取对内存性能的需求。
本地分类库与目标请求地区相对应,可以根据目标请求地区获取不同的本地分类库,从而提升了在本地分类库中获取目标网址类别的成功率,同时也降低了访问远程分类库的概率,提高了网络地址的查询效率和网络地址的类别获取对内存性能的需求。
基于上述实施例,可以根据第一历史查询热度值对本地分类库进行更新操作。如图2所示,图2为本公开实施例提供的另一种网络地址的类别获取方法的流程示意图,上述实施例还可以包括:
步骤201,获取预存的与目标请求地区对应的远程查询热度值集合。
如上述实施例所述,若本地分类库中不包含目标网址类别,可以根据目标网络地址对预设的远程分类库进行查询。在本公开一些实施例中,可以将目标请求地区对远程分类库的查询进行汇总,生成对应的远程查询热度值集合。
其中,远程查询热度值集合中包括来源于目标请求地区的,在远程分类库查询的所有网络地址,及所有网络地址对应的第一历史查询热度值。
步骤202,根据远程查询热度值集合,获取目标网络地址的第一历史查询热度值。
在本公开一些实施例中,获取远程查询热度值集合后,可以根据远程查询热度值集合,获取远程查询热度值集合中的每个目标网络地址对应的第一历史查询热度值。
步骤203,计算预设的单位热度值和目标网络地址的第一历史查询热度值的相加和,根据相加和更新目标网络地址的第一历史查询热度值。
需要说明的是,预设的单位热度值可以根据应用场景进行设定,本实施例不作限制,例如:预设的单位热度值可以为1、预设的单位热度值也可以根据用户的不同而不同。
在本公开一些实施例中,若根据目标网络地址对预设的远程分类库进行查询,可以计算预设的单位热度值和目标网络地址的第一历史查询热度值的相加和,根据所述相加和更新所述目标网络地址的第一历史查询热度值。
可以理解地,可以根据目标网络地址的第一历史查询热度值更新本地分类库,该更新操作可以包括以下步骤:
步骤1,判断更新后的远程查询热度值集合中,是否包括第一历史查询热度值超过预设热度阈值的第一网络地址。
在本公开一些实施例中,可以预设热度阈值,该热度阈值可以用于对第一历史查询热度进行筛选,该热度阈值的数值可以根据应用场景进行设定,本实施例不作限制。例如:300。
一种可选的实施方式中,可以根据预设阈值,对更新后的远程查询热度值集合中的每条网络地址进行查询,判断该网络地址对应的热度值是否超过预设热度阈值,若超过该热度阈值,该网络地址可以为第一网络地址。可以理解地,该第一网络地址可以为一个网络地址,也可以为多个网络地址。
步骤2,若包括第一网络地址,则在本地分类库中存储第一网络地址和对应的网址类别。
在本公开一些实施例中,若远程查询热度值集合中包括第一网络地址,可以在本地分类库中增加第一网络地址及其对应的网址类别。
需要说明的是,该添加操作可以选择网络地址查询量小的时间段进行,包括但不限于:每天凌晨三点、每周一凌晨三点。
可以理解地,在本地分类库中增加第一网络地址及其对应的网址类别之后,若目标网络地址为第一网络地址,则访问本地分类库即可获取目标网络地址的目标网址类别,不需要对远程分类库进行访问,从而提高了网络地址的查询效率。
可选地,基于上述实施例,还可以对本地分类库中的网络地址和网址分类进行删除操作,该删除操作包括以下步骤:
步骤1,获取预存的与目标请求地区对应的本地查询热度值集合。
在本公开一些实施例中,可以统计目标请求地域对本地分类库的访问情况。该访问情况可以统计为本地查询热度值集合。本地查询热度值集合中可以包括来源于目标请求地区的,在本地分类库查询的所有网络地址,及所有网络地址对应的第二历史查询热度值。可以理解地,该第二历史查询热度值可以用于体现本地分类库中的网络地址的访问频率,该第二历史查询热度值可以根据具体地应用场景进行设定,本实施例不做限制。例如:统计一段时间内,对本地分类库中所有网络地址的访问次数,将该访问次数作为第二历史查询热度值。
步骤2,按照第二历史查询热度值由高到低的顺序,对本地查询热度值集合中的所有网络地址排序。
在本公开一些实施例中,可以按照第二历史查询热度值的降序,对本地查询热度值集合中的所有网络地址排序进行排序。
步骤3,删除位于排序结果最后一位的第二网络地址和对应的网址类别。
在本公开一些实施例中,若本地分类库需要增加一条网络地址,可以从本地分类库中,删除位于排序结果最后一位的第二网络地址及其对应的网址类别。可以理解地,还可以根据应用场景的不同,从本地分类库中,删除位于排序结果最后N位的多个第二网络地址及其对应的网址类别。其中,N为正整数,N可以根据应用场景进行设定,本实施例不作限制。一种可选的实施方式中,还可以设定热度阈值,删除本地分类库中,查询热度值小于热度阈值的第二网络地址及其对应的网络类别。
需要说明的是,该删除操作可以选择网络地址查询量小的时间段进行,包括但不限于:每天凌晨三点、每周一凌晨三点。上述远程分类库、远程查询热度值集合、本地查询热度值集合可以为同一个数据库,也可以不为同一个数据库;可以全部部署在远程,也可以不全部部署在远程。
可以理解地,对本地分类库进行删除操作,可以减小该本地分类库所占用的存储空间,从而减小了内存的占用,降低了网络地址的类别获取对内存性能的需求。
在本公开一些实施例中,目标网络地址可以为URL,对应的目标网址类别可以为URL类别。
在本地可以执行的操作包括:查询本地分类库URL、加载本地分类库URL、保存本地分类库URL。其中,加载本地分类库URL可以包括:本地设备启动时,将本地分类库加载到内存中;保存本地分类库URL可以包括:定期保存本地分类库到本地设备硬盘。
在远程可以执行的操作包括:查询远程分类库URL、管理远程分类库、更新本地分类库。其中,管理远程分类库可以包括:加载远程分类库、定期更新远程分类库、加载远程分类库到远程设备内存中。
举例而言,如图3所示,图3为本公开实施例提供的一种网络地址的类别获取的示意图。其他本地和远程可以执行的部分操作可以通过该实施例体现,该实施例包括以下步骤:
步骤1,响应于发送到本地的URL,在本地分类库中查询URL,若查询到URL类别,网络设备根据该URL类别对应的策略配置,对该URL对应的业务数据流进行阻断或者放行动作;若查询不到URL类别,则将URL发送到远程进行分类查询。
步骤2,远程接收到URL,在远程分类库中查询URL,获得URL类别,将URL类别发送到本地,本地根据该URL类别对应的策略配置,决定对该URL对应的业务数据流进行阻断或者放行动作。
步骤3,若在远程查询到URL类别,则累加该URL的第一历史查询热度值,根据该第一历史查询热度值,在本地分类库添加网络地址及其对应的网址分类;还可以根据第二历史查询热度值,对本地分类库删除URL及其对应的URL类别。在一些应用场景中,由于远程分类库中的URL类别会更新,还可以根据远程分类库对本地分类库中的URL类别进行更新,从而保证了根据本地分类库获取的URL类别的准确性。
本公开实施例的网络地址的类别获取方法,对第一历史查询热度值进行更新,可以统计出当前场景下,网络地址的查询热度,从而便于对本地分类库中的网络地址及其对应的网址分类进行更新。若对本地分类库中的网络地址及其对应的网址分类进行添加操作,可以降低访问远程分类库的概率,提高了网络地址的查询效率;若对本地分类库中的网络地址及其对应的网址分类进行删除操作,可以防止本地分类库占用的内存过大,降低了网络地址的类别获取对内存性能的需求。
图4为本公开实施例提供的一种网络地址的类别获取装置的结构示意图,该装置可由软件和/或硬件实现,一般可集成在电子设备中。
如图4所示,该装置网络地址的类别获取400可以包括:
第一获取模块401,用于响应于目标网络地址的分类请求,获取所述分类请求的目标请求地区;
第二获取模块402,用于获取预设的与所述目标请求地区对应的本地分类库;
第一判断模块403,用于判断所述本地分类库中是否包含所述目标网络地址对应的目标网址类别;
第一查询模块404,用于若不包含所述目标网址类别,则查询预设的远程分类库以获取所述目标网络地址的网址类别。
可选地,所述装置,还包括:
第二查询模块,用于若包含所述目标网址类别,则确定所述目标网址类别为所述目标网络地址的网址类别。
可选地,所述装置,还包括:
第三获取模块,用于获取预存的与所述目标请求地区对应的远程查询热度值集合,其中,所述远程查询热度值集合中包括来源于所述目标请求地区的,在所述远程分类库查询的所有网络地址,及所述所有网络地址对应的第一历史查询热度值;
第四获取模块,用于根据所述远程查询热度值集合,获取所述目标网络地址的第一历史查询热度值;
更新模块,用于计算预设的单位热度值和所述目标网络地址的第一历史查询热度值的相加和,根据所述相加和更新所述目标网络地址的第一历史查询热度值。
可选地,所述装置,还包括:
第二判断模块,用于判断更新后的所述远程查询热度值集合中,是否包括所述第一历史查询热度值超过预设热度阈值的第一网络地址;
第三判断模块,用于若包括所述第一网络地址,则在所述本地分类库中存储所述第一网络地址和对应的网址类别。
可选地,所述装置,还包括:
第五获取模块,用于获取预存的与所述目标请求地区对应的本地查询热度值集合,其中,所述本地查询热度值集合中包括来源于所述目标请求地区的,在所述本地分类库查询的所有网络地址,及所述所有网络地址对应的第二历史查询热度值;
第一排序模块,用于按照所述第二历史查询热度值由高到低的顺序,对所述本地查询热度值集合中的所有网络地址排序;
删除模块,用于删除位于排序结果最后一位的第二网络地址和对应的网址类别。
可选地,所述装置,还包括:
第六获取模块,用于获取预设时段内来源于所述目标请求地区的所有分类请求;
统计模块,用于统计所述所有分类请求对应的所有第三网络地址和对应的请求次数;
第二排序模块,用于按照所述请求次数由高到低的顺序对所述第三网络地址排序;
第七获取模块,用于获取位于排序结果前预设位数的多个第三网络地址的网址类别;
生成模块,用于根据所述多个第三网络地址和对应的网址类别生成所述本地分类库。
本公开实施例所提供的网络地址的类别获取装置可执行本公开任意实施例所提供的网络地址的类别获取方法,具备执行方法相应的功能模块和有益效果。
除了上述方法和装置以外,本公开实施例还提供了一种计算机可读存储介质,计算机可读存储介质中存储有指令,当所述指令在终端设备上运行时,使得所述终端设备实现本公开实施例所述的网络地址的类别获取方法。
本公开实施例还提供了一种计算机程序产品,包括计算机程序/指令,该计算机程序/指令被处理器执行时实现本公开任意实施例所提供的网络地址的类别获取方法。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
图5为本公开实施例提供的一种电子设备的结构示意图。
下面具体参考图5,其示出了适于用来实现本公开实施例中的电子设备500的结构示意图。本公开实施例中的电子设备500可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图5示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图5所示,电子设备500可以包括处理装置(例如中央处理器、图形处理器等)501,其可以根据存储在只读存储器(ROM)502中的程序或者从存储装置508加载到随机访问存储器(RAM)503中的程序而执行各种适当的动作和处理。在RAM 503中,还存储有电子设备500操作所需的各种程序和数据。处理装置501、ROM 502以及RAM503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。
通常,以下装置可以连接至I/O接口505:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置506;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置507;包括例如磁带、硬盘等的存储装置508;以及通信装置509。通信装置509可以允许电子设备500与其他设备进行无线或有线通信以交换数据。虽然图5示出了具有各种装置的电子设备500,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在非暂态计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置509从网络上被下载和安装,或者从存储装置508被安装,或者从ROM 502被安装。在该计算机程序被处理装置501执行时,执行本公开实施例的网络地址的类别获取方法中限定的上述功能。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行***、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
在一些实施方式中,客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol,超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信,并且可以与任意形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”),广域网(“WAN”),网际网(例如,互联网)以及端对端网络(例如,ad hoc端对端网络),以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:响应于目标网络地址的分类请求,获取分类请求的目标请求地区;获取预设的与目标请求地区对应的本地分类库;判断本地分类库中是否包含目标网络地址对应的目标网址类别;若不包含目标网址类别,则查询预设的远程分类库以获取目标网络地址的网址类别。本公开实施例,通过获取与目标请求地区对应的本地分类库,在一些应用场景中,避免了对远程分类库的访问与获取,减少了内存的占用,并且提高了网络地址的查询效率。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括但不限于面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的***、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的***来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元的名称在某种情况下并不构成对该单元本身的限定。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上***(SOC)、复杂可编程逻辑设备(CPLD)等等。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行***、装置或设备使用或与指令执行***、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体***、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
此外,虽然采用特定次序描绘了各操作,但是这不应当理解为要求这些操作以所示出的特定次序或以顺序次序执行来执行。在一定环境下,多任务和并行处理可能是有利的。同样地,虽然在上面论述中包含了若干具体实现细节,但是这些不应当被解释为对本公开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实施例中。相反地,在单个实施例的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实施例中。
尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题,但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反,上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本公开的具体实施方式,使本领域技术人员能够理解或实现本公开。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本公开的精神或范围的情况下,在其它实施例中实现。因此,本公开将不会被限制于本文所述的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种网络地址的类别获取方法,其特征在于,包括以下步骤:
响应于目标网络地址的分类请求,获取所述分类请求的目标请求地区;
获取预设的与所述目标请求地区对应的本地分类库;
判断所述本地分类库中是否包含所述目标网络地址对应的目标网址类别;
若不包含所述目标网址类别,则查询预设的远程分类库以获取所述目标网络地址的网址类别。
2.如权利要求1所述的方法,其特征在于,在所述判断所述本地分类库中是否包含所述目标网络地址对应的目标网址类别之后,还包括:
若包含所述目标网址类别,则确定所述目标网址类别为所述目标网络地址的网址类别。
3.如权利要求1所述的方法,其特征在于,还包括:
获取预存的与所述目标请求地区对应的远程查询热度值集合,
其中,所述远程查询热度值集合中包括来源于所述目标请求地区的,在所述远程分类库查询的所有网络地址,及所述所有网络地址对应的第一历史查询热度值;
根据所述远程查询热度值集合,获取所述目标网络地址的第一历史查询热度值;
计算预设的单位热度值和所述目标网络地址的第一历史查询热度值的相加和,根据所述相加和更新所述目标网络地址的第一历史查询热度值。
4.如权利要求3所述的方法,其特征在于,还包括:
判断更新后的所述远程查询热度值集合中,是否包括所述第一历史查询热度值超过预设热度阈值的第一网络地址;
若包括所述第一网络地址,则在所述本地分类库中存储所述第一网络地址和对应的网址类别。
5.如权利要求4所述的方法,其特征在于,还包括:
获取预存的与所述目标请求地区对应的本地查询热度值集合,
其中,所述本地查询热度值集合中包括来源于所述目标请求地区的,在所述本地分类库查询的所有网络地址,及所述所有网络地址对应的第二历史查询热度值;
按照所述第二历史查询热度值由高到低的顺序,对所述本地查询热度值集合中的所有网络地址排序;
删除位于排序结果最后一位的第二网络地址和对应的网址类别。
6.如权利要求1-5任一所述的方法,其特征在于,在所述获取预设的与所述目标请求地区对应的本地分类库之前,还包括:
获取预设时段内来源于所述目标请求地区的所有分类请求;
统计所述所有分类请求对应的所有第三网络地址和对应的请求次数;
按照所述请求次数由高到低的顺序对所述第三网络地址排序;
获取位于排序结果前预设位数的多个第三网络地址的网址类别;
根据所述多个第三网络地址和对应的网址类别生成所述本地分类库。
7.一种网络地址的类别获取装置,其特征在于,所述装置包括:
第一获取模块,用于响应于目标网络地址的分类请求,获取所述分类请求的目标请求地区;
第二获取模块,用于获取预设的与所述目标请求地区对应的本地分类库;
第一判断模块,用于判断所述本地分类库中是否包含所述目标网络地址对应的目标网址类别;
第一查询模块,用于若不包含所述目标网址类别,则查询预设的远程分类库以获取所述目标网络地址的网址类别。
8.一种电子设备,其特征在于,所述电子设备包括:
处理器;
用于存储所述处理器可执行指令的存储器;
所述处理器,用于从所述存储器中读取所述可执行指令,并执行所述指令以实现上述权利要求1-6中任一项所述的网络地址的类别获取方法。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有指令,当所述指令在终端设备上运行时,使得所述终端设备实现如权利要求1-6中任一项所述的网络地址的类别获取方法。
10.一种计算机程序产品,其特征在于,所述计算机程序产品包括计算机程序/指令,所述计算机程序/指令被处理器执行时实现如权利要求1-6中任一项所述的网络地址的类别获取方法。
CN202110540044.3A 2021-05-18 2021-05-18 网络地址的类别获取方法、装置、设备及存储介质 Active CN113177169B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110540044.3A CN113177169B (zh) 2021-05-18 2021-05-18 网络地址的类别获取方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110540044.3A CN113177169B (zh) 2021-05-18 2021-05-18 网络地址的类别获取方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN113177169A true CN113177169A (zh) 2021-07-27
CN113177169B CN113177169B (zh) 2024-06-25

Family

ID=76929338

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110540044.3A Active CN113177169B (zh) 2021-05-18 2021-05-18 网络地址的类别获取方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN113177169B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115858959A (zh) * 2022-12-27 2023-03-28 中国电子产业工程有限公司 一种数据处理方法、装置、电子设备以及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102349314A (zh) * 2009-03-10 2012-02-08 诺基亚公司 基于用户地理位置来访问内容的方法和装置
CN103036977A (zh) * 2012-12-13 2013-04-10 北京奇虎科技有限公司 基于内容分发网络的业务推送方法及推送***
CN109040153A (zh) * 2017-06-08 2018-12-18 中兴通讯股份有限公司 缓存内容的缓存方法、相关设备和计算机可读存储介质
CN109271438A (zh) * 2018-10-10 2019-01-25 上海艾融软件股份有限公司 一种数据库访问方法及其***
CN109726340A (zh) * 2018-12-21 2019-05-07 武汉思普崚技术有限公司 统一资源定位符分类的查询方法及装置
CN111753223A (zh) * 2020-06-09 2020-10-09 北京天空卫士网络安全技术有限公司 一种访问控制的方法和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102349314A (zh) * 2009-03-10 2012-02-08 诺基亚公司 基于用户地理位置来访问内容的方法和装置
CN103036977A (zh) * 2012-12-13 2013-04-10 北京奇虎科技有限公司 基于内容分发网络的业务推送方法及推送***
CN109040153A (zh) * 2017-06-08 2018-12-18 中兴通讯股份有限公司 缓存内容的缓存方法、相关设备和计算机可读存储介质
CN109271438A (zh) * 2018-10-10 2019-01-25 上海艾融软件股份有限公司 一种数据库访问方法及其***
CN109726340A (zh) * 2018-12-21 2019-05-07 武汉思普崚技术有限公司 统一资源定位符分类的查询方法及装置
CN111753223A (zh) * 2020-06-09 2020-10-09 北京天空卫士网络安全技术有限公司 一种访问控制的方法和装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115858959A (zh) * 2022-12-27 2023-03-28 中国电子产业工程有限公司 一种数据处理方法、装置、电子设备以及存储介质

Also Published As

Publication number Publication date
CN113177169B (zh) 2024-06-25

Similar Documents

Publication Publication Date Title
CN114422267B (zh) 流量检测方法、装置、设备及介质
CN110362750B (zh) 目标用户确定方法、装置、电子设备和计算机可读介质
CN111400625B (zh) 页面处理方法、装置、电子设备及计算机可读存储介质
CN111291258A (zh) 搜索热词的推荐方法、装置、电子设备及可读介质
CN111950857A (zh) 基于业务指标的指标体系管理方法、装置以及电子设备
CN110633434A (zh) 一种页面缓存方法、装置、电子设备及存储介质
CN112906394A (zh) 地址识别方法、装置、设备和存储介质
CN113886336A (zh) 流量检测方法、装置、设备及介质
CN109992719B (zh) 用于确定推送优先级信息的方法和装置
CN111241137A (zh) 数据处理方法、装置、电子设备及存储介质
CN111309496A (zh) 延时任务实现方法、***、装置、设备、存储介质
CN114598530A (zh) 工控防火墙白名单规则匹配方法、装置及相关设备
CN113177169B (zh) 网络地址的类别获取方法、装置、设备及存储介质
CN111797353A (zh) 信息推送方法、装置和电子设备
CN114650295B (zh) Cdn质量调度方法、装置、介质和电子设备
CN113360348B (zh) 异常请求处理方法、装置、电子设备和存储介质
CN114925304A (zh) 一种信息访问方法、装置和***
CN113518132B (zh) 网络地址的类别识别方法、装置、设备及存储介质
CN113760178A (zh) 缓存数据处理方法、装置、电子设备和计算机可读介质
CN111787043A (zh) 数据请求方法和装置
US8296055B2 (en) Method and system for positional communication
CN116662672B (zh) 价值对象信息发送方法、装置、设备和计算机可读介质
CN116541421B (zh) 地址查询信息生成方法、装置、电子设备与计算机介质
CN111385643B (zh) 存储数据的方法、装置、电子设备及存储介质
CN115878642A (zh) 一种基于数据湖的批流一体的数据处理方法、装置及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant