CN103207859B - 整合数据库的方法和装置 - Google Patents

Abstract

本发明提供一种整合数据库的方法和装置，涉及数据领域，为解决现有技术中需要人工整合数据库的方法的技术问题而发明。所述方法包括：从第一数据库中分别获取一第一兴趣点的基本属性、所述第一兴趣点的附加属性；从第二数据库中获取各个第二兴趣点的基本属性；根据所述第一兴趣点的基本属性、所述第二数据库中各个所述第二兴趣点的基本属性，生成所述第一兴趣点和各个所述第二兴趣点之间的相似度；判断所述第二数据库中是否包含有与所述第一兴趣点之间的相似度大于第一预定值的第二兴趣点，生成第一判断结果；如果所述第一判断结果为否，则将第一兴趣点的基本属性和所述第一兴趣点的附加属性复制到所述第二数据库中。本发明提高了数据处理效率。

Description

整合数据库的方法和装置

技术领域

本发明涉及数据库领域，特别是指一种整合数据库的方法和装置。

背景技术

现阶段中，兴趣点属性整合过程基本上都是采用人工搜索查询的方法来比对，把相同信息的索引整合在一起。这种传统的制作方式已经很难满足日益增长的大规模快速更新索引数据的要求。这种传统方式耗费人工，效率低下。

发明内容

本发明要解决的技术问题是提供一种整合数据库的方法和装置，提高了整合数据库的效率。

为解决上述技术问题，本发明的实施例提供技术方案如下：

一方面，提供一种整合数据库的方法，包括：

从第一数据库中分别获取一第一兴趣点的基本属性、所述第一兴趣点的附加属性；

从第二数据库中获取各个第二兴趣点的基本属性；

根据所述第一兴趣点的基本属性、所述第二数据库中各个所述第二兴趣点的基本属性，生成所述第一兴趣点和各个所述第二兴趣点之间的相似度；

判断所述第二数据库中是否包含有与所述第一兴趣点之间的相似度大于第一预定值的第二兴趣点，生成第一判断结果；

如果所述第一判断结果为否，则将所述第一兴趣点的基本属性和所述第一兴趣点的附加属性复制到所述第二数据库中；

如果第一判断结果为是，则进行所述第一兴趣点的附加属性和与所述第一兴趣点之间的相似度大于第一预定值的所述第二兴趣点的附加属性之间的整合。

所述的整合数据库的方法，其特征在于，还包括：

从所述第二数据库中分别获取一第二兴趣点的基本属性；

从所述第一数据库中获取各个第一兴趣点的基本属性；

根据所述第二兴趣点的基本属性、第一数据库中各个第一兴趣点的基本属性，生成所述第二兴趣点和各个所述第一兴趣点之间的相似度；

判断所述第一数据库中是否包含与所述第二兴趣点的相似度大于第二预定值的第一兴趣点，生成第二判断结果；

如果所述第二判断结果为否，则从所述第一数据库删除所述第二兴趣点的基本属性和所述第二兴趣点的附加属性。

所述进行所述第一兴趣点的附加属性和与所述第一兴趣点之间的相似度大于第一预定值的所述第二兴趣点的附加属性之间的整合的步骤包括：

从与所述第一兴趣点之间的相似度大于预定值的第二兴趣点中，选择相似度最高的第二兴趣点；

进行所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性的数据整合。

所述进行所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性的数据整合的步骤包括：

判断所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性是否相同；如果相同，则不进行处理；如果不相同，则使用所述第一兴趣点的附加属性更新所述相似度最高的第二兴趣点的附加属性；或者

判断所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性是否相同；如果相同，则不进行处理；如果不相同，则将所述第一兴趣点的附加属性添加所述相似度最高的第二兴趣点的附加属性中。

所述基本属性包括：兴趣点的名称、兴趣点的地址以及兴趣点的电话号码中的一个或多个的任意组合。

另一方面，提供一种整合数据库的装置，包括：

第一获取单元，从第一数据库中分别获取一第一兴趣点的基本属性、所述第一兴趣点的附加属性；

第二获取单元，从第二数据库中获取各个第二兴趣点的基本属性；

第一生成单元，根据所述第一兴趣点的基本属性、所述第二数据库中各个所述第二兴趣点的基本属性，生成所述第一兴趣点和各个所述第二兴趣点之间的相似度；

第一判断单元，判断所述第二数据库中是否包含有与所述第一兴趣点之间的相似度大于第一预定值的第二兴趣点，生成第一判断结果；

复制单元，如果所述第一判断结果为否，则将所述第一兴趣点的基本属性和所述第一兴趣点的附加属性复制到所述第二数据库中；

整合单元，如果第一判断结果为是，则进行所述第一兴趣点的附加属性和与所述第一兴趣点之间的相似度大于第一预定值的所述第二兴趣点的附加属性之间的整合。

所述的整合数据库的装置还包括：

第三获取单元，从所述第二数据库中分别获取一第二兴趣点的基本属性；

第四获取单元，从所述第一数据库中获取各个第一兴趣点的基本属性；

第二生成单元，根据所述第二兴趣点的基本属性、第一数据库中各个第一兴趣点的基本属性，生成所述第二兴趣点和各个所述第一兴趣点之间的相似度；

第二判断单元，判断所述第一数据库中是否包含与所述第二兴趣点的相似度大于第二预定值的第一兴趣点，生成第二判断结果；

删除单元，如果所述第二判断结果为否，则从所述第一数据库删除所述第二兴趣点的基本属性和所述第二兴趣点的附加属性。

所述整合单元包括：

选择子单元，从与所述第一兴趣点之间的相似度大于预定值的第二兴趣点中，选择相似度最高的第二兴趣点；

整合子单元，进行所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性的数据整合。

所述整合子单元具体为：

判断所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性是否相同；如果相同，则不进行处理；如果不相同，则使用所述第一兴趣点的附加属性更新所述相似度最高的第二兴趣点的附加属性；或者

判断所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性是否相同；如果相同，则不进行处理；如果不相同，则将所述第一兴趣点的附加属性添加所述相似度最高的第二兴趣点的附加属性中。

所述基本属性包括：兴趣点的名称、兴趣点的地址以及兴趣点的电话号码中的一个或多个的任意组合。

本发明的实施例具有以下有益效果：

上述方案中，从第一数据库中获取第一兴趣点的基本属性、所述第一兴趣点的附加属性；根据所述第一兴趣点的基本属性、第二数据库中各个第二兴趣点的基本属性，生成所述第一兴趣点和各个所述第二兴趣点之间的相似度；判断所述第二数据库中是否包含有与所述第一兴趣点之间的相似度大于第一预定值的第二兴趣点，生成第一判断结果；如果所述第一判断结果为否，则将所述第一兴趣点的基本属性和所述第一兴趣点的附加属性复制到所述第二数据库中；如果第一判断结果为是，则进行所述第一兴趣点的附加属性和所述第二兴趣点的附加属性之间的整合，能够实现第一数据库和第二数据库之间的自动数据整合，提供了作业效率。

附图说明

图1表示本发明所示的整合数据库的方法的流程示意图；

图2表示本发明所示的一种整合数据库的装置的结构示意图；

图3表示本发明所示的整合数据库的方法的一应用场景的流程示意图；

图4表示本发明所示的整合数据库的方法的另一应用场景的流程示意图。

具体实施方式

为使本发明的实施例要解决的技术问题、技术方案和优点更加清楚，下面将结合附图及具体实施例进行详细描述。

如图1所示，为本发明所示的一种整合数据库的方法，包括：

步骤11，从第一数据库中获取第一兴趣点的基本属性、所述第一兴趣点的附加属性；所述基本属性包括：兴趣点的名称、兴趣点的地址以及兴趣点的电话号码中的一个或多个的任意组合。所述附加属性可以为：营业时间、营业价格等营业信息。例如，第一数据库可以为新版本的数据库，第二数据库可以为旧版本的数据库。例如，第一数据库中包括多个第一兴趣点，ID为1的第一兴趣点的基本属性为：名称：新世界酒店，地址：朝阳门外大街1号，电话号码：010-65978888。ID为1的第一兴趣点的附加属性为：营业时间：9.00-16.00，营业种类：西餐、菜品价格、最新的团购价格等等。本领域技术人员明白，第一数据库可以包含很多条的兴趣点记录。

步骤12，从第二数据库中获取各个第二兴趣点的基本属性；

步骤13，根据所述第一兴趣点的基本属性、第二数据库中各个第二兴趣点的基本属性，生成所述第一兴趣点和各个所述第二兴趣点之间的相似度；具体差分细则如下：根据名称，地址，电话相似度，计算相似度：

相同：新版兴趣点与上版兴趣点的名称、电话、地址均相等，相似度为100；

相似度高：例如：

第一数据库的兴趣点的基本属性：

第二数据库的基本属性：

该例中，电话相等与名称相似度高，相似度计算为95。可以利用现有技术中计算相似度的方法，根据两个兴趣点的基本属性计算两个兴趣点之间的相似度。

步骤14，判断所述第二数据库中是否包含有与所述第一兴趣点之间的相似度大于第一预定值的第二兴趣点，生成第一判断结果；

步骤15，如果所述第一判断结果为否，则将所述第一兴趣点的基本属性和所述第一兴趣点的附加属性复制到所述第二数据库中；

步骤16，如果第一判断结果为是，则进行所述第一兴趣点的附加属性和与所述第一兴趣点之间的相似度大于第一预定值的所述第二兴趣点的附加属性之间的整合。

在一个实施例中，步骤16包括：

步骤161A，判断所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性是否相同；

步骤162A，如果相同，则不进行处理；

步骤163A，如果不相同，则使用所述第一兴趣点的附加属性更新所述相似度最高的第二兴趣点的附加属性。当附加属性有时间性，需要不断更新时，则使用所述第一兴趣点的附加属性更新所述相似度最高的第二兴趣点的附加属性。该步骤具体可以根据附加属性的不同类别分别进行更新。例如，第一兴趣点的名称为西单商场，相似度最高的第二兴趣点的名称为西单商场；附加属性的类别中包括最新打折信息类别，则可以使用所述第一兴趣点的最新打折信息更新所述相似度最高的第二兴趣点的最新打折信息。

在另一个实施例中，步骤16包括：

步骤161B，判断所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性是否相同；

步骤162B，如果相同，则不进行处理；

步骤163B，如果不相同，则将所述第一兴趣点的附加属性添加所述相似度最高的第二兴趣点的附加属性中。

分别对第一数据库中的每个第一兴趣点进行步骤11-15的处理。

可选的，为了保证数据库的准确性，去掉过时的兴趣点，所述的整合数据库的方法还包括：

步骤17，从所述第二数据库中分别获取一第二兴趣点的基本属性；分别对第二数据库中的每个第二兴趣点进行步骤16-19的处理。为了减少数据的处理量，该步骤中获取的第二兴趣点可以为第二数据库中除上述的相似度最高的第二兴趣点以外的剩余第二兴趣点。

步骤18，从所述第一数据库中获取各个第一兴趣点的基本属性；

步骤19，根据所述第二兴趣点的基本属性、第一数据库中各个第一兴趣点的基本属性，生成所述第二兴趣点和各个所述第一兴趣点之间的相似度；

步骤110，判断所述第一数据库中是否包含与所述第二兴趣点的相似度大于第二预定值的第一兴趣点，生成第二判断结果；可选的，所述第二预定值和第一预定值可以设置为相等，可以为85。

步骤111，如果所述第二判断结果为否，则从所述第一数据库删除所述第二兴趣点的基本属性和所述第二兴趣点的附加属性。如果所述第二判断结果为是，则不作处理。

如图2所示，为本发明所述的整合数据库的装置，包括：

第一获取单元21，从第一数据库中获取第一兴趣点的基本属性、所述第一兴趣点的附加属性；

第二获取单元22，从第二数据库中获取各个第二兴趣点的基本属性；

第一生成单元23，根据所述第一兴趣点的基本属性、第二数据库中各个第二兴趣点的基本属性，生成所述第一兴趣点和各个所述第二兴趣点之间的相似度；

第一判断单元24，判断所述第二数据库中是否包含有与所述第一兴趣点之间的相似度大于第一预定值的第二兴趣点，生成第一判断结果；

复制单元25，如果所述第一判断结果为否，则将所述第一兴趣点的基本属性和所述第一兴趣点的附加属性复制到所述第二数据库中；

整合单元26，如果第一判断结果为是，则进行所述第一兴趣点的附加属性和与所述第一兴趣点之间的相似度大于第一预定值的所述第二兴趣点的附加属性之间的整合。

所述的整合数据库的装置，还包括：

第三获取单元27，从所述第二数据库中分别获取一第二兴趣点的基本属性；

第四获取单元28，从所述第一数据库中获取各个第一兴趣点的基本属性；

第二生成单元29，根据所述第二兴趣点的基本属性、第一数据库中各个第一兴趣点的基本属性，生成所述第二兴趣点和各个所述第一兴趣点之间的相似度；

第二判断单元210，判断所述第一数据库中是否包含与所述第二兴趣点的相似度大于第二预定值的第一兴趣点，生成第二判断结果；

删除单元211，如果所述第二判断结果为否，则从所述第一数据库删除所述第二兴趣点的基本属性和所述第二兴趣点的附加属性。

所述整合单元26包括：

选择子单元261，从与所述第一兴趣点之间的相似度大于预定值的第二兴趣点中，选择相似度最高的第二兴趣点；

整合子单元262，进行所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性的数据整合。

所述整合子单元262具体为：

判断所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性是否相同；如果相同，则不进行处理；如果不相同，则使用所述第一兴趣点的附加属性更新所述相似度最高的第二兴趣点的附加属性；或者

判断所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性是否相同；如果相同，则不进行处理；如果不相同，则将所述第一兴趣点的附加属性添加所述相似度最高的第二兴趣点的附加属性中。

所述基本属性包括：兴趣点的名称、兴趣点的地址以及兴趣点的电话号码中的一个或多个的任意组合。

本发明提供一种快速整合和更新兴趣点的附加属性的流程的应用场景。该方法在解决索引数据的生产过程中，提高了数据的生产效率与数据准确率。该应用场景中，包括渠道来源的第一数据库(新版本)和渠道来源第二数据库(旧版本)以及基础数据库；首先，使用第二数据库更新基础数据库；然后根据第二数据库和第二数据库之间的差分结果更新基础数据库。

其中，DP(DatabasePOI)为基础库索引数据；CP(CtripPOI)为渠道来源索引数据；NP(NewPOI)为渠道来源，基础库无，新增的索引数据；AP(AllPOI)为所有的兴趣点，基础库数据与渠道来源信息的整合结果。

包括以下步骤：首先，获取渠道来源信息；然后，与现有索引进行关联；然后，补充索引数据，然后，整合渠道来源与基础数据，AP＝DP+NP。

如图3所示，整合的具体实施过程如下：

首先，获取数据，获取兴趣点的多方面信息，即附加属性。例如，兴趣点为北京龙乡饭店，新的信息为：龙乡饭店的菜品价格。

然后，与基础库中的现有索引进行关联：例如，将龙乡饭店的菜品价格与基础库中的龙乡饭店进行关联。

然后，新增基础库无且渠道有的兴趣点。例如，如果基础库中无龙乡饭店，则在基础库中增加龙乡饭店和龙乡饭店的菜品价格关联。

然后，整合渠道数据与基础数据。

如图4所示，以第一数据库和第二数据库进行差分，来更新基础数据库为例说明。如图所示，更新数据的具体实施过程如下：

首先，定期从专业接口获取数据，作为第一数据库；与上版本数据进行差分，上版本的数据作为第二数据库；

然后，分为以下几种情况：

(1)新增的兴趣点属性：

(1.1)基础库有数据兴趣点的，将兴趣点属性与基础库的兴趣点建立关联；

(1.2)基础库无数据的，根据门址信息补充索引；

(2)删除的兴趣点属性：

(2.1).上版基础库有数据的，删除关联关系，保留索引；

(2.2)上版基础库无数据的，删除上版补充索引；

(3)复制相同的兴趣点属性；

然后，整合结果。

本发明提供了一种快速整合兴趣点属性的方法，解决了传统方式耗费人工，效率低下，出错概率大等弊端，使整合兴趣点属性更加准确、快速、高效。

本发明的技术关键点是基于兴趣点属性，如何实现快速整合与更新的一个实用新型流程与方法。利用此发明可以将多个渠道来源的兴趣点信息快速准确的整合，在原有地图数据基础上不断丰富兴趣点属性，最大程度满足客户查询索引时对生活信息的要求，不断加快地图数据更新速度与数据库建设，提高数据精度和电子地图的制作工艺，为各类客户提供及时高效的地理信息服务。

Claims (10)

1.一种整合数据库的方法，其特征在于，包括：

从第一数据库中分别获取一第一兴趣点的基本属性、所述第一兴趣点的附加属性；

从第二数据库中获取各个第二兴趣点的基本属性；

根据所述第一兴趣点的基本属性、所述第二数据库中各个所述第二兴趣点的基本属性，生成所述第一兴趣点和各个所述第二兴趣点之间的相似度；

判断所述第二数据库中是否包含有与所述第一兴趣点之间的相似度大于第一预定值的第二兴趣点，生成第一判断结果；

如果所述第一判断结果为否，则将所述第一兴趣点的基本属性和所述第一兴趣点的附加属性复制到所述第二数据库中；

如果第一判断结果为是，则进行所述第一兴趣点的附加属性和与所述第一兴趣点之间的相似度大于第一预定值的所述第二兴趣点的附加属性之间的整合。

2.根据权利要求1所述的整合数据库的方法，其特征在于，还包括：

从所述第二数据库中分别获取一第二兴趣点的基本属性；

从所述第一数据库中获取各个第一兴趣点的基本属性；

根据所述第二兴趣点的基本属性、第一数据库中各个第一兴趣点的基本属性，生成所述第二兴趣点和各个所述第一兴趣点之间的相似度；

判断所述第一数据库中是否包含与所述第二兴趣点的相似度大于第二预定值的第一兴趣点，生成第二判断结果；

如果所述第二判断结果为否，则从所述第一数据库删除所述第二兴趣点的基本属性和所述第二兴趣点的附加属性。

3.根据权利要求1所述的整合数据库的方法，其特征在于，所述进行所述第一兴趣点的附加属性和与所述第一兴趣点之间的相似度大于第一预定值的所述第二兴趣点的附加属性之间的整合的步骤包括：

从与所述第一兴趣点之间的相似度大于预定值的第二兴趣点中，选择相似度最高的第二兴趣点；

进行所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性的数据整合。

4.根据权利要求3所述的整合数据库的方法，其特征在于，所述进行所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性的数据整合的步骤包括：

判断所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性是否相同；如果相同，则不进行处理；如果不相同，则使用所述第一兴趣点的附加属性更新所述相似度最高的第二兴趣点的附加属性；或者

判断所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性是否相同；如果相同，则不进行处理；如果不相同，则将所述第一兴趣点的附加属性添加所述相似度最高的第二兴趣点的附加属性中。

5.根据权利要求1所述的整合数据库的方法，其特征在于，所述基本属性包括：兴趣点的名称、兴趣点的地址以及兴趣点的电话号码中的一个或多个的任意组合。

6.一种整合数据库的装置，其特征在于，包括：

第一获取单元，从第一数据库中分别获取一第一兴趣点的基本属性、所述第一兴趣点的附加属性；

第二获取单元，从第二数据库中获取各个第二兴趣点的基本属性；

第一生成单元，根据所述第一兴趣点的基本属性、所述第二数据库中各个所述第二兴趣点的基本属性，生成所述第一兴趣点和各个所述第二兴趣点之间的相似度；

第一判断单元，判断所述第二数据库中是否包含有与所述第一兴趣点之间的相似度大于第一预定值的第二兴趣点，生成第一判断结果；

复制单元，如果所述第一判断结果为否，则将所述第一兴趣点的基本属性和所述第一兴趣点的附加属性复制到所述第二数据库中；

整合单元，如果第一判断结果为是，则进行所述第一兴趣点的附加属性和与所述第一兴趣点之间的相似度大于第一预定值的所述第二兴趣点的附加属性之间的整合。

7.根据权利要求6所述的整合数据库的装置，其特征在于，还包括：

第三获取单元，从所述第二数据库中分别获取一第二兴趣点的基本属性；

第四获取单元，从所述第一数据库中获取各个第一兴趣点的基本属性；

第二生成单元，根据所述第二兴趣点的基本属性、第一数据库中各个第一兴趣点的基本属性，生成所述第二兴趣点和各个所述第一兴趣点之间的相似度；

第二判断单元，判断所述第一数据库中是否包含与所述第二兴趣点的相似度大于第二预定值的第一兴趣点，生成第二判断结果；

删除单元，如果所述第二判断结果为否，则从所述第一数据库删除所述第二兴趣点的基本属性和所述第二兴趣点的附加属性。

8.根据权利要求6所述的整合数据库的装置，其特征在于，所述整合单元包括：

选择子单元，从与所述第一兴趣点之间的相似度大于预定值的第二兴趣点中，选择相似度最高的第二兴趣点；

整合子单元，进行所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性的数据整合。

9.根据权利要求8所述的整合数据库的装置，其特征在于，所述整合子单元具体为：

判断所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性是否相同；如果相同，则不进行处理；如果不相同，则使用所述第一兴趣点的附加属性更新所述相似度最高的第二兴趣点的附加属性；或者

判断所述第一兴趣点的附加属性和所述相似度最高的第二兴趣点的附加属性是否相同；如果相同，则不进行处理；如果不相同，则将所述第一兴趣点的附加属性添加所述相似度最高的第二兴趣点的附加属性中。

10.根据权利要求6所述的整合数据库的装置，其特征在于，所述基本属性包括：兴趣点的名称、兴趣点的地址以及兴趣点的电话号码中的一个或多个的任意组合。