CN101094051A - 数据一致性比对同步的***和方法 - Google Patents

数据一致性比对同步的***和方法 Download PDF

Info

Publication number
CN101094051A
CN101094051A CN 200710049383 CN200710049383A CN101094051A CN 101094051 A CN101094051 A CN 101094051A CN 200710049383 CN200710049383 CN 200710049383 CN 200710049383 A CN200710049383 A CN 200710049383A CN 101094051 A CN101094051 A CN 101094051A
Authority
CN
China
Prior art keywords
data
network element
comparison
module
synchronous
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 200710049383
Other languages
English (en)
Other versions
CN101094051B (zh
Inventor
郭正平
曾键
冯斌
陈刚
庞琳
王林
余涛
张超
程鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Group Sichuan Co Ltd
Original Assignee
China Mobile Group Sichuan Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Group Sichuan Co Ltd filed Critical China Mobile Group Sichuan Co Ltd
Priority to CN2007100493831A priority Critical patent/CN101094051B/zh
Publication of CN101094051A publication Critical patent/CN101094051A/zh
Application granted granted Critical
Publication of CN101094051B publication Critical patent/CN101094051B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Computer And Data Communications (AREA)

Abstract

数据一致性比对同步***和方法，其特征在于：本***包括显示层、用于各种数据的处理逻辑数据存储处理层，和接口层；所述数据存储处理层，包括数据采集模块、数据预处理模块、数据比对模块、数据同步模块和辅助模块；业务支撑网和业务承载网通过***接口层进行网元间的通信交互，数据采集模块从业务支撑网和/或业务承载网对要求保持一致的网元数据进行数据采集；数据预处理模块将采集到的网元数据进行预处理、解析得到有用的数据；数据比对模块对解析后的数据进行比对，不一致的数据被记录保存在差异列表中；根据数据比对处理后的结果，数据同步模块结合有效性验证规则对数据差异的有效性加以验证，对差异为有效的数据根据同步规则生成对应的同步数据，并把同步数据通过对应的接口发送至相关网元，然后在相关网元中执行相应操作使网元间数据保持一致；本发明可以提升数据比对同步水平和相关***运行效率，提高资源利用效率，确保相关***数据的准确性和一致性，避免因数据不一致带来客户投诉或业务收入流失，为业务收入和客户满意服务提供坚实的基础保证；本发明应用范围宽广，适用于通信、保险、银行等需要多网元协作的领域。

Description

数据一致性比对同步的***和方法
技术领域
本发明涉及多网元协作时的数据一致性检测处理管理领域，特别是一种数据一致性比对同步的***和方法。
背景技术
随着通信、网络服务产品的增多，受理渠道的多样化，网络业务平台的复杂化，常常需要多个网元共同配合来实现某项业务，这些相互配合的网元的某些数据必须保持一致，但是，由于网络故障、数据传输故障、干扰、突发事件以及企业产品设计的业务流程和管理制度的不完善等原因，网络中数据不一致情况日趋严重，由此造成的业务、计费及服务问题，导致了用户投诉增加，客户满意度降低，企业业务收入流失。目前，还没有良好的技术手段来解决数据不一致的检测、处理及相关的管理问题，通常是运营商被动地通过客户的投诉才发现网元间的数据不一致，最后发起对网元间数据的处理，保持业务支撑网单元和数据承载网单元的数据一致。
尤其是通信技术领域，发展非常迅速，通信运营商开发了众多产品和服务，这些产品和服务通常都承载在多个网元上。由于承载用户业务数据的网元间数据不一致，对外影响到用户的业务使用，导致用户的投诉；对内，***上生成了垃圾数据或遗漏了数据，对公司的资源利用和收入保障都造成了影响。
发明内容
本发明提供了一种解决上述问题的数据一致性比对同步的***和方法，可以通过完善的采集、比对以及同步处理来有效完成数据的一致性检测、处理及管理，从而可以提升数据比对同步水平和相关***运行效率，确保相关***客户数据的准确性和一致性，避免因客户数据的不一致带来客户投诉或业务收入流失，为业务收入和客户满意服务提供坚实的基础保证，提高资源利用效率。
本发明的技术方案如下：
数据一致性比对同步的***，其特征在于：包括显示层、数据存储处理层和接口层；所述显示层用于人机的数据交互，展现各种数据处理分析结果；所述数据存储处理层用于各种数据的处理逻辑，包括数据采集模块、数据预处理模块、数据比对模块、数据同步模块和辅助模块，数据采集模块用于采集数据，数据预处理模块用于对数据进行整理、转换和解析，数据比对模块用于数据比对，数据同步模块根据比对结果进行同步处理；所述***接口层用于***和各个网元的通信交互。
所述显示层是给使用本***的操作/维护/管理人员提供一个人机交互的门户界面，各种使用***的人员可以通过此门户进行统计提取、监控、告警以及相应的各种配置设置操作，同时对于***处理功能涉及到的各种规则、参数配置可以通过此门户实现。
所述数据存储处理层的辅助模块由稽核模块、调度模块、统计模块、分析模块、***管理模块以及其他模块中的一个至多个组合/集成而成。
所述***管理模块用于对***运行环境的各种设置的管理，包括进程调度、进程自动起停设置、数据备份的设置以及***运行日志管理；配置管理用于对***各个功能模块的配置数据的管理维护，包括配置表、配置文件的增、删、改、查操作；用户管理用于对使用***的所有操作人员的工号、口令、权限的管理，用户管理采用分层的工号权限管理机制，每个层次的工号具有相同的权限，而权限的管理由上一层次的用户进行权限赋予、更改和取消；***管理模块的告警设置及处理是对***监控到的异常产生告警信息，生成告警信息后，在告警监控界面显示并通过设定的方式及时通知。
所述***管理模块还具有选择自动/手动模式的功能，选择自动模式时，***可以自动完成数据一致性的比对同步过程，根据同步处理规则***自动生成同步数据并处理；选择手动模式，则可以通过人工干预分步骤完成数据一致性的比对同步过程。
所述告警监控界面可设定告警级别和告警方式，告警方式包括有短信，电子邮件，声音，光，页面图像，文本，表格方式等。
所述***接口层包括用于各网元间的数据采集接口，用于同步至各网元的数据同步接口，以及数据分发接口。
所述数据一致性比对同步***的硬件结构包括存储设备、FC-SWITCH与数据库服务器、WEB服务器、备份服务器、数据库/应用/接口服务器和交换机。
数据一致性比对同步方法，其特征在于具体步骤如下：
A、***通过接口层和网元进行通信交互，数据采集模块根据接口标准和参数适配从网元进行数据采集，通过数据预处理模块根据网元数据的情况，将采集到的网元数据进行预处理，然后进行解析处理得到有用的数据；
B、数据比对模块对步骤A得到的数据进行比对，不一致的数据被记录保存在差异列表中；
C、根据步骤B所述得到的差异列表，数据同步模块结合有效性验证规则对数据差异的有效性加以验证，对差异为有效的数据结合同步规则生成对应的同步数据，并把同步数据通过对应的接口发送至相关网元，然后在相关网元中执行相应的增加/删除/修改数据操作，使网元间数据保持一致。
所述网元是指网络中具有数据存储功能的节点，包括用于业务受理和管理的业务支撑网网元和用于实现业务的业务承载网网元。
所述数据采集是从网元获取数据的过程，采用全量采集和增量采集相结合的数据采集方式从网元采集数据；所述全量采集要求网元导出所有的要求保持一致的数据；所述增量采集是针对要求保持一致的数据，只采集上一次采集时间到当前采集时间内发生变化的数据。
所述采用全量采集和增量采集结合，是指在处理数据一致性问题时，采用全量采集来保证数据采集的全面性和准确性，尽可能不遗漏在基准时间段内网元间要求保持一致但实际不一致的数据；采用增量采集来保证数据采集的及时性，这样就可以避免重复采集已经保持一致的数据，浪费***的资源和时间。
所述全量采集和增量采集通过文件方式或联机方式实现要求保持一致的数据的采集。
所述联机方式指建立网络连接，通过网络传输采集到要求保持一致的数据的方式；所述文件方式指将要求保持一致的数据以文件方式保存，再通过文件拷贝或文件传输的方式采集到要求保持一致的数据。
所述联机方式包括采集连接建立和传输过程，采集连接建立是指由***或网元发起采集请求至建立采集连接的过程，采集连接根据采集协议的不同，建立不同的连接，如ftp、http、tcp/ip或自定义协议等。
所述预处理是在采集的网元数据还不能直接用于比对时，对网元数据进行处理，以用于进行比对的过程，预处理包括过滤、校验、修复、格式转换等操作中的零项至多项操作。所述数据的过滤是对采集数据中无效或者无用的数据进行排查过滤的过程；所述数据校验是对采集到的数据进行准确性和逻辑合理性的判断的过程；所述数据修复是根据数据本身的属性以及数据来源修复异常数据；所述格式转换是将网元数据从无法用于数据比对的格式的转换为可以用于数据比对的过程。
所述解析是将采集到的要求保持一致的网元数据根据数据含义确定用于比对的数据的对应关系的过程。
所述比对是对解析后的数据进行对比，然后发现并记录数据一致性情况的过程。
所述采集到的网元数据进行预处理和解析，然后进行数据比对；或者也可以先对网元数据进行预处理后再采集，然后再进行解析，最后进行数据比对。
所述差异列表是指通过比对生成的能反映网元数据一致性情况的记录集，一般情况差异列表为比对时发现的不一致的网元数据及其在网元的位置信息，如比对时发现A客户资料不一致，则将比对双方各自的A客户资料及其在网元的位置信息生成一条差异列表记录。
所述有效性验证采用单侧验证、双侧验证或豁免验证规则中的一种到多种规则进行验证；单侧验证指根据一侧的网元数据验证差异列表的数据差异是否需要执行同步处理；双侧验证是指根据两侧的网元数据验证差异列表的数据差异是否需要执行同步处理；豁免验证规则是指默认差异数据有效，从而不进行任何验证直接进行同步处理。
步骤C中，所述相关网元是指进行比对后数据不一致的网元；所述相应的就是指与同步规则相一致的。
完成一次数据比对和数据同步后，***自动生成统计报告并显示，同时根据结果，还可以进行告警处理和通知，并生成历史统计报告，通过统计报告进行统计查询。
比对处理后的结果保存到相应的库表后，采用比对稽核判断数据的平衡关系和日志来验证整个比对过程的完整性和比对的准确性；并且当数据比对和数据同步过程中出现的异常时，根据预先设置的处理策略进行处理解除异常，并生成异常数据表和日志。
所述比对稽核的数据平衡关系的总体为：
比对入口的数据总量＝比对出口的通过数据数量+比对出口的不通过数据数量。
本发明的有益效果如下：
1、本发明可以提升数据比对同步水平和相关***运行效率，确保相关***数据的准确性和一致性，避免因数据的不一致带来客户投诉或业务收入流失，为业务收入和客户满意服务提供坚实的基础保证，提高资源使用的有效性；
2、本发明采用全量和增量采集相结合的方式，可以保证数据采集的全面性和及时性，以及准确性，这样不仅可以尽可能不遗漏在基准时间段内网元间要求保持一致但实际不一致的数据，还可以避免重复采集已经保持一致的数据，浪费***的资源和时间；
3、本发明对网元数据进行比对，能主动、及时地检测出要求保持一致的网元数据的一致性，发现各网元数据之间的差异，并记录数据不一致的结果，提供给后续处理过程所需要的有效数据，从而为解决数据不一致性问题做好基础；
4、本发明能快速有效地解决数据的不一致性问题，通过同步处理能够有效确保网元数据的一致性，可以及时清除网元垃圾数据，提高资源利用率；
5、本发明还可以保证各***客户数据的管理，还可以提供基于数据比对以及数据同步的各种报告和统计报表，提供对于比对过程和同步过程的监控和告警，***具备一定的异常处理能力；
6、本发明应用范围宽广，适用于通信、保险、银行等需要多网元协作的各种领域。
附图说明
图1为本发明的***构架示意图
图2为本发明的数据处理流程图
图3为本发明的组网结构示意图
其中“----”表示光纤通道，“-”表示千兆/百兆以太网。
图4为本发明的数据比对流程图
图5为本发明采用BOSS***和业务网元的单向数据交互流程图
图6为本发明采用BOSS***和核心网元的单向数据交互流程图
图7为本发明采用BOSS***同时单向到业务网元和核心网单元的数据交互流程图
图8为本发明采用业务网元单向到BOSS的数据交互流程图
图9为本发明采用BOSS***和业务网元双向流向的数据交互流程图
图10为本发明的多个网元之间数据交互的流程图
具体实施方式
实施例1
数据一致性比对同步的***，包括显示层、数据存储处理层和接口层；所述显示层用于人机的数据交互，展现各种数据处理分析结果；所述数据存储处理层用于各种数据的处理逻辑，包括数据采集模块、数据预处理模块、数据比对模块、数据同步模块和辅助模块，数据采集模块用于采集数据，数据预处理模块用于对数据进行整理、转换和解析，数据比对模块用于数据比对，数据同步模块根据比对结果进行同步处理；所述***接口层用于***和各个网元的通信交互。
所述显示层是给使用本***的操作/维护/管理人员提供一个人机交互的门户界面，各种使用***的人员可以通过此门户进行统计提取、监控、告警以及相应的各种配置设置操作，同时对于***处理功能涉及到的各种规则、参数配置可以通过此门户实现。
所述数据存储处理层的辅助模块由稽核模块、调度模块、统计模块、分析模块、***管理模块以及其他模块中的一个至多个组合/集成而成。
所述***管理模块用于对***运行环境的各种设置的管理，包括进程调度、进程自动起停设置、数据备份的设置以及***运行日志管理；配置管理用于对***各个功能模块的配置数据的管理维护，包括配置表、配置文件的增、删、改、查操作；用户管理用于对使用***的所有操作人员的工号、口令、权限的管理，用户管理采用分层的工号权限管理机制，每个层次的工号具有相同的权限，而权限的管理由上一层次的用户进行权限赋予、更改和取消；***管理模块的告警设置及处理是对***监控到的异常产生告警信息，生成告警信息后，在告警监控界面显示并通过设定的方式及时通知。
所述***管理模块还具有选择自动/手动模式的功能，选择自动模式时，***可以自动完成数据一致性的比对同步过程，根据同步处理规则***自动生成同步数据并处理；选择手动模式，则可以通过人工干预分步骤完成数据一致性的比对同步过程。
所述告警监控界面可设定告警级别和告警方式，告警方式包括有短信，电子邮件，声音，光，页面图像，文本，表格方式等。
所述***接口层包括用于各网元间的数据采集接口，用于同步至各网元的数据同步接口，以及数据分发接口。
数据一致性比对同步方法，其具体步骤如下：
A、***通过接口层和网元进行通信交互，数据采集模块根据接口标准和参数适配从网元进行数据采集，通过数据预处理模块根据网元数据的情况，将采集到的网元数据进行预处理，然后进行解析处理得到有用的数据；
B、数据比对模块对步骤A得到的数据进行比对，不一致的数据被记录保存在差异列表中；
C、根据步骤B所述得到的差异列表，数据同步模块结合有效性验证规则对数据差异的有效性加以验证，对差异为有效的数据根据同步规则生成对应的同步数据，并把同步数据通过对应的接口发送至相关网元，然后在相关网元中执行相应的增加/删除/修改数据操作，使网元间数据保持一致。
所述网元是指网络中具有数据存储功能的节点，包括用于业务受理和管理的业务支撑网网元和用于实现业务的业务承载网网元。
所述数据采集是从网元获取数据的过程，采用全量采集和增量采集相结合的数据采集方式从网元采集数据；所述全量采集要求网元导出所有的要求保持一致的数据；所述增量采集是针对要求保持一致的数据，只采集上一次采集时间到当前采集时间内发生变化的数据。
通过全量采集和增量采集结合，是指在处理数据一致性问题时，采用全量采集来保证数据采集的全面性和准确性，尽可能不遗漏在基准时间段内网元间要求保持一致但实际不一致的数据；采用增量采集来保证数据采集的及时性，这样就可以避免重复采集已经保持一致的数据，浪费***的资源和时间。
所述全量采集和增量采集通过文件方式或联机方式实现要求保持一致的数据的采集。
所述联机方式指建立网络连接，通过网络传输采集到要求保持一致的数据的方式；所述文件方式指将要求保持一致的数据以文件方式保存，再通过文件拷贝或文件传输的方式采集到要求保持一致的数据。
所述联机方式包括采集连接建立和传输过程，采集连接建立是指由***或网元发采集请求至建立采集连接的过程，采集连接根据采集协议的不同，建立不同的连接，如ftp、http、tcp/ip或自定义协议等。
所述预处理是对采集的网元数据进行处理，以用于进行比对的过程，预处理包括过滤、校验、修复、格式转换等操作中的零项至多项操作。所述数据的过滤是对采集数据中无效或者无用的数据进行排查过滤的过程；所述数据校验是对采集到的数据进行准确性和逻辑合理性的判断的过程；所述数据修复是根据数据本身的属性以及数据来源修复异常数据；所述格式转换是将网元数据从无法用于数据比对的格式的转换为可以用于数据比对的过程。
所述解析是将采集到的网元数据根据数据含义确定要求保持一致的用于比对的数据的对应关系的过程。
所述比对是对解析后的数据进行对比，然后发现并记录数据一致性情况的过程。
所述采集到的网元数据进行预处理和解析，然后进行数据比对；或者也可以先对网元数据进行预处理后再采集，然后再进行解析，最后进行数据比对。
所述差异列表是指通过比对生成的能反映网元数据一致性情况的记录集，一般情况差异列表为比对时发现的不一致的网元数据及其在网元的位置信息，如比对时发现A客户资料不一致，则将比对双方各自的A客户资料及其在网元的位置信息生成一条差异列表记录。
所述有效性验证采用单侧验证、双侧验证或豁免验证规则中的一种到多种规则进行验证；单侧验证指根据一侧的网元数据验证差异列表的数据差异是否需要执行同步处理；双侧验证是指根据两侧的网元数据验证差异列表的数据差异是否需要执行同步处理；豁免验证规则是指默认差异数据有效，从而不进行任何验证直接进行同步处理。
步骤C中，所述相关网元是指进行比对后数据不一致的网元；所述相应的就是指与同步规则一致的。
完成一次数据比对和数据同步后，***自动生成统计报告并显示，同时根据结果，还可以进行告警处理和通知，并生成历史统计报告，通过统计报告进行统计查询。
比对处理后的结果保存到相应的库表后，采用比对稽核判断数据的平衡关系和日志来验证整个比对过程的完整性和比对的准确性；并且当数据比对和数据同步过程中出现的异常时，根据预先设置的处理策略进行处理解除异常，并生成异常数据表和日志。
所述比对稽核的数据平衡关系的总体为：
比对入口的数据总量＝比对出口的通过数据数量+比对出口的不通过数据数量。
实施例2
如图1～4所示，数据一致性比对同步的***，应用于移动通信领域时，包括显示层、数据存储处理层和接口层；所述显示层用于人机的数据交互，展现各种数据处理分析结果；所述数据存储处理层用于各种数据的处理逻辑，包括数据采集模块、数据预处理模块、数据比对模块、数据同步模块和辅助模块，数据采集模块用于采集数据，数据预处理模块用于对数据进行整理、转换和解析，数据比对模块用于数据比对，数据同步模块根据比对结果进行同步处理；所述***接口层用于***和各个网元的通信交互。
所述显示层是以Web方式给使用本***的操作/维护/管理人员提供一个人机交互的门户界面，各种使用***的人员可以通过此门户进行统计提取、监控、告警以及相应的各种配置设置操作。同时对于***处理功能涉及到的各种规则、参数配置通过所述Web界面实现。
所述数据存储处理层的辅助模块由稽核模块、调度模块、统计模块、分析模块、***管理模块以及其他模块中的一个至多个组合/集成而成。
所述***管理模块用于对***运行环境的各种设置的管理，包括进程调度、进程自动起停设置、数据备份的设置以及***运行日志管理；配置管理用于对***各个功能模块的配置数据的管理维护，包括配置表、配置文件的增、删、改、查操作；用户管理用于对使用***的所有操作人员的工号、口令、权限的管理，用户管理采用分层的工号权限管理机制，每个层次的工号具有相同的权限，而权限的管理由上一层次的用户进行权限赋予、更改和取消；***管理模块的告警设置及处理是对***监控到的异常产生告警信息，生成告警信息后，在告警监控界面显示并通过设定的方式及时通知。
所述***管理模块还具有选择自动/手动模式的功能，选择自动模式时，***可以自动完成数据一致性的比对同步过程，根据同步处理规则***自动生成同步数据并处理；选择手动模式，则可以通过人工干预分步骤完成数据一致性的比对同步过程。
所述告警监控界面可设定告警级别和告警方式，告警方式包括有短信，电子邮件，声音，光，页面图像，文本，表格方式等。
所述***接口层包括用于各网元全量数据采集、增量数据采集的数据采集接口，用于同步至各网元的数据同步接口，以及数据分发接口。
所述***接口层例如包括有如下的接口：
和HLR接口，负责采集HLR用户数据以及和HLR之间的指令交互。接口数据传递是指令方式。
和SCP接口，负责采集SCP用户数据以及和SCP的通信，通过SMP完成，采用适配器方式，直接采用SMP上标准的SC接口进行交互，由于SC接口是统一标准的，因此不需要单独设置接口。和SCP的接口负责增量数据查询提取、全量数据实时查询以及同步的功能，可以和BOSS***的SCP接口共用，由于BOSS***的SCP接口提供的命令有限，为了满足接口要求，需要进行命令扩展。
和BOSS接口，负责采集BOSS***的增量变更数据以及查询比对数据，同时处理BOSS的数据同步。接口数据传递根据不同的BOSS***要求可以采用接口表、消息或者文件方式。和BOSS的数据查询和提取接口负责增量数据提取以及全量比对的实时数据查询；和BOSS的同步接口负责向BOSS***发送数据同步，逐条同步进行。
和MISC接口，主要负责采集MISC***的增量变更数据以及查询比对数据，同时也要向MISC进行数据同步。和MISC的接口数据可采用接口表、文件方式。和MISC接口需要考虑和BOSS配套一致，因此要考虑BOSS***增量和MISC增量的影响情况，必须建立实时查询MISC和BOSS的接口。和MISC数据查询和提取接口提供增量比对数据的提取以及全量比对的实时查询功能；和MISC数据同步接口向MISC发送数据同步，逐条同步进行。
同时还可以采用其他多种接口。
数据一致性比对同步方法，其具体步骤如下：
A、A、***通过接口层和网元进行通信交互，数据采集模块根据接口标准和参数适配从网元进行数据采集，通过数据预处理模块根据网元数据的情况，将采集到的网元数据进行预处理，然后进行解析处理得到有用的数据；
B、数据比对模块对步骤A得到的数据进行比对，不一致的数据被记录保存在差异列表中；
C、根据步骤B所述得到的差异列表，数据同步模块结合有效性验证规则对数据差异的有效性加以验证，对差异为有效的数据根据同步规则生成对应的同步数据，并把同步数据通过对应的接口发送至相关网元，然后在相关网元中执行相应的增加/删除/修改数据操作，使网元间数据保持一致。
所述网元是指网络中具有数据存储功能的节点，包括用于业务受理和管理的业务支撑网网元和用于实现业务的业务承载网网元。
应用于移动通信领域时，业务支撑网网元可以主要指BOSS***，业务承载网可以主要指HLR/AUC、智能网平台、DSMP平台、SIMS平台、PIM平台、IM平台、PushEmial平台、Blackberry平台、流媒体平台、通用下载平台、手机邮箱平台、全球呼平台、RADIUS平台、彩铃平台、VC管理平台、一卡多号平台、MSP平台、MAS平台、ADC平台、中央音乐平台、行业网关平台、集团总机平台、短信业务数据中心、IVR平台、位置业务平台、短信网关平台、小额支付平台、DM管理平台、电话会议平台、12580平台、MMSGW平台等。
所述数据采集模块采集的数据包括有：手机号码和IMSI即国际移动台设备标识的对应关系，基本业务功能，附加业务功能，号码状态，业务状态，VPMN集团信息，彩铃套餐数据，亲密号码，捆绑业务，增值业务订购关系，以及相关的客户基本资料等。所述数据采集和处理模块可以采集BOSS***的数据采用接口表方式或文件方式，采集MISC通过接口表或文件方式采集增量数据，采集HLR/SCP上的数据根据网元接口决定采集方式。
所述数据采集是从网元获取数据的过程，采用全量采集和增量采集相结合的数据采集方式从网元采集数据；所述全量采集要求网元导出所有的要求保持一致的数据；所述增量采集是针对要求保持一致的数据，只采集上一次采集时间到当前采集时间内发生变化的数据。
通过全量采集和增量采集结合，是指在处理数据一致性问题时，采用全量采集来保证数据采集的全面性和准确性，尽可能不遗漏在基准时间段内网元间要求保持一致但实际不一致的数据；采用增量采集来保证数据采集的及时性，这样就可以避免重复采集已经保持一致的数据，浪费***的资源和时间。
所述全量采集和增量采集通过文件方式或联机方式实现要求保持一致的数据的采集。
所述联机方式指建立网络连接，通过网络传输采集到要求保持一致的数据的方式；所述文件方式指将要求保持一致的数据以文件方式保存，再通过文件拷贝或文件传输的方式采集到要求保持一致的数据。
所述联机方式包括采集连接建立和传输过程，采集连接建立是指由***或网元发采集请求至建立采集连接的过程，采集连接根据采集协议的不同，建立不同的连接，如ftp、http、tcp/ip或自定义协议等。
所述预处理是对采集的网元数据进行处理，以用于进行比对的过程，预处理包括过滤、校验、修复、格式转换等操作中的零项至多项操作。所述数据的过滤是对采集数据中无效或者无用的数据进行排查过滤的过程；所述数据校验是对采集到的数据进行准确性和逻辑合理性的判断的过程；所述数据修复是根据数据本身的属性以及数据来源修复异常数据；所述格式转换是将网元数据从无法用于数据比对的格式的转换为可以用于数据比对的过程。
所述解析是将采集到的网元数据根据数据含义确定要求保持一致的用于比对的数据的对应关系的过程。
所述比对是对解析后的数据进行对比，然后发现并记录数据一致性情况的过程。
所述采集到的网元数据进行预处理和解析，然后进行数据比对；或者也可以先对网元数据进行预处理后再采集，然后再进行解析，最后进行数据比对。
所述差异列表是指通过比对生成的能反映网元数据一致性情况的记录集，一般情况差异列表为比对时发现的不一致的网元数据及其在网元的位置信息，如比对时发现A客户资料不一致，则将比对双方各自的A客户资料及其在网元的位置信息生成一条差异列表记录。
所述有效性验证采用单侧验证、双侧验证或豁免验证规则中的一种到多种规则进行验证，其中：
1、单侧验证规则：比较差异列表生成时间与BOSS侧用户数据状态变化时间，只检查BOSS侧数据的变化，如果在差异列表生成后用户的数据发生了变化，则认为该差异项无效，忽略该差异数据项，继续处理下一差异数据项，否则执行同步处理。这种规则既可以保证数据同步的正确性，有降低了对网元侧的压力，适用于网元实时接口性能较低、执行批量比对同步的场景；
2、双侧验证规则：从差异列表中的业务支撑网网元和业务承载网网元重新读取数据进行核对，如果数据仍不一致，则认为该差异有效，刷新差异数据项，执行同步操作；如果数据已经一致，则认为该差异无效，跳过并继续处理下一差异数据项。这种规则保证所有差异数据项都得到正确的处理，适用于网元实时接口性能较高、执行批量比对同步的场景；
3、豁免验证规则：默认差异列表数据完全有效，按照同步规则直接对差异列表的数据项进行同步处理，这种规则适用于通过网元实时接口逐条进行数据一致性检测、同步处理的场景。
移动通信领域，数据校验的判断标准主要是一些通常默认的逻辑，比如：号码长度、业务功能代码域以及一些数据相关属性的判断，当出现数据长度异常、数据取值不在定义的域内时，就对异常数据做相应的记录并标记后保存到异常数据表中，同时提供相应的日志供查询使用。前台界面提供对各种异常数据的提取和查询统计，操作维护人员可以通过异常数据统计和查询日志发现数据源的问题或者接口的异常情况，并采取相应措施进行补救和防范。
一般仅当数据类型不匹配或者数据格式的普遍性错误时可以采用数据修复功能，大多数情况下的异常数据都需要重新采集并处理。例如出现号码前带前缀或后缀的情况，可以使用数据修复对号码进行截取，截取正确的号码用于处理。而数据修复出于安全以及准确性的考虑，不提供自动修复功能，在前台界面提供异常数据查询和手工修复的功能，可以供操作维护人员手工进行个别修复或者批量修复，批量修复仅对于大面积的同样异常发生时才可以采用，用于提高***处理效率，减少反复工作量。修复需要特殊权限的人员才可以操作，并且修复操作的整个过程都记录相应的日志，以供当出现修复错误时可以进行回退，不影响正常的***处理。
步骤C中，所述相关网元是指进行比对后数据不一致的网元；所述相应的就是指与同步规则一致的。
完成一次数据比对和数据同步后，***自动生成统计报告并显示，同时根据结果，还可以进行告警处理和通知，并生成历史统计报告，通过统计报告进行统计查询。
比对处理后的结果保存到相应的库表后，采用比对稽核判断数据的平衡关系和日志来验证整个比对过程的完整性和比对的准确性；并且当数据比对和数据同步过程中出现的异常时，根据预先设置的处理策略进行处理解除异常，并生成异常数据表和日志。
所述比对稽核的数据平衡关系的总体为：
比对入口的数据总量＝比对出口的通过数据数量+比对出口的不通过数据数量。
实施例3
所述数据一致性比对同步***的硬件结构包括存储设备、FC-SWITCH与数据库服务器、WEB服务器、备份服务器、数据库/应用/接口服务器和交换机。
本发明采用组网的硬件结构可以如表1的硬件设施：
    项目 数量 配置
    硬件设备
数据库/应用/接口服务器 2 IBM P550每台配置：2*1.9GHz POWER5+CPU8GB内存2*73GB硬盘2*10/100/1000Mbps以太网卡操作***IBMAIX 5L集群软件HACMPC++compiler显示器、键盘、鼠标冗余电源机架
WebServer 2 SUN T2000每台配置：4*1.0GHz CPU8GB内存2*73GB硬盘2*10/100/1000Mbps以太网卡操作***Solaris 10集群软件SUN Cluster 3.1C++compiler显示器、键盘、鼠标冗余电源机架
    磁盘阵列 1 裸容量1TB
    磁带库
    Q3接口机 与BOSS***开关机合用
    ***软件
    数据库 Oracle 9i(4CPU)
    WebServer BEA Weblogic Server 8.1(8CPU)
备份软件 增加Client端(2个Oracle客户端，2个Unix客户端)
协议栈     1 Q3协议栈(用于西门子交换机)
表1
实施例4
数据一致性比对同步的***，包括显示层、数据存储处理层和接口层；所述显示层用于人机的数据交互，展现各种数据处理分析结果；所述数据存储处理层用于各种数据的处理逻辑，包括数据采集模块、数据预处理模块、数据比对模块、数据同步模块和辅助模块，数据采集模块用于采集数据，数据预处理模块用于对数据进行整理、转换和解析，数据比对模块用于数据比对，数据同步模块根据比对结果进行同步处理；所述***接口层用于***和各个网元的通信交互。
该***用于移动通信网元间的数据不一致的检测处理时，其步骤为：
A、数据采集模块通过BOSS和其他网元的接口从网元采集要求保持一致的网元数据；
B、根据网元数据的情况，数据预处理模块将步骤A采集到的网元数据进行预处理和解析；
C、数据比对模块将步骤B得到的数据和BOSS内对应的数据进行比对，将不一致的数据记录保存在差异列表中；
D、根据步骤C的差异列表，数据比对模块结合有效性验证规则对数据差异的有效性加以验证，确定差异数据是否需要执行同步处理；
E、对步骤D中得到的需要执行同步处理的数据，数据同步模块结合同步规则生成同步数据，并把同步数据通过对应的接口发送至BOSS***和其他网元；
F、最后在BOSS***和其他网元中执行与同步规则一致的增加/删除/修改数据操作，使网元间数据保持一致。
所述同步规则是同步处理时须遵循的原则，是按照网元数据的含义、流向和与数据相关的业务规则这三个方面的不一致情况来制定的。
如图5和表2所示为BOSS单向到一个其他网元的数据交互。
数据流向：业务只能通过BOSS进行受理，受理成功后，由BOSS将业务订购信息发送给业务网元，完成在业务网元中的订购。
数据内容：用户基本信息(用户标识、用户状态、用户属性)、订购信息(订购标识、订购状态、订购属性)、业务局数据(局数据标识、局数据状态、局数据属性)。
涉及网元：RADIUS(17201)、MAS平台、ADC平台、行业网关平台。
Figure A20071004938300191
表2
如图6和表3所示，BOSS单向到一个其他网元的数据交互。
数据流向：BOSS作为数据发起端，发送相应的签约信息到核心网元，在核心网元上进行开通或变更。
数据内容：用户标识、用户签约信息
涉及网元：HLR/AUC
Figure A20071004938300192
表3
如图7和表4、5所示，BOSS同时单向到2个其他网元元的数据交互。
数据流向：a、业务只通过BOSS进行受理，业务受理涉及到业务网元和核心网元；b、由BOSS在业务受理成功后，将订购信息发送给业务网元，将功能签约信息发送给核心网元，完成整个订购过程。
数据内容：用户基本信息(用户标识、用户状态、用户属性)、订购信息(订购标识、订购状态、订购属性)、用户签约信息(用户标识、签约信息)。
涉及网元：智能网、PushEmail、全球呼平台、一卡多号平台、集团总机平台、短信业务数据中心、RADIUS平台(WLAN，E动互联)。
表4
Figure A20071004938300202
表5
表2～5的说明：
→：表示BOSS与平台之间的数据交互方向，其发起端是BOSS，落地端是该平台；
←：表示BOSS与平台之间的数据交互方向，其发起端是平台，落地端是BOSS；
—：表示BOSS与平台之间无该项数据交互。
如图8和表6所示，其他网元单向到BOSS的数据交互。
数据流向：业务网元负责管理业务局数据，业务局数据发布成功后，由业务网元将业务局数据信息发送给BOSS，完成在BOSS的业务登记。
数据内容：业务局数据信息(局数据标识、局数据状态、局数据属性)。
涉及网元：SIMS平台、VC管理平台。
Figure A20071004938300203
Figure A20071004938300211
表6
表6说明：
→：表示BOSS与平台之间的数据交互方向，其发起端是BOSS，落地端是该平台；
←：表示BOSS与平台之间的数据交互方向，其发起端是平台，落地端是BOSS。
其中，BOSS单向到其他网元的同步规则根据两种网元之间数据差异类别分为三类情况，具体处理情况参见表7～9。
订购标识、属性   用户标识   订购标识     订购属性 用户状态 订购状态 是否收费   同步措施
BOSS 网元 服务、资费 其他信息   用户标识     订购标识、属性 订购状态 用户状态
有 有     ×     -     -     -   -     -   以网元为准     - - -
    √     ×     √或×     ×   √或×     是   -     以BOSS为准，并进行业务订购确认 以BOSS为准 以BOSS为准
    √     ×     √或×     √   √或×     是   -     以BOSS为准，并进行业务订购确认 -
    √     ×     √     ×   √或×     否   -     以BOSS为准 以BOSS为准
    √     ×     √     √   √或×     否   -     以BOSS为准 -
    √     √     ×   √或×     ×   √或×     是   -     以业务订购确认结果为准 以BOSS为准
    √     √     √   ×     √   √或×     是   -     以BOSS为准 -
    √     √     √     ×   ×     是或否   -     - 以BOSS为准
    √     √     √     ×   √     是或否   -     - - 以BOSS为准
    √     √     √     √   ×     是或否   -     - 以BOSS为准 -
    √     √     √     ×   √或×     否   -     - 以BOSS为准
    √     √     √     √   ×     否   -     - -
表7
订购标识、属性 用户标识 订购标识 订购属性 用户状态 订购状态 是否收费   同步措施
BOSS 网元   用户标识   订购标识、属性     订购状态 用户状态
有 无     ×     -     -     -   -   -   以网元为准   -     - -
    √     ×     ×     √   √或×   是或否   -   以BOSS为准     以BOSS为准 -
    √     ×     ×     ×   √或×   是或否   -   以BOSS为准     以BOSS为准 以BOSS为准
表8
  订购标识、属性 用户标识 订购标识 订购属性 用户状态 订购状态 是否收费   同步措施
  BOSS   网元   用户标识   订购标识、属性     订购状态 用户状态
  无   有     ×     -     -     -   -   以网元为准     -     - -
    √     ×     ×     √   √或×     是   -     以业葬订购确认结果为准 -
    √     ×     ×     ×   √或×     是   -     以业务订购确认结果为准 以BOSS为准
    √     ×     ×     √   √或×     否   -     以网元为准 -
    √     ×     ×     ×   √或×     否   -     以网元为准 以BOSS为准
表9
如图9和表10所示，BOSS到其他网元的双向数据交互。
数据流向：业务可以在BOSS和业务网元双方进行受理：在BOSS中订购业务功后，由BOSS将业务订购信息发送给业务网元，完成在业务网元中的订购；在业务网元中订购业务成功后，订购信息同步给BOSS。
数据内容：用户基本信息(用户标识、用户状态、用户属性)、订购信息(订购标识、订购状态、订购属性)、业务局数据信息(局数据标识、局数据状态、局数据属性)。
涉及网元：DSMP、PIM平台、通用下载平台、手机邮箱平台、MSP平台、中央音乐平台。
表10
说明：
→：表示BOSS与平台之间的数据交互方向，其发起端是BOSS，落地端是该平台；
←：表示BOSS与平台之间的数据交互方向，其发起端是平台，落地端是BOSS；
Figure A20071004938300222
表示BOSS与平台之间的数据交互方向，平台与BOSS互为发起端和落地端；
—：表示BOSS与平台之间无该项数据交互。
其中，BOSS双向到其他网元的同步规则根据两种网元之间数据差异类别分为三类情况，具体处理情况参见表11～13。
订购标识、属性 用户标识 订购标识     订购属性 用户状态 订购状态   是否收费     同步措施
BOSS 网元 服务、资费 其他信息     用户标识 订购标识、属性   订购状态   用户状态
有 有     ×     -     -     -     -     -     以网元为准 -   -   -
    √     ×     √或×     ×     √或×     是     - 以发起方为准，并进行业务订购确认   以发起方为准   以BOSS为准
    √     ×     √或×     √     √或×     是     - 以发起方为准，并进行业务订购确认   -
    √     ×     √     ×     √或×     否     - 以发起方为准   以BOSS为准
    √     ×     √     √     √或×     否     - 以发起方为准   -
    √     √     ×   √或×     ×     √或×     是     - 以业务订购确认结果为准   以BOSS为准
√ √ √ × √ √或× 是 - 以发起方为准 -
    √     √     √     ×     ×     是或否     - -   以BOSS为准
    √     √     √     ×     √     是或否     - -   -   以BOSS为准
    √     √     √     √     ×     是或否     - -   以发起方为准   -
    √     √     √     ×     √或×     否     - -   以BOSS为准
    √     √     √     √     ×     否     - -   -
表11
  订购标识、属性 用户标识 订购标识 订购属性 用户状态 订购状态 是否收费     同步措施
  BOSS   网元   用户标识   订购标识、属性     订购状态   用户状态
  有   无     ×     -     -     -   -   以网元为准   -     -   -
    √     ×     ×     √   √或×   是或否   -   以BOSS为准     以BOSS为准   -
    √     ×     ×     ×   √或×   是或否   -   以BOSS为准     以BOSS为准   以BOSS为准
表12
订购标识、属性 用户标识 订购标识 订购属性 用户状态 订购状态 是否收费   同步措施
  BOSS   网元   用户标识     订购标识、属性   订购状态   用户状态
  无   有     ×     -     -     -   -   以网元为准     -   -   -
    √     ×     ×     √   √或×     是   -     以业务订购确认结果为准   -
    √     ×     ×     ×   √或×     是   -     以业务订购确认结果为准   以BOSS为准
    √     ×     ×     √   √或×     否   -     以网元为准   -
    √     ×     ×     ×   √或×     否   -     以网元为准   以BOSS为准
表13
如图10和表13、14所示，BOSS和其他多个网元之间的数据交互。
数据流向：a、业务可以通过BOSS和业务网元双方进行受理，业务受理涉及到业务网元和核心网元；b、由BOSS在业务受理成功后，将订购信息发送给业务网元，将功能签约信息发送给核心网元，完成整个订购过程；c、在业务网元中订购业务成功后，会发送订购信息给BOSS，BOSS记录订购信息，同时将涉及到核心网元的功能签约信息发送给核心网元，完成整个订购过程。
数据内容：订购信息(订购标识、订购状态、订购属性)、用户签约信息(用户标识、签约信息)、业务局数据信息(局数据标识、局数据状态、局数据属性)。
涉及网元：IM平台、BlackBerry、流媒体平台、彩铃平台。
Figure A20071004938300231
表14
Figure A20071004938300232
Figure A20071004938300241
表15
表14、15的说明：
→：表示BOSS与平台之间的数据交互方向，其发起端是BOSS，落地端是该平台；
←：表示BOSS与平台之间的数据交互方向，其发起端是平台，落地端是BOSS；
表示BOSS与平台之间的数据交互方向，平台与BOSS互为发起端和落地端；
—：表示BOSS与平台之间无该项数据交互。
本发明所设计的英文术语对照表如下：
缩写  英文描述 中文描述
 FC-SWITCH 光纤交换机
 Web 万维网
ftp  File Transfer Protocol 文件传输协议
http  Hypertext Transfer Protocol 超文本传输协议
tcp/ip  Transmission Control Protocol/InternetProtocol 用于网络的一组通讯协议，包括IP和TCP
BOSS  Business Operation Support System 业务运营支撑***
MISC  Mobile Information System center 移动信息管理***
SCP  Service Control Point 业务控制点
HLR  Home Location Register 归属位置寄存器
AUC  Authentication Centre 鉴权中心
DSMP  Data Service Management Platform 数据业务管理平台
SIMS  Service Information Management System 业务信息管理***
PIM  Personal Information Management 个人信息管理
IM  Instant Message 即时消息
 PushEmial 邮件推送业务
 Blackberry 黑莓业务
RADIUS  Remote Authentication Dial In User Service 认证中心
VC  Voucher Center 卡中心***负责完成充值卡的鉴权管理，多用于智能网平台的用户充值
MSP  Mobile Service for Position 手机地图服务
MAS  Mobile Agent Server 移动代理服务器
ADC  Application Data Center 主要为中小企业客户按需要提供基于移动终端的托管式的信息
化应用服务
IVR  Interactive Voice Response 自动语音应答
DM  Device Managerment 终端管理
MMSGW  Mati-Media Service Gateway 彩信网关
VPMN  Virtual Private Mobile Network 虚拟专用移动网
表16

Claims (19)

1、数据一致性比对同步的***，其特征在于：包括显示层、数据存储处理层和接口层；所述显示层用于人机的数据交互，展现各种数据处理分析结果；所述数据存储处理层用于各种数据的处理逻辑，包括数据采集模块、数据预处理模块、数据比对模块、数据同步模块和辅助模块，数据采集模块用于采集数据，数据预处理模块用于对数据进行整理、转换和解析，数据比对模块用于数据比对，数据同步模块根据比对结果进行同步处理；所述***接口层用于***和各个网元的通信交互。
2、根据权利要求1所述数据一致性比对同步的***，其特征在于：所述显示层是给使用本***的操作/维护/管理人员提供一个人机交互的门户界面。
3、根据权利要求1所述数据一致性比对同步的***，其特征在于：所述数据存储处理层的辅助模块由稽核模块、调度模块、统计模块、分析模块、***管理模块以及其他模块中的一个至多个组合/集成而成。
4、根据权利要求1所述数据一致性比对同步的***，其特征在于：所述***管理模块用于对***运行环境的各种设置的管理，包括进程调度、进程自动起停设置、数据备份的设置以及***运行日志管理；配置管理用于对***各个功能模块的配置数据的管理维护，包括配置表、配置文件的增、删、改、查操作；***管理模块的告警设置及处理是对***监控到的异常产生告警信息，生成告警信息后，在告警监控界面显示并通过设定的方式及时通知；所述***管理模块还具有选择自动/手动模式的功能，选择自动模式时，***自动完成数据一致性的比对同步过程，根据同步处理规则***自动生成同步数据并处理；选择手动模式，则通过人工干预分步骤完成数据一致性的比对同步过程。
5、根据权利要求1所述数据一致性比对同步的***，其特征在于：所述***接口层包括用于各网元间的数据采集接口，用于同步至各网元的数据同步接口，以及数据分发接口。
6、根据权利要求1所述数据一致性比对同步的***，其特征在于：所述数据一致性比对同步***的硬件结构包括存储设备、FC-SWITCH与数据库服务器、WEB服务器、备份服务器、数据库/应用/接口服务器和交换机。
7、数据一致性比对同步方法，其特征在于具体步骤如下：
A、***通过接口层和网元进行通信交互，数据采集模块根据接口标准和参数适配从网元进行数据采集，通过数据预处理模块根据网元数据的情况，将采集到的网元数据进行预处理，然后进行解析处理得到有用的数据；
B、数据比对模块对步骤A得到的数据进行比对，不一致的数据被记录保存在差异列表中；
C、根据步骤B所述得到的差异列表，数据同步模块结合有效性验证规则对数据差异的有效性加以验证，对差异为有效的数据根据同步规则生成对应的同步数据，并把同步数据通过对应的接口发送至相关网元，然后在相关网元中执行相应的增加/删除/修改数据操作，使网元间数据保持一致。
8、根据权利要求1或7所述数据一致性比对同步的***和方法，其特征在于：所述网元是指网络中具有数据存储功能的节点，包括用于业务受理和管理的业务支撑网网元和用于实现业务的业务承载网网元。
9、根据权利要求7所述数据一致性比对同步的方法，其特征在于：所述数据采集是从网元获取数据的过程，采用全量采集和增量采集相结合的数据采集方式从网元采集数据；所述全量采集要求网元导出所有的要求保持一致的数据；所述增量采集是针对要求保持一致的数据，只采集上一次采集时间到当前采集时间内发生变化的数据。
10、根据权利要求7所述数据一致性比对同步的方法，其特征在于：所述全量采集和增量采集通过文件方式或联机方式实现要求保持一致的数据的采集。
11、根据权利要求10所述数据一致性比对同步的方法，其特征在于：所述联机方式指建立网络连接，通过网络传输采集到要求保持一致的数据的方式；所述文件方式指将要求保持一致的数据以文件方式保存，再通过文件拷贝或文件传输的方式采集到要求保持一致的数据。
12、根据权利要求10或11所述数据一致性比对同步的方法，其特征在于：所述联机方式包括采集连接建立和传输过程，采集连接建立是指由***或网元发送采集请求至建立采集连接的过程，采集连接根据采集协议的不同，建立不同的连接。
13、根据权利要求7所述数据一致性比对同步的方法，其特征在于：所述预处理是对采集的网元数据进行处理，以用于进行比对的过程。
14、根据权利要求7所述数据一致性比对同步的方法，其特征在于：所述解析是将采集到的网元数据根据数据含义确定要求保持一致的用于比对的数据的对应关系的过程。
15、根据权利要求7所述数据一致性比对同步的方法，其特征在于：所述比对是对解析后的数据进行对比，然后发现并记录数据一致性情况的过程。
16、根据权利要求7所述数据一致性比对同步的方法，其特征在于：所述采集到的网元数据进行预处理和解析，然后进行数据比对；或者先对网元数据进行预处理后再采集，然后再进行解析，最后进行数据比对。
17、根据权利要求7所述数据一致性比对同步的方法，其特征在于：所述差异列表是指通过比对生成的能反映网元数据一致性情况的记录集。
18、根据权利要求7所述数据一致性比对同步的方法，其特征在于：所述有效性验证采用单侧验证、双侧验证或豁免验证规则中的一种到多种规则进行验证；单侧验证指根据一侧的网元数据验证差异列表的数据差异是否需要执行同步处理；双侧验证是指根据两侧的网元数据验证差异列表的数据差异是否需要执行同步处理；豁免验证规则是指默认差异数据有效，从而不进行任何验证直接进行同步处理。
19、根据权利要求7所述数据一致性比对同步的方法，其特征在于：步骤C中，所述相关网元是指进行比对后数据不一致的网元；所述相应的就是指与同步规则相一致的。
CN2007100493831A 2007-06-27 2007-06-27 数据一致性比对同步的***和方法 Active CN101094051B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2007100493831A CN101094051B (zh) 2007-06-27 2007-06-27 数据一致性比对同步的***和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2007100493831A CN101094051B (zh) 2007-06-27 2007-06-27 数据一致性比对同步的***和方法

Publications (2)

Publication Number Publication Date
CN101094051A true CN101094051A (zh) 2007-12-26
CN101094051B CN101094051B (zh) 2011-05-11

Family

ID=38992107

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007100493831A Active CN101094051B (zh) 2007-06-27 2007-06-27 数据一致性比对同步的***和方法

Country Status (1)

Country Link
CN (1) CN101094051B (zh)

Cited By (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101625686A (zh) * 2008-07-08 2010-01-13 阿里巴巴集团控股有限公司 一种监控多数据库之间数据一致性的方法及***
CN101854400A (zh) * 2010-06-09 2010-10-06 中兴通讯股份有限公司 一种数据库同步部署及监控的方法和装置
CN101534526B (zh) * 2008-03-14 2011-04-20 中兴通讯股份有限公司 一种基站***分级告警同步方法
CN102098699A (zh) * 2010-12-22 2011-06-15 大唐软件技术股份有限公司 一种电信***中用户数据核对的方法和装置
CN102137092A (zh) * 2010-12-10 2011-07-27 华为技术有限公司 支持多媒体子***中的会议***媒体抓包的方法及***
CN102184190A (zh) * 2011-04-19 2011-09-14 北京神州数码思特奇信息技术股份有限公司 数据比对方法
CN102289340A (zh) * 2010-06-21 2011-12-21 中国电信股份有限公司 数据稽核平台及方法
CN102523620A (zh) * 2012-01-13 2012-06-27 四川奥诚科技有限责任公司 数据同步的方法、装置及***
CN103136248A (zh) * 2011-11-29 2013-06-05 ***股份有限公司 数据一致性恢复方法
CN103731798A (zh) * 2012-10-10 2014-04-16 ***通信集团四川有限公司 一种电信业务订购的方法和***
CN103793778A (zh) * 2013-11-08 2014-05-14 远光软件股份有限公司 报表数据的实时稽核方法及装置
CN104317942A (zh) * 2014-10-31 2015-01-28 北京思特奇信息技术股份有限公司 一种基于Hadoop云平台的海量数据比对方法及***
CN104378409A (zh) * 2014-08-29 2015-02-25 武汉钢铁(集团)公司 文件同步***
CN104915756A (zh) * 2015-05-22 2015-09-16 电信科学技术第五研究所 数据一致性云稽核***及实现方法
WO2015184750A1 (zh) * 2014-06-06 2015-12-10 中兴通讯股份有限公司 网元设备数据维护的方法和装置
CN105447046A (zh) * 2014-09-02 2016-03-30 阿里巴巴集团控股有限公司 一种分布式***数据一致性处理方法、装置和***
CN103200556B (zh) * 2013-04-02 2016-06-01 四川奥诚科技有限责任公司 一种hlr用户数据自检的方法和***
CN105630850A (zh) * 2014-11-27 2016-06-01 阿里巴巴集团控股有限公司 对分布式数据库的数据进行实时验证的方法及其***
CN106454767A (zh) * 2015-08-05 2017-02-22 中兴通讯股份有限公司 一种业务数据同步方法、装置及***
CN106528677A (zh) * 2016-10-31 2017-03-22 努比亚技术有限公司 一种数据对比的方法和装置
CN106571940A (zh) * 2015-10-08 2017-04-19 ***通信集团广东有限公司 一种融合网管数据与资源数据的方法和装置
CN106777272A (zh) * 2016-12-29 2017-05-31 成都康赛信息技术有限公司 一种数据比对及同步方法
CN106980684A (zh) * 2017-03-31 2017-07-25 电信科学技术第五研究所 一种大型信息化***数据流式稽核的实现方法及***
CN107291827A (zh) * 2017-05-27 2017-10-24 北京思特奇信息技术股份有限公司 一种数据比对方法和***
CN107818535A (zh) * 2017-11-17 2018-03-20 湖南优图信息技术有限公司 一种地下管线数据管理方法、装置及***
CN107885788A (zh) * 2017-10-18 2018-04-06 上海瀚之友信息技术服务有限公司 一种业务数据核查方法
CN108255623A (zh) * 2018-01-22 2018-07-06 深圳市卓讯信息技术有限公司 实现线程内外双重对账机制的数据交换监控方法及装置
CN109086382A (zh) * 2018-07-25 2018-12-25 上海达梦数据库有限公司 一种数据同步方法、装置、设备及存储介质
CN109325058A (zh) * 2018-09-03 2019-02-12 中国平安人寿保险股份有限公司 规则批量比对方法、装置、计算机设备和存储介质
CN109474759A (zh) * 2018-10-24 2019-03-15 咪咕音乐有限公司 一种信息处理方法、装置及存储介质
CN109670091A (zh) * 2018-12-24 2019-04-23 成都四方伟业软件股份有限公司 一种基于数据标准的元数据智能维护方法和装置
CN109947542A (zh) * 2019-01-25 2019-06-28 上海倍通医药科技咨询有限公司 数据采集程序的综合进程调度方法
CN110188132A (zh) * 2019-04-29 2019-08-30 安徽晶奇网络科技股份有限公司 一种数据交换方法及***
CN111328067A (zh) * 2018-12-17 2020-06-23 ***通信集团安徽有限公司 用户信息核对方法、装置、***、设备及介质
CN111680559A (zh) * 2020-04-26 2020-09-18 广州明珞汽车装备有限公司 一种传感器信号名称快速同步方法、***、装置及存储介质
CN114173366A (zh) * 2021-12-03 2022-03-11 中国电信股份有限公司 用户参数修复方法和装置、计算机存储介质、电子设备
TWI778433B (zh) * 2020-10-19 2022-09-21 玉山商業銀行股份有限公司 資料管理系統以及資料同步方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3578913B2 (ja) * 1997-09-29 2004-10-20 松下電器産業株式会社 データ一致検出装置，及びデータ選別装置
JP2000163344A (ja) * 1998-11-27 2000-06-16 Nec Corp ネットワーク管理システムのデータベース復旧方式
CN1556490A (zh) * 2004-01-08 2004-12-22 上海复旦光华信息科技股份有限公司 基于状态转换表的多源审计数据业务一致性判断方法
CN1713592A (zh) * 2004-06-27 2005-12-28 华为技术有限公司 一种通用数据采集的实现方法

Cited By (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101534526B (zh) * 2008-03-14 2011-04-20 中兴通讯股份有限公司 一种基站***分级告警同步方法
CN101625686A (zh) * 2008-07-08 2010-01-13 阿里巴巴集团控股有限公司 一种监控多数据库之间数据一致性的方法及***
CN101854400A (zh) * 2010-06-09 2010-10-06 中兴通讯股份有限公司 一种数据库同步部署及监控的方法和装置
CN101854400B (zh) * 2010-06-09 2015-04-01 中兴通讯股份有限公司 一种数据库同步部署及监控的方法和装置
CN102289340A (zh) * 2010-06-21 2011-12-21 中国电信股份有限公司 数据稽核平台及方法
CN102137092A (zh) * 2010-12-10 2011-07-27 华为技术有限公司 支持多媒体子***中的会议***媒体抓包的方法及***
CN102098699B (zh) * 2010-12-22 2013-08-14 大唐软件技术股份有限公司 一种电信***中用户数据核对的方法和装置
CN102098699A (zh) * 2010-12-22 2011-06-15 大唐软件技术股份有限公司 一种电信***中用户数据核对的方法和装置
CN102184190A (zh) * 2011-04-19 2011-09-14 北京神州数码思特奇信息技术股份有限公司 数据比对方法
CN103136248B (zh) * 2011-11-29 2016-09-28 ***股份有限公司 数据一致性恢复方法
CN103136248A (zh) * 2011-11-29 2013-06-05 ***股份有限公司 数据一致性恢复方法
CN102523620B (zh) * 2012-01-13 2015-07-15 四川奥诚科技有限责任公司 数据同步的方法、装置及***
CN102523620A (zh) * 2012-01-13 2012-06-27 四川奥诚科技有限责任公司 数据同步的方法、装置及***
CN103731798B (zh) * 2012-10-10 2017-08-08 ***通信集团四川有限公司 一种电信业务订购的方法和***
CN103731798A (zh) * 2012-10-10 2014-04-16 ***通信集团四川有限公司 一种电信业务订购的方法和***
CN103200556B (zh) * 2013-04-02 2016-06-01 四川奥诚科技有限责任公司 一种hlr用户数据自检的方法和***
CN103793778B (zh) * 2013-11-08 2017-11-03 远光软件股份有限公司 报表数据的实时稽核方法及装置
CN103793778A (zh) * 2013-11-08 2014-05-14 远光软件股份有限公司 报表数据的实时稽核方法及装置
WO2015184750A1 (zh) * 2014-06-06 2015-12-10 中兴通讯股份有限公司 网元设备数据维护的方法和装置
CN104378409A (zh) * 2014-08-29 2015-02-25 武汉钢铁(集团)公司 文件同步***
CN105447046A (zh) * 2014-09-02 2016-03-30 阿里巴巴集团控股有限公司 一种分布式***数据一致性处理方法、装置和***
CN104317942A (zh) * 2014-10-31 2015-01-28 北京思特奇信息技术股份有限公司 一种基于Hadoop云平台的海量数据比对方法及***
CN105630850A (zh) * 2014-11-27 2016-06-01 阿里巴巴集团控股有限公司 对分布式数据库的数据进行实时验证的方法及其***
CN105630850B (zh) * 2014-11-27 2020-11-27 阿里巴巴集团控股有限公司 对分布式数据库的数据进行实时验证的方法及其***
CN104915756A (zh) * 2015-05-22 2015-09-16 电信科学技术第五研究所 数据一致性云稽核***及实现方法
CN104915756B (zh) * 2015-05-22 2019-03-26 电信科学技术第五研究所有限公司 数据一致性云稽核***及实现方法
CN106454767A (zh) * 2015-08-05 2017-02-22 中兴通讯股份有限公司 一种业务数据同步方法、装置及***
CN106571940A (zh) * 2015-10-08 2017-04-19 ***通信集团广东有限公司 一种融合网管数据与资源数据的方法和装置
CN106528677A (zh) * 2016-10-31 2017-03-22 努比亚技术有限公司 一种数据对比的方法和装置
CN106777272A (zh) * 2016-12-29 2017-05-31 成都康赛信息技术有限公司 一种数据比对及同步方法
CN106980684B (zh) * 2017-03-31 2020-04-17 电信科学技术第五研究所有限公司 一种大型信息化***数据流式稽核的实现方法及***
CN106980684A (zh) * 2017-03-31 2017-07-25 电信科学技术第五研究所 一种大型信息化***数据流式稽核的实现方法及***
CN107291827A (zh) * 2017-05-27 2017-10-24 北京思特奇信息技术股份有限公司 一种数据比对方法和***
CN107885788A (zh) * 2017-10-18 2018-04-06 上海瀚之友信息技术服务有限公司 一种业务数据核查方法
CN107818535A (zh) * 2017-11-17 2018-03-20 湖南优图信息技术有限公司 一种地下管线数据管理方法、装置及***
CN108255623A (zh) * 2018-01-22 2018-07-06 深圳市卓讯信息技术有限公司 实现线程内外双重对账机制的数据交换监控方法及装置
CN108255623B (zh) * 2018-01-22 2022-03-15 深圳市卓讯信息技术有限公司 实现线程内外双重对账机制的数据交换监控方法及装置
CN109086382A (zh) * 2018-07-25 2018-12-25 上海达梦数据库有限公司 一种数据同步方法、装置、设备及存储介质
CN109086382B (zh) * 2018-07-25 2021-10-15 上海达梦数据库有限公司 一种数据同步方法、装置、设备及存储介质
CN109325058A (zh) * 2018-09-03 2019-02-12 中国平安人寿保险股份有限公司 规则批量比对方法、装置、计算机设备和存储介质
CN109325058B (zh) * 2018-09-03 2023-09-01 中国平安人寿保险股份有限公司 规则批量比对方法、装置、计算机设备和存储介质
CN109474759B (zh) * 2018-10-24 2021-02-05 咪咕音乐有限公司 一种信息处理方法、装置及存储介质
CN109474759A (zh) * 2018-10-24 2019-03-15 咪咕音乐有限公司 一种信息处理方法、装置及存储介质
CN111328067A (zh) * 2018-12-17 2020-06-23 ***通信集团安徽有限公司 用户信息核对方法、装置、***、设备及介质
CN111328067B (zh) * 2018-12-17 2023-02-10 ***通信集团安徽有限公司 用户信息核对方法、装置、***、设备及介质
CN109670091A (zh) * 2018-12-24 2019-04-23 成都四方伟业软件股份有限公司 一种基于数据标准的元数据智能维护方法和装置
CN109947542A (zh) * 2019-01-25 2019-06-28 上海倍通医药科技咨询有限公司 数据采集程序的综合进程调度方法
CN110188132A (zh) * 2019-04-29 2019-08-30 安徽晶奇网络科技股份有限公司 一种数据交换方法及***
CN110188132B (zh) * 2019-04-29 2023-05-05 安徽晶奇网络科技股份有限公司 一种数据交换方法及***
CN111680559A (zh) * 2020-04-26 2020-09-18 广州明珞汽车装备有限公司 一种传感器信号名称快速同步方法、***、装置及存储介质
CN111680559B (zh) * 2020-04-26 2023-10-17 广州明珞汽车装备有限公司 一种传感器信号名称快速同步方法、***、装置及存储介质
TWI778433B (zh) * 2020-10-19 2022-09-21 玉山商業銀行股份有限公司 資料管理系統以及資料同步方法
CN114173366A (zh) * 2021-12-03 2022-03-11 中国电信股份有限公司 用户参数修复方法和装置、计算机存储介质、电子设备
CN114173366B (zh) * 2021-12-03 2024-03-12 中国电信股份有限公司 用户参数修复方法和装置、计算机存储介质、电子设备

Also Published As

Publication number Publication date
CN101094051B (zh) 2011-05-11

Similar Documents

Publication Publication Date Title
CN101094051B (zh) 数据一致性比对同步的***和方法
CN100546260C (zh) 数据不一致的检测处理方法
RU2554540C2 (ru) Система фильтра команд местной электрораспределительной сети
CN101079749A (zh) 数据一致性检测方法
WO2019006654A1 (zh) 金融自助设备维修派单生成方法、手持终端及电子设备
CN101430357B (zh) 一种用电数据采集方法及***和用电管理终端
US8566437B2 (en) Systems and methods for improved multisite management of converged communication systems and computer systems
EP1364330A2 (en) Method and apparatus for managing business applications
CN104601383B (zh) 一种电力通信网故障分段分析方法
CN101079683A (zh) 数据一致性处理方法
WO2012126228A2 (zh) 一种支持多业务融合的综合增值业务***及方法
CN113642939A (zh) 一种电力营销***全渠道统一接入平台及方法
CN112508551A (zh) 一种基于智能支付路由的统一支付网关***
CN102137102B (zh) 一种支持多类信息发布方式的业务支撑平台实现方法
CN102799820B (zh) 一种用户密码的恢复方法
CN105376155A (zh) 一种基于分布式集群架构的智能路由***及方法
CN101119191A (zh) 数据一致性采集方法
CN101754132B (zh) 白名单管理***、方法及业务操作支撑***代理服务器
CN115695138A (zh) 一种微服务架构设计方法、设备及计算机可读存储介质
CN106789271B (zh) 一种报障处理方法和***
CN101557382A (zh) 业务能力资源管理***及业务能力资源接入管理方法
Lin et al. Research on designing an integrated electric power marketing information system based on microapplications and microservices architecture
CN104281966B (zh) 开票软件复用***和方法
CN101437217B (zh) 通过数据传送提高智能网边界漫游计费准确性的方法
CN109951384A (zh) 一种api网关***灵活管理的使用方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant