一种主数据中心的数据处理方法

文档序号:8381121阅读:473来源:国知局
一种主数据中心的数据处理方法
【专利说明】一种主数据中心的数据处理方法
[0001]
技术领域
[0002]本发明涉及网络通信数据交换领域,具体地,涉及一种主数据中心的数据处理方法。
【背景技术】
[0003]目前的企业单位均存在着大大小小不同时期建设的专业性业务系统,系统间的部署主要以网状结构存在。而现有的各个部分使用各自的系统,各系统之间的信息不能互享,形成“信息孤岛”。随着企业单位研究业务的变化、经济社会的转型和信息技术的发展,数据库之间的数据交换越来越频繁。在业务应用中,经常需要进行复杂的数据交换,尤其是不同系统和业务之间,这些数据交换要求跨平台、跨系统的,同时要实现业务数据结构的变化和多业务的交互。轻量级数据交换方法,用户可以通过简单的配置之间,根据自己的需要,定义好数据的抽取时间,即可实现数据的交换。各部门、各系统之间的数据庞大,其数据在交换过程中,数据的安全性十分被重视。

【发明内容】

[0004]本发明所要解决的技术问题是提供一种主数据中心的数据处理方法,其提高了数据处理的安全性。
[0005]本发明解决上述问题所采用的技术方案是:
一种主数据中心的数据处理方法,包括以下步骤:
A、对源数据进行集成、抽取;
B、去除脏数据,并对脏数据进行记录,去除脏数据,保证数据处理的安全性;
C、对数据进行整合;
D、对主数据进行交换并对应用历史进行记录,对应用历史进行记录,有效的简化后续的数据的繁琐度。
[0006]作为优选,在步骤A中,主数据管理平台通过服务总线调度数据交换规则、主数据管理平台录入和导入的方式将异地分布的主数据集成到主数据管理平台接口层数据模型中。
[0007]进一步的,在步骤A中,为了保证数据处理的安全性,在数据集成的过程中完成数据异常处理、主数据的质量检查和校验,记录主数据集成过程的日志,对异常数据进行处理,可有效的提高数据的安全性,并对异常数据进行记录,简化后续的数据的繁琐度。
[0008]作为优选,在步骤C中,对主数据进行清洗和整合,根据预制的规则将有效主数据的最新数据整合到标准层主数据模型中,将主数据的变化轨迹记录到主数据历史数据模型中,保证数据的完整性和准确性。
[0009]作为优选,在步骤C中,还包括对异常过程处理、数据的质量控制和完整的处理日志记录。
[0010]综上,本发明的有益效果是:
本发明的方法,其对脏数据和异常数据去除、记录等,有效的提高了数据处理的安全性且简化了后续的数据的繁琐度。
【具体实施方式】
[0011]下面结合实施例,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
[0012]实施例1:
一种主数据中心的数据处理方法,其特征在于,包括以下步骤:
A、对源数据进行集成、抽取;
B、去除脏数据,并对脏数据进行记录;
C、对数据进行整合;
D、对主数据进行交换并对应用历史进行记录。
[0013]实施例2:
为了进一步的提高数据处理的安全性,本实施例在上述实施例的基础上做了优化,
即:
在步骤A中,主数据管理平台通过服务总线调度数据交换规则、主数据管理平台录入和导入的方式将异地分布的主数据集成到主数据管理平台接口层数据模型中。
[0014]在步骤A中,在数据集成的过程中完成数据异常处理、主数据的质量检查和校验,记录主数据集成过程的日志。
[0015]实施例3:
为了进一步的提高数据处理的安全性,本实施例在上述实施例的基础上做了优化,
即:
在步骤C中,对主数据进行清洗和整合,根据预制的规则将有效主数据的最新数据整合到标准层主数据模型中,将主数据的变化轨迹记录到主数据历史数据模型中。
[0016]在步骤C中,还包括对异常过程处理、数据的质量控制和完整的处理日志记录。
[0017]在对数据进行交换时,其过程主要通过两种模式来完成:
1、业务系统通过建立系统接口,通过系统用户访问,自动完成数据更新。
[0018]2、通过数据用户登录主数据管理平台查询数据,手动更新业务系统。
[0019]如上所述,可较好的实现本发明。
【主权项】
1.一种主数据中心的数据处理方法,其特征在于,包括以下步骤: 对源数据进行集成、抽取; 去除脏数据,并对脏数据进行记录; 对数据进行整合; 对主数据进行交换并对应用历史进行记录。
2.根据权利要求1所述的一种主数据中心的数据处理方法,其特征在于:在步骤A中,主数据管理平台通过服务总线调度数据交换规则、主数据管理平台录入和导入的方式将异地分布的主数据集成到主数据管理平台接口层数据模型中。
3.根据权利要求1或2所述的一种主数据中心的数据处理方法,其特征在于:在步骤A中,在数据集成的过程中完成数据异常处理、主数据的质量检查和校验,记录主数据集成过程的日志。
4.根据权利要求1所述的一种主数据中心的数据处理方法,其特征在于:在步骤C中,对主数据进行清洗和整合,根据预制的规则将有效主数据的最新数据整合到标准层主数据模型中,将主数据的变化轨迹记录到主数据历史数据模型中。
5.根据权利要求1所述的一种主数据中心的数据处理方法,其特征在于:在步骤C中,还包括对异常过程处理、数据的质量控制和完整的处理日志记录。
【专利摘要】本发明公开了一种主数据中心的数据处理方法,包括以下步骤:对源数据进行集成、抽取;去除脏数据,并对脏数据进行记录,去除脏数据,保证数据处理的安全性;对数据进行整合;对主数据进行交换并对应用历史进行记录,有效的简化后续的数据的繁琐度,其提高了数据处理的安全性。
【IPC分类】G06F17-30
【公开号】CN104699861
【申请号】CN201510163477
【发明人】朱焰冰
【申请人】成都卡莱博尔信息技术有限公司
【公开日】2015年6月10日
【申请日】2015年4月9日
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1