搜档网
当前位置:搜档网 › 主数据管理与实施策略

主数据管理与实施策略

主数据管理与实施策略
主数据管理与实施策略

主数据管理和实施

简介:企业主数据是用来描述企业核心业务实体的数据,比如客户、合作伙伴、员工、产品、物料单、账户等;它是具有高业务价值的、可以在企业内跨越各个业务部门被重复使用的数据,并且存在于多个异构的应用系统中。本文将针对主数据管理的概念以及主数据管理解决方案的实施等方面跟大家作一个探讨。

前言

企业主数据是用来描述企业核心业务实体的数据,比如客户、合作伙伴、员工、产品、物料单、账户等;它是具有高业务价值的、可以在企业内跨越各个业务部门被重复使用的数据,并且存在于多个异构的应用系统中。本文将针对主数据管理的概念以及主数据管理解决方案的实施等方面跟大家作一个探讨。

主数据和主数据管理的概念

企业主数据可以包括很多方面,除了常见的客户主数据之外,不同行业的客户还可能拥有其他各种类型的主数据,例如:对于电信行业客户而言,电信运营商提供的各种服务可以形成其产品主数据;对于航空业客户而言,航线、航班是其企业主数据的一种。对于某一个企业的不同业务部门,其主数据也不同,例如市场销售部门关心客户信息,产品研发部门关心产品编号、产品分类等产品信息,人事部门关心员工机构,部门层次关系等信息。

数据管理的范畴和主数据管理的概念

图 1. 数据管理的范畴

如图所示,企业数据管理的内容及范畴通常包括交易数据、主数据以及元数据。

?交易数据:用于纪录业务事件,如客户的订单,投诉记录,客服申请等,它往往用于描述在某一个时间点上业务系统发生的行为。

?主数据:主数据则定义企业核心业务对象,如客户、产品、地址等,与交易流水信息不同,主数据一旦被记录到数据库中,需要经常对其进行维护,从而确保其时效性和准确性;

主数据还包括关系数据,用以描述主数据之间的关系,如客户与产品的关系、产品与地域的关系、客户与客户的关系、产品与产品的关系等。

?元数据:即关于数据的数据,用以描述数据类型、数据定义、约束、数据关系、数据

所处的系统等信息。

主数据管理是指一整套的用于生成和维护企业主数据的规范、技术和方案,以保证主数据的完整性、一致性和准确性( “ The set of disciplines, technologies, and solutions used to create and maintain consistent, complete, contextual and accurate business data for all stakeholders (users, applications, data warehouses, processes, companies, trading partners, customers, etc.) across and beyond the enterprise ”) 。主数据管理的典型应用有Customer Data Integration —客户数据管理和Product Information Integraiton —产品数据管理。

图 2. 主数据管理的信息流

一般来说,主数据管理系统从IT 建设的角度而言都会是一个相对复杂的系统,它往往会和企业数据仓库/ 决策支持系统以及企业内的各个业务系统发生关系,技术实现上也会涉及到ETL、EAI、EII 等多个方面,如图2 所示,一个典型的主数据管理的信息流为:

1某个业务系统触发对企业主数据的改动;

1主数据管理系统将整合之后完整、准确的主数据分发给所有有关的应用系统;

1主数据管理系统为决策支持和数据仓库系统提供准确的数据源。

因此对于主数据管理系统的建设,要从建设初期就考虑整体的平台框架和技术实现。

以客户主数据为例,常见的主数据域包括:

?Party:参与方。参与方包含的范围是所有与企业发生了或者发生过正式业务关系的任何合法的实体,比如填写了投保单的参与方。Party 是分类别的,可以是个人、机构和团体。对于Party 来说,因为开展业务的需要,可能要对他们进行分级、分类,比如VIP,黑名单等。个人包括个人基本属性、个人名称、职业、性别、教育等自然属性;机构是指在法律上有登记的组织实体,可以分为政府机构、商业机构、非盈利机构等类别;团体可以有多种形态,比如他们可以是家庭、兴趣小组、某个大机构中的一部分,或者通过某种数据分析技术得出的客户细分群体。

?Party Role:参与方在业务中扮演的角色。例如,对于保险行业而言,可以有:投保人,被保人,受益人,担保人,报案人,核保人,查勘员,核赔人等。

?Relationship:Party 与Party 之间的关系, 例如可以是:夫妻关系、父子关系、母女关系、兄弟姐妹关系、总( 母) 公司分( 子) 公司关系、企业事业单位隶属、上下级

关系等。

?Account:帐户是客户使用企业服务的付费实体。

?Location:Location 记录的是每个Party 可能拥有的所有联系地址,地址的类别包括邮寄地址、email 地址、电信联络地址等。

?Contract:Party 与企业之间的契约。

主数据有几个鲜明的特点,其中包括:它是准确的、集成的,其次它是跨业务部门的,再有就是它是在各个业务部门被重复使用的。

主数据管理的意义

图 3. 主数据管理的要素

如图 3 所示:集成、共享、数据质量、数据治理是主数据管理的四大要素,主数据管理要做的就是从企业的多个业务系统中整合最核心的、最需要共享的数据(主数据),集中进行数据的清洗和丰富,并且以服务的方式把统一的、完整的、准确的、具有权威性的主数据分发给全企业范围内需要使用这些数据的操作型应用和分析型应用,包括各个业务系统、业务流程和决策支持系统等。

主数据管理使得企业能够集中化管理数据,在分散的系统间保证主数据的一致性,改进数据合规性、快速部署新应用、充分了解客户、加速推出新产品的速度。从IT 建设的角度,主数据管理可以增强IT 结构的灵活性,构建覆盖整个企业范围内的数据管理基础和相应规范,并且更灵活地适应企业业务需求的变化。

以客户主数据为例,客户主数据是目前企业级客户普遍面临的一个问题,在大多数企业中,客户信息通常分散于CRM 等各个业务系统中,而每个业务系统中都只有客户信息的片断,即不完整的客户信息,但却缺乏企业级的完整、统一的单一客户视图,结果导致企业不能完全了解客户,无法协调统一的市场行为,导致客户满意度下降,市场份额减少。因此,建立客户主数据系统的目的在于:

?整合并存储所有业务系统和渠道的客户及潜在客户的信息:一方面从相关系统中抽取客户信息,并完成客户信息的清洗和整合工作,建立企业级的客户统一视图;另一方面,客户

主数据管理系统将形成的统一客户信息以广播的形式同步到其他各个系统,从而确保客户信息的一致;

?为相关的应用系统提供联机交易支持,提供客户信息的唯一访问入口点,为所有应用系统提供及时和全面的客户信息;服务于OCRM 系统,充分利用数据的价值,在所有客户接触点上提供更多具有附加价值的服务;

?实现SOA 的体系结构:建立客户主数据系统之前,数据被锁定在每一个应用系统和流程中,建立主数据管理系统之后,数据从应用系统中被释放出来,并且被处理成为一组可重用的服务,被各个应用系统调用。

主数据管理系统与数据仓库系统的关系

主数据管理系统与数据仓库系统是相辅相成的两个系统,但二者绝不是重复的,也不是互斥的。它们有很多共同之处:

?首先二者对企业都具有相同的价值,可以减少数据冗余和不一致性、提升对数据的洞察力,二者都是跨部门的集中式系统;

?其次二者都依赖很多相同的技术手段,都会涉及到ETL 技术、都需要元数据管理、都强调数据质量;

?第三就是二者建设手段类似,都需要数据治理的规范作为指导、都需要不同系统、不同部门的协作、需要统一的安全策略。

但是,主数据管理系统和数据仓库/ 决策支持系统二者之间也存在很多不同:

?处理类型不同:主数据管理(MDM) 系统是偏交易型的系统,它为各个业务系统提供联机交易服务,系统的服务对象是呼叫中心、B2C、CRM 等业务系统;而数据仓库是属于分析型的系统,面向的是分析型的应用,是在大量历史交易数据的基础上进行多维分析,系统的使用对象是各层领导和业务分析、市场销售预测人员等;

?实时性不同:与传统的数据仓库方案的批量ETL 方式不同,主数据管理系统在数据初始加载阶段要使用ETL,但在后续运行中要大量依赖实时整合的方式来进行主数据的集成和同步;

?数据量不同:数据仓库存储的是大量的历史数据和各个维度的汇总数据,可能会是海量的,而MDM 存储的仅仅是客户和产品等信息。

虽然主数据管理系统和数据仓库系统异同共存,但是二者却有着紧密的联系,并且可以互为促进、互为补充。举例而言,数据仓库系统的分析结果可以作为衍生数据输入到MDM 系统,从而使MDM 系统能够更好地为操作型CRM 系统服务。以航空公司为例,客户的主数据模型大致可以分为三部分:

首先包括客户基本信息和偏好信息。

?客户基本信息:

o个人及公司信息

o消费者市场状况

o常旅客会员卡号,状态,及累计里程等

o客户间关系( 个体- 个体,个体- 公司)

o联系地址,包括电话,电子邮件等

?客户偏好信息:

o餐食偏好

o是否吸烟

o座位偏好

o机型偏好

o公务舱位偏好

o旅行舱位偏好

o休息室服务偏好

除了这两部分之外,我们还可以从数据仓库系统中提取相关的信息,作为客户主数据的衍生信息部分,从而更好地、全方位地描述客户特征,这些可以包括:

?衍生信息:

o本月飞行里程

o年度飞行里程(最近12 个月内)

o提前预订倾向

o习惯预订模式

o使用自主服务倾向

o上次预订使用的信用卡号

o累计/ 本月转签/ 取消航班次数

o转签航班倾向

o取消航班倾向

o No Show 倾向等。

主数据管理系统和ODS 的关系

在某些情况下,主数据管理系统和ODS 系统可能容易被混淆,的确,从实时上来看,主数据管理系统和ODS 系统存储的都是实时数据,但是二者存储的数据内容是全然不同的,主数据管理系统中不存储交易数据,比如银行客户的交易流水信息是不应该放在主数据管理系统中进行管理的,这与MDM 与ODS 的一个很大区别。举一个航空公司的例子,比如某个客户在电子商务网站上定了一张机票,产生一个订单,然后他又通过呼叫中心要求改签,这个场景中,两个系统之间要实现客户信息和订单信息的共享,其中客户信息共享通过MDM 系统来实现,而订单信息则需要采用ODS 或其它手段进行共享,我们是不推荐把此类信息交由MDM 系统来管理的。

回页首主数据管理解决方案介绍

目前业界比较常见的主数据管理解决方案主要可以分为三类:

?第一是依托专业套装软件来实现主数据管理,这类方案是作为套装软件的一部分,主要是为套装软件的其它模块提供服务的,因此,通常功能都缺乏完善性。

?还有一类是侧重于分析型应用的主数据管理,这类方案在数据实时同步以及面向交易型应用时通常缺乏整体方案的完整性。

?再有一类就是专注于主数据管理的中立的、完整的解决方案,这一类应用独立于套装软件,不仅具有整体架构的完整性和先进性,从功能上讲往往也最为完善,除了具有比较完整的数据模型(Data Model) 之外,还会提供广泛的集成性,具备先进的机制实现数据同步,并且可以对外提供多种预置的主数据服务被外部交易系统调用,从而使系统具有很强的实时操作性,同时还强调主数据管理、主数据质量控制以及主数据维护的手段和规范性。

企业主数据管理系统逻辑架构

一个完整的主数据管理解决方案的逻辑架构应如下图所示:

图 4. 主数据管理系统逻辑架构

在一个完整的主数据管理解决方案中,除了主数据管理的核心服务组件之外通常还会涉及到企业元数据管理、企业信息集成、ETL、数据分析和数据仓库以及EAI/ESB 等其他各种技术和服务组件。

其中主数据管理服务又包括如下一些主要的服务组件:

?Interface Services:为企业中需要主数据的所有业务系统提供各种服务接口,通过实时的、批量的接口可以读取或者修改主数据,这些接口包括Batch, Web Services, XML Interface, Messaging Interface, Publish/Subscribe, Import/Export Services, Data Standardization Interface, Directory Integration 等。除了这些标准的技术接口之外, 对于某些专有系统还提供适配器(Adapter) 接口, 通过适配器接口可以和一些特有的系统做接口,例如企业中的传统(Legacy) 应用系统或者SAP 等打包应用。

?Lifecycle Management Services: 履行针对主数据的CRUD 操作,执行对主数据存储库中的数据进行更新、存取和管理时的业务逻辑,除此之外,它还负责维护主数据的衍生信息,例如客户之间的关系、客户的偏好、客户在各种客户服务渠道上的行为轨迹等。

Lifecycle Management Services 贯穿整个主数据管理的生命周期,它利用Data Quality Management Services 来确保数据质量、利用Master Data Event Management Services 来捕获各种主数据变化等相关的事件,以及利用Hierarchy and Relationship Management Services 用来维护数据实体之间的关系和层次。

?Data Quality Management Services:确保主数据的质量和标准化,这在主数据管理解决方案中一个非常重要的组件,在我们从各个业务系统获取数据之后,要对数据进行清洗和验证,例如对于地址而言,要弥补地址的缺失、地市的缺失、邮编的缺失、进行地址的标准化等。对于其他数据要进行非空检查、外键检查、数据过滤等。然后要对数据进行匹配/

重复识别、自动进行基于规则的合并/ 去重、交叉验证等,并且还要遵从企业的数据管控规范和流程。它可以是Master Data Management Services 的一个内部组件,也可以调用整个企业的Information Integrity Services 来实现。

?Authoring Services:依据数据管控流程,定义和扩展企业的主数据模型。

?Hierarchy Relationship and Management Services:定义数据实体的层次(Hierarchy), 分组(Grouping), 关系(Relationship), 版本(Version) 等。

?Master Data Event Management Services:捕获事件并且触发相应的操作,包括事件发现、事件管理和通知功能,它在主数据管理系统和业务系统之间进行数据同步时起到至关重要的作用。

?Base Services:提供通用服务,包括安全控制、错误处理、交易日志、事件日志等功能。

?Master Data Repository:主数据存储库,包括Metadata, Master Data, History Data, Reference Data 等。

下面我们介绍两个这些逻辑组件之间的协作场景:

图 5. 场景1-- 初始数据加载

场景1:初始数据加载:

1源数据从外部业务系统及EDW 系统中通过批处理方式拷贝到磁带;

1数据被加载到Staging DB,进行数据质量分析;

1Data Quality Management Services 对数据进行清洗、匹配、标准化等;

1ETL Transform and Load services 对合格数据进行转换并准备好加载数据;

1Master Data Interface Services 接收批处理更新请求,调用Lifecycle Management Update Service 进行数据的批量更新;

1Lifecycle Management Update Service 调用Hierarchy & Relationship Management Services 和Base Services 更新主数据库。

图 6. 场景2-- 主数据库更新,然后同步到各业务系统

场景2:主数据库更新,然后同步到各业务系统

1某业务系统发起一个创建主数据的交易,该业务系统将交易数据以消息的形式发送到消息队列;

1MDM Interface Services 捕获该消息,进行消息解析,并调用Security and Privacy Services 进行权限验证;

1MDM Interface Services 调用Lifecycle Mgmt. Update Service ;

1Lifecycle Mgmt. Update Service 再调用Data Quality Management Services 进行数据的清洗和标准化;

1Update Service 调用Search Services 发现该主数据已经存在,确认这是对已有主数据的更新操作;

1Update Service 通过调用外部系统对数据进行扩充;

1Update Service 在更新主数据库之前调用Event Management Services ;

1Event Management Services 确认是否需要涉及数据管控方面的处理;

1Update Service 调用Hierarchy & Relationship Management Services 并且更新主数据库;

1Audit Logging Services 纪录相应交易日志和历史数据;

1MDM Lifecycle Management Service 调用MDM Interface Services 返回更新处理请求;

1源业务系统接收到处理请求之后,利用MDM 系统发回来的数据对本地的应用系统数据库进行更新操作;

1其他所有需要主动被更新的相关的业务系统都会接收到更新后的最新数据。

回页首IBM 主数据管理解决方案

IBM 的主数据管理解决方案InfoSphere Master Data Management 是IBM 信息管理大家族的一员。

图7. IBM InfoSphere MDM Server 产品构成

如上图所示,IBM MDM Server 包含:

?Knowledge(知识层):知识层包括当事方( 人员和组织)、角色、地址位置、当事人属性(统计学信息)、关系、财务简档、多渠道集成、协议和产品、事件等。

Action(交互层):MDM Server 本身就是按照SOA 的体系结构设计的,它提供700 多个开箱既有的服务接口,这些服务可划分为多个主题范围,如下图所示:

图8. MDM Server Business Services

其中主要包括:

o当事方人口统计学服务:

o角色:一个当事方可以扮演一个或多个角色,如帐户方角色服务用于管理当

事方在一个或多个帐户中扮演的多个角色,折扣或索赔方角色服务用于维护当

事方在一个或多个折扣或索赔中扮演的角色的信息。

o关系服务:维护当事方对当事方关系,当事方对当事方关系不仅可以存在于

两个独立的当事方之间( 例如甲方和乙方是配偶),也可以存在于双方在某个

帐户中扮演的角色范围之内( 例如甲方是乙方遗嘱的执行人) 。

o位置服务:维护关于位置的数据,如地址和联系方式。

o客户服务和销售服务:包含管理多渠道集成所需要的客户服务与销售信息的

综合业务服务。例如:隐私服务用于维护数据管理与请求的默认隐私偏好以及

客户声明的隐私偏好;偏好服务用于管理复杂的客户服务偏好( 比如,特定联

系方法和特定产品的联系偏好) 。

o协议和产品服务:帐户或合同服务用于维护某个帐户或合同的详细信息,这

里合同定义为一个或多个当事方与公司的合法协议。

o数据维护服务:MDM Server 提供重复嫌疑管理服务, 进行当事方记录的

合并等。

o当事方财务简档:比如收入来源信息、财务帐户信息等。

o当事方识别服务:为每个客户记录创建一个唯一客户ID,并且维护对其它

系统的交叉引用。

o历史纪录和审核服务:包含检索对象的历史审核数据的服务。

?Integrity(完整性层):完整性服务用于管理数据质量和维护客户数据的单一版本,包括疑似处理、重复处理、数据检查、标准化等。

?Intellegence(智能层):包括事件管理、业务处理规则、数据安全性。

?Data Governance(数据管控层):管理数据实体间的关系(Relationship), 分组(Group), 层次(Hierarchy),以及数据生命周期等。

?Service Inteface(接口层):MDM Server 支持多个实时和批处理接口,其中实时接口包括XML 接口、Web Services 接口、消息接口、Java 对象接口、COBOL 和CICS 接口等。此外,还支持用户自定义接口。

使用IBM 全套解决方案的主数据管理案例

以下是一个使用全套IBM 软件解决方案的案例,这是一个典型的客户主数据管理的应用场景,其中使用的产品包括:WebSphere Portal Server,WebSphere MDM Server,WebSphere Enterprise Services Bus, WebSphere QualityStage, DB2 等。

图9. 主数据管理应用案例

图9 描述了一个主数据管理应用的端到端流程:

1业务系统通过自己的用户界面创建一个新的用户,并且把数据写入了其应用系统数据库中;

1该业务系统向MQ 发送一条XML 消息;消息中包含了客户基本信息和策略信息;

1MDM Server 接收到该MQ 消息,对此消息进行处理;

1MDM Server 通过与QualityStage 的接口调用WebSphere QualityStage 的服务,进行客户姓名和联系方式的清洗和标准化;

1WebSphere QualityStage 对客户姓名和联系方式的清洗和标准化;

1WebSphere QualityStage 返回标准化了的客户数据;

1MDM Server 接收到标准化了的客户姓名和地址,查询主数据库获取候选姓名,调用QualityStage 的疑似匹配服务;

1QualityStage 进行疑似处理;

1QualityStage 将打分结果返回给MDM Server,结果表明这是一个新客户;

1MDM Server 向某外部系统发出Web Services 请求,进行数据扩充;

1外部系统将结果返回MDM Server ;

1MDM Server 分配一个唯一的PartyID,并且将客户主数据写入MDM Server DB ;

1根据客户Profile,MDM Server 发现该客户是新推出的一项新业务的目标客户;

1MDM Server 向MQ 产生一条XML/JMS 消息;

1WebSphere ESB 接收到XML 消息并且将其转换为市场促销系统所需要的消息格式;

1市场促销系统接收到该消息,进行相应的业务处理;

1MDM Server 产生XML 交易响应信息给源业务系统;

1源业务系统接收到响应信息,对其应用系统数据库进行更新;

1MDM Server 又产生一个关于该新增客户的完整信息,并且发送到MQ,利用MQ 的Pub/Sub 机制将数据通知到各个相关的业务系统;

1各个业务系统接收到新增的客户信息,并且更新自身的应用系统数据库。

回页首客户主数据系统实施方法论

客户主数据项目的本质是一个系统间针对客户信息的整合项目,根据以往的经验,大致分成基础实施、双向同步、多渠道访问、全企业采用等 4 个阶段,如下图所示:

图10. 主数据系统实施步骤

基础实施阶段:

?安装MDM,实现ECIF 的基础架构

?完成主数据建模

?MDM 初始数据加载:根据期望的实施方法和策略,将数据从各个业务系统中抽取出来,经过清洗、转换、标准化之后加载到主数据存储库中,在这个阶段主要用到的是ETL 的相关技术和工具。

?使MDM 的700 多个业务服务能被其他系统实时连接和使用。

基础实施阶段为客户数据集成搭建了基础框架,为企业提供了转向以客户为中心的能力和价值。后续的阶段主要是在此基础上推动全企业更多的应用和系统来使用这些价值,带来更多的业务增长。所以第一阶段的基础实施对企业来说是至关重要的,也是客户主数据管理项目能否带来业务价值的关键。

双向同步阶段:

?通过实时或批处理方式,帮助逐步实现业务系统和MDM 系统的双向数据更新和同步。

这个阶段阶段主要用到的是EAI/SOA 的相关技术和工具

?多渠道访问阶段

?整合WCC 与已有的渠道或新的前台系统,实现多渠道访问。

?添加新的客户数据属性和客户为中心的业务流程。

全企业采用阶段:

?MDM 成为企业唯一的记录客户信息的来源,促进对客户的洞察力和了解。

?促进全企业整合,支持端到端的业务流程。

回页首小结

本文首先系统地介绍了主数据管理的概念,主数据管理系统和数据仓库、ODS(操作型数据存储)之间的区别,并且结合航空公司的需求,给出了航空业客户主数据的简单模型;在理解了主数据管理的基本概念之后,给出了主数据管理解决方案的逻辑框架以及IBM 的主数据管理解决方案;最后跟大家分享了主数据管理项目实施的路径和方法。

参考资料

学习

?Information Management 专区:在这里可以学到更多关于Information Management 的知识。

还可以找到技术文档、how-to 文章、培训、下载、产品信息等。

?如需了解有关IBM Master Data Management 和IBM InfoSphere Master Data Management Server 的更多信息请访问InfoSphere 产品专题或者访问InfoSphere Master Data Management Server 产品网站

?通过IBM InfoSphere Master Data Management Server 商业价值概述,了解MDM 商业价值的详细信息。

?通过IBM InfoSphere Master Data Management Server 技术概述,了解MDM 技术特性等详细信息。

?通过MDM for Operations and Analytics,了解MDM Operations 和Analytics 的详细信息。

?通过Justifying and Implementing Master Data Management,了解MDM Justifying 和Implementing 的详细信息。

?通过Master Data Management and Customer Data Integration,了解主数据和客户数据集成的详细信息。

?通过MDM Server 信息中心,了解MDM 的详细信息。

?通过IBM 红皮书:Rapid Deployment Package for MDM,了解MDM 快速部署的详细信息。

?随时关注developerWorks 技术活动和网络广播。

?技术书店:浏览关于这些主题和其他技术主题的图书。

获得产品和技术

?用可直接从developerWorks 下载的IBM 试用软件构建您的下一个开发项目。

讨论

?参与developerWorks blogs并加入developerWorks 社区。

关于作者

娄丽军,IBM 公司软件架构师,1998年加入IBM 公司软件部,多年来一直从事IBM 通讯及业务整合中间件( WebSphere Business Integration 家族)产品的技术支持工作,是软件部从事该领域技术支持时间最长的工程师之一,拥有WebSphere Business Integration 相关的产品经验,这些产品包括WebSphere MQ 家族的所有产品:MQSeries,MQ Integrator,MQ Workflow 以及CrossWorlds 等,并具有很多大型项目的支持经验,曾参与国家税务总局,人民银行清算系统、华夏银行电子联行系统、中国联通计费系统、海关与国家税务总局互连系统,以及公安部、铁道部、中信实业银行、电信等重要客户的有关项目的技术支持。

主数据管理办法

中国联通供应商主数据管理办法(试行) 第一章总则 第一条为逐步形成中国联通完善的供应链管理体系,为企业运营和各业务发展提供唯一、准确的供应商基础数据,实现中国联通供应商基础数据的单点录入、全局共享,依据中国联通采购管理办法、中国联通IT规划等相关制度,制定本办法。 第二条本办法所称供应商,是指直接向中国联通提供物资和服务的企业及其分支机构、事业单位和个人。个人包括个体工商户和其他自然人。 第三条本办法所称供应商主数据,是指在整个企业范围内各个信息系统需要共享的,长期稳定存在的,描述供应商自然属性的相关数据。 第四条中国联通供应商主数据管理的原则:一级平台、两级管理、三级操作。 第二章供应商主数据管理范围 第五条中国联通供应商主数据按照企业供应商和个人供应商分别管理。对于费用较低的零星购臵或一次性供应商,根据成本优先的原则不对其数据进行管理,仅作为企业

供应商的特殊类型(杂项供应商)予以归一化管理。 第六条供应商信息主要包括基本信息、业务地点信息、联系人信息、采购信息和财务信息等五类信息。供应商基本信息是供应商的自然属性,由供应商主数据系统管理。 第七条供应商的其它业务属性,由各业务属性的归口部门负责,通过各专业应用系统创建和维护。供应商的业务地点信息和财务信息由财务部门归口负责,在ERP系统中维护;联系人信息和采购信息由采购管理部门归口负责,在采购管理系统中维护。 第三章供应商主数据管理职责 第八条中国联通建立全集团统一的供应商主数据管理平台,建立全集团集中的维护工作组,统一负责供应商编码、数据质量、数据安全等管理和日常维护工作。 第九条中国联通总部和省两级采购管理部门是中国联通供应商主数据的业务管理部门,负责制定供应商主数据管理制度、规范、编码规则和操作手册,负责指导下级公司的供应商主数据业务操作工作。供应商编码标准见附件1。 第十条中国联通总部、省、市三级采购管理部门是中国联通供应商主数据的业务操作部门,负责受理各级供应商主数据创建的申请、审核、创建、维护和分发等工作。各级采购管理部门的操作权限如下:

主数据管理详解(MDM)

主数据管理详解 主数据是指在整个企业范围内各个系统 (操作 /事务型应用系统以及分析型系统 )间要共享的 数据, 比如,可以是与客户 (customers),供应商(suppliers),帐户(accounts)以及组织单位(or ganizational units) 相关的数据。主数据通常需要在整个企业范围内保持一致性 完整性 (complete) 、可控性 (controlled) ,为了达成这一目标, 就需要进行主数据管理 (Master Data Management ,MDM) 。 什么是主数据管理 (Master Data Management , MDM) 主数据是指在整个企业范围内各个系统 (操作 /事务型应用系统以及分析型系统 )间要共 享的数据, 比如,可以是与客户(customers),供应商(suppliers),帐户(accounts)以及组织单 位 (organizational units) 相关的数据。主数据通常需要在整个企业范围内保持一致性 nt) 、完整性 (complete) 、可控性 (controlled) ,为了达成这一目标,就需要进行主数据管理 (M aster Data Management , MDM) 。需要注意的是,主数据不是企业内所有的业务数据,只 (consistent) 、 (consiste

是有必要在各个系统间共享的数据才是主数据,比如大部分的交易数据、帐单数据等都不是 主数据,而像描述核心业务实体的数据,而像客户、供应商、帐户、组织单位、员工、合作 伙伴、位置信息等都是主数据。主数据是企业内能够跨业务重复使用的高价值的数据。这些 主数据在进行主数据管理之前经常存在于多个异构或同构的系统中。 主数据管理(Master Data Management ,MDM) 是指一组约束和方法用来保证一个企业 内主题域和系统内相关数据和跨主题域和系统的相关数据的实时性、含义和质量。这是从深 层次来说来说明主动主数据管理(MDM) 的深度和复杂性,简单的说,主数据管理(MDM) 保证 你的系统协调和重用通用、正确的业务数据(主数据)。通常,我们会把主数据管理作为应用 流程的补充,通过从各个操作/ 事务型应用以及分析型应用中分离出主要的信息,使其成为 一个集中的、独立于企业中各种其他应用核心资源,从而使得企业的核心信息得以重用并确 保各个操作/ 事务型应用以及分析型应用间的核心数据的一致性。通过主数据管理,改变企 业数据利用的现状,从而更好地为企业信息集成做好铺垫。 主数据管理(MDM) 可以帮助我们创建并维护整个企业内主数据的单一视图(Si ngle View),保证单一视图的准确性、一致性以及完整性,从而提供数据质量,统一商业实体的定义,简化

大数据平台建设方案

大数据平台建设方案 (项目需求与技术方案) 一、项目背景 “十三五”期间,随着我国现代信息技术的蓬勃发展,信息化建设模式发生根本性转变,一场以云计算、大数据、物联网、移动应用等技术为核心的“新 IT”浪潮风起云涌,信息化应用进入一个“新常态”。***(某政府部门)为积极应对“互联网+”和大数据时代的机遇和挑战,适应全省经济社会发展与改革要求,大数据平台应运而生。 大数据平台整合省社会经济发展资源,打造集数据采集、数据处理、监测管理、预测预警、应急指挥、可视化平台于一体的大数据平台,以信息化提升数据化管理与服务能力,及时准确掌握社会经济发展情况,做到“用数据说话、用数据管理、用数据决策、用数据创新”,牢牢把握社会经济发展主动权和话语权。 二、建设目标 大数据平台是顺应目前信息化技术水平发展、服务政府职能改革的架构平台。它的主要目标是强化经济运行监测分析,实现企业信用社会化监督,建立规范化共建共享投资项目管理体系,推进政务数据共享和业务协同,为决策提供及时、准确、可靠的信息依据,提高政务工作的前瞻性和针对性,加大宏观调控力度,促进经济持续健康发

展。 1、制定统一信息资源管理规范,拓宽数据获取渠道,整合业务信息系统数据、企业单位数据和互联网抓取数据,构建汇聚式一体化数据库,为平台打下坚实稳固的数据基础。 2、梳理各相关系统数据资源的关联性,编制数据资源目录,建立信息资源交换管理标准体系,在业务可行性的基础上,实现数据信息共享,推进信息公开,建立跨部门跨领域经济形势分析制度。 3、在大数据分析监测基础上,为政府把握经济发展趋势、预见经济发展潜在问题、辅助经济决策提供基础支撑。 三、建设原则 大数据平台以信息资源整合为重点,以大数据应用为核心,坚持“统筹规划、分步实施,整合资源、协同共享,突出重点、注重实效,深化应用、创新驱动”的原则,全面提升信息化建设水平,促进全省经济持续健康发展。

集团主数据管理平台解决方案

集团主数据管理解决方案 1. 基本概念 主数据:是用来描述企业核心业务实体的数据,例如客户、供应商、物 料、产品、员工、组织等。主数据是具有高业务价值的,应在企业内跨越各个业务部 门被重复使用的数据,并且存在于多个异构的应用系统中。 主数据管理:包含一整套用于生成和维护主数据的规范、技术,完整的 平台包括元数据管理,信息系统集成、ETL技术、数据仓库/分析、ESB 等组件和技 术。 ESB (企业服务总线):将不同系统的业务抽象成事件或服务,以 基于消息内容的形式,通过协议转换、消息过滤、事件路由,对多个系统不同 的事件进行整合。 2. 需求概述 为满足集团业务发展,提高集团信息化管理水平,为核心业务系统搭建基础的主数据管理平台,有效解决异构系统间的主数据唯一性、一致性和共享性问题。 3. 现状描述 现目前公司的核心业务主数据存储于多套不同的业务系统中,包括AJX、HR、 金蝶财务等等,导致的问题主要有以下几个方面: 1)没有规范的管理要求:导致不同系统使用时达不到管理要求,甚至重复 管理同一数据(组织,客户、人员等); 2)没有标准的规则定义:主数据到了不同的系统可能就变了名字或编码,

直接导致不同业务系统的数据无法共享; 3)没有统一的共享平台:系统与系统间建立点对点的连接,当系统增多的时候,这样的关系结构会更加混乱,如下图: 以上3点,直接影响新建信息系统时,没有统一的接口标准可以调用主数据,而新系统要么手工维护多个系统相同的数据,要么单独为每套系统开发接口去适配 4. 解决方案 4.1.实现思路 基于现状分析,可通过搭建主数据仓库,利用ESB平台建立各业务系统间 的连接,实现主数据的CRUD管理。

高效数据存储技术和管理策略思考

高效数据存储技术和管理策略思考 1) 快照 SNIA(存储网络行业协会)对快照(Snapshot)的定义是:关于指定数据集合的一个完全可用拷贝,该拷贝包括相应数据在某个时间点(拷贝开始的时间点)的映像。快照可以是其所表示的数据的一个副本,也可以是数据的一个复制品。 快照的作用主要是能够进行在线数据备份与恢复; 快照有主要有两种技术, 一种是第一次写时复制(Copy OnFirst Write,COFW),有时简称为写时复制(CopyOn Write,COW)。即在数据第一次写入到某个存储位置时,首先将原有的内容读取出来,写到另一位置处(为快照保留的存储空间,此文中我们称为快照空间),然后再将数据写入到存储设备中。而下次针对这一位置的写操作将不再执行写时复制操作。

另一种技术是 I/O 重定向(I/O Redirect)。即将读写操作重新定向到另一个存储空间中。在一个快照生成期间,所有的写操作将被重定向到另一个介质,而读操作是否需要读重定向,则需要根据读取的位置是否有过自上次快照以来的写重定向,必须对有过写重定向的位置进行读重定向,否则不需要进行读定向。当要创建一个快照时,则将自上次快照以来所有的重定向写数据所对应在源介质中的数据复制出来生成这个时间点的快照,然后再将这些重定向写数据写回到源介质中的相应位置上,从而完成一个快照生成过程。 我们所开发的vbs-target 是基于数据重定向机制实现的。 2) LUN拷贝 就是将源LUN的数据拷贝到目标LUN。

LUN拷贝支持全量和增量2种类型的数据拷贝。1,全量拷贝: 2,增量拷贝: 3) 自动精简配置

主数据管理详解

数据是指在整个企业范围内各个系统(操作/事务型应用系统以及分析型系统)间要共享的数据,比如,可以是与客户(customers), 供应商(suppliers), 帐户(accounts)以及组织单位(organizational units)相关的数据。主数据通常需要在整个企业范围内保持一致性(cons 数据是指在整个企业范围内各个系统(操作/事务型应用系统以及分析型系统)间要共享的数据,比如,可以是与客户(customers), 供应商(suppliers), 帐户(accounts)以及组织单位(organizational units)相关的数据。主数据通常需要在整个企业范围内保持一致性(consistent)、完整性(complete)、可控性(controlled),为了达成这一目标,就需要进行主数据管理(Master Data Management ,MDM)。 什么是主数据管理(Master Data Management ,MDM) 主数据是指在整个企业范围内各个系统(操作/事务型应用系统以及分析型系统)间要共享的数据,比如,可以是与客户(customers), 供应商(suppliers), 帐户(accounts)以及组织单位(organizational units)相关的数据。主数据通常需要在整个企业范围内保持一致性(consistent)、完整性(complete)、可控性(controlled),为了达成这一目标,就需要进行主数据管理(Master Data Management ,MDM)。需要注意的是,主数据不是企业内所有的业务数据,只是有必要在各个系统间共享的数据才是主数据,比如大部分的交易数据、帐单数据等都不是主数据,而像描述核心业务实体的数据,而像客户、供应商、帐户、组织单位、员工、合作伙伴、位置信息等都是主数据。主数据是企业内能够跨业务重复使用的高价值的数据。这些主数据在进行主数据管理之前经常存在于多个异构或同构的系统中。 主数据管理(Master Data Management ,MDM)是指一组约束和方法用来保证一个企业内主题域和系统内相关数据和跨主题域和系统的相关数据的实时性、含义和质量。这是从深层次来说来说明主动主数据管理(MDM)的深度和复杂性,简单的说,主数据管理(MDM)保证你的系统协调和重用通用、正确的业务数据(主数据)。通常,我们会把主数据管理作为应用流程的补充,通过从各个操作/事务型应用以及分析型应用中分离出主要的信息,使其成为一个集中的、独立于企业中各种其他应用核心资源,从而使得企业的核心信息得以重用并确保各个操作/事务型应用以及分析型应用间的核心数据的一致性。通过主数据管理,改变企业数据利用的现状,从而更好地为企业信息集成做好铺垫。 主数据管理(MDM)可以帮助我们创建并维护整个企业内主数据的单一视图(Single View),保证单一视图的准确性、一致性以及完整性,从而提供数据质量,统一商业实体的定义,简化改进商业流程并提供业务的响应速度。从变化的频率来看,主数据和日常交易数据不一样,变化相对缓慢,另外,主数据由于跨各个系统,所以对数据的一致性、实时性以及版本控制要求很高。 主数据管理其实在很早之前就一直存在,只不过现在随着业务发展以及监管的需要,对主数据的实时性、准确性、一致性有了更高的要求,才被业界广泛接受,各个厂商相应的推出了一系列的主数据管理集成与基础套件以及特定领域的解决方案。近年来最明显的变化是,客户在以前的时候经常问的问题是:“主数据管理是什么?”,而现在客户经常问的问题演变成了:“我们的业务的确存在一些问题,主数据管理正好可以解决这个问题,我们怎么开始?”。与以前相比,客户对主数据管理(MDM)的认识有了巨大的进步,并开始尝试用主数据管理(MDM)解决他们在整个企业范围内进行跨业务、跨主题域时遇上的各种挑战和问题:比如税务行业,税务局在按纳税人在一些分析统计时,就发现关于纳税人的基本信息分布在核心征收管理系统、发票管理系统、个

sap主数据管理mdm详细介绍

MDM是一个集成的解决方案,管理所有的主数据信息。客户主数据、物料主数据、供应商数据等。 一、使用SAP MDM主数据管理解决方案,可以整合、协调主数据、管理丰富的产品内容, 主数据集中后,就能够对主数据进行有效的管理、同步和分配,并将其发布给公司内外所有相关的用户。 1、整合主数据:使用灵活、可配置的数据模型,您可以从不同的数据源(SAP和非SAP 系统)汇总主数据信息,SAP MDM能够整合来自不同系统的主数据对象。对汇总过来 的主数据信息进行搜索,辨别出相同或相似的对象,并按照需求将之清除、整理, 得到统一、完整而准确的主数据视图,在数据整合后,数据可以被轻松访问来实现 准确的企业层面的分析和报表。 2、协调主数据:除了主数据整合功能以外,SAP MDM主数据管理还可以通过交互式的 分发模式来协调整个企业范围内的主数据信息,将准确、完整的主数据信息更新到 链接的SAP或非SAP系统中,另外,它还内置了数据处理工作流,支持统一企业内 基于多层角色的模式来共同维护主数据。它可以从一个系统的记录来维护主数据, 并作为集中的主数据管理集线器,自动更新到其他系统中对应的信息,达到整个公 司层面上不同应用系统之间的数据统一、协调。 3、集中主数据:SAP MDM是实现公司层面数据标准化目标的理想平台,在主数据从多 个源系统整合到MDM之后,主数据可以进行集中的管理和创建。用户可以使用功能 强大的客户端主数据管理器或SAP企业门户界面直接管理这些数据,SAP MDM提供 有效的数据校验和工作流平台,可以对主数据的创建、修改和删除进行统一的监管,这些主数据信息也可以根据需要通过业界标准的XML格式同步或分发到其他需要的 系统中,达到集中的主数据质量控制和监管,实现企业数据标准化目标。此外,还 可将统一、标准的信息提取到SAP BI只能分析系统中,得到准确的全局报表分析。 4、管理丰富的产品/物资内容:在SAP MDM中,您不但可以管理具有复杂分类和层次 结构的产品/物资信息,还可以管理组成这些产品/物资主数据的任何类型的内容, 无论是图形还是图表内容。所有主数据内容可以从不同的SAP系统和非SAP系统中 导入。通过单程的数据标准化(内置各种计量单位和单位转换)功能以及高性能的基

数据管理平台建设方案

数据管理平台建设方案 Document number:NOCG-YUNOO-BUYTT-UU986-1986UT

数据管理平台建设方案 目录 一、数据管理平台项目概述 建立韶关市中小科技企业数据库。韶关市中小科技企业数据库主要收录韶关市科技中小企业的财务数据、治理数据等涉及企业经营和管理的相关的数据,以便为政府决策提供参考。 韶关市中小科技企业数据库的项目建设包括硬件部分和软件部分建设。软件部分建设方面,韶关市科技金融综合服务中心希望能建设成一套综合性的数据管理平台。该数据管理平台的建设以搭建中心与企业桥梁为目标,以提供专业化服务平台为导向,应具备高性能、高安全性、高可靠性、可扩展性、高可用性,便于将来拓展和进一步改造。 二、总体设计 需求概述 1、功能性需求 数据管理平台采用B/S模式,业务操作简单、扩展方便。平台用户群体主要是企业用户与管理员。平台分为前端、后端,具备展示、操作、分析等功能,可以满足服务中心一整套的数据采集、管理、展示及分析需求,具体包含以下模块: ?录入系统

录入系统是录入数据的源头,本着方便录入人员界面录入操作的原则设计,更有效提高数据录入效率。录入系统的数据除了人工录入外,还有一部分通过自动化配置导入的方式,配合人工录入,提高效率。 ?内容发布系统 用户根据需要查询、发布、修改、删除科技金融服务中心的新闻、公告。 并在前端展示。 ?信息检索系统 点击“表”进入检索界面,会员可进行“企业筛选”、“时间筛选”、“字段选 择”、“条件筛选”,快速定位需要数据。 ?元数据管理系统 是韶关市中心企业库的信息目录,用户可很快捷地查询出相关库的信息及与该库相关的流入流出。元数据管理主要是针对韶关市科技金融服务中心的各种元数据进行管理,主要包括元数据的查询,新增,修改,删除。通过建设元数据系统,拥有统一、标准、规范化的库信息,并在所有数据流程中实现有效管理,降低维护成本与资源内耗。 ?数据质检系统 财务数据质检与自动化质检配置结合,用户提交数据同时根据已配置的质检关系将通过质检数据入库,展现用户。为通过质检数据显示在质检不通过列表中根据已配置的质检关系显示对应的错误信息,用户根据错误信息修改数据再次提交质检。 ?配置管理系统

集团主数据管理平台解决方案

集团主数据管理解决方案 1.基本概念 主数据:是用来描述企业核心业务实体的数据,例如客户、供应商、物料、产品、员工、组织等。主数据是具有高业务价值的,应在企业内跨越各个业务部门被重复使用的数据,并且存在于多个异构的应用系统中。 主数据管理:包含一整套用于生成和维护主数据的规范、技术,完整的平台包括元数据管理,信息系统集成、ETL技术、数据仓库/分析、ESB等组件和技术。 ESB(企业服务总线):将不同系统的业务抽象成事件或服务,以基于消息内容的形式,通过协议转换、消息过滤、事件路 由,对多个系统不同的事件进行整合。 2.需求概述 为满足集团业务发展,提高集团信息化管理水平,为核心业务系统搭建基础的主数据管理平台,有效解决异构系统间的主数据唯一性、一致性和共享性问题。 3.现状描述 现目前公司的核心业务主数据存储于多套不同的业务系统中,包括AJX、HR、金蝶财务等等,导致的问题主要有以下几个方面: 1)没有规范的管理要求:导致不同系统使用时达不到管理要求,甚 至重复管理同一数据(组织,客户、人员等); 2)没有标准的规则定义:主数据到了不同的系统可能就变了名字或 编码,直接导致不同业务系统的数据无法共享; 3)没有统一的共享平台:系统与系统间建立点对点的连接,当系统 增多的时候,这样的关系结构会更加混乱,如下图:

*实线表示已实现自动同步,虚线表示人工添加、导入。 以上3点,直接影响新建信息系统时,没有统一的接口标准可以调用主数据,而新系统要么手工维护多个系统相同的数据,要么单独为每套系统开发接口去适配。 4.解决方案 4.1.实现思路 基于现状分析,可通过搭建主数据仓库,利用ESB平台建立各业务系统间的连接,实现主数据的CRUD管理。

科研管理信息平台建设方案

科研管理信息平台建设方案 一、背景 科研管理信息平台要实现对医院科研情况的有效管理以及对科研活动的全程跟踪。该系统为科研管理人员服务,能够实现对科研信息的高效率管理和控制,又能满足决策者对科研活动的宏观管理与决策的需要,还能够为医院科研人员的考评提供依据。 科研管理信息平台是医院科研管理的核心部分,包括科研人员、项目申报、成果管理、科技统计、成果管理、专利管理、经费管理、报表管理等多项信息管理职能。建立一套适用于医院科研管理的信息系统,已经成为当前医院科研工作较为迫切的需求。 建立一套完善的科研管理信息平台可以极大地提高管理效率,为领导的决策提供较科学的依据。一套较完善的科研管理信息平台,应以项目管理为中心,涵盖计划、合同、成果、专利、资金、人员、设备等方面,并可关联到办公、人事、财务、设备等其它业务系统,整个系统庞大而复杂。 二、技术方案 1(总体设计 科研管理信息平台涵盖医院科研管理工作所有环节,涉及到科研资源、科研项目、科研经费、科研成果、成果获奖、对外交流、论文收引、科研考评以及数据上报等方面,基于院内网/互联网为医院科研工作提供先进、实用的信息化管理手段,为科研人员及管理人员提供简便、快捷的网络化信息服务。 为了保证原有相关应用系统(如:教务、图书馆、人事、财务、资产等)的能够得到充分利用并发挥更大的作用,需要按照一定的业务规则,统一的、方便的、高效的集成这些应用系统,所以在项目中需要建设配套的应用集成标准和集成平台。

除上述管理功能要求外,本建设方案中还包含在线信息查询、信息发布等服务,以保证医院各科室科研人员信息的及时获取。 综合科研管理信息平台的功能要求,我们将系统将系统建设分为两期进行,具体如下: 一期:主要进行基本功能建设 1、科研数据集成管理平台 2、数据查询平台 3、数据筛选系统 4、科研考评管理系统 5、科研管理信息门户网站 6、数据管理系统 7、论文管理平台 二期:进行次要功能建设 1、数据综合查询、统计系统 2、数据共享平台 3、短信交流平台 4、网络期刊检索系统 5、科研论坛 6、在线答疑系统 7、院外链接支持 系统结构: 本系统计划采用C/S+B/S设计模式,采用C#为开发语言,SQL Server 2005为数据库来进行设计与开发。基于https://www.sodocs.net/doc/b918841731.html,平台构建Web应用程序,把系统划分为数据层、业务逻辑层和表示层。为保证系统数据的安全性,建议科研管理系统采

主数据管理(MDM)的成熟度

主数据管理(MDM)的成熟度 MDM全写Master Data Management,翻译为主数据管理或元数据管理。 什么是MDM 企业主数据是用来描述企业核心业务实体的数据,比如客户、合作伙伴、员工、产品、物料单、账户等;它是具有高业务价值的、可以在企业内跨越各个业务部门被重复使用的数据,并且存在于多个异构的应用系统中。 主数据和主数据管理的概念 企业主数据可以包括很多方面,除了常见的客户主数据之外,不同行业的客户还可能拥有其他各种类型的主数据,例如:对于电信行业客户而言,电信运营商提供的各种服务可以形成其产品主数据;对于航空业客户而言,航线、航班是其企业主数据的一种。对于某一个企业的不同业务部门,其主数据也不同,例如市场销售部门关心客户信息,产品研发部门关心产品编号、产品分类等产品信息,人事部门关心员工机构,部门层次关系等信息。 数据管理的范畴和主数据管理的概念 如图所示,企业数据管理的内容及范畴通常包括交易数据、主数据以及元数据。 ●交易数据:用于纪录业务事件,如客户的订单,投诉记录,客服申请等, 它往往用于描述在某一个时间点上业务系统发生的行为。 ●主数据:主数据则定义企业核心业务对象,如客户、产品、地址等,与交 易流水信息不同,主数据一旦被记录到数据库中,需要经常对其进行维护,从而确保其时效性和准确性;主数据还包括关系数据,用以描述主数据之间的关系,如客户与产品的关系、产品与地域的关系、客户与客户的关系、产品与产品的关系等。

元数据:即关于数据的数据,用以描述数据类型、数据定义、约束、数据关系、数据所处的系统等信息。 主数据管理是指一整套的用于生成和维护企业主数据的规范、技术和方案,以保证主数据的完整性、一致性和准确性 ( “ The set of disciplines, technologies, and solutions used to create and maintain consistent, complete, contextual and accurate business data for all stakeholders (users, applications, data warehouses, processes, companies, trading partners, customers, etc.) across and beyond the enterprise ” ) 。主数据管理的典型应用有 Customer Data Integration —客户数据管理和Product Information Integraiton —产品数据管理。 图 2. 主数据管理的信息流 一般来说,主数据管理系统从 IT 建设的角度而言都会是一个相对复杂的系统,它往往会和企业数据仓库 / 决策支持系统以及企业内的各个业务系统发生关系,技术实现上也会涉及到 ETL、EAI、EII 等多个方面,如图 2 所示,一个典型的主数据管理的信息流为: 1.某个业务系统触发对企业主数据的改动; 2.主数据管理系统将整合之后完整、准确的主数据分发给所有有关的 应用系统; 3.主数据管理系统为决策支持和数据仓库系统提供准确的数据源。 因此对于主数据管理系统的建设,要从建设初期就考虑整体的平台框架和技术实现。

数据管理平台建设方案

数据管理平台建设方案

数据管理平台建设方案 目录

一、数据管理平台项目概述 (2) 二、总体设计 (3) 2.1 需求概述 (3) 1、功能性需求 (3) 2、非功能需求 (4) 2.2 设计方案 (5) 三、关键的开发技术 (6) 四、系统软硬件要求 (8)

一、数据管理平台项目概述 建立韶关市中小科技企业数据库。韶关市中小科技企业数据库主要收录韶关市科技中小企业的财务数据、治理数据等涉及企业经营和管理的相关的数据,以便为政府决策提供参考。 韶关市中小科技企业数据库的项目建设包括硬件部分和软件部分建设。软件部分建设方面,韶关市科技金融综合服务中心希望能建设成一套综合性的数据管理平台。该数据管理平台的建设以搭建中心与企业桥梁为目标,以提供专业化服务平台为导向,应具备高性能、高安全性、高可靠性、可扩展性、高可用性,便于将来拓展和进一步改造。 二、总体设计 2.1 需求概述

1、功能性需求 数据管理平台采用B/S模式,业务操作简单、扩展方便。平台用户群体主要是企业用户与管理员。平台分为前端、后端,具备展示、操作、分析等功能,可以满足服务中心一整套的数据采集、管理、展示及分析需求,具体包含以下模块:?录入系统 录入系统是录入数据的源头,本着方便录入人 员界面录入操作的原则设计,更有效提高数据 录入效率。录入系统的数据除了人工录入外, 还有一部分通过自动化配置导入的方式,配合 人工录入,提高效率。 ?内容发布系统 用户根据需要查询、发布、修改、删除科技金 融服务中心的新闻、公告。并在前端展示。

?信息检索系统 点击“表”进入检索界面,会员可进行“企业筛选”、“时间筛选”、“字段选择”、“条件筛选”,快速定位需要数据。 ?元数据管理系统 是韶关市中心企业库的信息目录,用户可很快捷地查询出相关库的信息及与该库相关的流入流出。元数据管理主要是针对韶关市科技金融服务中心的各种元数据进行管理,主要包括元数据的查询,新增,修改,删除。通过建设元数据系统,拥有统一、标准、规范化的库信息,并在所有数据流程中实现有效管理,降低维护成本与资源内耗。 ?数据质检系统 财务数据质检与自动化质检配置结合,用户提

国家电网公司物资分类与物料主数据管理细则

国家电网公司物资分类与物料主数据 管理细则 第一章总则 第一条为提升物资分类与物料主数据管理水平,依据《国家电网公司物资采购标准管理办法》,制定物资分类与物料主数据管理细则(以下简称细则)。 第二条本细则适用于公司总(分)部、各单位及所属各级单位(含全资、控股、代管单位)物资分类与物料主数据(以下简称“主数据”)的新增、修订、问题受理等管理工作,服务分类及服务主数据管理可参照执行。 第三条本细则所称“主数据”包括物资分类、物料主数据及采购标识规则。主数据在国网公司主数据管理平台(SG-MDM)进行统一管理和维护,管理流程见附件:物资和服务主数据管理流程图。 第四条物资分类是根据物资信息化管理要求,从不同角度、不同层次,对物资进行区分、归类、命名、描述,建立的物资分类结构体系和物资信息化代码体系。 国网公司的物资分类体系按照大类、中类、小类进行分类,每个小类下辖若干特征项,每个特征项下对应若干特征值。 第五条物料主数据是根据物资分类结构体系,按照相关规则,赋予物资的信息化代码,包含了物资编码、物料描述、计量单位、采购标识和分类特征等信息。 第六条采购标识是根据物资采购标准,对物料进行分类的标识,分为国网标准物料、非标准物料和未标准化物料。 国网标准物料指物资采购标准界定范围内、公司推广应用的物资;非标准物料指在物资

采购标准界定范围外、公司限制使用的物资;未标准化物料指尚未编制物资采购标准、公司不限制使用的物资。 第七条采购标识规则是根据物资采购标准制定、辅助计算机识别采购标识的规则,是物料主数据与采购标准模板的衔接纽带。 第八条本细则职责分工按照《国家电网公司物资采购标准管理办法》执行。 第二章新增与修订 第九条主数据新增 (一)新增主数据对应的物资必须是客观存在的、但尚未列入主数据管理系统的物资。新增主数据的需求是否合理的判断依据是国家标准、行业标准、公司企业标准以及公司科技推广成果。 (二)公司各级单位在提报新增主数据需求之前,须组织开展预审。 (三)新增小类以电子邮件形式进行提报,特征值及物料主数据新增需登陆主数据管理系统进行线上提报。新增小类一般应根据物资关键特性设置特征项;新增特征值需符合既有特征项的定义。 第十条主数据修订 (一)主数据修订包括物资分类、特征值、物料主数据的冻结、解冻,以及采购标识规则的修订。 (二)对于重复存在或无法满足物资采购及应用需求的主数据,经咨询专业专家意见、国网物资部批准后,在主数据管理系统中完成修订工作,并及时发布通知公告。 (三)物资分类及物料主数据被冻结后,对于需要处理未清业务的,由各单位在ERP 系统中自行解冻,业务处理完毕即时恢复冻结状态。对于仍在计划申报阶段,未发布招标采购公告的主数据,原则上不能继续使用,应选用其他物料主数据申报计划。

数据管理平台建设方案

数据管理平台建设方案 目录 一、数据管理平台项目概述 (2) 二、总体设计 (2) 2.1 需求概述 (2) 1、功能性需求 (2)

2、非功能需求 (4) 2.2 设计方案 (4) 三、关键的开发技术 (6) 四、系统软硬件要求 (8) 一、数据管理平台项目概述 建立韶关市中小科技企业数据库。韶关市中小科技企业数据库主要收录韶关市科技中小企业的财务数据、治理数据等涉及企业经营和管理的相关的数据,以便为政府决策提供参考。 韶关市中小科技企业数据库的项目建设包括硬件部分和软件部分建设。软件部分建设方面,韶关市科技金融综合服务中心希望能建设成一套综合性的数据管理平台。该数据管理平台的建设以搭建中心与企业桥梁为目标,以提供专业化服务平台为导向,应具备高性能、高安全性、高可靠性、可扩展性、高可用性,便于将来拓展和进一步改造。 二、总体设计 2.1 需求概述 1、功能性需求

数据管理平台采用B/S模式,业务操作简单、扩展方便。平台用户群体主要是企业用户与管理员。平台分为前端、后端,具备展示、操作、分析等功能,可以满足服务中心一整套的数据采集、管理、展示及分析需求,具体包含以下模块: 录入系统 录入系统是录入数据的源头,本着方便录入人员界面录入操作的原则设计,更有效提高数 据录入效率。录入系统的数据除了人工录入外,还有一部分通过自动化配置导入的方式, 配合人工录入,提高效率。 内容发布系统 用户根据需要查询、发布、修改、删除科技金融服务中心的新闻、公告。并在前端展示。 信息检索系统 点击“表”进入检索界面,会员可进行“企业筛选”、“时间筛选”、“字段选择”、“条 件筛选”,快速定位需要数据。 元数据管理系统 是韶关市中心企业库的信息目录,用户可很快捷地查询出相关库的信息及与该库相关的流 入流出。元数据管理主要是针对韶关市科技金融服务中心的各种元数据进行管理,主要包 括元数据的查询,新增,修改,删除。通过建设元数据系统,拥有统一、标准、规范化的 库信息,并在所有数据流程中实现有效管理,降低维护成本与资源内耗。 数据质检系统 财务数据质检与自动化质检配置结合,用户提交数据同时根据已配置的质检关系将通过质 检数据入库,展现用户。为通过质检数据显示在质检不通过列表中根据已配置的质检关系 显示对应的错误信息,用户根据错误信息修改数据再次提交质检。 配置管理系统

(完整版)用友集团主数据标准管理办法(试行)

用友集团主数据标准管理办法(试行) 签发人: 王家亮 签发时间: 2014年06月16日 时效: 自发文之日起生效 授权: 全体员工 第一章总则 第101条为加强集团信息管理标准化,明确用友主数据分类标准及制定的管理机构、协作机构,特制订本管理办法。第102条本办法适用于集团本部、股份公司(含下属分支机构)、控股子公司(含下属分支机构)、集团直属业 务中心,以下均简称"成员机构"。 第103条释义 a)主数据(Master Data简称MD) 在企业各系统中交互共享、表示实体对象的基准数据。 b)主数据管理(Master Data Management简称MDM) 保证系统之间主数据的实时性、完整性和有效性的一组 约束和方法。 第二章主数据标准管理 第201条管理原则 a)标准统一 1.主数据标准包括数据名称、分类、编码、主要提供 机构、应用范围及对象、数据主要结构、各字段类

型及含义、数据使用的方法、输入输出关系、新旧 数据标准对照关系等。 2.标准制定考虑全集团所有业务类型的需要,同一主 数据在各系统中名称、编码、分级分类、数据结构 相同,确保数据衔接传递及归集分析规范化、标准 化。 3.主数据标准是各信息系统使用、开发、升级、整合 统一遵循的法则,确保数据描述的一致性和科学 性,避免歧义及理解偏差。 4.主数据标准是公司审核各信息平台的重要依据和评 价方法,凡未严格遵循及执行标准的系统,公司有 权利和义务终止其运行并进行整改。 b)主数据标准与业务流程分离,主数据标准不受业务流程 变化影响。 c)分层归口管理 1.根据主数据特性及部门职责,分层划分主数据标准 的归口管理部门(或人员)。 2.集团级部门牵头组建小组制定主数据标准与规范。 3.子公司(含业务部门)参与制定标准规范并落实执 行。 4.最终用户(主数据归口管理人员)进行主数据操作 实现。

国家电网公司物资分类与物料主数据管理细则

电网公司物资分类与物料主数据 管理细则 第一章总则 第一条为提升物资分类与物料主数据管理水平,依据《电网公司物资采购标准管理办法》,制定物资分类与物料主数据管理细则(以下简称细则)。 第二条本细则适用于公司总(分)部、各单位及所属各级单位(含全资、控股、代管单位)物资分类与物料主数据(以下简称“主数据” )的新增、修订、问题受理等管理工作,服务分类及服务主数据管理可参照执行。 第三条本细则所称“主数据”包括物资分类、物料主数据及采购标识规则。主数据在国网公司主数据管理平台(SG-MDM )进行统一管理和维护,管理流程见附件:物资和服务主数据管理流程图。 第四条物资分类是根据物资信息化管理要求,从不同角度、不同层次,对物资进行区分、归类、命名、描述,建立的物资分类结构体系和物资信息化代码体系。 国网公司的物资分类体系按照大类、中类、小类进行分类,每个小类下辖若干特征项,每个特征项下对应若干特征值。 第五条物料主数据是根据物资分类结构体系,按照相 关规则,赋予物资的信息化代码,包含了物资编码、物料描述、计量

单位、采购标识和分类特征等信息。 第六条采购标识是根据物资采购标准,对物料进行分类的标识,分为国网标准物料、非标准物料和未标准化物料 国网标准物料指物资采购标准界定围、公司推广应用的物资;非标准物料指在物资采购标准界定围外、公司限制使用的物资;未标准化物料指尚未编制物资采购标准、公司不限制使用的物资。 第七条采购标识规则是根据物资采购标准制定、辅助计算机识别采购标识的规则,是物料主数据与采购标准模板的衔接纽带。 第八条本细则职责分工按照《电网公司物资采购标准管理办法》执行。 第二章新增与修订 第九条主数据新增 (一)新增主数据对应的物资必须是客观存在的、但尚未列入主数据管理系统的物资。新增主数据的需否合理的判断依据是标准、行业标准、公司企业标准以及公司科技推广成果。 (二)公司各级单位在提报新增主数据需求之前,须组织开展预审。 (三)新增小类以电子形式进行提报,特征值及物料主数据新增需登陆主数据管理系统进行线上提报。新增小类一般应根据物资关键特性设置特征项;新增特征值需符合既有特征项的定义。 第十条主数据修订

基础主数据管理办法V1.0

基础主数据管理办法 版本号:1.0.0

文档信息

1 总则 1.1 为逐步形成鑫鑫完善的信息化管理体系,为企业运营和各业务发展提供唯一、准确的基础数据,实现鑫鑫信息系统基础数据的单点录入、全局共享,制定本办法。 1.2 本办法所称主数据,指涉及各信息系统公用部分的数据信息,包括:物料信息、供应商信息、客户信息、部门信息、人员信息等。 2 基础主数据管理职责 信息部负责建立基础主数据的编码规则、制度和流程,并负责所有物料统一编码的维护,人力资源部负责部门编码及人员编码的维护。 3基础主数据质量要求 3.1 基础主数据以真实性和唯一性为最高质量管理目标。 3.2 鑫鑫基础数据应严格按照编码申请表要求规范填写申请事项。编码申请表见附件。在填写申请时,须确保所填写的基本信息是真实、完整、准确和唯一的。相关各业务前端部门负责对其基本信息进行初步审核。 3.3 为保证数据的唯一性,鑫鑫基础主数据按照如下原则进行数据查重: 物料名称以标准商品名称为准,物料名称及规格包装完全一致的,认为是同一物料 (一)部门名称以组织构架标准名称为准,部门名称一致的认为

是同一部门 (二)身份证号码一致的认为是同一人员 (三)供应商名称完全一致的,认为是同一供应商 (四)供应商组织机构代码一致的,认为是同一供应商 (五)供应商国税登记号一致的,认为是同一供应商 (六)供应商地税登记号一致的,认为是同一供应商。 (七)客户查重标准同供应商 3.4鑫鑫建立基础主数据定时查重的运行机制,加强主数据质量的日常管理。根据查重结果,信息部有权对可能重复的基础主数据进行合并或失效处理。同时将失效主数据信息根据失效流程发布给相关业务系统。 3附则 4.1 鑫鑫基础主数据管理应按照鑫鑫IT规划要求,逐步纳入鑫鑫主数据管理平台统一管理。 4.2 本试行办法由鑫鑫信息部负责解释,自发布之日起施行。 石家庄鑫鑫股份有限公司 二〇一五年十一月

集团主数据管理平台解决方案

集团主数据管理平台解决方案

集团主数据管理解决方案 1.基本概念 ●主数据:是用来描述企业核心业务实体的数据,例如客户、 供应商、物料、产品、员工、组织等。主数据是具有高业 务价值的,应在企业内跨越各个业务部门被重复使用的数 据,而且存在于多个异构的应用系统中。 ●主数据管理:包含一整套用于生成和维护主数据的规范、技 术,完整的平台包括元数据管理,信息系统集成、ETL技 术、数据仓库/分析、ESB等组件和技术。 ?ESB(企业服务总线):将不同系统的业务抽象成事件 或服务,以基于消息内容的形式,经过协议转换、消 息过滤、事件路由,对多个系统不同的事件进行整 合。 2.需求概述 为满足集团业务发展,提高集团信息化管理水平,为核心业务系统搭建基础的主数据管理平台,有效解决异构系统间的主数据唯一性、一致性和共享性问题。 3.现状描述 现当前公司的核心业务主数据存储于多套不同的业务系统中,包括AJX、HR、金蝶财务等等,导致的问题主要有以下几个方

面: 1)没有规范的管理要求:导致不同系统使用时达不到管理要 求,甚至重复管理同一数据(组织,客户、人员等); 2)没有标准的规则定义:主数据到了不同的系统可能就变了名 字或编码,直接导致不同业务系统的数据无法共享; 3)没有统一的共享平台:系统与系统间建立点对点的连接,当 系统增多的时候,这样的关系结构会更加混乱,如下图: *实线表示已实现自动同步,虚线表示人工添加、导入。 以上3点,直接影响新建信息系统时,没有统一的接口标准能够调用主数据,而新系统要么手工维护多个系统相同的数据,要么单独为每套系统开发接口去适配。 4.解决方案 4.1.实现思路 基于现状分析,可经过搭建主数据仓库,利用ESB平台建立

主数据管理方法论

主数据管理方法论 什么是主数据(MD) 简单的说,主数据是企业内关于核心业务实体的参照数据。这些业务实体包括:1.人员-例如,客户,雇员(人力资本),供应商,合伙人等。 2.事物-包括产品,财务(分类帐),资产等。 3.场所-企业感兴趣的位置和地点。 4.其他关键实体-企业感兴趣的其他数据。每个企业都会有自己特有的关键实体。 什么是主数据管理(MDM) 主数据管理-或者称为管理主数据。这包括建立和维护主数据的一些管理性的应用。例如,客户数据整合(CDI,customer data integration),产品信息管理(PIM,product information management),以及用来管理类似数据主题的其他应用。 主数据管理的业务目的 通过对没有MDM的IT环境进行分析,我们可以很容易的理解MDM的业务目的。分析结果可以总结为下面的四个主要问题: 1.数据冗余 没有MDM功能,企业内的每一个系统、应用、甚至业务部门都会收集自己版本的核心业务实体数据。最好的例子就是对客户数据的收集。客户的关键属性如客户名称和地址信息在企业内各个角落都被重复的记录着。非常遗憾的是,在这个收集客户信息的过程中,很少会产生相同或者一致的结果。这导致了一个很严重的问题(除了存储成本之外),数据冗余导致数据质量过差。 根据The Data Warehousing Institute的一份报告(Data Quality and the Bottom Line, by Wayne Eckerson)显示,由于数据质量过差,企业每年的总共损失超过$600 billion,而且其中的大部分成本是因为冗余、低质量的主数据引起的。这也引起了下面提到的第二个主要问题。 2.数据不一致

相关主题