主数据与数据仓库相比，到底有什么不同？多云时代，企业该如何管理复杂的IT环境

本文目录

• 主数据与数据仓库相比，到底有什么不同
• 多云时代，企业该如何管理复杂的IT环境
• 什么是主数据数据分析中，主数据如何管理
• 主数据的定义是什么主数据管理包括什么
• 数据中台是大数据平台吗
• 统一身份管理和4A项目、主数据管理有什么联系统一身份管理对企业重要吗
• 主数据管理够解决哪些问题
• 主数据管理的最佳实践
• 企业用的主数据管理主要管理哪些数据
• 主数据管理给企业带来的三大价值

主数据与数据仓库相比，到底有什么不同

目前主数据、大数据、数据仓库、Hadoop等概念都是市场上炒的很火的概念，但是很多人仅仅了解这些概念是互相有关联的，却不能很好的区分这些名词之间的区别，今天在这里我主要介绍一下主数据与数据仓库。

在我看来主数据是指具有高业务价值的、可以在企业内跨越各个业务部门且能被重复使用的数据，是单一、准确、权威的数据。而数据仓库是一个很大的数据存储集合，出于企业的分析性报告和决策支持目的而创建，对多样的业务数据进行筛选与整合。主数据可以看成是一类数据或多类数据，而数据仓库则是多类数据的合集。可以看出主数据其实是数据仓库的一部分。

我们搭建数仓，基于一定的规则进行数据抽取，将数据沉淀，保障数据是可追溯的。基于不同的算法规则对数仓中的数据进行计算、汇聚来实现预测分析。而主数据管理使得企业能够集中化管理数据，在分散的系统间保证主数据的一致性、准确性和权威性。主数据为数据仓库提供的基础数据（数仓模型的维表数据）就更具有权威性，那么在做数据分析时也能更准确、更趋向于实际情况，更好的帮助企业高层进行决策分析。

多云时代，企业该如何管理复杂的IT环境

云时代应用管理已经普遍应用，在6月阿里因为运维操作失误而造成阿里云“瘫痪”的情况下，多云的呼声越来越高，无论是公有云、私有云亦或是混合云在为企业提供更多上云途径的同时也让企业在多云模式下面临更为复杂的多云间IT环境管理及维护，比如：面向终端用户，用户需要在不同的界面来回切换；面向数据需要解决跨云的数据迁移、数据的一致性、统一性如何保障。

通过以上问题的汇总不难想到在云时代的前身，企业在物理机隔离的情况下面临同样的问题：数据割裂、信息孤岛、系统间的认证对接杂乱不统一等，这时我们典型的解决方案是采用中间件平台实现异构系统的集成、建立统一的标准、实现信息的汇聚。同理类比在多云模式道理相同，将不同的云服务器理解为隔离的物理服务器，结合中间平台解决企业的管控需求，如：通过ESB企业服务总线实现异构系统间的数据对接，建立统一的集成标准；结合MDM主数据管理平台实现主数据的管理，保证多云模式下系统间数据的唯一性、一致性、完备性；基于Portal门户集成平台搭建企业应用中心，汇聚系统内的数据、信息，构建统一待办、办公中心、信息中心及数据中心等。依托于平台厂商的产品及标准化建议共同解决多云所面临的问题。

综上在多云模式下企业可以通过综合集成管控的模式，采用中间平台实现不同云平台中应用系统间的对接，建立统一的对接标准，实现数据统一、标准、规范，将信息汇聚集中展现，同时考虑扩展性、开放性以便最终满足对企业无论是当前或是持续发展业务的支撑。

什么是主数据数据分析中，主数据如何管理

主数据是指具有高业务价值的、可以在企业内跨越各个业务部门被重复使用的数据，是单一、准确、权威的数据来源，是企业中各个业务系统共享的数据，从多个数据源合并生成“黄金”记录，而数据分析是通过抽取业务部门的数据来创建不同业务的分析主题进行数据分析，所以这些数据也包括主数据，那么这些主数据在数据分析平台该如何管理呢？

数据治理：主数据首先是在主数据管理平台中进行治理的，所以主数据要先以各个业务系统为源头把主数据分发给主数据管理平台进行统一管理，实现主数据识别、抽取、审核、发布、生成、变更，使各个业务系统的主数据成为单一、准确、权威的数据来源。

数据处理：主数据治理后 ，把需要分析的主数据从主数据管理平台中抽取出来放到ODS中间库中，进行统一的元数据管理，未来也可用于实时数据查询，通过数仓建模把处理后的主数据放到数仓中与其它业务数据结合，生成具有业务效果的数据就可以进行不同业务主题的数据分析。

综上所述通过主数据的管理平台把各个业务系统的主数据统一管理后，使其变为单一、准确、权威的数据来源，在通过数据采集把数据分析所用的主数据同步到中间库中，再通过数据处理把这些数据打散进行有效的整合，建立可以满足不同业务分析的数仓模型数据，才能随着企业的发展在数据越来越多的情况下进行数据分析。

主数据的定义是什么主数据管理包括什么

随着信息化进程的加快，许多集团/企业都用了多个信息系统，每个信息系统对相同的基础档案拥有不同的信息描述，例如：关于地理信息，有的系统记录的是“北京市朝阳区”，有的记录的是“北京 朝阳”，有的记录的是“北京 朝阳区”，其实它们所描述的是一个地理区域，但是描述的差异导致这三个系统中的数据无法实现共享。

企业主数据大多通过数据中台进行管理，数据中台对异构数据进行集成，统一标准和口径，形成可跨部门共享与传播的标准数据，进而发挥其对企业决策的价值。

主数据管理提升数据质量的过程分为四步：定义主数据、数据映射、数据增强、数据清洗。

01 定义主数据

不同部门之间存在沟通障碍，比如收入，财务部门所说的收入和销售部门所说的收入是不一样的，所以企业要把常用的指标进行指定，指定收入是开票收入还是主营业务收入；还有常用的维度或档案，需要去定义一套标准档案。企业所有的分析与决策要基于统一的指标和统一的档案。

02 数据映射

比如地区信息“陕西省 宝鸡”，与标准档案中的“陕西省宝鸡市”，应该具有映射关系，它们实际上指的是一套档案；对于收入来说，“发票收入和收入”，“财务某个科目的收入和收入”，都应该是一个档案。关于指标的映射关系也是需要去确定的。

03 数据增强

数据的缺失字段要补齐，比如企业可能先上线了ERP其他模块，再上成本模块，企业在做利润分析的时候，关于历史数据的成本该如何处理？那么就需要确定相关策略对历史数据进行处理。

再比如，有企业遇到这样的问题：“我想知道每个客户给我带来多少收入，带来多少利润，但是之前，我跟客户之间的核销没有处理完，那么这部分历史数据怎样去处理？”同理，要在数据增强部分确定策略来处理这些历史数据。

04 数据清洗

不同系统之间的数据，包含了一些重复的数据，一些无关的数据，甚至一些错误的数据，要进行清洗，要进行纠正，只有清洗纠正之后，数据的质量才能有所保证。

数据中台是大数据平台吗

首先我们先来介绍数据中台的概念，数据中台是聚合和治理跨域数据，将数据抽象封装成服务，提供给前台以业务价值的逻辑概念。数据中台是指通过数据技术，对数据进行采集、计算、存储、加工，同时统一标准和口径，数据中台把数据统一之后，会形成标准数据，再进行存储，形成大数据资产层，进而为客户提供高效服务。在数通畅联的数据中台解决方案中包含MDM基础数据平台、ESB应用集成平台和DAP数据分析平台三款产品，它们分别起到如下作用：

1.通过MDM主数据管理平台，各个业务系统的主数据进行统一标准化，进行数据治理和清洗，让各个业务系统主数据保持一致性，完整性、准确性。

2.通过DAP数据分析平台+ESB应用集成平台进行数据采集，从业务系统到ODS中间库，从ODS到数仓维度表和基础事实表，在通过维度表和事实表进行加工和计算到汇总事实表中进行分析数据治理。

3.通过DAP数据分析平台的可视化展现（图表、业务报表、多维分析等）、数据服务对外提供数据展现，为企业提供更灵活、高效、低成本的数据分析挖掘服务，避免企业为满足具体某部门某种数据分析需求而投放大量高成本、重复性的数据开发成本。

综上所述就是数据中台的概念和组成部分，而大数据平台只是构建数据中台的一部分，大数据平台是为了给数据中台的海量数据提供数据支持做好了准备，提供海量数据弹药的作用，都是通过数据中台提供数据服务，从而提高企业的数据价值。

数通畅联专注于企业IT架构、SOA综合集成、数据治理分析领域，感谢您的阅读与关注。

统一身份管理和4A项目、主数据管理有什么联系统一身份管理对企业重要吗

统一身份管理主要是为了实现统一用户管理、统一认证管理、统一权限管理、统一安全审计功能，达到多个应用之间的用户、认证统一管理、高效集成、安全监管，提升企业信息化应用能力。4A是指：认证（Authentication）、账号（Account）、授权（Authorization）、审计（Audit），中文名称为统一安全管理平台解决方案。主数据管理是解决企业经营中各类主数据在不同系统中的名称、编码等信息不一致现象，保证企业内主数据单一视图的准确性、一致性及完整性。一般在软件项目中统一身份管理也被称作为4A项目，解决问题及实施方案包括4A中提到的内容，只不过很多时候对于不同用户的需求场景与个性化业务，会在4A实施内容范围上多实现一些功能。对于统一身份管理项目主要使用IDM身份管理平台或4A系统进行解决，通常情况下除了使用单一产品，还会搭配集成套件中的其它产品更好的辅助完成项目，如ESB企业服务总线，共同打造统一身份管理项目。一些厂商也会推出一些优化服务，例如IBM推出的静默的身份认证管理 (IAM)，特点就是能够同时兼具强有力的安全态势与良好的数字化体验，其产品服务组合包括认证、特权访问管理、身份治理和访问管理。我们公司使用的就是IBM的静默身份认证管理（IAM），体验感很好。如果对IBM的感兴趣可以找他们的代理，建议找大一点代理，价格服务都有保障，比如北京神码、上海德慧。我们公司就是找到上海德慧，服务还不错。

主数据管理够解决哪些问题

数据中心管理分很多部分，大致会有流程管理系统，业务操作管理系统，网管系统，资产管理系统，动环监控系统等，目前业界主流的大厂商都在研发或推进这块业务，像是施耐德在做数据中心管理软件时会考虑到用信息化提高生产效率，转变职能改革，减少人为操作失误等。

主数据管理的最佳实践

定一个大目标，但采取小步骤要考虑基本目标，但是会限制战略部署的视野。一旦主数据管理在一个地方好用了，再一步一步地扩展。他们说，业务流程常常是缓解因素，而不是技术，所以在过程中及早得到终端用户的输入时很重要的。考虑潜在的性能问题不同的架构能导致不同的性能损失。例如，如果公司为主数据管理采用主hub方式，记录创建流经唯一一个点，它就能变成一个瓶颈。而且，随着应用越来越依赖主数据管理，工作流，系统优先级和运行顺序会变成要马上考虑的紧急问题。建立数据管理策略和流程专家们一致认为，应该允许在人力和过程变更管理方面花时间和投钱，不要低估了工作量。尽管一些部门（比如财务部门）看到了集中主数据管理的价值，其但他群体都不太乐意放弃自己管理数据的权利。

企业用的主数据管理主要管理哪些数据

亿信华辰数据标准管理平台从数据标准制定、发布、落地实施、评估以及更新维护进行全生命周期的管理，可以满足各个行业以及不同用户的需求。以亿信华辰数据标准管理平台为例，企业的数据标准管理主要包括以下四个部分： 一是标准的规划企业的数据标准来源非常丰富，不仅有外部监管的要求，行业通用的标准，同时也要考虑到企业内部的实际情况，因此进行数据标准管理的第一步就是进行标准的规划，通过调研分析研究数据标准整体分类框架和定义，以及对业务的支撑状况，根据调研结果结合参照行业最佳实践，定义企业自身的标准框架和分类体系，梳理审核数据标准范围、分类框架和规划实施路线图。 二是标准的制定在标准分类规划的基础上需要制定相应的数据标准，定义数据标准相关规则。制定标准需要遵循以下六大原则：共享性、唯一性、稳定性、可扩展性、前瞻性和可行性。依据业务调研和信息系统调研结果，分析诊断和归纳数据标准现状和问题，依据国家和行业相关规定，结合企业自身发展需要，明确各数据元的业务含义、业务规则、数据元定义以及数据项属性等，进行具体数据标准的编写定义工作，通过权威部门（数据标准管理部门）的评审，达成一致后发布数据标准，形成数标版本。 三是标准的落地实施事先确定好哪些数据标准需要落地以及哪些系统需要进行落地，将确认的数据标准与业务系统（新建系统或原有系统）进行映射，通过数据标准落地评估定期产出数据标准评估报告，对于不达标的元数据进行通报并进行改造；同时需要定期的对元数据标准覆盖率进行检核分析，定期产出元数据标准覆盖率分析报告，综合评价数据标准落地实施成效，逐步提高数据质量，逐步使全部数据符合数据标准。 四是标准的维护数据标准并非一成不变，而是会随着业务的发展变化以及数据标准执行效果不断更新和完善。权威部门（数据标准管理部门）通过正式的评审流程及时进行数据标准更新、完善和发布，使数据标准保持最新最优，并对历史版本的数据标准进行管理，使各版本的数据标准有迹可循。

主数据管理给企业带来的三大价值

主数据管理给企业带来的三大价值主数据管理日趋重要 主数据管理其实在很早之前就已经存在，但对于国内许多企业用户来讲，它仍然是个比较陌生的名词，本文将引领大家走近主数据管理。 主数据用来描述企业核心业务实体，是在整个企业范围内的各个操作型应用系统（OLTP）和分析型应用系统（OLAP）间需要共享的数据，也是企业内部能够跨业务、跨系统重复使用的高价值数据，其特点是基于业务、长生命周期、跨系统使用。需要注意的是，主数据并不是企业内所有的业务数据，而是有必要在各个系统间共享的数据才是主数据。比如大部分的交易数据、账单数据等都不是主数据。涵盖资源、产品、事件、客户、财务、账户、员工、合作伙伴等，用于描述核心业务实体的数据才是主数据。因此，对主数据的识别，要把握主数据作为业务运作核心的本质。这些主数据在进行主数据管理之前经常存在于多个异构或同构系统中。 主数据管理是指一组规程、技术和解决方案，用来保证业务数据在企业范围内的一致性、完整性、相关性和精确性。简单地说，主数据管理可以帮助企业从分散的业务系统中整合最核心的、最需要共享的数据（主数据），集中进行数据的清洗和丰富，然后以服务的方式把统一的、完整的、准确的、具有权威性的主数据分发给全企业范围内需要使用这些数据的系统或应用。主数据管理也可以作为一个企业的数据标准，强化对各业务系统的共性数据实体和模型的管理，避免出现大的业务概念不一致，降低应用孤岛、数据孤岛出现的几率，从根本上保证系统之间能实现数据的较好共享，增强了各系统在企业层面的互动，从而提高企业运营效益，提高数据质量，更好地为企业信息集成做好铺垫。 现今，随着大数据洪水的迅猛到来，企业深刻意识到核心数据资源的价值。核心数据资源具有稀缺性和差异性，势必成为企业的一大竞争优势。 主数据管理给企业所带来的价值有三大方面： 1.与大数据相得益彰 主数据和大数据的核心都是数据，但它们的关注点有所不同。大数据关注数据的体量和类型，而主数据则更关注数据的质量；大数据提供了更多的原材料，而主数据侧重于数据的组织。企业应以主数据为中心，通过主数据把各类大数据有效串联起来，从而获得更好数据应用效果和价值。 2.多方面业务价值 主数据管理让企业将拥有统一的主数据访问接口，拥有集中的且内容丰富和干净的数据中心，能够为各业务部门提供一致、完整的共享信息平台，为业务流程和经营决策提供了一个可靠的支撑载体。 3.增强IT建设灵活性 主数据管理可以增强IT结构的灵活性，构建覆盖整个企业范围内的数据管理基础和相应规范，并且更灵活地适应企业业务需求的变化，同时，降低接口成本、数据清洗和维护成本等，帮助企业远离高成本和高风险。