中国IDC圈2月15日报道:如今,数据已经渗透到每个行业和业务职能领域,成为重要的生产因素。人们对于海量数据的挖掘和运用,预示着新一波生产率增长和消费者浪潮的到来,整个世界已经迎来了大数据时代。在数据驱动的信息化时代,企业只有将核心业务数据更好地掌握在手中,才能从中萃取更大的业务价值,进而优化品牌管理,打开市场新渠道,打造企业核心竞争力,而主数据管理(Master Data Management,简称MDM)就是挖掘这些价值的重要手段和工具。
主数据管理日趋重要
主数据管理其实在很早之前就已经存在,但对于国内许多企业用户来讲,它仍然是个比较陌生的名词,本文将引领大家走近主数据管理。
主数据用来描述企业核心业务实体,是在整个企业范围内的各个操作型应用系统(OLTP)和分析型应用系统(OLAP)间需要共享的数据,也是企业内部能够跨业务、跨系统重复使用的高价值数据,其特点是基于业务、长生命周期、跨系统使用。需要注意的是,主数据并不是企业内所有的业务数据,而是有必要在各个系统间共享的数据才是主数据。比如大部分的交易数据、账单数据等都不是主数据。涵盖资源、产品、事件、客户、财务、账户、员工、合作伙伴等,用于描述核心业务实体的数据才是主数据。因此,对主数据的识别,要把握主数据作为业务运作核心的本质。这些主数据在进行主数据管理之前经常存在于多个异构或同构系统中。
主数据管理是指一组规程、技术和解决方案,用来保证业务数据在企业范围内的一致性、完整性、相关性和精确性。简单地说,主数据管理可以帮助企业从分散的业务系统中整合最核心的、最需要共享的数据(主数据),集中进行数据的清洗和丰富,然后以服务的方式把统一的、完整的、准确的、具有权威性的主数据分发给全企业范围内需要使用这些数据的系统或应用。主数据管理也可以作为一个企业的数据标准,强化对各业务系统的共性数据实体和模型的管理,避免出现大的业务概念不一致,降低应用孤岛、数据孤岛出现的几率,从根本上保证系统之间能实现数据的较好共享,增强了各系统在企业层面的互动,从而提高企业运营效益,提高数据质量,更好地为企业信息集成做好铺垫。
现今,随着大数据洪水的迅猛到来,企业深刻意识到核心数据资源的价值。核心数据资源具有稀缺性和差异性,势必成为企业的一大竞争优势。
主数据管理给企业所带来的价值有三大方面。
1.与大数据相得益彰
主数据和大数据的核心都是数据,但它们的关注点有所不同。大数据关注数据的体量和类型,而主数据则更关注数据的质量;大数据提供了更多的原材料,而主数据侧重于数据的组织。企业应以主数据为中心,通过主数据把各类大数据有效串联起来,从而获得更好数据应用效果和价值。
2.多方面业务价值
主数据管理让企业将拥有统一的主数据访问接口,拥有集中的且内容丰富和干净的数据中心,能够为各业务部门提供一致、完整的共享信息平台,为业务流程和经营决策提供了一个可靠的支撑载体。
3.增强IT建设灵活性
主数据管理可以增强IT结构的灵活性,构建覆盖整个企业范围内的数据管理基础和相应规范,并且更灵活地适应企业业务需求的变化,同时,降低接口成本、数据清洗和维护成本等,帮助企业远离高成本和高风险。
主数据管理的规划实施
1.构建主数据管理的解决方案
虽然企业越来越看到主数据的价值,但往往不知从何下手,如何实施。为保证企业能够有条不紊地实施项目,建议企业根据规划方法论,分阶段、分步骤开展工作。比如Informatica MDM产品解决方案,它把主数据生命周期划分为9个阶段。
● 访问:了解主数据的来源、现状,实现不同数据源和应用程序的数据集成方案,这是主数据获取的入口。
● 发现:探查数据内容、结构和异常,分析数据的优势和劣势,一个关键目标就是明确指出数据错误和问题。
● 建模:建立正确、灵活的MDM业务及数据模型,可以有效面对未来的变化和挑战,模型是项目走向成功的一个重要里程碑。
● 清洗:对于各系统数据出现不一致的定义及使用方式时,需要解决错误和矛盾之处,创建正确、完整的主数据。
● 识别:快速匹配,准确识别重复数据并预防重复发生。
● 解决:合并重复数据,创建可信的唯一真实版本。
● 关联:实现与合作伙伴系统、第三方软件、外部产品的广泛数据连接。
● 治理:创建、使用、管理和监控主数据,保证可对数据问题进行跟踪,同时保证长期满足数据质量预期。
● 交付:以服务的方式把统一、完整、准确的主数据分发给企业范围内需要使用这些数据的业务系统、业务流程和决策支持系统。
这是一个循环往复的过程,当有新的主数据出现或经过几大阶段治理后的主数据仍未达到质量要求时,主数据管理都会进入下一轮循环。数据治理的过程贯穿于整个生命周期,体现了主数据对于数据质量的管控作用。
2.实施过程中应注意的问题
1)主数据管理不是一个单纯的技术项目
主数据管理常常被误解为一个单纯的技术问题,而实际上企业采用主数据方案最重要的不是技术准备,而是业务准备。企业在上马项目时,首先要先考虑清楚项目所要达到的目的、目标和愿景。在企业内部贯彻实施统一的数据标准化,需要文化、制度、业务、流程等全方位的配合和改造,需要业务部门之间的沟通和协调,需要企业高层、行业专家、领域专家以及业务人员的认同和参与。也就是说,主数据管理实质上是个管理问题。
2)主数据管理是一个持续建设的过程
主数据问题很难一次性解决,因而造成项目复杂度高、工期长、耗费大的问题,建设前期对于企业来说感知不明显,容易遭到质疑。因此建议企业采取渐进的方式来建设,先基础、后深化,先局部、后覆盖,这样让企业逐步尝到主数据带来的甜头。第一期项目可以从小规模入手(比如选择一个业务领域),一个业务领域成功会带动更多业务领域参与,前期的成功会成为后续实施的推升动力。
3)模型设计是基石
企业的业务需求不会是一成不变的,随着外部因素(如市场环境的变化、产业的更新换代)、内部因素(如经营模式的转变、组织架构的优化)的变化和影响,系统将面对更多适应性和可柔性方面的挑战。因而,对于主数据模型的设计者来说,必须要建立一个灵活的模型,特别是对未来更多类型主数据的支持,当一些变化发生时,不能对以后的模型产生较大的冲击和影响。成功的项目不仅能够解决现在的业务需求,还要能够满足未来的需求。
主数据管理的发展趋势
1.与新技术发展趋势相结合
云计算、社交计算和移动计算三大技术趋势正在驱动大数据不可阻挡的增长态势。目前,一些主流MDM软件可以针对云中数据、社交数据、移动数据等不同类型的数据进行有效管理。在未来,支持不同移动终端接入,采用云中部署、混合部署等新模式的主数据管理多域部署情况将更加普遍。
通过云计算MDM,有效解决云中分散数据碎片化现象,保持数据净化状态;保证跨越云及内部应用的数据整合,无论是在云端还是在本地,都可以带来完整、可信的客户交互及主数据关系视角。
通过社交MDM,解决跨越多个社交媒体间客户识别问题,创建出统一的客户社交资料,挖掘客户的社交网络以及喜好,从而更有效地进行针对性营销,以及为零售商、生产商、服务提供商等提供目标客户推荐服务,以此形成更为紧密、更具盈利性的客户关系。
通过移动MDM,提供随时随地接入的客户交易数据、社交数据及主数据。将清晰、完整、可信的客户资料与移动设备的位置服务相结合,为销售人员及服务人员提供指定位置的客户信息。
2.为大数据插上飞翔的翅膀
未来,MDM平台将逐步实现与大数据的无缝集成,为大数据提供一系列全面、先进、成熟的数据管理解决方案,为企业用户迎接“集成化的大数据时代”做好了准备。
提升企业数据的集成和管理能力,将数据集成扩展到社交媒体数据、网络日志、传感器设备数据、文档、电子邮件、其他无编码格式的多结构化或非结构化数据,显著减少浪费在垃圾资料的时间,有效降低大数据开发、维护成本。
实现从传统数据架构平台扩展到Hadoop,把Hadoop技术通过一种透明的方式呈现给用户,企业将不再需要复杂的手动编码来实现Hadoop的性能和成本优势。这不仅帮助企业更轻松地管理和支持多个大数据项目,确保最佳的端到端性能和部署,还可以使数据便捷地在 Hadoop环境或传统网格计算环境中运行。
引入了内存处理的能力,数据处理性能更快。所谓“内存处理”,就是把主数据的处理操作从传统的数据库迁移到内存计算,有望实现高上达百倍的能力提升,实现在大数据中快速解决个体识别问题,高效完成大批量数据清洗。同时大幅降低了客户的硬件部署成本,以更佳的成本效益方式提升大数据项目的投资回报。
结束语
近几年来,中国电信在集团企业信息化战略规划(ITSP)的指引下,根据企业目标和通用业务规律,统一企业数据模型(EDM),建立参与人、产品、账务、市场营销、事件、地域、资源和财务等八大主数据域,从而逐步统一企业内数据标准,为从根本上解决企业数据分散重复、口径不一致、共享困难造成的信息孤岛等问题奠定坚实的基础,推动企业内各类信息系统的整合和数据的共享,全面提升经营决策、运营管理、业务拓展和客户服务等方面的支撑能力。
在全新的数据时代,大数据的核心问题不是数量大,而是质量高。把主数据管理解决方案作为大数据背景下的企业数据治理和提升数据质量的工具,可以确保核心数据的质量和真实性,企业可以更好地洞悉业务数据中所隐藏的价值,真正把大数据转化为大机遇。