大型航运集团主数据管理体系规划

贾怡菁，　金　华，　韩明龙

(中海网络科技股份有限公司， 上海 200135)

大型航运集团主数据管理体系规划

贾怡菁，金华，韩明龙

(中海网络科技股份有限公司， 上海 200135)

摘要:针对“大数据”时代企业信息化建设不断发展的过程中，数据质量存在着缺乏完整性、有效性和及时性等一系列问题的现状，结合某大型航运集团独有的业务特性，通过识别主数据对象、确定主数据管理模式、明确主数据所有者、建立主数据管理组织、规范主数据管理流程、统一主数据标准、分析搭建主数据管理系统的定位及集成架构要求，研究并规划一套全集团范围内的主数据管理体系，从而落实集团对主数据管理控制的需求和目标。

关键词:数据质量； 主数据； 体系； 规划

0引言

在“大数据”时代，企业内存在着交易数据、分析数据等多种数据类型，其中主数据是一类在企业范围内需要统一标准和共享的非常重要的高价值基础性数据。主数据具有企业级共享、业务部门与IT共同管理、变化缓慢且有生命周期的特征，是构成交易信息、为企业决策分析提供支持的关键部分。

纵观过去5~10年，中国大部分的企业信息化建设均达到了高峰期，从无到有地建设了企业资源计划(Enterprise Resource Planning, ERP)和自动化办公(Office Automation, OA)等多类系统，以此来满足相关业务和企业发展的需要。但是，绝大多数的企业在信息系统建设过程中忽视了统一的数据标准，各系统的建设均是以项目的形式独立开展的，既缺少统一的主数据标准加以指导，又不重视企业级标准在本系统中的落实。因此，当企业迈入更高层次的辅助决策支持、商业智能等系统的建设过程中需要从各个系统中提取数据进行分析时，发现各系统存在数据标准各异、数据规则与口径差异大、数据质量无法支持分析的要求等问题。

作为国有大型航运企业，集团的管理要求正不断提升，信息化建设深入发展，集团总部及其下属子公司愈发关注如何发掘和提高各类信息的使用价值。但是，在集团原有的以业务为先的信息系统分散建设模式下，各类数据(特别是集团层面的主数据)散落在各公司的信息化系统中进行分头管理，数据颗粒度以及精细化程度不尽相同，数据完整性、有效性、及时性缺乏集团层面统一的设计保障，因此无法实现系统大数据的挖掘和智能使用，难以较好地实现数据的应用价值，直接影响集团快速获取准确的决策信息，迫切需要从根本上优化数据质量。

对此，结合大型航运集团独有的业务特性，通过研究主数据的管理对象、管理模式、所有者、管理组织、管理流程、标准及系统定位、集成架构、技术架构等的要求，规划全集团范围内的主数据管理体系。

1规划目标

遵循“以管控模式与数据规范为基础，以管理组织、管理流程及管理平台为支撑”的原则，建立一套完整的集团主数据管理体系(见图 1)；以全程化的在线集中管控模式强制主数据维护的工作程序性和数据规范性，从而落实集团对主数据管理控制的需求和目标。

图1　主数据管理体系架构

1) 数据规范是主数据管理体系中的基石，是识别和保证主数据唯一性的依据,包括主数据的编码、分类和属性等。其中：编码设计应能体现行业特点与管理要求；分类设计与管控模式紧密相关；属性设计则要充分考虑唯一性和完整性的策略。通过规范集团主数据标准，确保集团管理的主数据源单一、合法、有效，支持集团范围内主数据的唯一性、完整性、可控性、时效性和准确性。

2) 管理模式是主数据设计的核心内容之一，其设计方案应能体现集团对各类主数据管理的要求和策略。此外，其还是组织和流程设计的基础，决定了主数据管理组织架构的职责、角色以及流程的走向。

3) 主数据管理离不开组织的保障，否则主数据的质量无法得到真正的提高。主数据管理组织设计包含组织架构、角色、职责以及人员配置等多方面，是落实数据标准、管理模式及指导主数据流程设计的重要环节。

4) 主数据管理流程面向主数据全生命周期，包含主数据创建、变更、停用、归档等阶段。流程设计应根据业务系统及主数据管理平台的定位，结合组织结构与角色，明确流程执行的活动、表单及跨系统数据流向。

5) 在整体体系架构中设计主数据管理系统，明确其定位、实现模式、功能及集成架构，用于固化主数据标准、管理模式、组织和流程，满足主数据管理的需求。

2规划方法及内容

2.1识别主数据对象

主数据的分布现状与集团及下属子公司信息系统的总体规划和建设紧密相关，主数据分布于集团及下属子公司的各个信息系统之中。其具有以下几个特征：

(1) 主数据是跨平台共享的数据；

(2) 主数据是随企业经营管理的变动而相应变化；

(3) 主数据需要在企业内保持一致性，在全集团范围内共享和使用。

根据主数据识别的原则(见图 2)，主数据是企业内需要管理的关键基础数据，具有权威性，可为企业的业务分析和战略决策提供重要的支撑。其在企业的多套信息系统中长期存在，对企业业务功能有非常重要的价值；同时，需要在企业内部纵向整合集中管理，横向跨多个业务部门共享使用。

图2　主数据识别原则

2.2确定主数据管理模式

通常行业内主数据的管理模式有集中型管理、联邦型管理、协同型管理和分散型管理4种，目前集团对各类主数据的管理模式尚未明确，应针对不同的主数据制定适应相关业务的管理模式。影响主数据管理模式归属的因素很多，主要有集团管控模式、业务组织职责以及信息系统架构等几方面，此外还涉及到其他关联信息系统是否需要功能改造。

针对集团现有业务的特性及各类主数据对管控模式的需求，未来将对集团及下属子公司共同关注的主数据对象采用集中型的管理模式，对具有行业特性或特殊管理要求的主数据对象则自行管理。在实际业务中，往往会出现某类主数据的基本属性需要集团集中管理而部分行业属性需要自行维护的情况，此时应采用联邦型或协同型的管理模式(见图3)。

图3　集团主数据管理模式

2.3明确主数据所有者

明确主数据所有者通常需要考虑以下3个方面：

(1) 与IT部门共同协调和推动是成功完成主数据管理工作的重要经验总结；

(2) 所谓“服从专业权威性”是指数据的“使用者”要严格服从“所有者”制定的管理标准；

(3) 横向跨企业水平整合的数据一定要在集团总部层面设置岗位，或由总部指定授权给下属企业代为行使。

2.4建立主数据管理组织

组织是实现数据标准化的前提，组织机构内的各成员根据各自被赋予的角色与职责，通过协同工作，共同支持数据管理体系的高效、常态化运转。主数据管理必须有组织的保障，这样不仅可以使数据规范化管理工作得以常态化开展，而且能落实数据管理和数据质量的责任。因此，主数据管理的组织与职责的确立是非常关键的内容，是落实数据标准与管理模式，并指导主数据流程设计的重要一环。

根据数据从创建、发布到维护的全生命周期，明确主数据组织机构中的角色以及角色对应的部门，包括数据标准制定者、数据创建/维护者、数据审核者、数据发布者以及数据使用者。以外部客商主数据为例，为满足集团对客商资源进行共享和集中采购的要求，同时及时响应市场需求。未来外部客商主数据可采取统一标准、分级管理的模式：

(1) 统一标准即由集团制定客商主数据的标准，包括数据编码、数据属性以及数据分类等，为方便集团统计分析奠定良好的基础，下属各级子公司在审核客商主数据时都要遵循标准；

(2) 分级管理主要是依据集团管控的需求对客商进行分类，由集团总部及二级公司总部完成所有客商主数据的管理审核工作；

(3) 集团总部将集中管理集团重点客商，根据业务发生情况，定期在系统内标识属于集团的重点客商并进行管理。

基于以上设计思路，建立客商主数据管理组织结构(见图4)。

图4　客商主数据管理的组织结构

2.5规范主数据管理流程

目前，集团在主数据管理流程上主要存在多头维护、效率低、缺乏对主数据对象进行管理和发布的统一平台等问题，下面以现有客商主数据管理流程(见图 5)为例进行说明：

(1) 缺乏统一的客商主数据申请标准，且通过邮件或OA申请，并未与业务系统直接对接;

(2) 通常只是简单地根据客商名称进行排重，不支持模糊检索，也未使用其他属性作为搜索条件，容易造成数据冗余、数据错误的问题，且缺乏信息系统的支持，人工比对工作量大；

(3) 财务系统与业务系统割裂，分头维护，线下反复沟通成本高，且缺乏差错校验和完整性保障机制；

(4) 集团缺少对外部客商进行统一审核和管理的职能部门，难以对数据质量进行把控；缺乏对主数据对象进行管理和发布的统一的平台。

未来将基于管理模式与管理组织的设计，结合集团实际情况，将主数据管理系统定位为管理平台。以统一流程发起源头为原则，设计并规范从申请、业务资质与数据审批到最终编码发布的完整主数据管理流程，实现端到端的自动化主数据维护和信息发布。基于外部客商的“统一标准，分级管理”思路，未来外部客商主数据的管理流程见图6，说明示例见表1。

图5　现有客商管理流程

表1　未来外部客商管理流程说明

图6　未来外部客商主数据管理流程

2.6统一主数据标准

目前集团尚未建立跨集团、完整统一的主数据标准，使得下属成员单位在建设和维护应用系统时没有可遵循的规范，进而导致主数据在不同下属成员单位中不一致、同物不同码、属性缺失、层次管理缺失等各种数据质量及管理问题。

同样以客商为例，目前集团缺少统一的数据标准，存在大量数据不一致、不规范的问题， 主要体现在：

(1) 在同一系统中，同一外部客商在不同二级公司财务帐套中的代码不一致；

(2) 在同一系统中，同一外部客商在同一财务帐套中的代码和名称不一致、不规范；

(3) 各二级公司业务系统不注重属性维护，仅对客商名称、角色等基本信息进行维护，缺乏对客商进行多维度分析的数据基础。

无论是属性规范性问题还是编码的统一性问题，实质上都归结为集团层面对全集团统一的客商主数据标准的缺失，而这一缺失反映出集团层面缺少能统一管理客商数据的归口部门。

2.7搭建主数据管理系统

2.7.1系统的定位与数据流向

主数据管理系统的定位为：集团统一建设，使集团能够高效、规范地管理船舶、港口、客商、公司组织等的主数据，保持各二级单位与各应用系统之间主数据的一致性、唯一性、共享和及时性，为集团数据分析和决策支持提供规范的数据基础。

当前集团不同业务系统对同一主数据的编码、名称、分类体系及属性千差万别，原因在于这些主数据是在各业务版块的业务系统上自行维护的，“标准不一、规范不一、口径不一、平台不一”是主数据治理的核心痛点。主数据管理的方向是在一个统一的管理平台上集中维护，该平台落实全集团同一套数据标准、同一套管理流程、同一套数据质量监督体系，以此来保障主数据的唯一性和完整性。因此，主数据的数据源头为MDM系统，在MDM完成数据创建后按照基础数据的性质提供标准接口，供各周边系统调用(见图7)。

图7　主数据管理系统与周边系统的数据流向

2.7.2集成架构要求

MDM与周边系统集成的技术方式，分为MDM主动把主数据信息推送至相关系统以及各相关系统主动到MDM拉取与其相关的主数据信息两种模式(见图8)，相关说明见表2。

(b) 业务系统主动从MDM拉取主数据

方式数据流转模式说明11)业务系统按照接口技术规范发布WebService2)MDM调用业务系统发布的WebService,通过SOAP协议把数据实时传输给业务系统3)业务系统将接收数据的处理情况同步反馈给MDM以形成数据交互闭环21)业务系统按照接口技术规范开辟临时存储区域并向MDM系统开放2)MDM通过JDBC协议把数据写入业务系统的临时存储区域供使用31)业务系统开辟FTP共享文件目录,供MDM传输信息文件2)MDM将数据以文件形式(EXCEL、CSV)传输至FTP对应目录下3)业务系统从目录下解析文件获取MDM传输的数据41)MDM按照接口技术规范发布WebService,同时定义时间戳供各业务系统定期拉取所需数据2)业务系统定时调用MDM发布的WebService来发送指令,以获取一段时间内与其相关的主数据信息3)MDM实时响应业务系统,把相关的主数据信息通过SOAP协议传输至该业务系统51)MDM按照接口技术规范开放部分数据库,供抽取数据2)通过ETL工具定期从MDM开放的部分数据库中抽取相应的数据61)MDM按照接口技术规范开辟临时存储区域,数据存放于其中,并且该区域向所有相关业务系统开放2)依靠业务系统监听程序来监听MDM临时存储区域3)业务系统判断是否为本系统所需数据,如是,则通过数据库直联方式获取该数据,供业务流转使用

出于集团信息化建设的整体考虑，建议未来采用方式4，即MDM按照接口技术规范发布Web Service的方式，供各业务系统按需获取标准、完整的主数据信息，从而实现主数据在各系统间的互联互通。

2.7.3技术架构要求

集团主数据管理系统的技术架构要求包括集成性、部署灵活性以及遵照集团整体的IT架构标准。

(1) 数据和服务的集成：数据集成分发方面，能够把不同来源、格式、特点性质的数据在逻辑上或物理上有机地集中，从而为主数据提供全面的数据源，并能够通过统一的服务接口向各系统分发经过清洗审核后的主数据记录；服务集成方面，能够通过界面或操作集成的方式弱化用户在不同系统中进行操作的不良体验；数据清洗方面，能够通过自定义的数据规则对错误数据、重复数据、残缺数据进行自动清洗汇总。

(2) 支持工作流引擎方面，系统部署灵活、可扩展：所有管理流程都可通过自定义规则进行配置管理,且流程节点可图形化监控,管理流程可追溯及分析；全配置实施方面，能够仅通过界面配置或少量代码开发，即实施新的主数据信息。

(3) 权限控制方面，遵守集团基础的架构原则：权限控制的颗粒度，不仅要到某一条记录还需要到某一个属性；安全性方面，从物理安全、网络安全、主机安全、应用安全、数据安全和备份恢复等角度确保系统数据不丢失、不泄露，服务不中断。

3结语

结合集团主数据管理的现状，分析了目前集团主数据管理存在的问题及产生问题的原因。通过识别主数据对象、确定主数据管理模式、明确主数据所有者、建立主数据管理组织、规范主数据管理流程、统一主数据标准、分析搭建主数据管理系统的定位及集成架构要求的规划方法，设计了1套集团范围内的主数据管理体系。该规划研究对后续系统平台的建设及实施推广具有指导性作用。

参考文献：

[1]和轶东，张怡，曹乃刚.SAP MDM 主数据管理[M] .北京：清华大学出版社，2013.

[2]张扬.主数据管理中的Why,What,How和Who[J]. 信息系统工程，2010(7)： 34.

[3]贾红龙.面向服务体系架构(SOA)的主数据管理(MDM)和流程监控(PM)研究[J].信息技术与信息化， 2010(2)： 78-82.

[4]谢正华.搭建主数据管理系统，助推企业信息化建设[J].信息系统工程,2010(4):16.

[5]何志峰.主数据集成：打破信息共享的壁垒[J].上海信息化,2009(4):59-61.

[6]林泳琴.面向企业应用集成的主数据管理系统[J].电脑知识与技术,2011(19):4521-4523.

2015年10月将取消有关水运涉企行政事业性收费项目

2015年8月17日，财政部、国家发展改革委联合发布《关于取消有关水运涉企行政事业性收费项目的通知》(财税[2015]92号)，根据国务院关于推进收费清理改革工作部署，为切实减轻航运企业负担，促进长江经济带发展，决定取消有关水运涉企行政事业性收费项目。有关事项通知如下：

1. 自2015年10月1日起，取消船舶港务费、特种船舶和水上/水下工程护航费、船舶临时登记费、船舶烟囱标志或公司旗注册费、船舶更名或船籍港变更费、船舶国籍证书费及废钢船登记费等7项中央级设立的行政事业性收费。

2. 各省(区、市)财政、价格部门要对省级设立的水运涉企行政事业性收费项目进行清理。取消属于政府提供普遍公共服务或体现一般性管理职能，以及主要目的是养人、违背市场经济基本原则的不合理收费项目。坚决取缔违规设立的收费项目。

3. 取消有关水运涉企行政事业性收费项目后，相关部门和单位依法履行职能和事业发展所需经费，由同级财政预算予以统筹安排，保障工作正常开展。

4. 有关执收部门和单位要到财政部门办理财政票据缴销手续。有关行政事业性收费的清欠收入应按照财政部门规定的渠道全额上缴国库。

5. 各地区和有关部门要严格执行本通知规定，对公布取消的水运涉企行政事业性收费项目，不得以任何理由拖延或者拒绝执行，不得以其他名目或者转为经营服务性收费方式变相继续收费。各级财政、价格部门要加强对落实本通知情况的监督检查，对不按规定取消相关收费项目的，按有关规定给予处罚，并追究责任人员的行政责任。

中图分类号：TP315

文献标志码：A

收稿日期：2015-04-10

作者简介：刘荣(1988—)，男，湖南浏阳人,助理工程师,主要从事软件研发工作。

文章编号：1674-5949(2015)03-091-05

Planning Master Data Management System for a Large Shipping Group

JiaYijing，JinHua，HanMinglong

(China Shipping Network Technology Co.,Ltd， Shanghai 200135， China)

Abstract:To guarantee the quality of data, such as integrity, effectiveness, timeliness, acquired via complex network of a big shipping group, a series of basic researches are performed. The object items are indentified; The scope of major data is defined; The owner of master data is specified; The working flow the department in charge of master data management are determined and the standard of data formats is defined. The architecture and the distribution plan of the master management system for the Group are planed.

Key words:data quality; master data; system; planning