烟草企业数据中心系统的设计与实现（材料）_烟草公司数据中心

烟草企业数据中心系统的设计与实现（材料）由刀豆文库小编整理，希望给你工作、学习、生活带来方便，猜你可能喜欢“烟草公司数据中心”。

烟草企业数据中心系统的设计与实现

张俊良

漯河市烟草专卖局，河南 漯河 462002

摘要：近几年，中国烟草行业信息化飞速发展，各个企业目前己经基本完成了基础设施建设和业务系统建设，如营销系统、专卖系统、烟叶系统、财务系统、0A系统等。这些信息系统之间相对独立，缺乏有机联系，形成了信息孤岛。同时各业务系统侧重于业务处理，不能进行充分的价值挖掘，缺乏为企业领导的综合分析、宏观决策提供有力支持。因此，在烟草企业数据中心系统的设计与完善就显得尤为重要。

关键词：烟草企业；数据中心；系统目标

一 基于数据仓库的数据中心总体框架和设计系统总体目标

数据中心建设完成后，将会达到如下目标：构建能够支持所有业务领域的企业级分析决策系统架构；集成整合众多小规模决策支持应用，有效分担事务处理系统的负荷，提高决策支持和事务处理系统的动作效率；建立基于公司全业务流程数据仓库的管理机制，提供完整、准确、一致的分析数据及决策管理模型；基于烟草公司全业务流程数据仓库设计和构建财务、销售和市场等领域数据集市，实现财务、销售和市场领域相关指标的统计发布；采用数据大集中方式，实现相关业务系统的数据自动获取和积累，以及业务数据和信息的全行共享；提供功能强大的公用综合数据分析平台，可以方便、快速地满足多种类的业务分析要求，提高管理工作的效率及准确性；建立完善的系统安全和数据安全控制机制；适应集团现有业务管理模式，实现管理业务的流程化、规范化和报表档案的电子化管理；利用商业智能技术对集团各种业务信息进行及时、科学的汇总、分析和预测，实现业务分析自动化，为领导分析决策提供真实、全面、准确的依据。系统总体性能指标

系统性能应遵循或达到如下几点：

1、可靠性及可用性。报表平台保证24小时运行。保证系统在任何情况下能够合理分配资源，以实现未来业务发展的各种功能。

2、整体性及高效性。系统整体设计能有效的实现后台一体化管理，系统提供对各类事务处理的高效性，使对大容量数据的查询和更新等操作也在较短的时间内迅速完成，对于大数据量的处理，也能高效地完成。

3、先进性及实用性。充分利用现有资源，首先满足用户当前需求，尽快投入应用并在应用中提高工作效率和经济效益为主要目标，在此基础上，提供与各类现有业务系统进行衔接的良好接口。

4、安全性及实时性。报表数据的安全至关重要，系统必须采取严格的保密措施，通过各种加密技术来确保系统的用户身份真实性、数据保密性、数据有效性、数据完整性和防抵赖性。在网络状况好的情况下，系统内部对每笔HTTP请求的处理时间控制在1分钟之内。

5、支持集群、负载平衡等相关技术.可设定多台服务器进行集群，在每台服务器上还可以设定最大用户并发数，当用户并发数超过这一限制时，会自动到集群内其他服务器上请求服务。

6、提供完备的信息输出接口。分析的结果在于应用，而应用的目的根据不同的使用者会有不同的需求，有的需要生成演示文稿、有的需要导入Excel进行层次更深加工、有的需要生报告形式发送下级单位等。将根据需要开发常用输出格式:Excel、PPT、PDFXML、HTML等。系统总体数据与逻辑的结构设计

报表与数据展现平台的总体设计构思，将从以下几个角度进行具体分析。

1、从数据流向的角度。从数据流向的角度看:在整个体系结构层次中:业务层包含所有源系统，它是烟草公司运营细节层级;第一二层的数据抽取与OLAP分析可以根据实际状况与要求作整和或拆分;SAPBW为主要数据仓库层，这层中的数据粒度低，是主要的业务报表的源数据层级，同时，可以建立虚拟或实际更高粒度的数据仓，它的源是SAPBW和业务层级系统。可以把这虚拟或实际两层看成集团整个数据仓库层;报表与数据展现平台层包含对数据的最终分析加工与展现。

2、从逻辑架构的角度。从逻辑架构的角度看:报表与数据展现平台总体结构图如下源数据层:包含业务数据源及原始业务逻辑规则;分析抽取层:包含特定的业务分析规则和抽取方案;数据集成层:包含按特定的业务逻辑和存储规则分类的数据;分析处理层:按一定的业务分析需求和规则进行的分析处理;数据归类层:按业务或企业运营规则进行数据分类;应用展现层:按业务需求和特定管理模型分析展现运营信息。

3、从应用架构的角度。从应用架构的角度看。最终用户端:通过IE或NetScape等Web浏览器登录报表与数据展现平台，进行浏览及其他操作。报表服务器:通过一层或多层处理OLTP、OLAP及高粒度数据存储;同时，可通过多服务器集群来均衡负载(系统可自动均衡负载)。

4、从应用模块及功能的角度。从应用模块及功能的角度看:报表与数据展现平台功能模块作如下划分。报表与数据展现平台功能规划分为六大块:(1)权限与组织架构匹配处理块:这一模块处理集团的组织与系统的匹配，将系统中的用户按组织架构归类划分，在系统中将体现为用户群组;将系统权限按功能别进行归类划分，在系统中将体现为角色;组织中的人员别将体现为系统群组中的用户别。(2)用户功能界面处理块:这一模块用户登录后，系统处理用户权限与界面的互动，此模块对用最终用户将是透明的。(3)用户功能界面展现块:此模块只负责最终的数据的展现与用户最终需求的直观表达，此模块对最终用户的可见度最高。如:区域地图展现、管理模型展现、图形叠加分析展现等。(4)用户操作响应处理块:此模块将处理用户在界面上的分析、下钻、上卷等一系列的分析操作。如:目录树的钻取，区域地图的分析钻取，波斯顿矩阵等管理模型的分析钻取等。(5)数据分析处理块:此模块为系统数据分析处理的核心部分，它将根据用户需求及相应的业务逻辑规则处理分析数据。此模块对于最终用户是透明的。(6)权限管理块:此模块相对独立，此模块的最终用户将是报表与数据展现平台的管理员，此模块中用户可以建立权限与组织架构匹配、建立用户、建立角色等，同时，管理员也在此管理群组，角色、用户。此模块是整个报表与数据展现平台管理的入口。

二 数据中心的总体架构信息资源标准体系

信息资源标准体系是数据中心总体架构中的基础部分，影响着数据的完整性、规范性和一致性，决定着数据中心建设的质量与效果，所有进入数据中心的数据要符合相应的信息资源标准。信息资源标准体系主要包括行业数据元标准、信息分类及编码标准、数据交换标准等。(1)数据元标准管理。数据元管理就是根据烟草行业信息系统建设、信息资源开发利用的需要，进行数据规划，建立数据元管理系统，对数据元进行规范、分类、定义、命名、标识、注册和属性录入等工作，提供信息资源目录服务，以动态维护的方式，不断对数据元进行补充、修改和完善，形成行业统一的数据元标准，提供行业共享使用。(2)信息分类及编码标准管理。对行业数据中心需要的数据进行分类和编码，对国家局、总公司制定和发布的基础代码标准，如卷烟产品代码、烟叶代码、烟用材料代码、组织机构代码和劳动人事代码等进行管理，实现信息代码的申请、审核、发布和服务。(3)数据交换标准管理。对两级数据中心之间数据的交换和数据中心与业务系统之间数据的交换标准进行管理，包括数据表示标准、数据传输标准、数据接口处理标准和数据报文格式标准等。数据交换服务体系

数据交换服务是数据中心实现的主要功能，其建设任务是要形成统一的、具有一致性和可扩展的数据交换和服务共享平台，满足纵向三级(国家局、省局、市公司)数据交换以及横向的已建应用系统间的数据交换和信息共享需求。数据交换服务体系包含国家局交换服务中心和省级公司交换中心两级，两级交换中心以行业内联网为物理传输通道，通过同步和异步两种传输方式实现国家局、省级公司和市公司的三级数据交换，国家局数据交换服务中心还包含信息服务平台，实现行业信息协同。数据交换服务体系纵向通过由行业重点工程已建立的统一异步传输通道(MQ)对国家局、省级公司和市公司数据进行非实时交换。横向通过同步传输通道实现业务系统间的信息集成、互联互通。见下图：

数据交换和服务体系的物理载体是一个数据集成和交换平台。在集成与交换平台中，主要通过数据抽取和数据复制实现数据集成和数据交换。一个数据源(如专卖数据库)可以通过对应视图(View)和触发器(Trigger)进行操作，这样，其他应用(数据库访问、应用系统)只要针对视图进行读/写，就可以实现数据的交换。当数据源结构发生改变时，只要这种改变不影响视图，原有的操作同样有效，从而保证了数据交换机制的稳定性。当数据源数据发生变化时，利用触发器技术，数据将自动同步到相应的目标。数据加工存储体系

烟草行业信息具有数据量大、内容杂、种类多、系统多及应用需求差异大等特点，数据必须进行统一组织、统一管理、统一存放。为满足省市两级经营管理的要求，须进行合理的数据规划和整合，建立全省系统统一的数据视图，实现数据统一管理和有效集中，为建设决策支持分析系统提供信息支持。数据加工存储体系主要是从数据源采集数据，并对数据进行清洗、整理加载和存储，构建数据仓库。数据加工存储体系主要包括数据收集、数据整理、数据仓库建设等。见下图：

数据加工存储体系主要包括三阶段流程:数据收集:通过建立数据采集通道，将各个业务系统的数据进行集中和整合，形成数据中心的原始数据。数据整理:在原始数据的基础上，按数据标准对数据进行过滤、转换、清洗等，形成数据中心的规范数据。数据仓库:根据不同业务需求对规范数据进行加工，包括指标合并、汇总、分析等，并按主题组织数据，形成数据仓库。数据以数据仓库(DW)和操作型数据(ODS)两种形式存储。其中操作型数据库用于存储从各业务系统采集的实时或准实时的操作型数据，同时，作为下一级数据的备份;数据仓库用于存储经过汇总、确认的历史数据，涵盖行业生产经营、决策分析等综合的、全局性的数据，提供管理所需的完整信息，为企业科学决策、分析提供数据层支持。数据分析应用体系

数据分析应用体系的建设，就是在共享数据标准化、一致化的基础上，通过模型化、智能化的分析方法和管理工具，深层次地分析、整合和使用各业务系统数据，从已有信息资源中挖掘出更大的价值，提高信息资源的利用率，实现信息共享，为全省系统宏观调控、加强管理，提供易操作的决策支持手段，方便各级领导及时掌握企业经营状况和经济运行形势，提高信息的及时性、全面性、完整性，在提供传统的查询和统计功能外，还提供多种信息展现形式。数据分析应用体系主要是为用户提供数据应用的工具和平台，推进信息资源的有效开发利用，包括为管理、决策提供随需而变的信息查询、报表生成和分析结果展现等，以及为用户的个性分析应用提供工具。(1)数据分析应用功能，数据分析应用功能包括动态查询、业务报表、数据分析、数据挖掘、数据监控和数据预警等，包括查询功能、灵活的报表功能和智能分析功能:查询功能:完善信息查询和搜索机制，为各级领导和管理人员提供个性化的数据浏览和查询功能;报表功能:为各级统计人员和管理人员提供面向数据中心的高效、灵活的报表功能，实现报表制作、报送的随需而变;分析功能:运用先进的商业智能(BI)分析工具，为各级专业管理人员提供分析模型，为各级领导决策提供科学依据。(2)数据分析应用工具，数据分析应用工具主要包括动态查询、报表编制、业务预警和数据分析等。动态查询工具:基于业务指标的，由用户根据工作需要自定制查询条件和查询结果展现方式的数据查询工具;报表编制工具:完成比较复杂的报表编制并能生成所需报表;业务预警和数据分析工具:就是运用商业智能(BI)分析工具，支持复杂的多维分析应用。

三 结语

近年来随着计算机的广泛普及和计算机功能的日益强大，使用计算机进行信息管理己成为十分普遍的现象，因而在计算机信息管理的基础上发展起来的决策支持能力，己是相当紧迫的要求。烟草行业数据中心解决方案是基于数据整合技术建立数据交换平台，可以将整合企业内部各种数据源，包括结构化数据源及非结构化数据源(如文本文件、Excel文件、XML文件等)。基于数据仓库和商业智能技术建立企业级数据仓库，并帮助企业从纷杂海量的数据中获取有价值的信息。在数据中心的基础上实现各种商业智能应用，用以帮助决策者科学决策、提升核心竞争力。尽管决策支持系统还存在着结构上和应用上的很多问题，但它必将克服这些困难，得到更大的发展。

参考文献：

[1]徐晓飞.计算机集成制造系统CIMS知识新解[M].北京:兵器工业出版社,2000.2 [2]陈天晴.全方位打造高可用数据中心[J].每周电脑报,2008,(24)[3]吴 健.数据中心的发展趋势和面临问题[J].智能建筑与城市信息,2008,(07)[4]王姝妍.数据中心建设何去何从?[J].每周电脑报,2008,(25)

作者简介：

张俊良，男，35岁，数据库系统工程师，企业信息管理师，现任漯河市烟草专卖局(公司)经济信息中心主任，负责漯河烟草商业信息化规划和建设、项目管理、信息安全分析和应用、信息系统运行维护和管理工作。

联系地址：河南省漯河市黄河路595号 邮编：462002 电话：*** E-mail:lhzhjl@126.com