| 武钢集团BI系统 |
|
项目背景 武钢集团,全称武汉钢铁(集团)公司,是中央和国务院国资委直管的国有重要骨干企业。武钢是新中国成立后兴建的第一个特大型钢铁联合企业,于1955年开始建设,1958年9月13日建成投产。 根据世界钢铁协会2009年6月发布的《全球钢企2008年粗钢产量排名》,武钢集团排名为据第7名。 武钢集团计划构建企业级数据仓库,为了控制项目风险,保证项目有序开展,整个项目将分为多个阶段进行实施和投产,同时达到边投产边收益的目的.武钢集团将各子公司系统源数据整合集成到数据仓库数据模型,并提供固定报表及查询、KPI、灵活查询分析等应用。 业务挑战 随着武钢业务的不断扩展和数据日益累计,数据分析的及时性和重要性日显突出,传统的数据分析方法和分析工具已经不满足集团发展的需要。由于积累了大量的数据,然而对于内部运营、外部市场信息,一方面是现存大量数据,另一方面是信息缺乏,解决这个矛盾的根本之道是建立一条有效的包含数据整合、统计报表、信息分析、信息展示的、将数据转化为信息的途径。 目前武钢国贸采购和库存系统是整个ERP系统的一部分,包括以下系统: ■ 采购系统(材料和原料采购系统、备件采购系统); ■ 库管系统(材料存货管理系统、备件存货管理系统、原料存货管理系统供应商管理系统); ■ 人员/科室/授权/部门编码等管理系统。 以上作为数据仓库的重要信息,这些系统的部分相关数据需要进入数据仓库,但是由于数据量庞大而繁杂,再进行系统武钢集团面临了下列挑战。 ■ 业务数据的质量不高,业务逻辑不够严谨 ■ 数据库表中业务字段、文档更新跟不上,对需求调研和ETL等工作造成困难 ■ 各个系统之间相对独立,当进行数据量大的跨系统联表查询时,查询速度非常慢;影响工作效率而且会导致服务器效率低, 为了保证服务器的工作效率,不对其他系统造成影响,IT部门查询做了许多限制或者直接就将一些功能去掉了,导致查询结果失真或不完整。 ■ 报表系统不完善、且存在垃圾数据(如测试数据,流程更改后的错误数据等) 实施过程 武钢BI整体需求分析,系统架构设计、数据模型设计到以武钢国贸为试点开始数据仓库的建设,包括国贸需求分析调研、数据模型设计、数据抽取、报表设计开发历时四个月完成。 武钢BI系统架构采用目前最先进的MPP架构数据库,其出色的平行计性能与业务系统相比查询效率提高10~20倍; 数据加载工具针对MPP架构的数据库做过优化,凭借其出色的读写性能,每秒钟写入数据的速度能达到10W条/秒; 其界面可操作性急扩展性,使得开发人员方便、快捷、准确提取数据,为后期数据仓库应用提供了准确完整的数据。 数据仓库应用提供了大量高效、灵活的报表、仪表盘,满足了业务人员不同的需求快速变化多种角度或维度,对数据进行分析,得到有价值的数据。 解决方案 武钢集团BI项目构建的是企业级数据仓库,寰联科技为武钢提供制造业数据模型,并且有经验丰富的数据模型专家提供专业的技术支持。 数据仓库系统由数据源层(Data Source)、数据抽取层(ELT/ETL)、数据仓库层(DW)、业务智能层四个部分组成。 数据模型按3NF进行主题模型设计,遵循中性化设计原则,一方面利于未来数据模型扩展,另一方面满足保证未来的应用分析的需要。 武钢国贸通过ELT方式实现数据加载,即按照E(抽取)L(加载)T(清洗/转换/加工)的顺序将国贸采购系统及库存管理系统的源数据加载到数据仓库系统,ELT系统建立后,可以应用于武钢数据仓库后续项目的数据加载。 数据仓库应用层寰联科技针对每个业务流程维度模型设计一套基本的标准报表模版、创建高优先级报表的目录列表、设计确认报表布局和内容的模板、为每个目标报表创建规格和文档说明、设计导航框架,组织管理报表,便于用户找到所需的信息、与重要的商业用户一起审查报表规格和导航框架。 项目成果 ■ 数据仓库的建立为业务人员提供了大量灵活的查询报表,并也可以自定义报表,极大的减轻了业务人员工作量,提高了工作效率 ■ 通过图表、仪表盘等丰富的展现,使得数据展现更直观、更形象,业务人员能够清晰的看到有价值的数据,发现企业运营中出现的缺陷和问题。 ■ 数据仓库建立缓解了应用系统负荷压力,同时为客户解决系统负荷提供一条行之有效的解决办法 ■ 清理了业务系统的中的垃圾数据,数据质量得到了很好的保证 ■ 检测出应用系统遗留的问题,促进业务、开发部门规范业务系统流程、文档更新等需求。 |