数据仓库建设项目实施方案建议书V12.docx

数据仓库建设项目实施方案建议书V12株洲南车时代电气股份有限公司数据仓库建设规划项目方案建议书XX软件系统股份有限公司2015年03月第1章南车电气数据仓库建设项目介绍31.1. 南车电气数据仓库建设项目的背景31.2. 南车电气环境现状及需求分析41-2.1.项目目标.4第2章南车电气数据仓库建设解决方案详述62.1. 南车电气数据仓库建设整体方案说明62.1.1. 方案概述.62.1.2. 系统逻辑架构72.1.3. 系统硬件架构建议方案.82.1.4. 未来建设目标.92.2. 南车时代电气数据仓库平台建设122.2.1. 数据仓库建设原则.122.2.2. 数据仓库规范体系设计.142.2.3. BW数据仓库结构定义.172.2.4. 数据仓库管理标准及命名规范.202.3. 南车时代电气BW数据仓库优化方案302.4. 展现层迁移方案312.5. 主数据共享平台方案32第3章南车电气数据仓库建设项目实施方案343.1. 南车电气数据仓库系统实施计划343.11. 工作时间表(Itit)343.2. 以川计划381. 2.1.培训类型.39322. 培训课程.393.3. 容灾备份方案403.3.1. 备份策略的定义.413.3.2. 备份窗口的选择.423.3.3. 灾难恢复的策略.42第4章项目实施与管理提升方法444.1. 项目实施与管理提升方法444.2. XX在南车电气项目中提供的管理提升与服务内容444.3. XX管理提升与BI实施相结合的指导原则454.4. XX管理提升与BI实施相结合的方法与步骤464.4.1. 现状调研与企业问噩诊断.464.4.2. 未来业务流程与管理提升初步讨论464.4.3. 建立Bl原型系统474.4.4. 结合Bl迸行未来业务流程与管理提升全面讨论与蓝图确认474.4.5. 管理提升交付成果实例.47第5章项目管理与质量保证错误!未定义书签。5.1. 工作计划管理错误!未定义书签。5.2. 沟通管理错误!未定义书签。5.3. 争议协调升级程序错误!未定义书签。5.4. 项目质量操纵错误!未定义书签。5.5. 文档管理错误!未定义书签。5.6. 建议南车电气提供的保障措施错误!未定义书签。5.7. 验收标准及方案错误!未定义书签。1.1.1. 符合性.错误!未定义书签。1.1.2. 系统质量.错误!未定义书签。1.1.3. 交付文档.错误!未定义书签。第1章南车电气数据仓库建设项目介绍1.1. 南车电气数据仓库建设项目的背景南车时代电气始终坚持核心技术向有关产业延伸的进展战略，不断巩固在轨道交通领域的行业地位，着力提升在电气传动与操纵系统领域的专业地位，正树立起公司在电气传动与操纵系统领域国际化专业供应商的新形象。为挖掘信息化系统价值，提升内部管理手段,公司于20102011年启动并初步建立了南车时代电气综合分析系统。该系统使用了SAPBW与EP的技术平台,实现了部分经营指标及报表需求,且于2014年从V7.0升级到V7.4版本。为优化各类应用系统间的借口，提高系统的安全性与可保护性，公司于2014年启动了ESB技术平台的预研工作，确立了以普元公司的PrimetonESB为技术平台建设公司的数据总线，部分系统间接口已经实现与ESB的集成。1.2. 南车电气环境现状及需求分析公司为实现基于企业绩效管理的信息化系列重大需求，准备通过本项目做好数据仓库技术平台的规划及优化提升工作，确保数据仓库平台满足全面启动建设企业绩效管理系统的要求。本项目的工作任务包含数据仓库的建设规划、数据仓库的技术规范及性能优化、数据仓库与BOsEP的集成应用、数据仓库与ESB集成实现重要主数据的信息共享等四个方面。公司为实现企业绩效管理信息化的重大需求，籍由本项目做好数据仓库平台建设的规划，搭建起商务智能体系的整体技术架构并实现部分实例应用，满足全面启动企业绩效管理信息化的技术要求。同时,提出规范与优化提升既有的SAPBW数据仓库系统，使之成为企业商务智能平台中运行良好的关键一环。为熟悉决本公司现有重要数据分布管理、交叉共享，无法保障数据及时性与准确性的弊端，公司拟将SAPBW建设成为未来的数据集成与共享中心，能够满足建设公司ESB平台的数据服务要求，实现重要主数据的归集与共享，提升数据交互性能与系统安全性。实现BW系统的规划与优化，搭建并应用BW÷EP÷B0的技术平台，建立重要主数据的集中存储机制，与ESB集成实现与试点目标系统主数据的同步。前瞻性，既表达在BW软硬件平台规划与建设思路上要考虑未来五年的进展需求，也表达在BW的ETL部署、处理连、聚集、模型等数据仓库要素的设计规范上。1.2.L项目目标本期项目定位为规划奠基阶段，需要全面系统的构建南车电气未来企业核心数据仓库的基础架构，该基础架构要具有完整性，能满足本期项目的需求，同时也要具有灵活性与可拓展性，能够满足未来企业进展而不断变化的需求。综上所述我们关于本次项目目标概括如下：1 .以BW作为数据仓库建设进行未来的整体规划，使之覆盖5年内（含2015）企业级中心数据仓库的技术框架、业务对象设计等需求,且至少满足未来2-3年内南车电气核心数据仓库的具体使用情况，满足其建设标准及管理标准，提高可读性、可扩展性、可保护性。规划内容包含数据整合（ETL）层、数据服务层、数据展现（应用）层的软硬件技术平台与服务内容，制定数据仓库的设计规范。2 .优化SAPBW的软硬件环境，规范BW数据仓库的技术架构、对象设计与管理方式,重新梳理及构建原BW系统中设计不合理的部分（比如CUBE、Query等），提升BW的操作性能、优化Query等待时间,使之具备满足当前作为企业级中心数据仓库服务的条件。涉及的有关CUBE要紧有总帐行项目、应收、应付、成本、采购、库存、销售、考核指标等。3 .部署SAPBO集成EP作为新的数据展现（应用）层，将当前BW中的部分报表展现重构，以BO在原BWCUBE的基础上重新开发，形成SAPBW÷B0÷EP的商务智能技术平台结构，完成重要历史报表的迁移工作。4 .构建主数据共享平台，扩展数据仓库实现重要主数据归集与储存的业务应用，目前有物料、客户、供应商、人员、岗位、组织机构、制造BOMx订单BOM七类核心业务系统中的主数据需要汇合到BW数据仓库，通过ETL手段完成SAP与非SAP系统的主数据抽取同时在BW中建模，最终实现将数据仓库作为ESB中核心业务系统重要主数据的存储与共享中心，提供有关主数据的接口以供ESB系统调用，以此实现重要主数据的跨平台同步。第2章南车电气数据仓库建设解决方案详述2.1. 南车电气数据仓库建设整体方案说明2.1.1. 方案概述本期项目的专业定位是集团企业级核心数据仓库的建设，数据仓库架构的优化及规范体系的建立。XX软件系统有限公司以ROK投资回报）为目标，以科技为手段，为南车电气未来的公司绩效管控与决策支持服务构建强壮的基础。XX公司通过结合中国本地的人力资源与地利之先，综合国内外的先进管理思想与应用实践，愿为南车电气的事业锦上添花。针对上一章节中我们所懂得归纳的南车电气本期项目的需求，本期项目是南车电气信息系统建设的核心部分，整合后的数据仓库将作为将来南车电气整个IT环境中的数据基础平台，建设完成后将为未来的南车电气企业绩效管理信息化系统做准备。数据仓库系统的建设有其顺序性，且需要大量时间。数据仓库系统建设过程中，将发现原有的营运系统在作业流程、数据质量、数据标准化的问题，基于此发现，将有助于对营运系统的缺陷进行修复。BI系统的建设是循序渐进不断完善的，是跟业务一起进展的。基于上述办法，数据仓库项目的实施，当一期建设完成后，二期、三期将建设更为全面的企业各系统数据模型，增加新的源数据系统，扩展与完善数据主题域，新建更多主题数据集市，涵盖整个南车电气的业务范围。以SAPBW数据仓库平台为基础，构建未来企业级中心数据仓库，通过SAPBO平台重新进行报表前端展现层的开发，最后通过EP平台公布，形成SAPBW+B0+EP的商务智能技术平台结构。2.1.2. 系统逻辑架构SAP数据源ECC企业的原始业务层预算系统非SAP 数据源PLMCRM其他：:二一I企业系统数据整理层移动应用可视化报衰 和仪表盘 Dashboard即席查询 OLAP分析 Web Voyaqer格式化报衰 Crystal ReportSAP BOF台企业展现（应用）层系统逻辑架构示意图源系统说明本次项目的要紧数据来源为SAP系统与非SAP系统数据处理层数据抽取层的目的是实现将数据源的数据通过抽取，转换后加载到数据管理层中，同时在这个过程中，需要进行任务的调度操纵，任务出错处理与数据质量的检查。南车电气的项目数据要紧通过BW中的ETL技术手段来实现抽取与汇总：1 ）SAP数据源通过BW标准的数据抽取方式；2 ）非SAP系统建立数据库连接数据源（Orade）,同时考虑增量抽取机制。数据管理层数据管理层以业务需求为驱动，根据业务不一致的主题，建立多个主题模型。建模以维度建模方法论为指导，结合实际需求，考虑模型的灵活性，扩展性与性能，为前端展现提供一致、高效的数据。报表平台层报表平台使用业界最为优秀的SAPBO产品，可实现固定格式报表,动态报表,移动展现等多种报表。报表展现层前端展现SAPEP门户集成BO报表来实现。2.1.3. 系统硬件架构建议方案本次项目至少需要有两套环境：开发环境与生产环境，从逻辑上，两套环境务必分开，权限上务必进行区分。每套环境配置相同数量的服务器，安装相同的操作系统与应用软件，保证环境的一致性。开发的资源配置可低于生产环境。由于未来BW将作为南车核心数据仓库使用,众多核心的业务系统中的数据都需要抽取到BW数据库中，我们调研了一部分业务系统的数据总量及增量如下表所示系统名称当前数据量月增量数据SAPERP2.1T40-50GSAPCRM115.77G34GPLM710G25-30G供应商门户（电气加国变）52.3G约0.8G供应商门户（风电）19.5G约0.1G供应商门户（电动）39.6G约40M费用管理系统35GIG1.5G投资管理系统46G预算系统5.88G0.1G上述系统只是部分核心业务系统，其当前的数据总量为3个多T,未来5年的数据增量保守估计为610个T。而BW系统的数据基本上为源系统数据量的1.52倍，也就是说在数据仓库服务器的存储设备上至少要准备20T以上才能满足未来5年内的业务需求。目前南车BW生产环境的数据库服务器存储空间较小，才不到2个T,而且已经使用了80%左右，因此我们建议在服务器存储空间上需要有较大的配置增加。服务器种类VCPU（虚拟CPU）内存硬盘空间性能问题简述BW开发服务器（应用+数据库）420GC:50G;D:1500G操作响应慢EP开发服务器420GC:80G;D:300G操作响应慢BW生产服务器1230GC:100G,D:300G数据查询等待时间长BW生产数据库服务器1230GC:100G,D:1800G,D:400G数据查询等待时间长EP生产服