经营分析系统建设方案书资料

经营分析系统建设方案书经营分析系统建设方案书目录1概述31.1建设背景31.2建设目标41.3系统建设原则42总体设计52.1设计思想52.2体系架构72.2.1硬件架构72.2.2软件架构92.2.3功能组织架构122.3系统关键技术132.3.1数据仓库132.3.2联机分析142.3.3数据挖掘162.4阶段性实施182.4.1数据仓库的阶段性发展183系统功能183.1系统业务功能193.1.1经营发展概况分析193.1.2业务及产品使用193.1.3客/用户级分析213.1.4缴费/欠费分析223.2系统管理功能223.2.1系统监控和维护管理223.2.2系统参数配置管理233.2.3系统权限管理233.2.4操作日志管理243.2.5版本管理241 概述1.1 建设背景现代企业经营环境呈现出以下三个方面的特征：Ø 客户（Customer）至上经济全球化使得市场上产品的更新换代周期越来越短，技术的发展使得市场上可替代产品的出现越来越快，因此，面对客户越来越个性化、多样化的消费需求，企业不得不提供更加丰富的产品和服务来满足客户的需求。Ø 竞争（Competition）越来越激烈当一个行业发展处于上升势头时，参与市场的竞争者就越来越多，而且都以追求更加卓越为目标。Ø 市场变化（Change）市场变化已成为业界常态；不仅如此，变化的速度、范围及影响越来越快。客户的消费需求在发生变化、对手的竞争模式在发生变化，这种变化是持续不断地，而且频率在加快，因此，企业市场应对策略的产生和应用速度是保持竞争力的重要手段，而市场应对策略的制定需要真实、及时的市场经营信息的支持。面对上述以3C为主要特征的现代企业经营环境，电信运营商需要更准确、更及时地了解自己的客户和业务情况，了解客户发展的渠道性能，了解竞争对手的经营情况，以便及时地推出服务措施，满足客户越来越个性化的需求。如何在现代企业竞争环境中充分利用自己的综合业务优势、保持并增强市场竞争能力，也是电信运营商亟待解决的关键问题。电信运营商经过长期的发展，现有的基础数据已经逐渐丰富，但是普遍存在一个共同要面对的情况，就是这些基础数据源的数据相对独立，关联性小，但只要一旦能够充分利用这些数据，那么经过整合的数据的利用价值将大大提升，为整合成具有分析价值的“信息”数据提供了条件。综上所述，解决问题的关键就在于如何充分利用好电信业务运营支撑系统长期以来产生的以及还在继续产生的业务数据和客户数据，将这些数据按照分析的要求进行集成，组织成支持企业经营过程的有价值信息，甚至知识。1.2 建设目标系统建设以集团要求为出发点，从宏观上以收入情况分析、业务使用情况分析、竞争情况分析、客/用户情况分析、营销管理分析、营业情况分析、客服质量分析以及其他专题分析等功能分析点为分析要素，并结合固定/预定义报表、即席查询、OLAP分析、常规图展示、信息告警以及数据挖掘等实现手段，对电信业务、市场情况进行全面、深入地分析。1.3 系统建设原则在系统建设过程中，将遵循以下原则：u 整个系统的建设将按照三层架构的原则进行建设。经营分析系统在逻辑结构上包含数据获取层、数据存储层和数据访问层。u 整个系统的建设将采用统一规划、分步实施、完善优化、步步见效的方式，既要满足当前内蒙电信对分析的迫切需求，同时也要考虑整个系统的演进，满足未来系统作为一个完善的决策支持系统的要求；u 经营分析系统将充分考虑系统的开放性，满足多技术、多系统的无缝集成；充分考虑系统的灵活性和可扩展性，支持未来对新业务、新产品统计分析的需求。 u 经营分析系统建设将考虑充分的保密与安全管理体制。避免企业机密数据泄漏。u 在技术选型上，经营分析系统将采用成熟、稳定、先进的产品，同时在软硬件产品的选型上应具有一定的前瞻性，避免今后因业务拓展需要更换系统构件的可能性；在系统建设中，产品的各个构件按产品化的原则进行设计建设，尽可能减少各子系统之间的信息耦合度。u 经营分析系统将采用统一的系统间的接口、数据标准和接口方式。系统提供的数据将能满足系统内部对数据的实时要求，支持并实现和各相关外部系统的连接。u 经营分析系统的开发与建设将分阶段循序渐进地进行。由于本系统关联的外部系统较多，为将系统建设风险降至最低，本次系统工程建设需要分步实施，对系统进行多次割接。2 总体设计2.1 设计思想系统的建设涉及到数据库、数据仓库、联机分析处理（OLAP）、数据挖掘、人工智能和统计学等多种学科与技术的交叉，同时必须考虑多种系统平台与工具的集成，因此系统的技术实现必须遵循以下要求：Ø 开放性为保证系统的开放性，系统构建中要尽量使用主流的硬件平台（主机、网络设备等）和软件平台，遵循业界开放式标准，支持系统建设中涉及的各种网络协议、硬件接口、数据接口等，为未来的系统扩展奠定基础。同时为了保证数据仓库的开放性，在数据模型建立时，数据存储中应充分考虑对未来业务发展的最大支持（如：客户数据/用户数据的处理上考虑较为全面的采集，模型建立中使用独立的客户数据域，为CRM系统使用客户/用户数据奠定基础），使相关系统能够顺利地使用该数据仓库。Ø 扩展性系统的扩展性应包含硬件、软件和应用等多方面的扩展，同时扩展性优劣的一个重要指标是系统并行能力。在系统建设中，应从这几个方面综合考虑，选择扩展性强的硬件平台和软件工具，并在应用设计时充分考虑可扩展性。在系统建设中，应充分借鉴目前业界的建设经验，吸取教训，少走弯路，保证应用的可扩展性。Ø 安全性系统安全管理主要包括网络安全管理、主机和操作系统安全管理、数据库安全管理、数据访问权限管理等组成。网络安全管理通过采用路由器、防火墙、通信服务器等多种硬件设施来保障网络安全，防止系统受到非法入侵，保证数据的安全性，同时设置网络密码保护，确保通过Web页面访问系统时数据传输的安全性。主机和操作系统安全管理通过设置主机密码、操作系统级别的不同用户、口令，确保系统稳定性和安全性，并建议通过磁盘阵列进行数据备份，在系统发生意外情况时，保证系统数据能够得到及时恢复。按照中国电信业务要求，结合具体的数据情况并充分考虑建设维护成本，应提供适当的系统备份、数据恢复等策略。数据库安全管理通过设置不同等级的数据库用户权限、角色权限，防止数据库受到恶意攻击；对于后台数据库数据，原则上只开放读取权限，避免数据库数据受到肆意修改；在数据库操作上，应严格权限、密码管理，针对不同的操作，只授予相应的权限；对于重要的数据库数据做到定期异地备份。作为反映企业核心竞争力的业务分析数据必须采取相应的安全保护措施。在数据访问层，系统提供灵活的权限机制分配和管理使用者对数据资源的访问。Ø 实用性结合不同部门、不同的业务需求，合理的构建分析模型（按主题、地市、部门建立不同的OLAP分析模型），以及合理地组织数据（特别是有效又合理的数据粒度、分析模型的数据总量控制），保证了查询效率与响应时间。对现有业务运营系统影响小，是系统的基本设计要求，因此必须采取恰当的数据抽取策略和控制机制来达到这一目标。系统对大多数使用人员提供通过浏览器访问方式，并且提供多种图表展现方式（如：柱状图、饼图、多维透视表等），只要能使用浏览器，就能使用本系统。另外通过门户与OA融合，系统向个性化的方向发展，使人机接口、展现方式更多样化、实用化。整体上说，系统应达到“易理解”、“易学习”和“易操作”的要求。Ø 知识性随着应用的深入，数据源的不断增加，数据仓库将成为知识的海洋，并提供多样化的查询手段将知识展现在使用人员面前，以提高系统的应用水平和应用价值。Ø 可靠性系统应有良好的可靠性，能保证7*24的应用服务。Ø 延续性系统建设应考虑现有类似功能的涵盖和扩展。2.2 体系架构从技术角度而言，核心部分就是预先考虑好逻辑架构的稳定性，当应用要求不同时，在同样逻辑架构基础上对物理实施进行适当的调整和修改，就能保证系统的稳定运行。以下我们将从硬件、软件、功能等方面讨论系统的逻辑架构。2.2.1 硬件架构2.2.1.1 架构图及说明服务器架构图如下所示：说明：1、 图中绿色圆框中各主机是为从系统长远建设所需要并行性而设计的，在系统建设初期，由于系统压力较小，从投资效益而言，也可先以单机形式考虑；2、 系统建设初期，报表查询服务器、数据挖掘服务器、WEB服务器、管理监控服务器等也均可以并入OLAP服务器，随系统扩展后可分别单独移出。Ø 数据仓库服务器数据仓库服务器主要承担着从接口将数据按数据仓库模型进行整理、规范和组织的作用，确保数据的全面、完整和正确。其硬件配置应具有灵活的扩展性、并性行，支持1-N台服务器并行扩展，当系统资源不足时，能够通过升级设备或增加设备(处理器、内存、网络容量等)的方式来扩展资源，线性提升系统性能。Ø OLAP ServerOLAP Server承担着集市的关系型数据向多维数据转换，生成多维分析CUBE并接受客户端访问的功能；其硬件配置应支持1-N台服务器的镜像、分布式的处理来满足不断增加的访问压力，防止服务器的过载。Ø 报表查询服务器报表查询服务器负担着用户即席报表、预定义报表访问功能，其硬件配置应支持1-N台服务器的并行扩展进行负载均衡，分散用户的访问请求，提升访问性能。Ø 数据挖掘服务器数据挖掘服务器主要完成数据挖掘服务功能，为支持其功能开发及性能提升，系统硬件配置应考虑并行性，可在其功能所需资源不足时，通过增加或升级瓶颈资源来提升性能，满足应用需要。Ø Web服务器Web服务器主要负担最终用户访问经营分析门户网站的压力，为保证访问响应的速度，其硬件配置应支持并行扩展性，支持负载均衡，能适时分布处理用户请求，减轻服务器访问压力，提升访问性能。Ø 管理监控服务器管理监控服务器负担对系统运行状况进行监控、管理、分析等功能。2.2.1.2 主机系统基本要求Ø 要求采用多机群集系统或海量并行处理系统（MPP）;Ø 多机群集或海量并行处理系统中的每个主机/节点支持同时处于工作状态，并根据配置的情况运行相同或者在不同的应用（或应用模块），保证主机的资源充分利用；Ø 要求系统整机平均无故障时间（MTBF）不低于10000小时；Ø 系统能够提供并行处理能力，平均50，峰值100；Ø 系统能够提供线性可扩展能力，提供从2TB到20TB的扩展能力；Ø 主机处理能力满足所有业务的应用，而且有30的性能余量；Ø 计算机系统设备应具有较大的扩充能力，包括系统处理能力的扩充、存储容量的扩充、I/O能力的扩充、节点数的扩充等等；并支持CPU的升级或节点的平滑扩充；Ø 维护管理及开发工具，能顺利地进行服务器的管理维护；Ø 根据实际需要，在保证安全的前提下服务器可以灵活接入DCN网，即可以考虑以ATM、100Base-T或10Base-T、千兆以太网等方式接入。2.2.2 软件架构在数据仓库中形成基础分析数据存储后，应根据业务及管理等实际的需要建立适合各种应用的数据集市。数据仓库、数据集市中蕴含的信息可以通过报表、OLAP分析、即席查询、数据挖掘及预警等形式向经营分析系统使用人员展现。系统体系结构分为三层，即数据获取层、数据存储层和数据展现层，另外元数据管理贯穿整个系统建设。如下图所示：2.2.2.1 数据