经营分析系统建设

经营 分析 定性数据统计分析pdf销售业绩分析模板建筑结构震害分析销售进度分析表京东商城竞争战略分析 系统建设 何德琳 资深BI顾问 beijinhe@gmail.com 目 录 1：经分基础介绍 2：经分系统架构 3：经分数据模型 4：经分应用 5：经分运营支撑  6：经分系统建设关键点 什么是经营分析系统？ 经营分析系统是为企业的经营提供数据化运营服务的，是用数据分 析手段来提高经营中的决策能力。 经营分析系统以数据仓库作支撑，将业务系统分散的数据整合集中 起来。进行企业级数据建模，进行元数据管理，进行数据质量控制，提 供“统一口径”的数据信息，同时向其他业务系统提供分析的支撑服务。 经营分析系统能我们带来什么？ 多种数据分析手段，掌握企业经营现状 通过数据深度分析和挖掘，实现客户理解和精细化产品运营 通过数据挖掘模型，深度了解客户特征 1 通过产品数据的反馈，评估产品功能合理性 2 从客户数发展，收入和业务量量等方面全面评估产品运营效果 3 经营分析系统能我们带来什么？ 经分在快速反应的市场经营监控机制的起到关键作用 BOSS 网管 网厅 数据业务 业务系统和经分系统的区别 业务系统和经分系统数据的区别 业务系统原始数据:公司每天操作运行所用的细节性数据 经分系统数据衍生/导出数据：统计出来的或计算出来的满足公司管理者需要的数据 面向应用 详细的 为日常工作服务的 可更新的 处理需求事先可知 事务处理驱动 简单查询 已知查询 … 面向主题 综合的或提炼的 为管理决策服务的 不可更新的 处理需求事先未知 分析处理驱动 复杂查询 未知查询 …… 业务系统原始数据 VS 经分系统数据(导出/衍生数据) 数据库负载完全不同 业务系统 User_id=1234567 的月消费100元 Find Account #1234456 Account Table SMS 100 End 有哪些最近3个月活跃的客户月均消费大于 50并且登录了网厅充值和订购了数据业务 且上月参与了某换机营销活动，本月不活跃 的客户? DW Table1 Table1 etc.. Search A Table Store Sales Table Result Search B Table Store Billing Table Result Join Stored Tables Aggregate Answer Set End 经分系统的建设实施步骤建议 做好数据支撑 逐步沉淀专题应用 支撑数据化运营全流程 典型应用  KPI及日常运营监控  常用数据分析报表 建设的关键要素  打通数据接口，完成基 础数据底层平台建设  权限管理、需求上下线 管理等一系列基础配套管 理规范 典型应用  产品优化、营销支撑专题  客户特征研究及全景视图 建设的关键要素  面向特定的角色，基于特 定的业务问题，研究其解决 之道，将其需要的信息服务， 以“专题”的形式落地到经 分系统 典型应用  产品运营支撑及管理  营销全流程支撑及管理 建设的关键要素  将信息融入产品开发、运 营的“生产流程”，为决策、 管理、执行提供全方位支撑  经分成为所有产品、营销、 市场等必不可少的左膀右臂 一期：数据提供系统 二期：运营分析系统 三期：数据化运营门户 11 数据仓库管理 物理数据模型 ETL 设计 领导形象设计圆作业设计ao工艺污水处理厂设计附属工程施工组织设计清扫机器人结构设计 开发 应用开发 系 统 体 系 结 构 设 计 测 试 验 收 与 试 运 行 项目具体实施步骤 需 求 分 析 业务探索 信息探索 逻辑数据 模型 1. 需求分析 2. 数据源分析 3. 数据模型设计 4: ETL设计开发 5. 前端应用开发 6. 测试验收与上线 经分项目建设 方案 气瓶 现场处置方案 .pdf气瓶 现场处置方案 .doc见习基地管理方案.doc关于群访事件的化解方案建筑工地扬尘治理专项方案下载 1.需求分析 主要任务：  确定重点用户与数据源  用户需求调研与确认  数据源确认  用户需求和数据源的筛选和分析 交付项目：  业务需求列表(BRL)  功能需求列表(FRL)  业务需求功能规格说明书（FRS） 项 目 前 期 准 备 业务探索 信息探索 逻辑数据 模型 2. 数据源分析 13 主要任务：  数据源分析  表级和字段级数据分析  LDM分类  数据源对用户需求的支持程度评估 项 目 前 期 准 备 业务探索 信息探索 逻辑数据 模型 数据源分析是数据仓库项目实施的基础，其主要目标有如下四点： 1：清晰了解业务系统现状、特点和数据情况； 2：理清数据结构和了解数据业务含义； 3：为设计LDM和PDM提供基础； 4：为SDM和ETL提供基础。 3. 数据模型设计 项 目 前 期 准 备 业务探索 信息探索 逻辑数据 模型 物理数据 模型 ETL设计开发 应用开发 数据挖掘 服务 系 统 体 系 结 构 设 计 主要任务1：  进行原始数据分析  建立实体模型  建立实体间依赖关系  完善并填入所有属性  建立数据库逻辑模型 主要任务2：  转换逻辑数据模型（LDM）为物理数据模型  定义主索引、次索引  非正规化处理（demoralizations）  数据库建立  设计优化 利用工具：  ERWin，PB等 3. 数据模型设计 15 主要任务：  数据源及其特性定义  数据析取、转换和加载策略设计  构建和测试初始加载的程序和处理流程  构建和测试日常加载的程序和处理流程  60%～70 %的工作量在数据转换与加载上 使用工具：  脚本语言+SQL 交付项目：  《数据转换加载设计说明书》  《数据映射（Data Mapping）说明书》  数据转换加载脚本（ ETL Scripts)  加载流程控制（ ETL Process Control) 数据仓库管理 物理数据 模型 ETL设计开发 应用开发 数据挖掘 服务 系 统 体 系 结 构 设 计 元 数 据 管 理 解 决 方 案 集 成 4. 数据抽取转换与加载（ETL） 16 主要任务：  前端应用体系结构设计  OLAP应用设计  前端应用开发（随机查询、预定义报表、 OLAP应用）  撰写用户使用手册  用户测试验收 使用工具：  查询报表工具  OLAP工具（Cognos)  基于Web的开发工具  其他开发工具 交付项目：  《前端应用体系结构设计说明书》  《应用模块设计说明书》  《用户使用手册》 5. 前端应用开发 数据仓库管理 物理数据 模型 ETL设计开发 应用开发 数据挖掘 服务 系 统 体 系 结 构 设 计 元 数 据 管 理 解 决 方 案 集 成 经分系统开发人员角色分工 角色名称 工作内容 PM 项目总体管理 系统架构 工程 路基工程安全技术交底工程项目施工成本控制工程量增项单年度零星工程技术标正投影法基本原理 师 经分系统架构等工作 数据仓库建模工程师 仓库建模，兼ETL设计等工作 ETL设计工程师 ETL开发等工作 接口开发工程师 接口开发等工作 报表开发工程师 报表开发等工作 前台开发工程师 前台开发等工作 OLAP开发工程师 OLAP开发等工作 专题分析工程师 专题分析等工作 目 录 1：经分基础介绍 2：经分系统架构 3：经分数据模型 4：经分应用 5：经分运营支撑  6：经分系统建设关键点 经分系统体系架构 数据仓库 存储和管理 源系统 数据采集 回答 业务问题 析取 清洗 条件 剔除 家庭关系 加载 业务系统 业务系统 业务数据 外部数据 关系数据库管理系统 聚集 统计 人工智能 神经网络 多维 可视化 EIS/DSS 电子表 对象语言 开发 企业 数据仓库 数据集市 业务人员 数据导入 知识发现 数据挖掘 信息存取 工具 源数据 数据源 业务应用 ETL EDW 企业 数据仓库 数据ETL 析取 清洗 条件 剔除 加载 分析手段 源系统数据数 据 采 集 层 存 储 管 理 层 分 析 应 用 层 IT U se rs B u si n e ss U se rs 关系数据库管理系统 对象语言 即席查询多维分析 企业级报表 主动预警 数据挖掘 基本 应用 主题分析 客户分析 产品分析 收入分析 …..分析 … … 专题分析 营销评估 产品分析 …...分务 …...分析 … … 数据挖掘 客户分群 客户流失 客户价值 健康度分析 … … 分析应用 数据准备区数据仓库 DW运行 管理 数 据 质 量 管 理 元 数 据 的 管 理 系 统 安 全 管 理 备 份 与 恢 复 管 理 代 码 与 系 统 变 更 性 能 与 负 载 管 理 源系统…… 决策层 管理层 操作层 建立基于数据仓库的企业经营分析平台 经营分析系统常用的第三方软件 数据（仓）库 Hadoop/Hive/Hbase OLAP Server ETL 工具软件 Infomatic Cognos 前端展现工具 数据挖掘工具 BO Crystal Teradata SPSS Hyperion (Brio) IBM DB2 Oracle Hyperion Cognos IBM IM SAS EM R Microstrage Ascential DataStage ……. Microstrage Ascential MetastageDAG Metacenter 元数据管理工具 ETL ETL：数据抽取（Extract）、清洗（Clean）、转换（Transform）、 装载（Load） ETL是构建数据仓库的重要一环，用户从数据源抽取出所需的数据，经 过数据清洗，按照预先定义规则转换，最终将数据加载到数据仓库中 去。 经分门户 1、针对不同用户群设计不同的展示界面和使用方式 (公司领导层， 产品经理，运营分析人员) 2、提供功能不操作难易程度不同的几类展示界面 3、针对管理层用户设计的界面，显示KPI业务指标及宏观的分析图表 4、产品经理，运营分析人员等直接使用固定报表或者OLAP灵活的浏览数据。 5、管理界面，设计实现监控、用户及权限管理、参数管理等功能的界面 OLAP工具和数据挖掘工具 Cognos Clementine 目 录 1：经分基础介绍 2：经分系统架构 3：经分数据模型 4：经分应用 5：经分运营支撑  6：经分系统建设关键点 经分系统数据分层设计思想 操作数据层，和业务系统 的数据结构完全相同，增 加层的定义,数据不做任何 的转换，遵循三范式 操作数据存储层做轻度 转换后的数据层，数据 遵循三范式的关系结构， 是主题内的数据处理， 是未来数据分析及处理 的数据平台之一，为可 扩展数据提供了灵活的 接口 跨主题整合的数据层，供专业分析人 员及专题使用的主题宽表以及整合数 据表；本层数据提高了二次数据使用 的效率，同时为业务人员对供了一个 分析数据的数据平台 解决业务数据扩展性问题， 提高了数据预处理和数据查 询的性能和速度 目 录 1：经分基础介绍 2：经分系统架构 3：经分数据模型 4：经分应用 5：经分运营支撑 6：经分系统建设关键点  应用类型 功能 应用对象 业务需求 统计 报表 统计分析报 表，KPI • 公司领导 • 业务管理和分析人员 • 了解各项业务指标的总体情况 • 了解各产品线的运营总体情况 • 产品经理人员 • 业务管理和分析人员 • 产品、业务运营信息展示 • 某产品功能上报数据统计 互动 分析 应用 即时查询 • 产品经理人员 • 业务管理和分析人员 • 模糊条件查询 • 精确查询 • 获取基础细节数据 OLAP分析 • 公司领导 • 业务管理和分析人员 • 分析业务指标之间的关联关系，通过多维度分析， 辅助制定总体策略。 • 产品经理人员 • 业务管理和分析人员 • 分析部门内部产品运营相关因素之间的关联关系， 制定业务策略，为日常工作的开展提供支撑 分析应用 专题 • 产品经理人员 • 业务管理和分析人员 • 针对具体的工作目标，挖掘潜在信息 • 对核心问题进行深入分析预测 业务流 程集成 BI分析结果 和应用固化 到业务流程 • 业务管理和分析人员 • 业务执行人员 • 营销流程自动化 • 业务及系统流程自动优化 基本 应用 类型 高级 应用 类型 经分系统应用的五种形式 目 录 1：经分基础介绍 2：经分系统架构 3：经分数据模型 4：经分应用 5：经分运营支撑 6：经分系统建设关键点  从经营分析系统建设向运营支撑转型 建 设 运 营 维 护 经营分析 发展战略 经营分析 系统现状 • 需求驱动 • 流程引入 • 构建应用平台 应用系统架构 • 流程闭环 • 应用互动 客户服务 销售管理 市场营销 活动管理 故障单管理 集成定单管理 计费服务 使用数据采集 结算（摊分） 计算机/ 电话集成(CTI) 联机采集 电子帐单和付款 (EBPP) 网络模拟 建设项目管理 业务流程维护 /派工 网络资源管理 号码管理 资源调度 客户自助服务 内容服务/ 增值服务/ 电子商务 企业资源规划 财务管理 人力资源 库存管理 采购管理 项目管理 储值中心 (Charging Gateway) 销售点终端 (POS) 服务配置管理 服务开通管理网络管理 性能管理 (SLA) 防欺诈管理 数据仓库 决策支持系统 忠诚度管理 知识管理& 办公自动化 服务控制管理 /目录服务 渠道佣金管理 服务供应商／ 运营商接口 网元 服务器网元 EMS 金融机构 1 2 3 4 5 6 7 8 9 10 1112 15 16 17 18 1920 21 22 23 24 25 26 27 28 29 30 31 32 33 34 3536 37 38 39 40 41 42 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 65 66 67 68 69 70 71 63 64 74 75 网元 网元管理层 网络管理层 服务管理层 合作伙伴/ 运营商 企业门户 14 13 43 73 业务支持系统 运营支持系统 企业日常作业 支持系统 运营支撑 经营分析 建设规划 •平台建设进入稳步发展阶段 •业务发展，需求旺盛，应用建设进入蓬勃发展阶段 •流程贯穿，应用平台的引入成为系统建设的关键 •面向业务，支撑运营成为焦点 组建专业的经营分析团队 31 经营分析 团队 执行人员 管理人员 ……….. 经营者 分层服务于内部人员 计划 组织协调 控制 经营分析服务对象 目 录 1：经分基础介绍 2：经分系统架构 3：经分数据模型 4：经分应用 5：经分运营支撑 6：经分系统建设关键点 经营分析系统建设的关键点 业务导向 分步建设 质量考核 2 3 4 需求驱动 1 2 经营分析系统建设的难点 经分应用 推广 经分数据模型 扩展性 数据质量 Title Add your text 经分系统建设与价值创造之间的鸿沟 经分价值创造 经分系统重建设，更要重应用推广  逐步扩充经分数据源和应用模块，增强业务人员对经分系统系统的认 识和依赖性  通过对经分系统的近一步完善，使业务人员充分感受经分系统的价值 - 主题分析的完善和增强 - 数据挖掘的应用 - 市场知识库的搭建 - 不断提高分析的精度和预测的准确性 - 对经分的结果进行验证，通过经分影响业务流程，营销思路  建立专业化经营分析推广小组，大力进行经营分析培训和应用推广 经分数据模型扩展性  业务驱动数据仓库设计,以需求为基线,分主题设计  数据分层，清晰的数据流：接口dw 汇总  灵活的扩展机制和数据集中存储  数据仓库数据处理效率、扩展性：如分表，按粒度、访问频率 分表等、预计算、预汇总 数据质量是经分的生命线 •数据的值和描述必须与业务系统保持一致 正确 •数据的值和描述有且只有一个意思 明确 •数据的值和描述在整个数据仓库中都表示一个意思 一致 •数据处理过程中不能有信息丢失 完整 感谢聆听！