某企业级省大数据平台工程建设方案(636页 WORD)

微信扫码，打开到小程序

项目编号： 某企业级省大数据平台工程项目 建 设 方 案 目录 1. 建设现状及演讲建议..........................................................................................................5 1.1 建设背景及发展思路...................................................................................................5 1.1.1 建设背景..................................................................................................5 1.1.2 移动分析域系统现状...............................................................................6 1.2 XX 对企业级大数据平台规范理解及承建情况汇报..................................................7 1.2.1 移动公司企业级大数据平台技术规范.....................................................9 1.2.2 企业级大数据平台建设目标..................................................................10 1.2.3 企业级大数据平台建设原则..................................................................11 1.2.4 大数据平台建设需求分析......................................................................12 1.3 省份亮点应用介绍.....................................................................................................13 1.3.1 政企运营能力提升.................................................................................13 1.3.2 客户经营中心.........................................................................................18 1.3.3 智慧旅游................................................................................................22 1.3.4 风控（征信）.........................................................................................27 2. 平台技术及亮度总结........................................................................................................30 2.1 基础设施弹性云化.....................................................................................................30 2.2 数据透明访问支撑.....................................................................................................31 2.3 实时响应能力提升.....................................................................................................34 3. 系统架构及硬件方案........................................................................................................37 3.1 大数据平台总体功能架构.........................................................................................38 3.2 大数据平台总体技术架构.........................................................................................40 3.2.1 大数据平台系统架构亮点......................................................................43 3.2.2 大数据平台数据存储方式和存储周期规划............................................50 3.2.3 数据一致性保障.....................................................................................51 3.2.4 大数据平台数据流.................................................................................76 3.2.5 统一 HADOOP 版本演进规划...............................................................79 3.3 XX 承建省份平台软硬件方案....................................................................................80 3.3.1 湖北移动企业级数据中心......................................................................80 3.3.2 重庆移动大数据平台.............................................................................81 3.3.3 山东移动大数据平台.............................................................................82 3.4 外部接口设计.............................................................................................................84 3.4.1 大数据平台与周边系统接口分类...........................................................84 3.4.2 大数据平台接口支持类型......................................................................85 3.5 HADOOP 物理模型设计...........................................................................................85 3.5.1 分布式数据存储.....................................................................................85 3.5.2 数据处理和分析.....................................................................................86 3.5.3 数据快速查询.........................................................................................87 3.5.4 资源管理与分配.....................................................................................88 3.5.5 权限管控................................................................................................89 4. 平台重点技术方案............................................................................................................89 4.1 数据开放子系统.........................................................................................................90 4.1.1 数据开放子系统定位.............................................................................90 4.1.2 功能框架................................................................................................91 4.1.3 服务共享中心技术实现.......................................................................106 4.1.4 外部接口..............................................................................................122 4.2 HADOOP 子系统.....................................................................................................123 4.2.1 高效处理能力......................................................................................123 4.2.2 YARN 资源管理...................................................................................146 4.2.3 权限及安全管控...................................................................................150 4.3 运营维护子系统.......................................................................................................160 4.3.1 建设目标..............................................................................................160 4.3.2 功能架构..............................................................................................160 4.3.3 系统边界..............................................................................................161 4.3.4 系统功能..............................................................................................163 4.4 数据治理子系统.......................................................................................................213 4.4.1 数据治理子系统方案描述....................................................................213 4.4.2 功能设计..............................................................................................218 4.1 安全管控子系统.......................................................................................................511 4.1.1 概览说明..............................................................................................511 4.1.2 生态角色链及权限控制.......................................................................512 4.1.3 安全管理功能架构...............................................................................513 4.1.4 安全管理技术架构...............................................................................513 4.1.5 数据安全..............................................................................................514 4.1.6 平台安全..............................................................................................523 5. 本期重点应用方案..........................................................................................................526 5.1 复杂事件管理...........................................................................................................526 5.1.1 事件管理..............................................................................................526 5.1.2 事件实时处理引擎...............................................................................546 5.1.3 事件监控..............................................................................................578 5.2 营销管理平台...........................................................................................................586 5.3 客户标签库...............................................................................................................590 5.4 家庭宽带...................................................................................................................595 5.4.1 功能架构图..........................................................................................595 5.4.2 首页.....................................................................................................596 5.4.3 运营监控指标......................................................................................597 5.4.4 业务流程..............................................................................................602 5.4.5 宽带订购到期与续费分析....................................................................606 5.4.6 拆机专题分析..........................................................