项目编号： 财政数据信息资源目录、数据标准 存储及大数据资产化 规 划 方 案 目 录 1 概述.............................................................................................................1 2 规划思路......................... 首先阐明数据资源目录与整体数据分析应用的逻辑关系： 图 2-1 数据资源目录及标准存储在整体数据分析应用中的逻辑结构图 第 1 页 图 2-1 数据资源目录及标准存储(分布式方案) 数据资源目录的建设需建立在《财政基础数据规范》及《财政标准存储规范》 基础上，按照一定的清洗转换规则自生产系统中获取数据后形成符合规范的标 准存储，供形成进一步的主题分析资源库使用，最终实现深层次的数据分析、 数据挖掘。 生产系统数据源可以是已建立的容灾备份池，也可以是原始生产库，甚至是非 基于平台的第三方系统或外部文件等资源。数据资源目录依据标准存储建立后， 还可提供多地区多年度收支统计、地区排名、多年对比等初步的数据查询比较 主题。当然，进一步的主题分析、深层挖掘，还需要基于形成的标准存储数据 仓库进一步进行抽象分类提取。 2.1.1 数据资源目录总体结构 数据资源目录体系主要由数据资源目录服务系统组成，同时还具备软硬件、网

..................................................................................... 17 3.3 计算资源和存储资源配置估算........................................................................................ 19 4 ..................................................................................... 27 4.3 分布式集群存储平台................................................................................................. 税务内部业务平台、税务数据、国家经济情报的分析系统实 行统一规划和建设。所有资源整合后在逻辑上以单一整体的形式呈现，并可按需进行动态 扩展和配置。按照分阶段可升级的标准要求，为多级单位提供应用支撑基础平台服务和数 据存储、备份、交换等服务，实现基础软硬件资源的统一管理、按需分配、综合利用，增 强数据中心的可管理性，提高应用的兼容性和可用性，加速业务系统的部署，提升硬件资 源的利用率； 1 、制定数据规范化，提高数据质量

..................................................................................60 6.3 分布式集群存储平台................................................................................................. ................................................................................ 62 6.3.3 存储系统介绍 .............................................................................................. ..............................................................................73 7.1.1 分布式存储功能 ................................................................................................

.....................................................................................12 2.1.4 视频音频存储系统................................................................................................. ......................36 4 存储设计方案................................................................................................................................39 4.1 存储需求分析........................ ...............................39 4.2 监控系统存储模式对比分析................................................................................................40 4.3 存储设备选型分析.....................................

云平台是虚拟化的功能延展，实现资源的自动化调配； – IAAS 平台的功能是要根据需要进行定制的； • 集中存储 or 分布存储 or 混合存储？ – 包括虚拟机操作系统、开发环境在内的数据需要高性能集中存储； – 包括业务数据在内的非结构化数据可以考虑分布式存储； – 全闪存 + 分布式存储的架构最适合云平台系统； • 应用复杂度如何？是否需要 PAAS 平台？是否需要大数据平台？是否需要 Hadoop EMC 混合云平台解决方案 全闪存存储 XtremIO 分布式存储 Isilon( 文件 )/ ECS( 对象 ) Servers/Vmware PAAS 平台 CloudFoundry 大数据平台 Pivotal GP Hadoop 平台 Pivotal HD 新业务开发 大数据业务 非结构化数 据处理平台 EMC 方案 非 EMC 方案 存储层 服务器层 IAAS 层 PAAS 层 应用层 高端存储 VMAX 10K 4 © 版权所有 2014 EMC Corporation 。保留所有权利。 © 版权所有 2014 EMC Corporation 。保留所有权利。 EMC 税务行业核心解决方案  针对互联网 + 税务提供多层存储方案 – 领先的全闪存存储解决方案 XtremIO ；——高性能 – 稳定的高端存储解决方案 VMAX 10K ；——高性能

建设内容 天枢·智能探测系统-XX 气象+大数据平台建设内容如下： （1）建成 XX 气象+大数据平台。对接数字 XX 云平台和中国气象局天擎系统，到 2022 年 力争建成 3PB 多源气象+大数据存储和“数算一体”XX 气象+大数据平台，支撑“云+端”业务模 式，在该模式下，气象+大数据平台按照“一平台两功能”的设计，构建微服务架构，不断推进 和完善气象+大数据平台服务能力建设，支撑实现数据资源中心和数据服务中心两大功能；同 象 大 数 据 平 台 气象+大数据汇交子系统 数据处理，数据采集，数据表管理，可视化 ETL，资 源目录管理 2 气象+大数据存储子系统 数据管理，数据存储结构设计，数据存储模块（分 布式数据库数据仓库、对象存储、分布式文件系统）， 存储容量管理，存储趋势分析 3 气象+大数据治理子系统 元数据管理，数据标准管理，数据质量控制模块， 可视化数据同步模块，数据生命周期管理模块 4 气象+大数据应用子系统 2-1 XX 气象+大数据平台建设内容表 序号 建设项目 项目内容 1 气象+大数据平台 PaaS 层 1） 气象大数据平台基础架构搭建 2） 气象+大数据汇交子系统 3） 气象+大数据存储子系统 4） 气象+大数据治理子系统 5） 气象+大数据应用子系统 6） 气象+大数据容器化应用管理子系统 7） 气象+大数据服务子系统 8） 运维管理系统 9） 安全保障系统 10）

......................................................................................... 16 2.2.2 存储资源服务设计............................................................................................. ......................................................................................... 75 4.4.2 存储系统部署............................................................................................... 提供适量冗余的计算资源与存储，支 撑业务应用层、平台服务层、数据服务层等所有业务所需资源供给，满足现有应用迁移上云需 求；通过对IT基础资源的云化管理，实现资源的弹性伸缩和按需分配，满足各类业务和数据的 计算资源需求。 云平台需要支持根据业务应用的不同特点分配不同的计算资源，包括采用合理的物理服务 器。能根据业务应用的特点对服务器或存储进行配置满足应用对计算和存储的需要（CPU、内 存

超算中心融合管理子系统 （包含统一门户） 高速网络交换子系统 通用 CPU 算力子系统 GPU 智算子系统 HPC 超算子系统 全闪存存储子系统 高性能文件存储子系统 超算智算中心系统组成 子系统和高性能计算（ HPC ） 子系统。 l 超算计算节点和智能计算节点分别通过 IB/RoCE 网络等高速网络交换子系统进行高速互连； l 集成多层次、 多协议、 多种数据保护模式的全闪存存储系统和高性能并行文件存储系统 ， 以及配套的信 息安全子系统和超算中心融合管理子系统。 典型超算数据中心架构 信息安全子系统 1. 对外连接网络（网络出口层）分为 ：用于公众用户访问智算中心 2. 云专网：用于智算中心间互联、训推互联 3. IP 专网：用于远程管理 2. 内部互联网络分为业务 / 存储网络、管理网络、 参数面网络、 数据面网络 1. 业务 / 存储网络：业务网络用于互联网用户访问智算 / 通 算 等资源， 存储网络用于调用共享存储资源 2. 管理网络：主要包括业务管理（ K8S 平台、安全管理系 统 等）和 IPMI 3. 参数面网络：采用 RoCE/IB

.10 1.3.1 交管数据入库功能与处理方案...............................................................10 1.3.2 数据存储功能与处理方案......................................................................11 1.3.3 查询分析功能与处理方案. 6.1 交管数据流量处理能力.........................................................................20 1.6.2 数据存储能力........................................................................................21 1.6.3 ...............................25 2.3 数据存储子系统............................................................................................27 2.3.1 海量数据分布式数据存储构架.......................................

3.2.2 网络系统设计..............................................................................33 3.3 存储设计............................................................................................37 3 3.3.2 存储模式对比分析.......................................................................38 3.3.3 存储设备选型分析.......................................................................39 3.3.4 IP SAN 存储系统（可选）. .............................................41 3.3.5 云存储系统（可选）...................................................................42 3.3.6 存储清单配置.....................................................