公共基础数据库 基础地理信息数据库 遥感影像数据库 社会统计数据 其他 数据采集 统一调度 传统 ETL 文件接口机集群 云化 ETL 集群 流式数据 实时采集 数据存储 与计算能 力 ORCLE 数据 仓储 MPP 分布式 计算集群 Hadoop 分布式集群 实时计算集群 流处理平台 实时处理内存数据库 能力服务 数据封装 自助分析能力 数据挖掘能力 数据共享能力 能力管理 多源数据综合查询 统计分析与报表 元数据及目录服务 多源数据浏览展示 Web 应用服务 管理域 元数据管理 数据质量管 理 安全管理 运维管理 集群监控 / 配 置 林业数据集中共享平台 林业数据集中共享平台 标 准 规 范 体 系 安 全 与 综 合 管 理 保 障 体 系 林业综合数据库 数据源 公共信息发布数据库 林业综合决策数据库 林业项目管理数据库 其他 公共基础数据库 基础地理信息数据库 遥感影像数据库 社会统计数据 其他 数据采集 统一调度 传统 ETL 文件接口机集群 云化 ETL 集群 流式数据 实时采集 数据存储 与计算能 力 ORCLE 数据 仓储 MPP 分布式 计算集群 Hadoop 分布式集群 实时计算集群 流处理平台 实时处理内存数据库 能力服务 数据封装 自助分析能力 数据挖掘能力 数据共享能力 能力管理

2.2.2 统一资源管理和调度框架 YARN 为了实现一个 Hadoop 集群的集群共享、可伸缩性和可靠性,并 消除早期 MapReduce 框架中的 JobTracker 性能瓶颈,开源社区引入 了统一的资源管理框架 YARN。 YARN 分层结构的本质是 ResourceManager。这个实体控制整 个集群并管理应用程序向基础计算资源的分配。ResourceManager 将 各 ApplicationMaster 存在错误或者甚至 是恶意的，因此将它们当作无特权的代码对待。 NodeManager 管 理 一 个 YARN 集 群 中 的 每 个 节 点 。 NodeManager 供针对集群中每个节点的服务,从监督对一个容器的 终生管理到监视资源和跟踪节点健康。通过插槽管理 Map 和 Reduce 任务的执行,而 NodeManager 管理抽象容器，这些容器代 表着可供一个特定应用程序使用的针对每个节点的资源。 SparkSQL、MLib、GraphX、SparkStream，可以在一个 应用中方便的将这些工具进行组合  与 Hadoop 集 成 ： Spark 能 够 直 接 运 行 于 Hadoop2.0 集群，并且能够直接读取现存的 Hadoop 数据。 尤其 Spark 和大数据平台紧密结合,可以通过软件管理部署 安装 Spark 28 Spark 提供了一个快速的计算、写入以及交互式查询的框架。

算、数据治 理、智能分析能力 ，为全县各部门、各乡镇提供安全、稳定、高效、按需使用的基础支 撑。 1.5.1.1 建设数据资源平台 构建数据支持能力 实现分布式存储、分布式服务、集群管理等大数据支撑能力，同时建设数据结构化、 行业知识图谱等基于大数据的 AI 能力。 实现数据归集与治理 按需进行重点数据的归集、治理，整合省市垂直条线数据、县级各部门横向业务数 据、 分布式服务：提供分布式协调服务（Zookeeper）； 数据计算：提供数据计算引擎（ Spark、 MR）； 实时流处理计算：提供基于 storm 或 Flink 的实时流处理技术； 集群管理：提供集群安装部署工具； AI 预测引擎：基于 AI 算法结合实时流处理 Flink 技术 ，构建 AI 预测引擎 ， 对相关业务趋势做出提前预测； 行业知识图谱：基于海量数据 ，结合 生态的第三方发行版本，是当下被业界广泛认可并被大 量案例验证过的 ，成熟的大数据平台。 3.2.1.1 整体架构 CDH 是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具 （软件），使得集群的安装可以从几天的时间缩短为几个小时 ，运维人数也会从数十 人降低到几个人，极大的提高了集群管理的效率。在本项目中，基于 CDH 所构建的大 数据底座的整体架构如下： 第 28 页 共 129 页

及系统的冗余。 项目初期建议先按外 网、DMZ和内网进 行划分集群。 2、计算资源池 1、服务器虚拟化 3、集群设计 云平台基础资源池建设 9 拼接屏 综合管 理一体 机 显示主机 核心 交换 机 客户端 本地存储 调度台 视频采集 视频采集 红外设备 烟感采集 水流探测 感知采集系统 公众门户 指挥调度平台 集群对讲 GIS地图 前端采集 指挥大厅 应用平台 指挥大厅建设 赶往事发现场进行移动执法。 20 移动执法应用流程详解（1） l 执法流程 执法任务管理主要针 对受理的环境投诉和日 常监督执法的任务进行 登记、派发、办理、跟 踪的管理，执法人员通 过集群对讲指挥调度系 统、移动执法系统和执 法平台的任务进行交互 响应用。 21 移动执法应用流程详解（2） l 任务登记 针对12369、群众举报、 在线污染源监测异常、以及日

视频监控 土壤养分 设备工况 作业数据 病虫害 设备控制 四 农业大数据 智慧农业指挥中心 农业生产管理 农产品智能制造 农业智能服务 农业云计算中心 农产品溯源 eLTE 集群专 网 G IS 一张 图 平台服务能力 农机 管理 系统 指挥调度 视频云 云 3 HUAWE ENTERPRISE ICT SOLUTIONS A BETTER WAY 分步走： 立体监控， 消除盲点 （无人机视频回传） • 普通手机安装集群 APP ， 通过融合平台完 成语音 和视频调度 农业沃土平台： 指挥调度—窄带互通， 公网可用 （ 4/5 ） 窄带专网 运营商公网 / 宽带专网 eLTE POC 集群 视频和通信融合平台 集群网关 公网手机 + 集 群 APP eLTE 专业集 群 手机调阅摄像头

管理 多租户资源 池实例 配额 管理 资源 度量 资源 监控 租户活 动审计 多租户资源管理API 服务模 板管理 RAID Ceph NFS SAN 可扩展多级存储调度 SQL集群 NoSQL 数据库 对象存储 分布式文 件系统 内存缓存 地名数据 卫星/航 空影像 地图瓦 片数据 正射影像 矢量要素 新型测绘 数据 专题知识 数据 时序地理 数据 高 级 何设备、任何网络，获得数据、图像 和声音的自由通信 融合通信云平台系统拓扑 融合通信云平台产品 1 、语音融合： IP 电话、模拟电话、运营商电 话、卫星电话、广播系统、 350M 数字集群、公 网集群等； 2 、视频融合：公网集群终端视频、布控球视 频、 IP 网络摄像头视频， 28181 视频对接等； 3 、协议支持： SIP 、 GB28181 、 RTMP 、 7 号 SS7 、 PRI 、一号

林草绿色产业 - 30 - 1.产业链管理 2.产品认证 3.产品溯源 4.产业园集群 5.销售生态圈 6.生态旅游 7.生态认养 8.林草物联网 9.金融服务 黑龙江 绿智色慧 食林品草 认证产平 业台 林草产品 认证 林草产品 全流程溯源 林草销售 生态圈 林草产业园 集群 林草品牌塑造 认证审批 认证监管 生产环境管理 生产环节管理 加工储运管理 产业链管理 建设集种、管、收、储、运、加、销为一体的中草药、林果、 食用菌、花卉苗木和木材加工等林草产业园集群。 运用 5G 、物联网、云计算、人工智能等科技手段，提供智慧 园 区管理。 林草经济 物联网 大数据 云计 算 生产 仓储物流 销售 安全追溯 绿色林草产业 – 产业园集群 一 个 中 心 九 大 平 台 政 府 企 业 公 众 保 障 品 质 保 护 品 牌

林草绿色产业 - 30 - 1.产业链管理 2.产品认证 3.产品溯源 4.产业园集群 5.销售生态圈 6.生态旅游 7.生态认养 8.林草物联网 9.金融服务 黑龙江 绿智色慧 食林品草 认证产平 业台 林草产品 认证 林草产品 全流程溯源 林草销售 生态圈 林草产业园 集群 林草品牌塑造 认证审批 认证监管 生产环境管理 生产环节管理 加工储运管理 产业链管理 建设集种、管、收、储、运、加、销为一体的中草药、林果、 食用菌、花卉苗木和木材加工等林草产业园集群。 运用 5G 、物联网、云计算、人工智能等科技手段，提供智慧 园 区管理。 林草经济 物联网 大数据 云计 算 生产 仓储物流 销售 安全追溯 绿色林草产业 – 产业园集群 一 个 中 心 九 大 平 台 政 府 企 业 公 众 保 障 品 质 保 护 品 牌

计算设备，X86 计算设备包括 CPU 物理集群（承载 IO 密集及延迟要求高的数据库、大数据等关键业务）、虚 物 理 设 备 层 资 源 层 管 理 层 X86 CPU服务器 视频结构化 分析服务器 人脸分析 服务器 车辆分析 服务器 海康超脑 云存储 NVR CVR IPSAN/FCSAN 对象存储系统 NAS集群 嵌入式GPU计算设备 海康核芯 .. X86计算设备 CPU物理 集群 GPU容器 GPU虚拟化 云计算管理平台+容器云管理平台 云存储软件 CPU资源池 网络资源池 通过iSCSI、FC、 NAS(NFS/CIFS)等标准协议 接入 统一云管理平台 iDataCloud UCMP 网络虚拟化 X86 CPU服务器 虚拟化集群 CPU 资源 内存 资源 磁盘 资源 网络 资源 CPU集群资源 GPU资源池 资源 容器 资源 GPU集群 资源 GPU虚拟机 资源 容器 资源 GPU集群 资源 存储资源池 流式池 文件池 对象池 智能结构化池 块存储池 直流存储设备 云资源中心 云管理中心 云运维中心 计算、存储资源运维服务 计算、存储、网络资源统一服务目录 计算、存储资源管理服务 2022 数字乡村初步设计解决方案 第96页 拟化集群（承载用户业务应用系统）及插卡式

、信息共享 拼接屏 综合管理一 体机 显示主机 核心交 换机 客户端 本地存储 调度台 视频采集 视频采集 红外设备 烟感采集 水流探测 感知采集系统 公众门户 指挥调度平台 集群对讲 GIS 地图 前端采集 指挥大厅 应用平台 1 、信息共享 20 功能需 求 信息 查询 实时 监控 移动 执法 数据 统计 移动 办公 系统 管理 通过各个通讯软件支持废气、 小型机资源池两部分。 在测算所需虚拟化计算资源时，满足当 前承载应用的需要，同时考虑虚拟化的 高可用性以及系统的冗余。 项目初期建议先按 外网、 DMZ 和内 网进行划分集群。 2 、计算资源池 1 、服务器虚拟化 3 、集群设计 2 、高效存储 环保移动应用平台 专线 GPRS/WCDMA 环保局内网 移动网络 智能手机 上网本 SMS-G 信息网闸 GGSN AAA和管理/备份