【应用案例】市大数据云平台实施方案.......................................................................................29 3.4.5 共性加工层设计................................................................................................ 。 由于采用统一的 hcatalog 管理,因此在 pig 进行数据清洗后,可 以直接将数据存储到整合层的 hive 表中。 汇总层 汇总层又叫共性加工层,主要特点是针对特定应用逻辑,对数 据平台中存储的业务历史数据进行加工汇总和分析,供后续的业务 应用和集市使用。例如客户数统计、客户交易笔记统计等。 汇总层的作用即时提取常用的共性分析结果进行存储,为后续 应用提供系统的数据支撑。 任务并发与互斥、系统跑批进度监控、作业跑批状态监控、数据抽 取与下发监控等。 数据整合平台 数据整合平台是数据层的建设核心。会对上游数据生成系统的 结构化与非结构化数据进行统一的抽取、清洗、处理、加工、汇总、 下发等。为下游的业务系统运行、业务系统分析、决策支持等提供 强大的数据服务支持。 3.3.1.4 基础设施层 本次建设的大数据云平台工程将利用成熟的云架构 Issa 服务平 台作为基础设施层。在10 积分 | 153 页 | 6.00 MB | 9 月前3
xx市农产品冷链物流中心建设项目可行性研究报告【242页Word】基于 RFID 的食品冷链物流追溯系统.................................................................129 第三节 农副产品加工流程................................................................................................140 一、建设规模与目标 1 、建设规模与目标 地块总建设用地面积为 167672 平方米(约 251.51 亩),总建筑 面积为 227128 平方米;本项目主要包含综合楼、冷冻冷藏库、农产 品加工库、农机物资市场、综合市场、水产市场、肉禽市场、果蔬市 3 场、开放交易市场、垃圾站房及其配套附属设施等。 项目点东至 307 省道,南至城区备用地,西至城区备用地,北至 320 国道。基地 公室各主管机构具体负责项目的建设实施,确保按实施进度高质 量、 高标准完成项目。 项目建设周期为 24 个月。 3 、投资估算与资金筹措 本项目投资估算内容包包括综合楼、冷冻冷藏库、农产品加工库、 农机物资市场、交易市场、配套附属设施、场内道路和公用工程。 项目投资估算总资金为 100336.21 万元 ,其中直接工程费用 81081.06 万元 ,工程建设其它费用 1022110 积分 | 344 页 | 13.54 MB | 3 月前3
城市安全风险综合监测预警平台:数据融合管理系统(大数据平台)数据实施治理方案(137页 WORD)城市安全风险综合监测预警平台数据融合实施治理方案 数据处理主要包括数据提取、数据清洗、数据关联、数据比对、数据标识和数据 分发等功能,按不同阶段的数据处理要求,将数据原始备份、标准化处理、整合加工、 结合业务应用的数据分别存储于原始库、资源库、主题库、专题库四大库,为数据组 织和数据服务提供支撑。 1.5.3. 数据管控 数据管控通过应急相关数据标准、元数据管理、数据质量管理、数据资源目录规 4.4. 数据操作层-原始库(ODS) 原始库(ODS,Operation Data Store)又称为数据操作层,基于 Hive/Hudi/HDFS 开源存储架构,为数据明细层 DWD 层提供待加工的原始数据,专注于原始数据保真 以及低成本长期存储的存储设计模式。 ODS 层的数据资源长期沉淀、永久存放,可以让数据仓库或者机器学习模型等下 游数据治理和数据应用模块可以更方便地利用数据资源,并可以为未来数据分析、计 3. 数据仓库层(DWH) 数据仓库层(DWH,Data Warehouse)的数据加工链路也是遵循业界的分层理念, 包括数据明细层 DWD 资源库、数据服务层 DWS 主题库、数据应用层 ADS 专题库以 及维度数据库 DIM 维度库、元数据库 META、基础数据库 BDS。通过数据仓库不同 层级之间的加工过程实现从原始数据到高质量、高效率数据资产的转化,并且对整个 过程进行有效的元数据管理及数据质量稽核。10 积分 | 138 页 | 1.54 MB | 2 月前3
智能探测系统气象大数据平台建设技术方案(118页 WORD)元数据管理,数据标准管理,数据质量控制模块, 可视化数据同步模块,数据生命周期管理模块 4 气象+大数据应用子系统 数据计算模块,地面常规气象数据统计模块,气象 第 2 页 共 114 页 产品加工模块,数据支撑服务,气象行政数据支撑 模块 5 气象+大数据容器化应用 管理子系统 应用市场,在线服务,任务调度编排 6 气象+大数据服务子系统 业务功能服务接口命名规范,业务功能服务接口开 集,并实现气象大数据数据资源层各库之间的数据 流转;建设可视化平台对数据抽取、规则定制、运 维等提供可视化操作工具。 15 数据治理 搭建成熟、稳定的数据治理工具,提供可视化界面 对数据进行清理、关联、加工、规则定义、审核等 功能,并依托该工具完成指气象数据治理工作; 16 系统迁移 结合目前现状以及“四天”业务规划,编制数据迁移计 划、明确数据迁移对象并进行迁移实施。完成现有 数据服务平台的迁移,包括数据环境迁移、数据服 气象大数据数据资源层各库之间的数据流转;建设可视化平台 对数据抽取、规则定制、运维等提供可视化操作工具。 2.4 数据治理 搭建成熟、稳定的数据治理工具,提供可视化界面对数据进行 清理、关联、加工、规则定义、审核等功能,并依托该工具完 成气象局各类数据数据治理工作; 对气象大数据数据资源层各库、各数据抽取任务、共享交换服 务的; 元数据进行统一的管理。包含元数据生成、规则制定、发布、10 积分 | 121 页 | 827.50 KB | 2 月前3
MES系统整体解决方案-V2.0(66页 WORD).................................65 4 / 56 1 项目概述 1.1项目背景 该项目重点是实现生产组织全过程中技术准备,生产计划及调度,产品加工,资源保 障等部门的信息共享协同工作,保证设备利用率,合理配置和调度资源,提高生产能力。 实现业务流程的可视化,促进业务流程的持续优化。 当前所面临的问题主要焦点集中在“针对计划、物料、生产过程问题的解决”。计划层 理组体系的完善。以信息化手段,实现可视化全息车间管理。提供多种统计分析,为决策 者提供充足的数据依据。打造具有先进性、科学性、前瞻性的现代化生产体系。 可视化的车间管理,提升效益,通过原料准备、生产计划信息、加工过程的透明化、 实时化,提升配送精准度,监控生产设备运行情况,确保及时生产配送,提高效率。以设 备信息可视化,提高设备信息化水平,提升效率,降低不合格品率,提高用户满意度。以 产品生命周期可视 源分配的决策活动。 考虑订单优先级、交货期、库存、加工路径、产品特性、加工工序、设备负荷、资源限制 等条件,将生产计划与用户订单转化为具体的生产作业计划,排出高效率的日(班、线、 台等)的作业顺序,并将设备的调整降低到最小程度。 在系统设计过程中主要由以下需求: 1) 总厂计划(系统集成):在系统设计过程中需要考虑与整厂对各类订单的加工产 线计划导入以及和交货期进行控制管理,并在在 MES0 积分 | 56 页 | 10.29 MB | 3 月前3
AI可信数据空间(54页 WORD)行业规 行业准 办公场 代码 文档 ● 公 用 comm on cra 模型基础能 智能对 话 现象级 语料质量:随着通用语料的逐步耗尽 , 在高质量行业 数据上的加工与使用成为各模型能力差距的主要原 因。例如上海规划资源专项语料库,通过归集 1200 份技术标准、5.7 “ 万份城建档案,建立 专家标注 +AI ” 校验 双重标注模式,可以实现地图信息的精准规划, 门槛高,周期长,数据隐私要求高,所以领域知识 的共享在实际落地上还存在难度。 多模数据对齐与合规制约:不仅多模态数据的对齐与 融合、数据合规流通等受制于技术的发展,在数据 产权确权、数据资产入表等方面也需要通过政策法 规制定数据加工的标准与规范。 11 多模数据对齐与合规制 约 数据融合对齐、数据产权确 领域数据流通困 难 “ ” 主动找数、被动供数 , 公开数据即将耗尽 预计 2026 年, 现有公开高 质量语言数据即将耗 推理数据涉及多主体、多云、多业务 系统间的数据集成与数据汇聚,由于多主体大数据 平台建设采用异构技术平台、不同元数据管理、独 立数据接口标准,导致跨主体跨域间数据无法高效 流通、无法高效发现、汇聚、治理、加工、访问与检 索,大量 高价值数据难以被快速、高效集成至 AI 训练 / 推理 生产流程中。 ① 跨域多主体系统异构建设,跨系统横向集成难, 无法为 AI 统一供数: · 缺少统一元数据管理,治理复杂度剧增:10 积分 | 55 页 | 4.11 MB | 22 天前3
卓越级&领航级智能工厂项目申报书多机协同的发动机壳体柔性加工与检测 场景解决方案供应商名称 …… 是否成效突出且具备推广价值 □ 是 口 否 联系人及联系方式 …… 场景建设起止日期 …… 场景建设总投资(万元) …… 是否应用人工智能技术 □是(如勾选此项,请描述人工智能技术应用情况,300 字以内) □ 否 场景实例描述(结合要素条件 进行描述,300 字以内,可 配 图 ) 针对发动机壳体加工,搭建多台五轴机床+多台机器人组成柔性加工 针对发动机壳体加工,搭建多台五轴机床+多台机器人组成柔性加工 单元。 解决的痛点问题描述(300 字 以内) 解决复杂壳体加工效率低、质量不高等突出问题。 采用的技术方案(500 字以内, 可配图) 在已有五轴数控机床的基础上,配置上下料机器人、三坐标测量仪 等, 通过机器人进行自动上下料、自动变换装夹位置,通过三坐标测 量仪 对关键加工部位的精度、粗糙度进行自动检测,在检测不合格的 情况 下自动预警。这一解决方案是由 下自动预警。这一解决方案是由 XXX 公司进行改造实施。 实施成效(包括经济效益、场 景推广情况等,最好通过量化 指标描述,500 字以内) 建设完成后,目前操作人员已从 XX 人减少至 XX 人,加工效率 提升 了 XX%,产品不良品率降低 XX%;该场景总计花费 XX 万 元,但每 年为公司节省超过 XX 万,目前已向 XXX 等 XX 家企业推广。 7 附件 2 每个场景实例采用的关键装备、软件、工艺、技术情况30 积分 | 36 页 | 62.38 KB | 6 月前3
某大型酒业集团大数据平台及产品溯源系统建设方案(30页 WORD)品的市场竞争力;有利于提高质量监管部门对成品酒销售过 程中发现问题的处理能力,避免因个别产品的问题,波及全 部产品的信誉;有利于促进成品酒流通体系的不断完善;有 利于促使公司内部相关部门按照食品安全标准从事生产加工, 从源头提升产品质量安全水平。 二、项目建设内容及目标 建立 XX 酒全程监管溯源平台,并与现有的 EAS ERP 为 核心的信息化平台进行对接,使监管和追溯在现有基础上向 两端延伸,实 四、溯源系统建设方案 XX 酒溯源信息系统以产品的溯源二维码标签作为切入 点和信息载体,为每个产品赋予唯一的身份码,做到一物 (产品)一码,利用数据采集设备采集信息,将原辅料管理 原料投放、生产加工、产品分装、赋码关联、产品装箱、成 品入库、分销流向等环节的信息进行关联钩稽,从而建立多 级数据关联的质量溯源管理的系统。 利用区块链的去中心化、公开透明、不可篡改、集体维 护、分布式存储等特性为溯源系统提供底层解决方案,结合 同时便于有关部门的穿透式监管。企业能够把控整个商流体 系,监督各个渠道和产品流向,有效降低造假、售假、窜货 带来的损害和损失,全面提升企业品牌价值。 产品溯源管理涉及原辅料入库、生产投料、生产加工、 第 5 页 共 34 页 产品包装、仓库物流、产品销售、市场监管、销售运输、消 费者等多个环节,需要总体规划、统筹兼顾、协调一致,才 能达到整体优化的目标,初步整体方案设计示意如下图:10 积分 | 34 页 | 2.84 MB | 2 月前3
某科技大学体育馆项目BIM技术方案钢筋精细化 管理软件 钢筋精细管理软件 是由广联达软件公司专为工程 施工企业打造的一款工具软件,精细管理软件是一款 帮助项目做好钢筋内控的软件,主要有总量测算、前 期计划、劳务审核、采购指导、加工控制、劳务结算 等功能。通过这些功能可帮助项目实现钢筋的精细化 管理,减少由于技术和管理的不完善造成的钢筋浪 费,最终起到降低项目钢筋成本,提高项目盈利能力 的作用。 钢筋翻样软 件 一款替代翻样人员手工翻样的高效工具。该软件 BIM 应用 1、BIM 模型效果展示 BIM 模型的三维立体演示,可以展示建筑构件的实际情况,反映各构件的相 对位置、大小等,尤其是在钢结构深化设计方面,可以更快更准确的确定构件 的加工、安装施工方法,可以更早的插入作业,保证施工进度。 三维渲染动画,给人以真实感和直接的视觉冲击,建立好的 BIM 模型可以作为 二次渲染开发的模型基础,大大提高三维渲染效果的精度与效率。 12 Structures 真实模拟进行钢结构深化设计, 通过软件自带功能将所有加工详图(包括布置图、构件图、零件图等)利用三 视图原理进行投影、剖面生成深化图纸,图纸上的所有尺寸,包括杆件长度、 断面尺寸、杆件相交角度均是在杆件模型上直接投影产生的,通过深化设计产 生的加工数据清单,直接导入精密数控加工设备进行加工,保证了构件加工的 精密性及安装精度。 29 生成二维图纸 出预留孔洞图 现场实施10 积分 | 41 页 | 11.21 MB | 9 月前3
数字档案馆应用系统建设方案(43页 WORD)..................................................................................... 35 4.2.2 扫描加工管理 ................................................................................................ 基础设施建设需要在应用系统建设之前 完成,本方案不专门针对基础设施建设进行描述, 只是提出应用系统建设对基础 设施的要求。 2.1.3 资源建设现状 某市档案局现有馆藏档案 15 万卷,采用自行扫描加工的方式进行数字化建 设,预计到 2010 年,将完成 10,000,000 页的扫描任务。按照 600K/页(按照扫 第 4 页 数字档案馆应用系统建设方案 描图片 Tiff 系统建设;开展馆藏档案数字化加工等。二期建设目标在 2008 年 1 月 —2008 年 12 月底完成,建设内容包括:完善公众服务专网网站和资源共享专网网站功 能,扩充二个网站的内容, 形成某市电子政务信息集中与发布中心; 建设某市档 案目录和电子公文接收中心; 建立和健全某市档案信息交换系统; 进一步完善和 第 5 页 数字档案馆应用系统建设方案 扩大档案资源库和数字化加工建设等。10 积分 | 44 页 | 1.82 MB | 1 月前3
共 189 条
- 1
- 2
- 3
- 4
- 5
- 6
- 19
