【EdgeHub·04】实时、历史与补传队列的边界
历史记录怎样支持运行分析
当前功率只能说明此刻负荷,过去一天的功率和运行状态才有助于理解设备何时投入、何时空载。EdgeHub 的历史存储与趋势查询让现场数据从瞬时显示变为可回看的过程记录,进一步服务设备日报、能耗分析和异常追溯。
不同变量有不同价值:状态变化适合追踪事件,温度和压力适合观察过程,累计量适合按业务时间区间核算。采集周期、归档规则和补传需求分别安排,能让存储资源用在真正需要回看的内容上。历史库与传输缓存承担不同职责,二者配合才形成完整的数据使用过程。
实时页面每秒刷新,是否意味着昨天每秒的数据都能查到?断网后数值恢复,是否意味着中间的记录已经全部补齐?这两个问题会直接影响趋势、能耗日报和生产追溯的可信度。
EdgeHub提供实时读取、按配置归档以及相关缓存和转发能力,但不同通道负责不同任务。项目应先确认需要保留什么事实,再决定采集、归档和上报方式。
三种存储对象不能互相代替
| 对象 | 主要回答的问题 | 不应据此推导 |
|---|---|---|
| 实时缓存 | 当前网关持有的值是什么 | 每次采样都已存入历史库 |
| 历史记录 | 某个时间区间有哪些归档数据 | 未启用归档的过去也能自动补出 |
| 待发送队列 | 哪些记录还没有获得目标确认 | 任意长时间断网都不会丢记录 |
另一个容易混淆的地方是“历史库写入失败的本地缓存”与“向IoT发送数据的待发队列”。两者目标、保存内容和恢复流程不同,应分别观察配置和状态。不能看到某处积压归零,就认定所有历史查询和业务统计都已恢复。
按信号含义选择记录方式
温度是连续变化的测量量,运行反馈是状态,累计电量则是可做区间差值的计数。三者可以有不同采集与归档策略。
| 信号 | 需要关注的历史 | 建议首先确认 |
|---|---|---|
| 温度、压力 | 趋势变化与超限前后过程 | 记录周期能否解释关注的变化 |
| 运行状态 | 状态切换与持续时间 | 是否记录关键切换、如何区分未知 |
| 累计电量 | 统计边界与复位过程 | 起止值、倍率、换表和缺测规则 |
| 高速脉冲 | 每次事件或准确累计值 | 普通页面轮询是否足以表达业务事实 |
采集周期应结合设备能力和通讯负载;归档策略结合问题所需的时间分辨率。若PLC提供可靠累计计数,上层通常先读取累计量再结合工单边界计算,而不是用普通Web轮询捕捉每一个高速脉冲。
用数量算例给容量讨论一个起点
假设100个数值点都按1秒一次保存,且每次都有记录,则一天最多需要考虑100 × 86400 = 8,640,000条记录。若改为10秒一次,对应864,000条。这里是理想计数,不是平台实测吞吐或磁盘占用。
若粗略假设每条有效载荷100字节,前者是864 MB/天的有效载荷量;数据库索引、压缩、批次组织、日志和备份都会改变实际空间。容量规划要用选定数据库和真实点位做测试,不能把这个乘法直接当成购买磁盘的最终依据。
查询也有成本。一天每秒一条的单点历史为86,400条,而某个接口单点上限可能只有10,000条。应用应按接口契约分段查询或采用合适的聚合,不能把截断后的记录当成全日完整统计。

图:既有趋势与告警演示,说明查询入口;曲线连续与否还需结合实际归档和数据质量判断。
历史保留策略也应按业务分层
短期排障可能需要较细的原始曲线,长期管理更关注日、周或月统计。两种数据用途可以分别设计保存周期,但聚合结果不能在原始记录删除后重新回答所有细节问题。例如只保留小时平均值,就无法精确还原一分钟的压力突降。
在方案中列出每类数据的用途、时间分辨率、保留期、备份方式和删除责任。若历史库与配置库分别部署,也要分别确认备份;保存了点表并不代表保存了昨日趋势,保存了日报文件也不代表能够重算全部历史。
容量试点可以先在隔离环境持续记录一组代表点,测量有效记录数、实际库文件增长、查询耗时和备份大小。再结合点数及保留期估算,并留出日志、索引、积压与升级空间。本文的数量乘法只是起点,实际记录合并、压缩和采集异常都会改变结果。
将这些观测写进交付文档,企业下一次增加设备时就能讨论真实容量,而不是只能回答“原来的服务器应该还够”。平台负责已有的采集与存储入口,团队把容量规划变成可持续维护的工程依据。
安排一次有记录的恢复检查
在隔离环境选一个测试点,记录正常时的源输入、实时值和历史;中断指定测试链路;期间改变输入并观察对应队列;恢复后再查询同一时间区间。需要写明断的是设备到网关、网关到历史库,还是网关到IoT,它们不是同一种故障。
验收记录至少包含断开与恢复时刻、积压变化、拒绝或丢弃记录、历史覆盖区间和当前值状态。出现写盘失败退回内存、容量裁剪或其他降级时,应明确损失风险。最后再用报表复核结果,而不只看连接图标重新变绿。
完成这一步,团队得到的是可以解释的数采方案:实时为操作服务,历史为分析服务,队列为特定故障下的恢复服务。后续扩设备、延长保留期或增加报表时,都有可以继续评估的依据。
技术交流
IndustrialSphere 围绕设备连接、数据管理与工业应用,分享产品能力、设计思路和应用实践。
欢迎加入 IndustrialSphere 技术交流群,交流设备采集、SCADA、流程编排、大屏报表及 MES / MOM 集成等项目中的技术问题与应用方案。
QQ群:1128988613
本系列阅读目录
- 【EdgeHub·01】总览与目录:设备采集与开放接口
- 【EdgeHub·02】PLC点表、类型与字节序联调
- 【EdgeHub·03】WebAPI、MQTT与Modbus出口怎么选
- 【EdgeHub·04】实时、历史与补传队列的边界
- 【EdgeHub·05】一份点表贯通采集、组态与MES
- 【EdgeHub·06】MES接入:采集层与业务层如何分工
- 【EdgeHub·07】数据质量、时间戳与断线补传
- 【EdgeHub·08】开放数据服务:让自研应用连接现场设备
- 【EdgeHub·09】历史趋势:从运行变化到异常追溯
- 【EdgeHub·10】设备写入:权限、回读与执行确认
- 【EdgeHub·11】自定义协议接入:让特殊设备复用整套工业应用
- 【EdgeHub·12】跨平台与持续运行:怎样选择现场网关部署方式
浙公网安备 33010602011771号