prometheus WAL 的主要用途

位置/data/wal

WAL（Write-Ahead Log，预写日志） 是 Prometheus TSDB 的一个关键组件，它的作用类似于数据库的事务日志。

WAL 的主要用途

1. 数据持久化保证

• 在数据写入磁盘块之前，先写入 WAL

• 确保即使在系统崩溃时也不会丢失数据

• 提供 ACID 特性中的持久性（Durability）

2. 崩溃恢复

# 当 Prometheus 重启时：
1. 读取最新的块数据
2. 重放 WAL 中的操作
3. 恢复到崩溃前的状态

3. 数据流处理

 

 

WAL 的工作流程

正常操作流程：

1. 数据采集 → 写入 WAL 段文件
2. 数据同时在内存中处理
3. 每2小时（默认）将内存数据写入块文件
4. 创建检查点，标记哪些 WAL 数据已持久化
5. 删除已持久化的旧 WAL 段文件

崩溃恢复流程：

1. Prometheus 启动
2. 加载最新的块数据
3. 找到最后一个检查点
4. 重放检查点之后的 WAL 数据
5. 恢复到崩溃前的状态

WAL 的重要性

1. 数据安全

• 没有 WAL：系统崩溃会丢失最近2小时的数据

• 有 WAL：最多只丢失几秒钟的数据

2. 性能优化

• 顺序写入，比随机写入快很多

• 批量刷写到块文件，提高IO效率

3. 一致性保证

• 确保数据写入的原子性

• 防止部分写入导致的数据损坏