2019年9月24日
Flume 几种拓扑结构
摘要： 一、串联 Flume Agent 连接 这种模式是将多个 flume 顺序连接起来了，从最初的 source 开始到最终 sink 传送的目的存储系统。此模式不建议桥接过多的 flume 数量，flume 数量过多不仅会影响传输速率，而且一旦传输过程中某个节点 flume 宕机，会影响整个传输系统。 阅读全文
posted @ 2019-09-24 23:43 江湖小小白 阅读(1141) 评论(0) 推荐(0)
Flume 事务与传输流程
摘要： 一、Flume 事务 流程图 Put 事务流程 doPut：将批数据先写入临时缓冲区 putList doCommit：检查 channel 内存队列是否足够合并 doRollback：channel 内存队列空间不足，回滚数据 Take 事务流程 doTake：将数据取到临时缓冲区 takeLis 阅读全文
posted @ 2019-09-24 19:12 江湖小小白 阅读(1447) 评论(0) 推荐(1)