【flume 事务】

事务:

保证组件内部之间传递数据的可靠性~

问题点:

Put事务容易出现数据丢失

Take事务容易出现数据重复

 

 如何提高flume的数据吞吐量:

1. 修改source的putList 的batchsize

2. channel的batchsize & ransaction的batchsize

3. sink的batchsize

 

posted @ 2023-03-06 20:56  -YBP杨社长  阅读(21)  评论(0)    收藏  举报