09 2017 档案
摘要:在使用阿里云odps flume sink时 默认share数量是1,单个share的最大写入量为5000条每秒。 修改batch size 的数量必须小于share 5000 坑:如果配置batch size share 5000,则会出现数据丢失,并不给与任何报警信息
阅读全文
摘要:log4j2 v2.6.1 配置自身kafka appender后会出现消息发送瓶颈,局域网内平均为1秒1000条,这个完全不满足当前的发送需求。 经排查发现 在每次调用发送后,会回调get meta信息造成性能瓶颈 解决办法,自定义appender,去掉send后的get方法。
阅读全文

浙公网安备 33010602011771号