2014年10月10日
修改Flume-NG的hdfs sink解析时间戳源码大幅提高写入性能
摘要： Flume-NG中的hdfs sink的路径名(对应参数"hdfs.path"，不允许为空)以及文件前缀(对应参数"hdfs.filePrefix")支持正则解析时间戳自动按时间创建目录及文件前缀。 在实际使用中发现Flume内置的基于正则的解析方式非常耗时，有非常大的提升空间。如果你不需要配... 阅读全文
posted @ 2014-10-10 09:10 玖疯 阅读(5048) 评论(9) 推荐(2) 编辑