摘要: flume 日志收集系统 Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。 当前Flume有两个版本Flume 阅读全文
posted @ 2018-04-02 10:38 项羽齐 阅读(2189) 评论(0) 推荐(0) 编辑
摘要: log4j: 1、传统log4j日志io操作文本文件,文件量有限,io操作会有性能瓶颈,在海量数据高并发下难以支撑。 2、分布式log4j不是支持分布式结构的。一般是单机。日志散落在很多机器上,不方便查看。 3、日志分析pv/uv/vv日志流量分析,从这些日志信息进行规范处理。 阅读全文
posted @ 2018-04-02 10:30 项羽齐 阅读(110) 评论(0) 推荐(0) 编辑