随笔分类 -  日志

flume读取日志文件并存储到HDFS
摘要：配置hadoop环境 配置flume环境 配置flume文件 D:\Soft\apache-flume-1.8.0-bin\conf 将 flume-conf.properties.template 重新命名为 hdfs.properties # 组装 agenta1.sources = s1a1. 阅读全文
posted @ 2019-10-12 09:41 SoyWang 阅读(1265) 评论(0) 推荐(0)
Linux安装配置Flume
摘要：概述 Apache Flume是一个分布式，可靠且可用的系统，用于高效地收集，汇总和将来自多个不同源的大量日志数据移动到集中式数据存储。Apache Flume的使用不仅限于日志数据聚合。由于数据源是可定制的，因此Flume可用于传输大量事件数据，包括但不限于网络流量数据，社交媒体生成的数据，电子邮 阅读全文
posted @ 2019-10-10 09:41 SoyWang 阅读(1397) 评论(0) 推荐(0)
log4j properties
摘要：.properties 配置文件 log4j.rootLogger=DEBUG,CONSOLE,DATABASE,FILE log4j.addivity.org.apache=true # 应用于控制台 log4j.appender.CONSOLE=org.apache.log4j.ConsoleA 阅读全文
posted @ 2019-09-29 09:35 SoyWang 阅读(141) 评论(0) 推荐(0)