随笔分类 -  flume

摘要:Flume下载后,解压,新增一个配置文件,写入配置即可 我将配置文件写在 conf 下,取名为 flume-conf-spooldir.properties Flume 运行命令: bin/flume-ng agent --conf conf --conf-file conf/flume-conf- 阅读全文
posted @ 2017-05-24 20:27 Super_Orco 阅读(766) 评论(0) 推荐(0)
摘要:Flume概述 常见的开源数据收集系统有: 非结构数据(日志)收集 Flume 结构化数据收集(传统数据库与 Hadoop 同步) Sqoop:全量导入 Canal(alibaba):增量导入 Databus(linkedin):增量导入 Flume是什么: 由Cloudera公司开源 分布式、可靠 阅读全文
posted @ 2017-05-24 18:16 Super_Orco 阅读(487) 评论(0) 推荐(0)