随笔分类 -  Flume

Configuration must specify a spooling directory
摘要：启动spooling源时报错： 原因：spooling配置文件有误 a1.sources.r1.type = spooldir a1.sources.r1.spooldir = /usr/local/flume/test 改成 a1.sources.r1.type = spooldir a1.sou 阅读全文
posted @ 2018-11-29 13:07 silvan_happy 阅读(1056) 评论(0) 推荐(0)
Flume安装部署
摘要：Flume安装部署 Flume的安装（非常简单） 上传安装包到数据源所在节点上，实际上不是数据源节点也是可以的，只要运行Flume的这台机器与数据源节点的这台机器能够通过某种协议进行通信即可。 然后解压tar –zxvf apache-flume-1.8.0-bin.tar.gz，并修改（mv）文件 阅读全文
posted @ 2018-09-26 08:09 silvan_happy 阅读(3293) 评论(0) 推荐(0)
Flume基本概念
摘要：1 Apache Flume 1.1 概述 Flume是Cloudera提供的一个高可用，高可靠的，分布式的海量日志采集、聚合和传输的软件。 Flume的核心是把数据从数据源（source）收集过来，再将收集到的数据送到指定的目的地（sink）。为了保证输送的过程一定成功，在送到目的地（sink）之 阅读全文
posted @ 2018-09-26 08:03 silvan_happy 阅读(1537) 评论(0) 推荐(0)