随笔分类 -  Flume

摘要:1 你是如何实现 Flume 数据传输的监控的 使用第三方框架 Ganglia 实时监控 Flume。 2 Flume 的 Source,Sink,Channel 的作用?你们 Source 是什么类型? 1、作用 (1)Source 组件是专门用来收集数据的,可以处理各种类型、各种格式的日志数据, 阅读全文
posted @ 2019-06-04 02:36 LXL_1 阅读(546) 评论(0) 推荐(0)
摘要:第 4 章 Flume 监控之 Ganglia 4.1 Ganglia 的安装与部署 1) 安装 httpd 服务与 php [atguigu@hadoop102 flume]$ sudo yum -y install httpd php 2) 安装其他依赖 [atguigu@hadoop102 f 阅读全文
posted @ 2019-06-04 02:10 LXL_1 阅读(344) 评论(0) 推荐(0)
摘要:第 3 章 企业开发案例 注释:一下hadoop102、hadoop103、hadoop104 分别由 node01、node03、node04 代替 3.1 监控端口数据官方案例 1)案例需求:首先,Flume 监控本机 44444 端口,然后通过 telnet 工具向本机 44444 端口发 送 阅读全文
posted @ 2019-06-03 18:31 LXL_1 阅读(446) 评论(0) 推荐(0)
摘要:第 1 章 概述 1.1 Flume 定义 Flume 是 Cloudera 提供的一个高可用的,高可靠的,分布式的海量日志采集、 聚合和传 输的系统。Flume 基于流式架构,灵活简单。 1.2 Flume 组成架构 Flume 组成架构如图 1-1,图 1-2 所示: 图 1-1 Flume 组 阅读全文
posted @ 2019-06-03 12:11 LXL_1 阅读(146) 评论(0) 推荐(0)