摘要: 先给出答案: 需要结合具体使用的source、channel和sink来分析,具体结果可看 本文最后一节 。 Flume事务 ====================== 一提到事务,我们首先就想到的是MySQL中的事务, 事务就是将一批操作做成原子性的 ,即这一批要么都成功,要么都失败。 同样的道 阅读全文
posted @ 2020-01-23 22:59 craz_cat 阅读(4279) 评论(4) 推荐(3)
摘要: 本文对flume进行安装部署 flume是什么?传送门: 0、要安装部署在日志所在的服务器,或者把日志发送到日志所在的节点上 安装前准备 1) Flume官网地址 2)文档查看地址 3)下载地址 1、将apache flume 1.7.0 bin.tar.gz上传到linux的/opt/softwa 阅读全文
posted @ 2020-01-23 11:07 craz_cat 阅读(140) 评论(0) 推荐(0)
摘要: flume 1.1 Flume定义 Flume是Cloudera提供的一个高可用的,高可靠的,分布式的 海量日志采集、聚合和传输的系统 。Flume基于流式架构,灵活简单。 大数据框架大致分为3类: 数据的采集和传输:flume 数据的存储:HDFS 数据的计算:MapReduce 1.2 应用场景 阅读全文
posted @ 2020-01-23 10:56 craz_cat 阅读(632) 评论(0) 推荐(0)