05 2019 档案

Flume案例（3）
摘要：1) Spool Spool监测配置的目录下新增的文件，并将文件中的数据读取出来。需要注意两点： ² 拷贝到spool目录下的文件不可以再打开编辑。 ² spool目录下不可包含相应的子目录 创建agent配置文件 缺点：指定文件下不能有重名(如：kk.log 和 kk.log. COMPLETED 阅读全文
posted @ 2019-05-14 15:29 鹦鹉英冠 阅读(111) 评论(0) 推荐(0)
Flume案例（2）
摘要：1) Exec 创建agent配置文件 # > vi /home/bigdata/flume/conf/exec_tail.conf 添加以下内容： a1.sources = r1 a1.sinks = k1 a1.channels = c1 # Describe/configure the sou 阅读全文
posted @ 2019-05-14 15:27 鹦鹉英冠 阅读(113) 评论(0) 推荐(0)
Flume案例
摘要：1) Avro Avro可以发送一个给定的文件给Flume，Avro 源使用AVRO RPC机制。 创建agent配置文件 # > vi /home/bigdata/flume/conf/avro.conf 编辑avro1.conf a1.sources=r1a1.channels=c1a1.sin 阅读全文
posted @ 2019-05-14 14:59 鹦鹉英冠 阅读(160) 评论(0) 推荐(0)
推荐算法
摘要：package com.bw.mr;import java.io.BufferedReader;import java.io.IOException;import java.io.InputStream;import java.io.InputStreamReader;import java.net 阅读全文
posted @ 2019-05-08 10:23 鹦鹉英冠 阅读(145) 评论(0) 推荐(0)
Hive安装
摘要：1.hive的安装解压就完事了配置/etc/profile环境变量启动hdfs启动hivecp $HIVE_HOME/lib/jline.xxxxx $HADOOP_HOME/share/hadoop/yarn/lib2.show databases;查看数据库3.show tables;4.cre 阅读全文
posted @ 2019-05-08 10:19 鹦鹉英冠 阅读(153) 评论(0) 推荐(0)
Hive教案
摘要：Hive教案 作者 当前版本： 1.0 评审人 前一版本： 版本号/无 状态： 草稿/定稿 发布日期： 日期 版本 作者 修改内容 2015-12-10 1.0 初始版本 2016-04-20 1.1 部分修改 日期 版本 作者 修改内容 2015-12-10 1.0 初始版本 2016-04-20 阅读全文
posted @ 2019-05-08 10:16 鹦鹉英冠 阅读(451) 评论(0) 推荐(0)