摘要: 前几天部署了一个项目在服务器上,隔几天就会出现404 ???? org.springframework.dao.RecoverableDataAccessException: Error querying database. Cause: com.mysql.jdbc.exceptions.jdbc 阅读全文
posted @ 2019-09-02 09:23 某年某月某某人 阅读(249) 评论(0) 推荐(0)
摘要: 遇到的问题: 书写问题,一定要写仔细了 hadoop集群的名称,flume服务器上一定要有hadoop环境变量,没有的话,要将hadoop目录下的所有配置文件 拷贝到flume的conf目录下 最后遇到的问题是, Unable to load native-hadoop library for yo 阅读全文
posted @ 2019-08-31 12:15 某年某月某某人 阅读(143) 评论(0) 推荐(0)
摘要: 1.概述 Flume有能力在运行阶段修改/删除Event,这是通过拦截器(Interceptors)来实现的。 拦截器需要实现org.apache.flume.interceptor.Interceptor接口。 拦截器可以修改或删除事件基于开发者在选择器中选择的任何条件。 拦截器采用了责任链模式, 阅读全文
posted @ 2019-08-30 10:26 某年某月某某人 阅读(133) 评论(0) 推荐(0)
摘要: 1. yum install gcc-c++ 2.yum install pcre pcre-devel yum -c /etc/yum.conf --installroot=/usr/local --releasever=/ install nginx 该命令简单解释如下: -c /etc/yum 阅读全文
posted @ 2019-08-30 09:37 某年某月某某人 阅读(175) 评论(0) 推荐(0)
摘要: 阅读全文
posted @ 2019-08-29 12:19 某年某月某某人 阅读(618) 评论(0) 推荐(0)
摘要: 关闭集群的命令 stop-all.sh 1.先启动zookeeper集群 在zookeeper安装目录的bin目录下执行,sh zkServer.sh start 出现leader和follower时候说明启动成功 如果是第一次启动Hadoop集群,需要先将hdfs注册到zookeeper集群中,不 阅读全文
posted @ 2019-08-20 16:20 某年某月某某人 阅读(1445) 评论(0) 推荐(0)
摘要: https://www.imooc.com/article/9265 阅读全文
posted @ 2019-08-20 11:09 某年某月某某人 阅读(91) 评论(0) 推荐(0)
摘要: 我之前hadoop的环境都配好了 今天主要配置其他几种 第一步是flume的环境,这个直接解压压缩包,编辑一个conf文件 主要的功能,是监听一个目录,当此目录有数据或者文件发生变化时候,就记录 然后通过sink发送到另外一台虚拟机的hdfs 这样我另外一台虚拟机的hdfs上面就有数据了 第二步是h 阅读全文
posted @ 2019-08-19 17:37 某年某月某某人 阅读(223) 评论(0) 推荐(0)
摘要: 第一步添加项目打包 参考 https://blog.csdn.net/Fight_Rain/article/details/78935503 阅读全文
posted @ 2019-08-19 09:19 某年某月某某人 阅读(179) 评论(0) 推荐(0)
摘要: 参考 https://blog.csdn.net/shenshengsu1990/article/details/94625194 结合下图来讲解 ...... JobTracker接收到任务之后,会去访问NameNode获取要处理的文件信息 NameNode将文件块的一些信息返回给JobTrack 阅读全文
posted @ 2019-08-16 14:30 某年某月某某人 阅读(467) 评论(0) 推荐(0)