会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
我的青春不迷茫
博客园
首页
新随笔
联系
订阅
管理
上一页
1
2
3
下一页
2020年6月2日
HIVE cdh5.15.1搭建
摘要: 1、首先安装MySQL,参考https://www.jianshu.com/p/276d59cbc529 2、下载hive,wget http://archive.cloudera.com/cdh5/cdh/5/hive-1.1.0-cdh5.15.1.tar.gz 3、解压,然后添加~/.bash
阅读全文
posted @ 2020-06-02 16:37 非洲刘
阅读(409)
评论(0)
推荐(0)
2020年5月29日
解决Shuffle$ShuffleError: error in shuffle in fetcher错误
摘要: <property> <name>hadoop.tmp.dir</name> <value>/home/hadoop/app/tmp</value> </property> 这个路径参数配置到etc/hadoop/core-site.xml里面。如果配置在hdfs-site.xml里面,yarn-s
阅读全文
posted @ 2020-05-29 17:28 非洲刘
阅读(722)
评论(0)
推荐(0)
2020年5月27日
启动YARN资源管理器
摘要: 在hadoop已经安装启动完成的基础上 1、进入$HADOOP_HOME/etc/hadoop,找到mapred-site.xml.template,并复制一份名为:mapred-site.xml 2、在mapred-site.xml中添加: <property> <name>mapreduce.f
阅读全文
posted @ 2020-05-27 17:04 非洲刘
阅读(424)
评论(0)
推荐(0)
2020年5月26日
linux检测活体ip并邮件提醒
摘要: 1、安装mailx 2、vi /etc/mail.rc,追加一下内容: set from=44XXX4902@qq.comset smtp=smtps://smtp.qq.com:465set smtp-auth-user=44XXX4902@qq.comset smtp-auth-password
阅读全文
posted @ 2020-05-26 19:40 非洲刘
阅读(207)
评论(0)
推荐(0)
2020年5月22日
Hadoop的NameNode进入安全模式
摘要: 当 Hadoop的NameNode节点启动时,会进入安全模式阶段。在此阶段,DataNode会向NameNode上传它们数据块的列表,让NameNode得到块的位置信息,并对每个文件对应的数据块副本进行统计。当最小副本条件满足时,即一定比例的数据块都达到最小副本数,系统就会退出安全模式,而这需要一定
阅读全文
posted @ 2020-05-22 16:34 非洲刘
阅读(1158)
评论(0)
推荐(0)
2020年5月21日
Java操作Hadoop-HDFS API Maven环境搭建
摘要: 1、创建一个Java项目,将一下代码粘贴到pom.xml中 <properties> <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding> <hadoop.version>2.6.0</hadoop.version></
阅读全文
posted @ 2020-05-21 12:07 非洲刘
阅读(987)
评论(0)
推荐(0)
2020年5月17日
Hadoop CDH版本安装和启动(CentOS7)
摘要: 1、创建hadoop组和用户,useradd hadoop passwd hadoop groupadd hadoops usermod -G hadoops hadoop(将hadoop添加到hadoops组中)。 2、下载hadoop版本 http://archive.cloudera.com/
阅读全文
posted @ 2020-05-17 20:47 非洲刘
阅读(1014)
评论(0)
推荐(0)
2019年6月4日
基于Redis的Nginx服务器集群session共享
摘要: 原料:jdk1.8,tomcat7,nginx1.16,Redis3.2.100,Redis-Tomcat需要的jar包,基于windows7。 Redis3.2.100与Redis-Tomcat需要的jar包下载链接:链接:https://pan.baidu.com/s/1MJ3_A5fNkFpg
阅读全文
posted @ 2019-06-04 20:45 非洲刘
阅读(903)
评论(4)
推荐(0)
基于Memcached的Nginx服务器集群session共享
摘要: 原料:jdk1.8,tomcat7,nginx1.16,memcached-1.2.6,Mem-Tomcat需要的jar包,基于windows7。所有的点击以下链接可下载 链接:https://pan.baidu.com/s/1jeO3T4ubJiz-G9TtyIOoCQ 提取码:4ckm ngin
阅读全文
posted @ 2019-06-04 20:21 非洲刘
阅读(345)
评论(0)
推荐(0)
2019年6月1日
关于Nginx参数路径问题的问题
摘要: 本文转载自:https://pureage.info/2013/10/31/130.html 由于工作需要,开始分析nginx的proxy模块,在分析之前,当然要先会用了。于是开始熟悉该模块的一些指令,其中最基本的指令要属proxy_pass了。nginx的英文文档总是看着感觉有些别扭,于是按惯例先
阅读全文
posted @ 2019-06-01 18:55 非洲刘
阅读(1750)
评论(0)
推荐(0)
上一页
1
2
3
下一页
公告