摘要: 如果调试时出了问题,不要乱碰,这里改一下试试,那里改一下试试,如果头绪很乱,就去读文献读文档,理论高度是调试成功的有力保证! 阅读全文
posted @ 2016-08-30 22:21 prisoner 阅读(156) 评论(0) 推荐(0) 编辑
摘要: 最近发现hdfs的一个问题,每当集群开启的时候,有一个节点上的可用空间就一直在减少,并且速度很快,发现是data目录下的dncp_block_verification.log.curr文件在一直变大,查了日志没有发现什么可疑的原因,只在datanode的日志上发现有几条日志如下非常可疑: 好像是na 阅读全文
posted @ 2015-11-29 15:30 prisoner 阅读(3199) 评论(0) 推荐(0) 编辑
摘要: 1.hadoop yarn 运行wordcount时执行完成,但是返回错误错误信息如下:15/09/05 03:48:02 INFO mapreduce.Job: Job job_1441395011668_0001 failed with state FAILED due to: Applicat... 阅读全文
posted @ 2015-09-04 20:24 prisoner 阅读(3794) 评论(0) 推荐(0) 编辑
摘要: 按照storm on yarn(Apache hadoop)部署好之后,然后修改HADOOP_HOME,hadoopenv.sh中的JAVA_HOME,以及storm-yarn-master中pom.xml的hadoop version启动顺序依次为:hdfs:start-dfs.shyarn:st... 阅读全文
posted @ 2015-07-18 16:29 prisoner 阅读(682) 评论(0) 推荐(0) 编辑
摘要: spark on yarn 阅读全文
posted @ 2015-07-16 16:37 prisoner 阅读(692) 评论(0) 推荐(0) 编辑
摘要: storm on yarn, failed, 失败, 提交, hadoop 阅读全文
posted @ 2015-07-15 10:11 prisoner 阅读(2471) 评论(2) 推荐(0) 编辑
摘要: 单机zookeeper http://coolxing.iteye.com/blog/1871009storm http://os.51cto.com/art/201309/411003_2.htm记得时刻查看是否开机防火墙导致某些问题yarn 安装Hadoop Yarn(一)—— 单机伪分布式环境... 阅读全文
posted @ 2015-07-12 19:41 prisoner 阅读(149) 评论(0) 推荐(0) 编辑
摘要: 因默认ubuntu创建的普通帐号,默认shell为/bin/sh,而这不支持tab等键的,所以将「指定用户」帐号的shell改为/bin/bash就可以了。1.查看当前的shell:# echo $SHELL/bin/sh2.修改shell为/bin/bash:# usermod -s /bin/b... 阅读全文
posted @ 2015-06-13 23:01 prisoner 阅读(1448) 评论(1) 推荐(1) 编辑
摘要: 除了在网上百度的那些外,我的机器发生了这个错误我需要用php远程连接mysql,在目标机上已经给了客户机权限,可是还是发生“由于目标计算机积极拒绝,无法连接”错误在客户机上直接用终端连接目标机的mysql是发生错误是Can't connect to MySQL server on '*.*.*.*'... 阅读全文
posted @ 2015-06-10 20:50 prisoner 阅读(1877) 评论(0) 推荐(0) 编辑
摘要: centos socket通信时 connect refused 主要是防火墙问题,可以关闭防火墙,或者开放程序中的端口 阅读全文
posted @ 2015-06-05 10:58 prisoner 阅读(748) 评论(0) 推荐(0) 编辑