摘要: 今天有同学问我,如何kill掉制定用户的所有job,有没有现成的命令?我看了一下hadoop job命令的提示,没有这样的命令。其实实现kill指定用户的job也非常简单,本身hadoop job命令已经带有很多实用的job管理功能了。列出Jobtracer上所有的作业hadoop job -lis... 阅读全文
posted @ 2015-01-15 14:18 jseven 阅读(1126) 评论(0) 推荐(0) 编辑
摘要: http://blog.csdn.net/cynhafa/article/details/19676865: The last packet successfully received from the server was 222,794,988 milliseconds ago. The las... 阅读全文
posted @ 2014-10-20 08:56 jseven 阅读(138) 评论(0) 推荐(0) 编辑
摘要: http://blog.csdn.net/chenyi8888/article/details/7254103主要是group byhttp://www.cnblogs.com/cenyuhai/archive/2013/09/06/3306037.htmlsqoop常用命令,可以导入到hbase,... 阅读全文
posted @ 2014-09-20 11:33 jseven 阅读(530) 评论(0) 推荐(0) 编辑
摘要: centos6.4安装 minimalifconfig...没有看到eth0.。然后重启网卡又报下面错误。故障现象:service network restartShutting down loopback insterface: ... 阅读全文
posted @ 2014-09-15 22:58 jseven 阅读(201) 评论(0) 推荐(0) 编辑
摘要: http://www.cnblogs.com/fangjins/archive/2012/05/06/2485459.htmlEclipse maven构建springmvc项目 阅读全文
posted @ 2014-08-28 14:42 jseven 阅读(170) 评论(0) 推荐(0) 编辑
摘要: 1、spring框架下载http://maven.springframework.org/release/org/springframework/spring/2、apache系列软件下载http://archive.apache.org/dist/ 阅读全文
posted @ 2014-08-28 09:23 jseven 阅读(131) 评论(0) 推荐(0) 编辑
摘要: 本文介绍了Facebook公司数据分析系统中的RCFile存储结构,该结构集行存储和列存储的优点于一身,在 MapReduce环境下的大规模数据分析中扮演重要角色。Facebook曾在2010 ICDE(IEEE International Conference on Data Engineerin... 阅读全文
posted @ 2014-08-10 09:57 jseven 阅读(259) 评论(0) 推荐(0) 编辑
摘要: 一、 Hadoop 的高可用性1. 概论本指南提供了一个HDFS 的高可用性(HA )功能的概述,以及如何配置和管理HDFS 高可用性(HA) 集群。本文档假定读者具有对HDFS 集群的组件和节点类型具有一定理解。有关详情,请参阅Apache 的HDFS 的架构指南。http://hadoop.ap... 阅读全文
posted @ 2014-08-10 09:36 jseven 阅读(322) 评论(0) 推荐(0) 编辑
摘要: Hive UDF整理(可以直接在mysql上测试,hive中没有伪表,需要手动创建,反应慢)字符串函数字符串长度函数:length语法: length(string A)返回值: int说明:返回字符串A的长度举例:hive> select length(‘abcedfg’) from dual;7... 阅读全文
posted @ 2014-08-08 11:23 jseven 阅读(1636) 评论(0) 推荐(0) 编辑
摘要: 最近的机器内存又爆满了,除了新增机器内存外,还应该好好review一下我们的代码,有很多代码编写过于随意化,这些不好的习惯或对程序语言的不了解是应该好好打压打压了。 下面是参考网络资源总结的一些在Java编程中尽可能要做到的一些地方。 1、尽量在合适的场合使用单例 使用单例可以减轻加载的负担,... 阅读全文
posted @ 2014-08-07 12:36 jseven 阅读(351) 评论(0) 推荐(0) 编辑