会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
风雷
风雷的博客
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
8
9
10
11
12
13
14
15
16
···
34
下一页
2014年7月17日
递归遍历目录拷贝cdh下的lib到一个目录
摘要: destpath='/home/hadoop/soft/hadoop-2.0.0-cdh4.5.0/cdhlib/'jarpath='/home/hadoop/soft/hadoop-2.0.0-cdh4.5.0/share/hadoop/'search='jar'iterdir(){ cd $1 ...
阅读全文
posted @ 2014-07-17 14:46 谭志宇
阅读(179)
评论(0)
推荐(0)
2014年7月16日
继承FileInputFormat类来理解 FileInputFormat类
摘要: import java.io.IOException;import java.util.ArrayList;import java.util.List;import org.apache.hadoop.fs.BlockLocation;import org.apache.hadoop.fs.File...
阅读全文
posted @ 2014-07-16 17:17 谭志宇
阅读(2294)
评论(0)
推荐(0)
解决cdh4.5.0下 MAP任务看不到状态
摘要: 参考 http://qnalist.com/questions/772595/yarn-jobhistory-service在mapreduce-site.xml中添加 mapreduce.framework.name yarn mapreduce.jobhistory.address master...
阅读全文
posted @ 2014-07-16 09:52 谭志宇
阅读(214)
评论(0)
推荐(0)
2014年7月15日
Yarn下分片和分块源代码分析
摘要: public class FileSplit extends InputSplit implements Writable { private Path file; private long start; private long length; private String[] hosts; pu...
阅读全文
posted @ 2014-07-15 17:03 谭志宇
阅读(742)
评论(0)
推荐(0)
Yarn下Map数控制
摘要: public List getSplits(JobContext job) throws IOException { long minSize = Math.max(getFormatMinSplitSize(), getMinSplitSize(job)); lon...
阅读全文
posted @ 2014-07-15 15:31 谭志宇
阅读(2005)
评论(0)
推荐(0)
2014年7月10日
hadoop中使用的Unsafe.java
摘要: 今天查看hadoop源代码, 发现有个Unsafe.java 稍微总结下 优势 1 减少线程调度开销, Unsafe.java 通过采用非堵塞原子方式来减少线程调度开销 2 传统线程通信通过wait,notify方法实现(会有信号量的堵塞队列),而Unsafe使用操作系统调度命令park,unpar...
阅读全文
posted @ 2014-07-10 21:02 谭志宇
阅读(1618)
评论(0)
推荐(0)
2014年7月9日
hbase的coprocessor使用(转)
摘要: http://www.360doc.com/content/13/0320/09/4675893_272623864.shtml
阅读全文
posted @ 2014-07-09 14:07 谭志宇
阅读(135)
评论(0)
推荐(0)
eclipse插件
摘要: 1 JadClipse 反编译工具2
阅读全文
posted @ 2014-07-09 13:38 谭志宇
阅读(109)
评论(0)
推荐(0)
短线及时发现个股机会的七大招数
摘要: 许多投资者感叹,要是能够在盘中发现将要拉升的个股,一买就涨,即使做个短线,那也多好啊! 事实上,预知股票将要拉升,并不是可遇不可求的事情。下面一些专业人士的经验,或许能给投资者一些启发。 招数一:预测全天成交量 市场有种说法:量价关系,如同水与船的关系,水涨而船高。而能够导致股价上涨的唯一因素...
阅读全文
posted @ 2014-07-09 13:16 谭志宇
阅读(242)
评论(0)
推荐(0)
hadoop分类输出
摘要: import org.apache.hadoop.io.Text;import java.io.IOException;import java.util.Iterator;import java.util.StringTokenizer;import org.apache.hadoop.conf.C...
阅读全文
posted @ 2014-07-09 09:13 谭志宇
阅读(1038)
评论(0)
推荐(0)
上一页
1
···
8
9
10
11
12
13
14
15
16
···
34
下一页
公告