2013年11月17日

hadoop 2.0 native

摘要： 1.安装protobuf，参照http://wiki.apache.org/hadoop/HowToContribute 安装java模块 在java目录mvn install 2.配置protobuf com.google.protobuf protobuf-java 2.5.0 //加上版本号，否则找不到包 3,在源文件目录执行 mvn clean i... 阅读全文

posted @ 2013-11-17 22:01 萌@宇 阅读(192) 评论(0) 推荐(0) 编辑

hadoop 2.0 lzo 问题

摘要： 首先搞到lzo在github https://github.com/cloudera/hadoop-lzo/ ant package 对应的机器上把build目录下的native压缩，传给所有机器 把jar包传给所有机器相应目录 阅读全文

posted @ 2013-11-17 22:00 萌@宇 阅读(219) 评论(0) 推荐(0) 编辑

YARN学习笔记 ResourceManager部分

摘要： CompositeService 多个service封装，service定义了状态机状态改变的合法情况。 重要的方法是（子类需要实现的）：serviceStart,serviceInit,serviceStop 里面的服务有: Dispatcher,ClientRMService,ApplicationMasterService,AplicationMasterLauncher,AdminS... 阅读全文

posted @ 2013-11-17 21:59 萌@宇 阅读(793) 评论(0) 推荐(0) 编辑

Netty 的Downstream 和 Upstream

摘要： Netty的Downstream 和 Upstream 如果一个event从第一个handler传递直到最后一个handler就是 Upstream 相反的如果一个event从最后一个handler传递到第一个handler就是downstream Server端从client端获得一个event，然后upstream 如果server想要发送到client，就是downstream Cl... 阅读全文

posted @ 2013-11-17 21:58 萌@宇 阅读(774) 评论(0) 推荐(0) 编辑

导航