摘要： 网易考拉近期需要大量java开发,数据挖掘,前端等, 大家可以网站上看好相关岗位, 与我联系. 阅读全文

摘要： classpath:xxx.properties 或者接下来就可以在Bean或者XML用{xxx}的方式调用了 阅读全文

摘要： 本文转载自：http://blog.csdn.net/chjttony/article/details/5927613每次用完每次忘相对与绝对。。。 阅读全文

摘要： 准备数据 浙江,杭州,300 浙江,宁波,150 浙江,温州,200 浙江,嘉兴,100 江苏,南京,270 江苏,苏州,299 江苏,某市,200 江苏,某某市,100 创建表 CREATE table pcp (province string,city string,people int) ROW FORMAT DELIMITED FIELDS TERMINAT... 阅读全文

摘要： Hadoop服务库与事件库的使用及其工作流程 Hadoop服务库: YARN采用了基于服务的对象管理模型,主要特点有: 被服务化的对象分4个状态:NOTINITED,INITED,STARTED,STOPED 任何服务状态变化都可以触发另外一些动作 可通过组合方式对任意服务进行组合,统一管理 具体类请参见 org.apache.hadoop.service包下.核心接口是Service,抽象实... 阅读全文

摘要： Hadoop RPC源码分析 上一篇文章http://www.cnblogs.com/dycg/p/rpc.html讲了Hadoop RPC的使用方法，这一次我们从demo中一层层进行分析。RPC说白了，就3个核心，交互协议、服务端、客户端。在Hadoop RPC（hadoop-common-2.4... 阅读全文

摘要： 第一部分： hadoop rpc基础RPC,远程程序调用，分布式计算中C/S模型的一个应用实例。同其他RPC框架一样，Hadoop分为四个部分：序列化层：支持多种框架实现序列化与反序列化函数调用层：利用java反射与动态代理实现网络传输层：基于TCP/IP的Socket机制服务的处理框架：基于Rea... 阅读全文

摘要： Java RMI HelloWorld RMI 远程方法调用. 顾名思义就是可以像调用本地程序方法一样调用远程(其他JVM)的程序方法. 分为3个部分: Stub:中介,代理. 封装了远程对象的调用,客户端需要通过stub与server交流 RemoteServer,:远端服务提供者.也就是RemoteObject Client:客户端 代码示意: RemoteObject, 远... 阅读全文

摘要： 随着业务的发展, 服务器所在网段/机群不允许kafka继续保留在那, 需要移动到先机器上.哎呀上面是废话,总的说就是: 2台老kafka不要了,数据要迁移到新的2台kafka上面.要求数据不丢失通过查询官网,并无直接切换的命令,当前版本是kafka 0.8.1, 说是0.8.2才提供老机器的退役功能... 阅读全文

摘要： 默认配置是将datanode,namenode,jobtracker,tasktracker,secondarynamenode的pid存放在/tmp目录下,随着linux的定期清理, 这些pid就不见了,当然就无法停止了, 怎么解决呢?在/tmp目录创建或者修改hadoop-hadoop用户名-d... 阅读全文