摘要:网易考拉近期需要大量java开发,数据挖掘,前端等, 大家可以网站上看好相关岗位, 与我联系. 阅读全文
posted @ 2017-03-15 19:45 东苑草根 阅读 (70) 评论 (0) 编辑
摘要:classpath:xxx.properties 或者接下来就可以在Bean或者XML用{xxx}的方式调用了 阅读全文
posted @ 2015-11-12 09:49 东苑草根 阅读 (57) 评论 (0) 编辑
摘要:本文转载自:http://blog.csdn.net/chjttony/article/details/5927613每次用完每次忘相对与绝对。。。 阅读全文
posted @ 2015-11-12 09:27 东苑草根 阅读 (70) 评论 (0) 编辑
摘要:准备数据 浙江,杭州,300 浙江,宁波,150 浙江,温州,200 浙江,嘉兴,100 江苏,南京,270 江苏,苏州,299 江苏,某市,200 江苏,某某市,100 创建表 CREATE table pcp (province string,city string,people int) ROW FORMAT DELIMITED FIELDS TERMINAT... 阅读全文
posted @ 2015-01-29 16:38 东苑草根 阅读 (10872) 评论 (1) 编辑
摘要:Hadoop服务库与事件库的使用及其工作流程 Hadoop服务库: YARN采用了基于服务的对象管理模型,主要特点有: 被服务化的对象分4个状态:NOTINITED,INITED,STARTED,STOPED 任何服务状态变化都可以触发另外一些动作 可通过组合方式对任意服务进行组合,统一管理 具体类请参见 org.apache.hadoop.service包下.核心接口是Service,抽象实... 阅读全文
posted @ 2014-08-25 17:17 东苑草根 阅读 (957) 评论 (0) 编辑
摘要:Hadoop RPC源码分析 上一篇文章http://www.cnblogs.com/dycg/p/rpc.html讲了Hadoop RPC的使用方法,这一次我们从demo中一层层进行分析。RPC说白了,就3个核心,交互协议、服务端、客户端。在Hadoop RPC(hadoop-common-2.4... 阅读全文
posted @ 2014-08-25 10:18 东苑草根 阅读 (2684) 评论 (0) 编辑
摘要:第一部分: hadoop rpc基础RPC,远程程序调用,分布式计算中C/S模型的一个应用实例。同其他RPC框架一样,Hadoop分为四个部分:序列化层:支持多种框架实现序列化与反序列化函数调用层:利用java反射与动态代理实现网络传输层:基于TCP/IP的Socket机制服务的处理框架:基于Rea... 阅读全文
posted @ 2014-08-23 00:52 东苑草根 阅读 (2195) 评论 (0) 编辑
摘要:Java RMI HelloWorld RMI 远程方法调用. 顾名思义就是可以像调用本地程序方法一样调用远程(其他JVM)的程序方法. 分为3个部分: Stub:中介,代理. 封装了远程对象的调用,客户端需要通过stub与server交流 RemoteServer,:远端服务提供者.也就是RemoteObject Client:客户端 代码示意: RemoteObject, 远... 阅读全文
posted @ 2014-08-20 16:15 东苑草根 阅读 (326) 评论 (1) 编辑
摘要:随着业务的发展, 服务器所在网段/机群不允许kafka继续保留在那, 需要移动到先机器上.哎呀上面是废话,总的说就是: 2台老kafka不要了,数据要迁移到新的2台kafka上面.要求数据不丢失通过查询官网,并无直接切换的命令,当前版本是kafka 0.8.1, 说是0.8.2才提供老机器的退役功能... 阅读全文
posted @ 2014-08-19 16:06 东苑草根 阅读 (8876) 评论 (0) 编辑
摘要:默认配置是将datanode,namenode,jobtracker,tasktracker,secondarynamenode的pid存放在/tmp目录下,随着linux的定期清理, 这些pid就不见了,当然就无法停止了, 怎么解决呢?在/tmp目录创建或者修改hadoop-hadoop用户名-d... 阅读全文
posted @ 2014-08-07 14:03 东苑草根 阅读 (1072) 评论 (0) 编辑
手牵手 一步两步三步 往上爬