随笔分类 - 分布式处理
分布式处理、消息队列、云计算等
摘要:通过thrift远程调用框架,结合hadoop1.x中的thriftfs,编写了一个针对hadoop2.x的thriftfs。本文介绍了程序所需类库(boost、libthrift)的编译、thrift程序开发简单流程,同时提供thriftfs客户端和服务器端的源代码。水平有限,欢迎各位园友指正。
阅读全文
摘要:参考Spark RDD资料,对RDD概念、作用、操作、处理原理等进行了整理。
阅读全文
摘要:消息队列可实现系统的分布式处理;将业务流程解耦,使得业务处理更专一。本文介绍消息队列的基本逻辑、对RocketMQ等的理解;同时分享部分消息队列的资料
阅读全文

浙公网安备 33010602011771号