Fork me on GitHub
听雨轩
生命易破碎,梦想只争朝夕!
01 2016 档案
开发环境解决 kafka Failed to send messages after 3 tries
摘要:新建了一个kafka集群,在window下写了一个简单的producer做测试,结果遇到了消息发送失败的问题,代码如下: Properties props = new Properties(); props.put("metadata.broker.list", "192.168.1.107:6667"); props.put("serializer.... 阅读全文
posted @ 2016-01-30 23:33 流水殇 阅读(6113) 评论(0) 推荐(0)
YARN中用的作业调度算法:DRF(Dominant Resource Fairness)
摘要:在Mesos和YARN中,都用到了dominant resource fairness算法(DRF),它不同于hadoop基于slot-based实现的fair scheduler和capacity scheduler,论文阅读:Dominant Resource Fairness: Fair Allocation of Multiple Resource Types 。考虑在一个包括多... 阅读全文
posted @ 2016-01-17 15:45 流水殇 阅读(4852) 评论(0) 推荐(0)