szgzwf

http://www.etsec.com.cn

导航

2012年11月9日 #

Linux curl命令

摘要: 1 常用基本命令 一 抓取页面内容 curl -o test.html http://www.etsec.com.cn //获取百度首页源代码,存入test.html文件 curl -O curl -O http://www.etsec.com.cn/qqt/index.jsp //获取获取特定页面,生成新文件index.jsp 二 模拟请求URL curl -i http://10.2.164.22:8080/testme/servlet/TestServlet //测试url返回包含响应码200 curl -d '<xml><\xml>' http: 阅读全文

posted @ 2012-11-09 16:39 szgzwf 阅读(295) 评论(0) 推荐(0)

Hadoop 公平调度器算法调度解析

摘要: 下面正式介绍公平调度器的层次调度算法,大的思想与Capacity Scheduler类似,首先选择一个pool,然后从该pool中选择一个job,最后从该job中选择一个locality的task。其中,选择pool和job的策略相同,均采用了FairShareComparator比较器对pool或者job进行排序,然后从头到尾扫描队列,选出合适的pool或者job。选择pool时的方法:When we sort pools to choose which ones to schedule next, we place pools below their min share ahead of 阅读全文

posted @ 2012-11-09 16:01 szgzwf 阅读(179) 评论(0) 推荐(0)

胡言乱语--程序员的软技术

摘要: 8、在系统架构中,我们往往会使用一些负载均衡设计,实际上在项目管理中,人力资源的负载均衡一样重要。假如给你一个需要10个人做的大项目和10个人,和给你5个需要2个人做的小项目和10个人,你是愿意选择前者还是愿意选择后者呢?当然,现实情况是往往你没得选择(新团队也许有得选择)。不管这里是否存在线性关系,你只能在资源的现实约束下,尽量平衡每个人的负载。在一个大项目中,需要根据每个人的能力去平衡每个人的负载;在多个小项目之间,需要根据每个项目的重要性去平衡每个人的负载。大项目虽然复杂,但是大家都在一条船上,所谓一损俱损,一荣俱荣。小项目就像大家处在多条船上,有时难免步调不一,甚至互相冲突。因此,人力 阅读全文

posted @ 2012-11-09 15:59 szgzwf 阅读(142) 评论(0) 推荐(0)