摘要： 分布式 分布式的本质就如上期提到的一个概念：分布式系统是若干独立计算机的集合，这些计算机对于用户来说就像是单个相关系统。这就是在说，把廉价的计算机堆到一起，通过程序控制，使其整体用起来像个高性能计算机，目的就是节约成本。 对于分布式爬虫系统来说，假设1台机器能10天爬完一个任务，如果部署10台机器， 阅读全文