2018年8月8日
Golang: 并发抓取网页内容
摘要： 在上一篇中，我们根据命令行的 URL 参数输入，抓取对应的网页内容并保存到本地磁盘，今天来记录一下如何利用并发，来抓取多个站点的网页内容。 首先，我们在上一次代码的基础上稍作改造，使它能够获取多个站点的内容。下面代码中，我们首先定义好三个 URL，然后逐个发送网络请求，获取数据并保存，最后统计消耗的 阅读全文
posted @ 2018-08-08 13:01 liuhe688 阅读(1707) 评论(0) 推荐(0) 编辑