2018年5月12日
Scrapy进阶
摘要： 当我们使用scrapy框架爬取网站的时候，我们会有一个入口的url，一个名为start_urls,我们爬取的第一个网页是从这一开始的。 需求： 现在我们有一个这样的需求，比如说我们对起始的URL有一个相对应的处理函数，对后面的爬取的url又要进行一个新的处理那么我们需要两个处理函数。 如果我们想对起 阅读全文
posted @ 2018-05-12 14:18 沈俊杰 阅读(785) 评论(0) 推荐(0)