2019年4月24日
爬虫框架之Scrapy（二）
摘要： 递归解析 在前面的例子里只是爬取了糗事百科热门的第一个页面，但是当我们需要爬取更多的页面时，需要对每个页面的url依次发起请求，然后通过解析的方法进行作者和标题的解析。 我们可以构建一个url列表，放进去所有页面的url，但是这样是不推荐的。 我们也可以通过requests的方法来手动解析，然后来使 阅读全文
posted @ 2019-04-24 12:11 噼里巴啦 阅读(216) 评论(0) 推荐(0) 编辑