摘要: Scrapy框架是一套基于Twisted的异步处理框架,用Python实现的爬虫框架,相对于requests模块和urllib模块,我们只需要定制开发几个模块就可以轻松的实现一个爬虫,用来抓取网页内容以及各种图片,适合爬取大量的数据,也是我们学习爬虫必须掌握的技能。 阅读全文
posted @ 2020-04-16 12:05 merlin& 阅读(681) 评论(5) 推荐(1) 编辑