随笔分类 - Python爬虫案例
学习爬虫的一些案例,快速上手爬虫
摘要:零基础爬取堆糖网图片(二) 多线程版 全文介绍: 接着上篇文章,我们已经实现图片的下载,但是我们发现整个爬取过程中,因为使用了 for循环嵌套 ,导致每次遍历,都会打开文件在关闭,打开文件在关闭(套娃)。所以需要注意for循环的使用,其次下载图片是整个程序中最耗时的,如果需要提升爬取速度,那么我们可
阅读全文
摘要:零基础爬取堆糖网图片(一) 全文介绍: 首先 堆糖网 是一个美图壁纸兴趣社区,有大量的~~美女~~图片 今天我们实现搜索关键字爬取堆糖网上相关的美图。 当然我们还可以实现多线程爬虫,加快爬虫爬取速度 涉及内容: 1. 爬虫基本流程 2. requests库基本使用 3. urllib.parse模块
阅读全文

浙公网安备 33010602011771号