2021年1月30日
爬虫 爬取多页数据
摘要： 最近在写一个简单的爬虫,最开始使用的是BS4工具,但是后面接触到xpath,觉得这个比较适合我哈哈. 然后用xpath又重新写了一遍,其中让我困扰的还是多页爬取,ip老是被封. 网上找了很多方法,大多数都是说要建立一个ip池,循环爬取多页数据的时候,就换ip这样就不会被封了. 然后代理ip有两种,一 阅读全文
posted @ 2021-01-30 16:14 Brice_codes 阅读(945) 评论(0) 推荐(0)