会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
导航
博客园
首页
新随笔
联系
订阅
管理
公告
2018年11月7日
简单说下做天猫爬虫的思路
摘要: 1、需要用代理 搞个代理ip池动态切换,预防被反爬虫机制毙掉ip 获取代理ip的方式很多,我主要通过爬 http://www.xicidaili.com/nn/网站,抓取ip后一个个检查是否有效,然后记录在本地文本,使用时读取文本这种方法方法有点笨,不过写起来简单 注意天猫要用HTTPS代理,不是H
阅读全文
posted @ 2018-11-07 17:09 slqt
阅读(2246)
评论(0)
推荐(0)