随笔分类 -  爬虫实例

some example about python spider
摘要:实例网站:微博(https://login.sina.com.cn/sso/prelogin.php) 实例工具:requests 模块:re,io,requests,binascii,base64,json 阅读全文
posted @ 2019-04-18 22:10 人生不易丶岁月静好 阅读(351) 评论(0) 推荐(0)
摘要:实例2:requests获取简书 模块:urllib.request,lxml.etree (xpath) 阅读全文
posted @ 2019-04-18 22:09 人生不易丶岁月静好 阅读(232) 评论(0) 推荐(0)
摘要:实例1:urllib3获取简书首页 模块:re 、urllib.request 最基本的爬虫程序,因为前端存在ajax,所以如果需要全部数据还需模拟ajax,具体详见实例2 阅读全文
posted @ 2019-04-18 22:08 人生不易丶岁月静好 阅读(287) 评论(0) 推荐(0)