摘要:
# -*- coding: utf-8 -*- import scrapy from scrapy.http import Request # 我们如果要模拟登陆,就必须要拿到cookie # response里面有url,text等等,但遗憾的是不想requests,可以直接拿到cookie # 阅读全文
posted @ 2018-07-11 14:34
爬上墙头
阅读(285)
评论(0)
推荐(0)
摘要:
通过架设flask或django web服务器,同时后台采用requests和bs4模块来爬取web微信程序相关信息。 在代码过程中遇到一些问题,1、需要认真分析网络请求包。 2、cookies 在获取收发信息时需要携带 3、SyncKey等相关信息在checklogin时就已经返回了,一定要仔细分 阅读全文
posted @ 2018-07-09 09:15
爬上墙头
阅读(245)
评论(0)
推荐(0)
摘要:
学习笔记: 通过本章的学习,学习到了requests和BeautifulSoup模块的安装及使用方法。以及爬取给类网站的方法和知识点。 1、requests和BeautifulSoup 安装 pip install requests...... 2、使用 import requestsfrom bs 阅读全文
posted @ 2018-07-04 14:13
爬上墙头
阅读(638)
评论(0)
推荐(0)
浙公网安备 33010602011771号