Outback

摘要： 为了爬取拉钩,今天学习了selenum的使用技巧. from scrapy.http import HtmlResponse class JSPageMiddleware(object): def process_request(self, request, spider): if spider.n 阅读全文

摘要： 今天准备用scrapy来爬取拉钩招聘信息,拉钩要等录后才能爬取,所以先写了一个模拟登录的程序,代码如下: 断点打在checkLogin,经过调试总是出现,请勿重复提交,请刷新页面重试这样的的提示 这样的提示,说明登录没有成功,我排查原因,debug了几十次,还是不行,一直提示这样的错误,我也是没有办 阅读全文