2016年6月29日

post请求方式的翻页爬取内容及思考

摘要: 1 #coding=utf-8 2 3 import urllib2 4 import urllib 5 import json 6 9 output = open('huizho.json', 'w') 11 for page in range(1,30): //爬取的页数,从1至29页 12 r 阅读全文

posted @ 2016-06-29 13:01 路之遥_其漫漫 阅读(1693) 评论(0) 推荐(0)

爬虫1:get请求的翻页及思考

摘要: 刚开始接触爬虫,理解还不透彻,说一些初始阶段的想法{1.因为get请求的方式(请求体无数据,不能通过Request.add_data()函数来添加数据,实现对网址翻页;需要直接对网址进行操作来实现翻页功能)2.post请求方式存在数据请求数据(可以通过Request.add_data()函数来添加数 阅读全文

posted @ 2016-06-29 12:03 路之遥_其漫漫 阅读(966) 评论(0) 推荐(0)

导航