随笔分类 -  爬虫

爬虫 ==》 同步调用
摘要：爬虫 ==》 同步调用 import requests def parse_page(res): print('PARSE %s' %(len(res))) def get_page(url): print('GET %s' %url) response=requests.get(url) if r 阅读全文
posted @ 2018-01-22 19:07 Aray007 阅读(190) 评论(0) 推荐(0)
asyncio模块
摘要：asyncio模块 阅读全文
posted @ 2018-01-22 19:05 Aray007 阅读(142) 评论(0) 推荐(0)
Requests模块
摘要：Requests模块 1.headers关键字 import requests from urllib.parse import urlencode keyword = input('>>:').strip() res = urlencode({'wd': keyword}, encoding='u 阅读全文
posted @ 2018-01-16 15:40 Aray007 阅读(143) 评论(0) 推荐(0)