摘要: 爬虫目的:爬取拉勾网上数据分析岗的数据,以便分析当前数据分析岗的需求现状。 爬虫实现的功能:根据城市名称、岗位名称关键字,即可爬取拉勾网上所需的数据信息。 爬虫的主要模块: 主函数与信息存储模块main.py 网页下载模块https.py 网页解析模块parse.py IP代理池setting.py 阅读全文
posted @ 2018-07-03 20:37 yimengtianya1 阅读(2047) 评论(1) 推荐(0) 编辑