摘要: 1.Scrapy是什么 Scrapy是基于twisted的爬虫框架,用户定制开发几个模块就可以实现爬虫 2.Scrapy的优势 没有Scrapy要自己手写爬虫的时候,我们要用Urlib或Requests库发送请求、封装http头部信息类、多线程、封装代理类、封装去重类、封装数据存储类、封装去重类、封 阅读全文
posted @ 2018-11-26 16:32 Rest探路者 阅读(629) 评论(0) 推荐(0)
摘要: Python27和Python37环境的配置 设置环境变量 我的电脑右键属性-高级系统属性-环境变量 选择系统变量中的Path,双击打开 加入你的Python安装路径 把C:\Python27目录下的Python.exe修改成Python27.exe 再把C:\Python36目录下的Python. 阅读全文
posted @ 2018-11-26 11:38 Rest探路者 阅读(2299) 评论(0) 推荐(0)
levels of contents