随笔分类 -  scrapy

scrapy
摘要:中文文档地址:https://scrapy-chs.readthedocs.io/zh_CN/stable/ 查看所有命令 查看帮助信息 查看版本信息 新建一个工程 构建爬虫genspider(generator spider) 一个工程中可以存在多个spider, 但是名字必须唯一 查看当前项目内 阅读全文
posted @ 2018-08-17 13:30 月河 阅读(117) 评论(0) 推荐(0)
摘要:安装scrapy框架之前,需要安装几个必备库 ps.分享个python库下载地址:https://www.lfd.uci.edu/~gohlke/pythonlibs/ 0、wheel(有了这个库之后可以本地安装pyhton库) 1、lxml 2、pyOpenSSL 3、pywin32 4、twis 阅读全文
posted @ 2018-08-13 14:20 月河 阅读(116) 评论(0) 推荐(0)