2019年10月23日
scrapy创建爬虫项目
摘要： 1. 创建项目: scrapy startproject 项目名 2. 创建爬虫: cd 项目名 scrapy genspider 爬虫名 爬虫起始url 3. 启动爬虫: scrapy crawl 爬虫名 4. 启动爬虫并保存日志: scrapy crawl 爬虫名 -s LOG_FILE=日志名 阅读全文
posted @ 2019-10-23 13:44 爱洗澡的猫妹 阅读(177) 评论(0) 推荐(0)
scrapy安装
摘要： 1. 安装python3.6并设置环境变量, easy,略. 2. 在 https://www.lfd.uci.edu/~gohlke/pythonlibs/ 下找到Twisted‑17.9.0‑cp36‑cp36m‑win_amd64.whl (注意系统和安装python的位数) 并下载. 3. 阅读全文
posted @ 2019-10-23 13:44 爱洗澡的猫妹 阅读(255) 评论(0) 推荐(0)