摘要: 爬淘宝的商品信息下 (下) 实现定时任务爬取 "上回我们讲到用scrapy爬取淘宝的商品信息" , 今天的任务是实现爬虫的周期作业功能。商品信息的交易量评论数,等等,会处在变动之中,因此需要爬虫能够在每天预设的时间爬取网页。 假设,我们现在的任务是,要爬虫在凌晨3点,也就是 每天的凌晨3:00,(对 阅读全文
posted @ 2017-05-11 14:28 狂徒归来 阅读(714) 评论(1) 推荐(0) 编辑