随笔分类 -  python 爬虫

爬虫 scrapy 笔记
摘要：scrapy 基础 1、 创建一个spider项目 a) Scrapy startproject project_name [project_dir] b) Cd project 进入项目 2、 命令： a) Global commands: i. startproject 创建项目 ii. gen 阅读全文

posted @ 2019-03-04 10:20 天下无槛，不服就干 阅读(229) 评论(0) 推荐(0)

生产者与消费者+Queue（线程安全）
摘要：注意： 如果使用threading.Lock(),或者threading.Condition(),都是线程不安全的，它们都是锁，共同方法（lock.acquire(),lock.release()），只不过Condition（）有多了几个方法，wait（）、notify（）、notify_all() 阅读全文

posted @ 2019-01-23 09:51 天下无槛，不服就干 阅读(273) 评论(1) 推荐(0)

导航