2020年1月14日

GIL锁的理解
摘要： 一、什么是GIL锁 GIL锁的英文全称：Global Interpreter Lock ，中文意思是：全局解释器锁。由于全局解释器锁的存在，在同一时间内，python解释器只能运行一个线程的代码，这大大影响了python多线程的性能。而这个解释器锁由于历史原因，现在几乎无法消除。 二、Python语 阅读全文
posted @ 2020-01-14 21:24 异步非阻塞 阅读(782) 评论(0) 推荐(0)
 
CrawlSpider
摘要： CrawlSpider 它就是一个类，是scrapy.Spider的一个子类(派生类) 功能： 非常强大 很方便的实现全站数据的爬取 两个属性(对象) 链接提取器 如何进行链接的提取 由开发人员制定相关规则 通过相应的规则进行链接的提取 去哪进行链接的提取 就是在页面(起始URL)中提取 规则解析器 阅读全文
posted @ 2020-01-14 19:13 异步非阻塞 阅读(113) 评论(0) 推荐(0)