2019年7月8日
Scrapy爬虫框架与常用命令
摘要： 07.08自我总结 一.Scrapy爬虫框架 大体框架 2个桥梁 二.常用命令 全局命令 startproject 语法: 这个命令是scrapy最为常用的命令之一，它将会在当前目录下创建一个名为 scrapy settings [options] scrapy runspider scrapy s 阅读全文
posted @ 2019-07-08 20:38 小小咸鱼YwY 阅读(2879) 评论(0) 推荐(0)
协程
摘要： 07.08自我总结 一.协程的概念 协程：是单线程下的并发，又称微线程，纤程。英文名Coroutine。是一种用户态的轻量级线程，即协程是由用户程序自己控制调度的。 需要强调的是： 对比操作系统控制线程的切换，用户在单线程内控制协程的切换 优点如下： 缺点如下： 二.协程的应用 1.greenlet 阅读全文
posted @ 2019-07-08 20:18 小小咸鱼YwY 阅读(270) 评论(0) 推荐(0)
爬虫练手,爬取新浪双色彩,信息并进行分析
摘要： 爬虫练手,爬取新浪双色彩,信息并进行分析 阅读全文
posted @ 2019-07-08 18:23 小小咸鱼YwY 阅读(865) 评论(0) 推荐(0)