python爬虫之入门

1、数据获取：公司数据、第三方平台数据、政府网站数据、爬虫数据

2、爬虫分类：聚焦爬虫和通用爬虫（我觉得也可以分成 app爬虫与经典爬虫+js）

3、通用爬虫：url --》数据存储--》预处理--》提供检索服务（这个不是我此次学习得目标)

4、聚焦爬虫 --->url list --->响应 ---->提取----->入库

5、http协议 与https协议 这个自己去了解吧,URL:协议://host(服务器地址)/path(资源路径)/参数/锚点

6、urllib.request 其实也挺好用 但此次课程主要使用request 想学习 urllib可以移步到这个地址 看看尚硅谷的爬虫讲解https://www.bilibili.com/video/BV1Db4y1m7Ho?spm_id_from=333.999.0.0