0. 浏览器的使用及接口定位

接口定位

浏览器右键检查,筛选Fetch/HDR,筛选出动态请求,找到与后端交互的接口

分页的动态加载

分页一次性加载

第一次请求的时候就请求到了全部数据,点击分页时,不会发新的请求,而是直接从内存中取,可以用时间切换来重载数据

快速构建简单爬虫代码

配合爬虫代码快速生成网站,会很方便
1.拷贝URL

2.打开代码快速生成网站,粘贴后自动生成爬虫代码

https://curlconverter.com/