2021年9月26日
爬取链家及汽车之家数据
摘要： 爬取链家数据 先观察网页源码加载方式,为直接加载 再将需要的数据条件写入excel表格内 通过观察网页源码 需要的数据都在这里 那么接下来就是通过bs4模块筛选数据 通过先整体后局部 我们需要获取ul class='sellListContent'内部的li标签 再通过for循环 循环获取索要的内容 阅读全文
posted @ 2021-09-26 15:24 查无此人cxc 阅读(111) 评论(0) 推荐(0)
爬取梨视频网站详细过程
摘要： 爬取娱乐分类视频为例: https://www.pearvideo.com/category_4 打开网页后观察网页将滚轮条下拉后网站会自动加载 通过检查网页发现每次动态加载一次都会网该网站发送请求 https://www.pearvideo.com/category_loading.jsp?req 阅读全文
posted @ 2021-09-26 13:09 查无此人cxc 阅读(444) 评论(0) 推荐(0)