摘要：
1.完成函数模块——得到与i个指定url的网页内容 2.主函数中调用，可以实现一个网页的爬取与显示 3.用循环完成调用获取页面信息10次 阅读全文
posted @ 2020-11-14 18:28
猫耳朵白
阅读(268)
评论(0)
推荐(0)
摘要：
1.获取get请求 2.获取post请求 3.超时处理 4.request方法拿到网页信息 5.避免被发现是爬虫，需要对发送的信息进行伪装 6.避免被豆瓣网发现是爬虫进行的伪装 阅读全文
posted @ 2020-11-14 16:32
猫耳朵白
阅读(105)
评论(0)
推荐(0)
摘要：
阅读全文
posted @ 2020-11-14 15:16
猫耳朵白
阅读(110)
评论(0)
推荐(0)
摘要：
分页和网址链接之间的关系：start=29，页面就会展示第30条开始的25条记录，filter=表示没有过滤器。 爬虫就是模仿人工在谷歌浏览器中使用Fn+F12查看源代码，用左上角小箭头点击需要爬取字段并且复制的过程。 Network是浏览器向服务器发送请求的日志记录。点击小红点可以使其停止记录，方 阅读全文
posted @ 2020-11-14 10:58
猫耳朵白
阅读(184)
评论(0)
推荐(0)
摘要：
以任务的形式完成剩下的学习 https:s表示加密的访问方式 阅读全文
posted @ 2020-11-14 09:17
猫耳朵白
阅读(278)
评论(0)
推荐(0)
浙公网安备 33010602011771号