会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
欢迎来到小小の蜗牛的博客
博客园首页
我的首页
百度一下
小小の蜗牛
博客园
首页
新随笔
联系
订阅
管理
2020年7月9日
学习爬虫,requests、BeautifulSoup爬取电影天堂所有类别电影下载链接,存放到数据库
摘要: 学习爬虫知识,拿电影天堂练习一下,新手代码写的不够优雅,也还没有优化,请看官大佬们见谅 爬虫会对目标站点造成一定的压力,请不要滥用! 1、分析网页的 URL 的组成结构,主要关注两方面,一是如何切换选择的电影类型,二是网页如何翻页的。 url上的数值和类别是对应的 ,对应关系为: self.movi
阅读全文
posted @ 2020-07-09 11:22 小小の蜗牛
阅读(1466)
评论(0)
推荐(0)