摘要: 一 介绍 #介绍:使用requests可以模拟浏览器的请求,比起之前用到的urllib,requests模块的api更加便捷(本质就是封装了urllib3) #注意:requests库发送请求将网页内容下载下来以后,并不会执行js代码,这需要我们自己分析目标站点然后发起新的request请求 #安装 阅读全文
posted @ 2020-07-31 22:11 耗油炒白菜 阅读(267) 评论(0) 推荐(0)
摘要: 爬虫介绍 # 介绍爬虫 2 urilib3(内置,不好用),requests--模拟发送http请求 3 Beautifulsoup解析,xpth解析 4 selenium模块,操作浏览器 5 Mongodb 6 反爬:代理池,cookie池,请求头中:user-agent,refer,js逆向 7 阅读全文
posted @ 2020-07-31 20:22 耗油炒白菜 阅读(175) 评论(0) 推荐(0)
摘要: 1 上线前准备 1.1 前端 上线前配置 settings.js # base_url: 'http://39.99.192.127:8000', // 真实环境:django项目就是跑在8000端口上的 之后编译 # 前端执行 npm run build 把你写的vue代码编译成html,css, 阅读全文
posted @ 2020-07-31 00:50 耗油炒白菜 阅读(319) 评论(0) 推荐(0)