2023年3月16日
1 requests高级用法、2 代理池搭建、3 爬取某视频网站 、4 爬取新闻
摘要： 1 requests高级用法 1.0 解析json # 发送http请求，返回的数据会有xml格式，也有json格式 import requests data = { 'cname': '', 'pid': '', 'keyword': '500', 'pageIndex': 1, 'pageSiz 阅读全文
posted @ 2023-03-16 15:44 DYuH 阅读(57) 评论(0) 推荐(0)
1 爬虫介绍、 2 request模块介绍、 3 request发送get请求 、4 request携带参数 、5 url编码解码、 6 携带请求头 、7 发送post请求,携带数据、 8 自动登录，携带cookie的两种方式、 9 requests.session的使用 、10 补充post请求携带数据编码格式 、11 响应Response对象 、12 编码问题 、13 下载图片，视频
摘要： 1 爬虫介绍 # 爬虫是什么 -爬虫就是程序 》从互联网中，各个网站上，爬取数据[你能浏览的页面才能爬]，做数据清洗，入库 # 爬虫的本质 -模拟方式http请求，获取数据 》入库 -网站 -app：抓包 # 补充：百度其实就是一个大爬虫 -百度爬虫一刻不停的在互联网中爬取各个页面 》爬取完后 》保 阅读全文
posted @ 2023-03-16 15:42 DYuH 阅读(63) 评论(0) 推荐(0)
1 上线架构图 、2 阿里云购买 、3 云服务器安装mysql、4 云服务器安装redis(源码安装) 、5 云服务器安装python3.8（源码安装）、 6 安装uwsgi 、7 安装虚拟环境 、8 安装nginx(源码安装) 、9 路飞前端部署 、10 路飞后端部署、11 路飞后台管理样式处理
摘要： 1 上线架构图 # 服务器，公网ip地址 -云服务器：阿里云，腾讯云 # 上线架构图 2 阿里云购买 # 购买阿里云服务器 -阿里云官网，点选购买 # ssh客户端 -xshell -finalshell：http://www.hostbuf.com/t/988.html -Bash命令 # 配置一 阅读全文
posted @ 2023-03-16 15:40 DYuH 阅读(39) 评论(0) 推荐(0)