摘要：
爬虫&APP逆向开发课程 讲师：武沛齐 欢迎各位小伙伴，接下来正式进入我们第二阶段，逆向开发课程。 第一阶段：爬虫开发 （小鹅通 + 录播） 第二阶段：安卓APP逆向（腾讯会议 + 录制 + 转码MP4 + 运营 + 路飞学城） 课堂随笔 Hook框架 1.逆向APP - app安装到你手机 - 运 阅读全文
posted @ 2023-04-09 19:12
凫弥
阅读(431)
评论(0)
推荐(0)
摘要：
回顾基础内容 回顾基础内容 浏览器. 简单聊聊浏览器工作原理： 浏览器在加载页面源代码的时候. 会遇到一些特殊的东西 1. 图片<img> 2. css样式<link href="xxxxx.css"> 3. js文件<script src="xxxxx.js> 4. js代码片段 <script> 阅读全文
posted @ 2023-04-08 09:29
凫弥
阅读(131)
评论(0)
推荐(0)
摘要：
一般用于股票等类型网站 http协议 import requests # http协议..... url = "http://43.push2.eastmoney.com/api/qt/stock/trends2/sse?fields1=f1,f2,f3,f4,f5,f6,f7,f8,f9,f10, 阅读全文
posted @ 2023-03-26 19:40
凫弥
阅读(465)
评论(0)
推荐(0)
摘要：
python基础内容回顾 HTML+CSS 正则解析 bs4解析 xpath解析 urllib与requests 多进程 多线程 协程 抓取m3u8视频 selenium使用 MySQL数据库 MongoDB数据库 Redis数据库 面向对象基础 IP代理池 Scrapy框架 Scrapy-模拟登陆 阅读全文
posted @ 2023-03-25 10:45
凫弥
阅读(208)
评论(0)
推荐(0)
摘要：
scrapy的crawlspider爬虫 学习目标： 了解 crawlspider的作用 应用 crawlspider爬虫创建的方法 应用 crawlspider中rules的使用 1、crawlspider是什么 回顾之前的代码中，我们有很大一部分时间在寻找下一页的url地址或者是内容的url地址 阅读全文
posted @ 2023-03-25 10:42
凫弥
阅读(224)
评论(0)
推荐(0)
摘要：
Scrapy中间件 学习目标： 应用 scrapy中使用中间件使用随机UA的方法 了解 scrapy中使用代理ip的的方法 1、scrapy中间件的分类和作用 1.1 scrapy中间件的分类 根据scrapy运行流程中所在位置不同分为： 下载中间件 爬虫中间件 1.2 scrapy中间的作用 主要 阅读全文
posted @ 2023-03-25 10:26
凫弥
阅读(117)
评论(0)
推荐(0)
摘要：
scrapy模拟登陆&分页 一、模拟登陆 学习目标： 应用 scrapy直接携带cookie模拟登陆的方法 应用 scrapy.FormRequest()发送post请求进行登陆 1、回顾之前的模拟登陆的方法 1.1 requests模块是如何实现模拟登陆的？ 直接携带cookies请求页面 找ur 阅读全文
posted @ 2023-03-25 10:04
凫弥
阅读(380)
评论(0)
推荐(0)
摘要：
Redis数据库 Redis 简介 Redis是完全开源免费的，遵守BSD协议，是一个高性能的key-value数据库。 Redis与其他 key- value 缓存产品有以下三个特点： Redis支持数据的持久化，可以将内存中的数据保存在磁盘中，重启的时候可以再次加载进行使用。 Redis不仅仅支 阅读全文
posted @ 2023-03-25 09:37
凫弥
阅读(400)
评论(0)
推荐(0)
摘要：
MySQL数据库 一、MySQL数据库的介绍 1、发展史 1996年，MySQL 1.0 2008年1月16号 Sun公司收购MySQL。 2009年4月20，Oracle收购Sun公司。 MySQL是一种开放源代码的关系型数据库管理系统（RDBMS），使用最常用的数据库管理语言--结构化查询语言（ 阅读全文
posted @ 2023-03-25 09:22
凫弥
阅读(210)
评论(0)
推荐(0)
摘要：
selenium 一、前期准备 1、概述 selenium本身是一个自动化测试工具。它可以让python代码调用浏览器。并获取到浏览器中加载的各种资源。 我们可以利用selenium提供的各项功能。 帮助我们完成数据的抓取。 2、学习目标 掌握 selenium发送请求，加载网页的方法 掌握 sel 阅读全文
posted @ 2023-03-25 08:57
凫弥
阅读(225)
评论(0)
推荐(0)
浙公网安备 33010602011771号