[置顶] 莫莫铺子数据爬取
摘要： 1. python部分 莫莫铺子.py # -*- coding:utf-8 -*- # @Time : 2024/4/15 23:12 # @Author : 快乐的小猴子 # @Version : # @Function : import subprocess from functools im 阅读全文
posted @ 2024-04-22 22:26 生而自由爱而无畏 阅读(1) 评论(0) 推荐(0)
[置顶] 海南免税商城数据爬取（破解滑块验证码）
摘要： 1. python部分 main.py # -*- coding:utf-8 -*- # @Time : 2024/4/15 21:24 # @Author : 快乐的小猴子 # @Version : # @Function : import subprocess from functools im 阅读全文
posted @ 2024-04-22 22:26 生而自由爱而无畏 阅读(2) 评论(0) 推荐(0)
[置顶] 网易云音乐音乐下载
摘要： 1. python部分 网易云音乐.py： # -*- coding:utf-8 -*- # @Time : 2024/4/15 19:30 # @Author : 快乐的小猴子 # @Version : # @Function : import subprocess from functools 阅读全文
posted @ 2024-04-15 21:05 生而自由爱而无畏 阅读(2) 评论(0) 推荐(0)
[置顶] 数据解析之XPATH
摘要： 数据解析之XPATH 1、xpath安装与使用 安装 安装lxml库 pip install lxml -i pip源 2、解析流程与使用 解析流程 实例化一个etree的对象，把即将被解析的页面源码加载到该对象 调用该对象的xpath方法结合着不同形式的xpath表达进行标签定位和数据提取 使用 阅读全文
posted @ 2023-10-09 09:30 生而自由爱而无畏 阅读(42) 评论(0) 推荐(0)
[置顶] 数据解析之re正则表达式
摘要： 数据解析之re正则表达式 1. 正则基础 1.1 为什么使用正则 需求 判断一个字符串是否是手机号 解决 编写一个函数，给函数一个字符串，如果是手机号则返回True，否则返回False 代码 def isPhone(phone): # 长度为11 # 全部都是数字字符 # 以1开头 pass if 阅读全文
posted @ 2023-10-08 17:56 生而自由爱而无畏 阅读(190) 评论(0) 推荐(0)
[置顶] MD5算法
摘要： # MD5算法 在我们进行js逆向的时候. 总会遇见一些我们人类无法直接能理解的东西出现. 此时你看到的大多数是被加密过的密文. MD5是一个非常常见的摘要(hash)逻辑. 其特点就是小巧. 速度快. 极难被破解. 所以, md5依然是国内非常多的互联网公司选择的密码摘要算法. 1. 这玩意不可逆 阅读全文
posted @ 2023-10-08 09:39 生而自由爱而无畏 阅读(105) 评论(0) 推荐(0)
2025年5月12日
多进程
摘要： 多进程 一、多任务原理 概念 现代操作系统比如Mac OS X，UNIX，Linux，Windows等，都是支持“多任务”的操作系统 什么叫多任务？ 就是操作系统可以同时运行多个任务 单核CPU实现多任务原理 操作系统轮流让各个任务交替执行，QQ执行2us（微秒），切换到微信，在执行2us，再切换到 阅读全文
posted @ 2025-05-12 18:44 生而自由爱而无畏 阅读(4) 评论(0) 推荐(0)
Mongodb数据库
摘要： NoSQL Mongodb 下载mongodb的版本，两点注意 根据业界规则，偶数为稳定版，如1.6.X，奇数为开发版，如1.7.X 32bit的mongodb最大只能存放2G的数据，64bit就没有限制 性能 BSON格式的编码和解码都是非常快速的。它使用了C风格的数据表现形式，这样在各种语言中都 阅读全文
posted @ 2025-05-12 17:45 生而自由爱而无畏 阅读(20) 评论(0) 推荐(0)
Redis数据库
摘要： Redis数据库 Redis 简介 Redis是完全开源免费的，遵守BSD协议，是一个高性能的key-value数据库。 Redis与其他 key- value 缓存产品有以下三个特点： Redis支持数据的持久化，可以将内存中的数据保存在磁盘中，重启的时候可以再次加载进行使用。 Redis不仅仅支 阅读全文
posted @ 2025-05-12 16:56 生而自由爱而无畏 阅读(6) 评论(0) 推荐(0)
MySQL数据库
摘要： MySQL数据库 一、MySQL数据库的介绍 1、发展史 1996年，MySQL 1.0 2008年1月16号 Sun公司收购MySQL。 2009年4月20，Oracle收购Sun公司。 MySQL是一种开放源代码的关系型数据库管理系统（RDBMS），使用最常用的数据库管理语言--结构化查询语言（ 阅读全文
posted @ 2025-05-12 16:47 生而自由爱而无畏 阅读(44) 评论(0) 推荐(0)
2025年5月10日
爬虫入门（关于cookie和session）
摘要： Cookie 当我们在淘宝上进行登录，购买东西的时候，用户登录的状态是必须要有的。工作当中是需要这个状态的，但是http协议是不负责维持这个状态的。所以，浏览器就想了个办法，搞了一个本地化存储，来保持这个状态。本地保存的这个东西，每次发送请求的时候，浏览器会自动携带该信息。这个本地化的存储，我们就叫 阅读全文
posted @ 2025-05-10 08:33 生而自由爱而无畏 阅读(6) 评论(0) 推荐(0)
爬虫入门（urllib与requests）
摘要： urllib与requests 一、urllib的学习 学习目标 了解urllib的基本使用 1、urllib介绍 除了requests模块可以发送请求之外, urllib模块也可以实现请求的发送,只是操作方法略有不同! urllib在python中分为urllib和urllib2，在python3 阅读全文
posted @ 2025-05-10 08:04 生而自由爱而无畏 阅读(117) 评论(0) 推荐(0)
爬虫入门（关于浏览器）
摘要： 一、web请求全过程剖析 我们浏览器在输入完网址到我们看到网页的整体内容, 这个过程中究竟发生了些什么? 我们看一下一个浏览器请求的全过程 接下来就是一个比较重要的事情了. 所有的数据都在页面源代码里么? 非也~ 这里要介绍一个新的概念 那就是页面渲染数据的过程, 我们常见的页面渲染过程有两种, 服 阅读全文
posted @ 2025-05-10 07:31 生而自由爱而无畏 阅读(7) 评论(0) 推荐(0)
数据解析
摘要： 数据解析 本文章中, 介绍三种解析方式: re解析 (必修) bs4解析 xpath解析(必修) 以上三种方案都可以从HTML中提取到你需要的内容, 这三种方式可以混合进行使用, 完全以结果做导向, 只要能拿到你想要的数据. 用什么方案并不重要. 当你掌握了这些之后. 再考虑性能的问题. 一. re 阅读全文
posted @ 2025-05-10 07:09 生而自由爱而无畏 阅读(12) 评论(0) 推荐(0)
2025年5月9日
使用python实现常用算法
摘要： 加密分类： 1 单向加密：md5，sha1 不可逆，摘要算法 2 对称加密：aes，des 可逆，加密和解密使用同一个秘钥 3 非对称加密：RSA，DSA 可逆，加密用公钥，解密用私钥 4 补充算法：base64 不是加密，只是编码 1 md5 import hashlib m = hashlib. 阅读全文
posted @ 2025-05-09 11:04 生而自由爱而无畏 阅读(3) 评论(0) 推荐(0)
HOOK框架Frida
摘要： Hook框架Frida Hook 框架是一种技术，用于在运行时拦截和修改应用程序的行为。 通过 Hook，你可以劫持应用程序的方法调用、修改参数、篡改返回值等，以达到对应用程序的修改、增强或调试的目的 # 常见的有： Xposed Framework：Xposed 是一个功能强大的开源 Hook 框 阅读全文
posted @ 2025-05-09 10:55 生而自由爱而无畏 阅读(6) 评论(0) 推荐(0)
下一页