摘要: 文件打包 概要 脚本打包exe:win/mac【终端】 qt5,开发桌面应用 打包qt5程序【桌面应用】 1.exe 打包 pip install pyinstaller 注意事项: 支持mac、win(Windows建议使用python3.6.8) 配合虚拟环境打包 Mac系统下: 1、在mac系 阅读全文
posted @ 2023-03-10 16:17 Chimengmeng 阅读(371) 评论(0) 推荐(0)
摘要: 目的要求: 爬取17k小说网,自己书架内的小说并做每一章节的存储 分析思路 1、顺利进入自己的书架 2、爬取到书架里的全部书籍名字及详细链接 3、通过访问书籍详细链接,获取每一章的链接 4、访问每一章的链接获取到章节标题和内容 5、打开文件进行存储 具体流程 1、分析目标网址 首先分析目标网址:ht 阅读全文
posted @ 2023-03-09 15:44 Chimengmeng 阅读(1854) 评论(0) 推荐(0)
摘要: 代理IP **代理IP:**反反爬使用代理ip是非常必要的一种反反爬的方式,但是即使使用了代理ip,对方服务器任然会有很多的方式来检测我们是否是一个爬虫,比如:一段时间内,检测IP访问的频率,访问太多频繁会屏蔽;检查Cookie,User-Agent,Referer等header参数,若没有则屏蔽; 阅读全文
posted @ 2023-03-08 14:51 Chimengmeng 阅读(97) 评论(0) 推荐(0)
摘要: OS模块 (1) 创建文件夹 os.mkdir("我的模块") (2) 路径拼接: os.path.join # path = os.path.join("我的模块", "apple.txt") # print(path) # 我的模块/apple.txt # with open(path, "w" 阅读全文
posted @ 2023-03-08 12:38 Chimengmeng 阅读(28) 评论(0) 推荐(0)
摘要: BS4 【1】简介 简单来说,Beautiful Soup是python的一个库,最主要的功能是从网页抓取数据。官方解释如下: ''' Beautiful Soup提供一些简单的、python式的函数用来处理导航、搜索、修改分析树等功能。 它是一个工具箱,通过解析文档为用户提供需要抓取的数据,因为简 阅读全文
posted @ 2023-03-05 14:11 Chimengmeng 阅读(60) 评论(0) 推荐(0)
摘要: 案例一:彼岸图网4K壁纸 import requests from selenium.webdriver.chrome.service import Service from selenium import webdriver from time import sleep from lxml imp 阅读全文
posted @ 2023-03-03 21:46 Chimengmeng 阅读(60) 评论(0) 推荐(0)
摘要: Cookie 一、什么是cookie? cookie的本质就是一组数据(键值对的形式存在) 是由服务器创建,返回给客户端,最终会保存在客户端浏览器中。 如果客户端保存了cookie,则下次再次访问该服务器,就会携带cookie进行网络访问。 典型的案例:网站的免密登录 二、Cookie的玩法 1、构 阅读全文
posted @ 2023-03-03 17:39 Chimengmeng 阅读(101) 评论(0) 推荐(0)
摘要: 请求参数与请求体参数 一、什么是params参数(请求参数) get 方法是可以向服务器发送信息的,除了可以请求需要的页面之外,也可以发送我们指定的内容,这就是通过 params 参数实现的 request库 get方法 params 这个 params 参数是字典结构,前面说到的 headers 阅读全文
posted @ 2023-03-03 17:37 Chimengmeng 阅读(114) 评论(0) 推荐(0)
摘要: Referer 一、referer是什么: 图片防盗链的技术应该还有其他的,目前了解到的是浏览器的referer,其实这是错误的拼写,正确是应该是referrer。不过现在可以看到Chrome的开发者工具里,还是显示的是前者,拼写不重要,重要的是理解它的含义。 简单来讲,referer的作用就是记录 阅读全文
posted @ 2023-03-03 17:36 Chimengmeng 阅读(125) 评论(0) 推荐(0)
摘要: 完美世界逆向分析 url:https://passport.wanmei.com/login?location=L3NhZmUv 定位到正确的断点位置 进行js改写操作 断点代码的关键字:setPublicKey,encrpt 通过这两个关键字确定该算法为非对称秘钥加密算法! 注意: e.setPu 阅读全文
posted @ 2023-02-25 13:19 Chimengmeng 阅读(102) 评论(0) 推荐(0)