会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
Yukio
博客园
首页
新随笔
联系
订阅
管理
2025年3月1日
爬虫随笔(五) base64
摘要: 声明 本账号中的所有内容仅供学习交流使用,不用于其他任何目的,不提供完整代码,抓包内容、敏感网址、数据接口等均已做脱敏处理,严禁,用于商业用途和非法用途,否则有此产生的一切后果均与作者无关! base64 介绍 base64由26个大小写字母以及0-9数字还有+,/两个字符构成(26*2+10+2)
阅读全文
posted @ 2025-03-01 10:38 Liyukio
阅读(8)
评论(0)
推荐(0)
2025年2月23日
爬虫随笔(四) scrapy
摘要: 声明 本账号中的所有内容仅供学习交流使用,不用于其他任何目的,不提供完整代码,抓包内容、敏感网址、数据接口等均已做脱敏处理,严禁,用于商业用途和非法用途,否则有此产生的一切后果均与作者无关! scrapy 在使用scrapy前准备工作,首先在pycharm中运行 pip install scrapy
阅读全文
posted @ 2025-02-23 15:26 Liyukio
阅读(12)
评论(0)
推荐(0)
2025年2月18日
爬虫随笔(三) 并发并行协程
摘要: 声明 本账号中的所有内容仅供学习交流使用,不用于其他任何目的,不提供完整代码,抓包内容、敏感网址、数据接口等均已做脱敏处理,严禁,用于商业用途和非法用途,否则有此产生的一切后果均与作者无关! 性能优化 在使用爬虫获取内容时,我们发现,有些网站运行效率特别特别低,怎么提高效率呢?下面给出三个方法,并发
阅读全文
posted @ 2025-02-18 20:31 Liyukio
阅读(14)
评论(0)
推荐(0)
2025年2月10日
爬虫随笔(二) hook
摘要: 各类常用hook 根据特定情况修改使用 hook eval 替换js中的所有eval (function(){ var _eval = eval eval = function(src ){ console.log('eval 截断开始') debugger _eval.apply(this,src
阅读全文
posted @ 2025-02-10 12:28 Liyukio
阅读(27)
评论(0)
推荐(0)
2025年2月6日
爬虫随笔(一)某网站实战
摘要: 爬虫随笔,某牛 前几天一直在看js逆向,现在分享一下本人近期学习记录 首先分享一个网站,这个网站可以获得request所需要的header和cookie https://curlconverter.com/ 爬取网站就不挂了 简单观察发现,该网站是滑动加载,我们可以在滑动加载时获得我们所需要的接口,
阅读全文
posted @ 2025-02-06 18:57 Liyukio
阅读(40)
评论(0)
推荐(0)
2025年1月23日
从0开始的爬虫之旅(day1/2/3)
摘要: import requests import bs4 def getHTMLText(url): try: r = requests.get(url, timeout=30) r.raise_for_status() r.encoding = r.apparent_encoding return r
阅读全文
posted @ 2025-01-23 21:00 Liyukio
阅读(7)
评论(0)
推荐(0)
2025年1月16日
从零开始的python之旅(day5)
摘要: 从零开始的python之旅(day5) 今天主要学的还是,文件的处理以及字典的运用 addressBook from email.quoprimime import decode def main(): file2 = open('EmailAddressBook.txt','r',encoding
阅读全文
posted @ 2025-01-16 21:32 Liyukio
阅读(8)
评论(0)
推荐(0)
从零开始的python之旅(day4)
摘要: 从零开始的python之旅(day4) 昨天博客园好像崩了,所以昨天晚上没写,就挪到今天来补了,昨天主要是文件操作,话不多说,上代码 addressBook def main(): file1 = open('TeleAddressBook.txt','rb') file2 = open('Emai
阅读全文
posted @ 2025-01-16 21:06 Liyukio
阅读(10)
评论(0)
推荐(0)
2025年1月14日
从零开始的python之旅(day3)
摘要: 从零开始的python之旅(day3) 越学python越觉得其功能丰富,而且相对于c语言来说,python可能更适合新手入门,两个都是相通的,看自己对哪方面感兴趣吧 先让我们来对昨天作业收一下尾 BMI x = float(input('请输入体重(kg)\n')) y = float(input
阅读全文
posted @ 2025-01-14 21:45 Liyukio
阅读(7)
评论(0)
推荐(0)
2025年1月13日
从零开始的python之旅(day2)
摘要: 从零开始的python之旅(day2) 今天主要学数据类型,类型处理方式和循环以及异常处理(当然还有数学。目前学到现在,我感觉python和c语言最大的区别就是,python更更更方便了,主要是前人栽树后人乘凉了,特别是对于元组类型和列表类型以及字符串处理中,python和c语言有相似,但是pyth
阅读全文
posted @ 2025-01-13 21:19 Liyukio
阅读(8)
评论(0)
推荐(0)
下一页
公告