会员
周边
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
首页
新随笔
联系
管理
1
2
3
4
5
···
13
下一页
2024年10月31日
记录分享一些大数据业务场景
摘要: 问题一 数据集A:大小8位数,千万量级,含品牌名字段 A.a 数据集B:大小9位数,过亿量级,含店铺名字段 B.b 现在需要将数据集A与数据集B进行关联,即非等值连接,连接条件为: A.a in B.b 难点: 在小量级数据时,我们可以直接 A outerjoin B,再做filter。但此时如果此
阅读全文
posted @ 2024-10-31 20:22 anyiya
阅读(58)
评论(0)
推荐(0)
2024年9月12日
js代理函数
摘要: const hook = true, compress = true delete process delete global delete require delete module delete Buffer delete __dirname delete __file__ const hook
阅读全文
posted @ 2024-09-12 09:24 anyiya
阅读(40)
评论(0)
推荐(0)
2024年6月16日
入门反爬攻坚考试
摘要: 第一题 打开页面 https://www.aqistudy.cn/ 实现接口 https://www.aqistudy.cn/apinew/aqistudyapi.php 的正常请求并获取明文响应 分析 开着 F12 进页面 遇到无限debugger 一个 never pause here 下去 关
阅读全文
posted @ 2024-06-16 23:14 anyiya
阅读(199)
评论(0)
推荐(0)
2024年5月18日
python-pdf2image
摘要: 关于使用python将pdf转图片,网上大部分教程在讲pdf2image包 https://pypi.org/project/pdf2image/ 它需要用到一个poppler的程序,但是给的下载链接都过期了,去github下载最新项目发现路径下只有Library、share https://gh.
阅读全文
posted @ 2024-05-18 09:45 anyiya
阅读(369)
评论(0)
推荐(0)
2024年4月15日
Windows窗口句柄监控
摘要: 我说想要一段实现了 当发现windows桌面上冒出新窗口就截图保存的功能,AI写的,测了下能用。 # pip install pyautogui pywin32 import time import win32gui import pyautogui def capture_window_scree
阅读全文
posted @ 2024-04-15 15:39 anyiya
阅读(72)
评论(0)
推荐(0)
2024年4月11日
json list to excel
摘要: 每次从数据库导出数据交付产品的时候常需要把json拍成excel """ json_to_excel.py ~~~~~~~ json文件转换为excel文件(xlsx) 注:最多容纳1048576行数据 """ import os import sys import json import open
阅读全文
posted @ 2024-04-11 19:55 anyiya
阅读(36)
评论(0)
推荐(0)
2024年3月8日
问题修复:部分网络不通
摘要: 问题: 连接上WIFI后,能上网。但是很多网站打不开,比如bing、Microsoft Store、Github 并且网络连接一直显示断网的小地球。 另一台电脑连接相同网络,可以打开上述网站。排除网络问题。 尝试更换浏览器,并且Microsoft Store也无法访问,排除浏览器问题。 Nslook
阅读全文
posted @ 2024-03-08 16:20 anyiya
阅读(1457)
评论(0)
推荐(0)
2024年1月3日
一个md5加密
摘要: 这是这次的目标兄弟,可以发现它的请求中含有一个32位hash。 哈希不可逆,它不知道你算之前是什么。但经过一番测试,得出这个值必须验、并且其中含有时间戳,页码等信息。payload中的signature不是一个常见的字段,大胆点,我们直接搜它打断点。 很顺利,其没有被混淆,搜到了,并且一看我们就可以
阅读全文
posted @ 2024-01-03 00:03 anyiya
阅读(31)
评论(0)
推荐(0)
2024年1月2日
一个简单js加密
摘要: 页面上有这样的一个联系方式,需要点击"点击查看"之后才能获取到脱敏后的联系方式。 与页面交互前,使用DevTools进行各种搜索与Network抓包,找不到隐藏有脱敏前的完整数据。 一般遇到这种情况我们会首先排查,数据是否是通过接口触发后返回。但遗憾的是,交互过程只抓到请求一个看起来无关的接口。 那
阅读全文
posted @ 2024-01-02 23:35 anyiya
阅读(49)
评论(0)
推荐(0)
2023年12月11日
Python避免request时payload中的汉字被转为unicode编码
摘要: 一个请求,copy bash过来可以直接运行,转为python之后就返回入参错误。通过fiddler抓包对比两个请求的不同...payload中汉字被编码了。 # raw response = requests.post(url, cookies=cookies, proxies = proxies
阅读全文
posted @ 2023-12-11 20:19 anyiya
阅读(14)
评论(0)
推荐(0)
1
2
3
4
5
···
13
下一页
公告