2022年1月9日

摘要: 手机爬虫抓包 一、背景 需要获取手机上某些app数据时,无法使用网页分析编写爬虫代码。 使用到的软件有 1、Fiddler,Classic版本即可 2、安卓手机(因为我爬取的是小米社区,ios无法安装)或者夜神模拟器(在电脑上模拟手机的软件) 二、开始配置 2.1 Fiddler配置 安装教程网上都 阅读全文
posted @ 2022-01-09 21:36 Crazyinfo 阅读(615) 评论(0) 推荐(0) 编辑
摘要: Mysql查看进程并结束进程 打开cmd,进入mysql的对应数据库 输入 SHOW PROCESSLIST; 回车后会显示所有的进程,包含进程号、对应的sql语句、表等 输入 kill 进程号; 就可关掉该进程。 阅读全文
posted @ 2022-01-09 14:52 Crazyinfo 阅读(1299) 评论(0) 推荐(0) 编辑
摘要: Mysql爬取数据时,未转义报错 代码信息 for i in range(0,len(records)): author = records[i]['author'] userId = author['userId'] userName = author['name'] postTime = rec 阅读全文
posted @ 2022-01-09 14:52 Crazyinfo 阅读(27) 评论(0) 推荐(0) 编辑
摘要: Mysql增加创建时间和更新时间 这两个字段随着插入的数据而自动进行填充,更新。无需自定义插入 代码 ALTER TABLE 表名 ADD `updateTime` datetime NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP 阅读全文
posted @ 2022-01-09 14:51 Crazyinfo 阅读(128) 评论(0) 推荐(0) 编辑

2021年11月27日

摘要: group by 取时间最近的一条数据 SELECT * FROM (SELECT * FROM nk_bsscore ORDER BY testFinishTime DESC )a GROUP BY userkey 以下写法会报错 SELECT * FROM nk_bsscore ORDER BY 阅读全文
posted @ 2021-11-27 12:02 Crazyinfo 阅读(362) 评论(0) 推荐(0) 编辑
摘要: MySQL查询定义自增序列号 SELECT (@j := @j + 1) as id1,op_rsid,op_stage,op_man,op_result,op_time FROM operate_history,(select @j := 0)b WHERE op_stage='简历推荐' OR 阅读全文
posted @ 2021-11-27 12:01 Crazyinfo 阅读(507) 评论(0) 推荐(0) 编辑

2021年11月26日

摘要: 数据中有表情,传到数据库报错 Incorrect string value: '\xF0\x9F\x8C\x9E\xE5\xAD...' for column 'content' at row 1 需要更改下编码方式 ALTER TABLE `operate_history` MODIFY COLU 阅读全文
posted @ 2021-11-26 21:30 Crazyinfo 阅读(38) 评论(0) 推荐(0) 编辑