摘要: 代理检测 目标:检测代理响应速度、稳定性、匿名度、是否在黑(白)名单 1、响应速度可以通过超时请求来过滤 2、匿名度 url = 'http://httpbin.org/get' 如何headers中有"Ngx-Client-Ip": "xxx.xxx.xxx.xxx"或者origin字段中有包含本 阅读全文
posted @ 2020-04-28 14:15 向往前方 阅读(214) 评论(0) 推荐(0) 编辑
摘要: 一、execjs不支持eval函数的运行,需要更换eval为return 二、execjs的call必须调用函数,可以在需要调用的js外添加function run(){} 三、execjs调用的函数内部只能运行一个函数 阅读全文
posted @ 2020-04-28 14:14 向往前方 阅读(187) 评论(0) 推荐(0) 编辑
摘要: 踩过的坑 1、当查询的数据量超过表总量的1/3,则不会使用索引。 --> 使用索引查找一条数据需要执行3此磁盘IO,如果超过1/3则需要执行的磁盘IO总量将大于全表查询执行的磁盘IO总数。 2、使用group by查询时,如何正确的使用索引(参考group by优化) 3、联合索引使用时,第一位的索 阅读全文
posted @ 2020-04-28 13:51 向往前方 阅读(282) 评论(0) 推荐(0) 编辑
摘要: 一、明确需求,通过excel表展示需求数据来核对双方理解是否一致,如下图。 注意:如果需求中有根据时间来拉取数据,一定要明确这个时间所指代的意义。 二、明确接口需要返回的数据结构以及数据字段,如果不清楚后面的业务逻辑具体需求就尽可能全面的返回有用的数据字段。 三、明确接口的安全级别,并发级别,并制定 阅读全文
posted @ 2020-04-28 13:48 向往前方 阅读(259) 评论(0) 推荐(0) 编辑