随笔分类 -  爬虫

反爬虫手段
摘要：1.校验 cookie头，验证请求用户身份，不是合法用户，弹出登录框 2.校验Referer头，校验请求是否从指定页面跳转而来，阻止该请求 3.校验User-Agent，校验请求客户端是不是浏览器，阻止该请求 4.校验请求频次和请求总数(包括IP维度、用户维度)，如果请求太快，可能是爬虫；页面弹出一 阅读全文
posted @ 2022-08-04 16:24 高压锅里的大萝卜 阅读(56) 评论(0) 推荐(0)