摘要: 一、前言 一些网站的敏感数据(如商品价格)是不希望被爬虫抓取。所以在不影响seo的情况下,一般采取什么策略呢,前端又可以做些什么呢? 二、常见爬虫策略 反爬虫不是阻止爬虫抓取数据,这是不现实的,所以可以在数据上做手脚。一般如果希望页面能在用户面前正常展示,就必须要做到识别真人与机器人。因此工程师们做 阅读全文
posted @ 2018-05-04 21:20 leaf+ 阅读(885) 评论(0) 推荐(0) 编辑