摘要： 为何要设置User Agent？ 作为爬虫我们都知道，很多网站是做了反爬策略的，特别是爬虫程序这样的非人点击访问，网站更不会让你继续访问，这时我们的应对策略就是需要隐藏自己的爬虫程序的身份。我们就可以通过设置User Agent的来达到隐藏身份的目的，User Agent的中文名为用户代理，简称UA 阅读全文