摘要：这一篇博客，是关于反反爬虫的，我会分享一些我遇到的反爬虫的措施，并且会分享我自己的解决办法。如果能对你有什么帮助的话，麻烦点一下推荐啦。 一、UserAgent UserAgent中文名为用户代理，它使得服务器能够识别客户使用的操作系统及版本、CPU 类型、浏览器及版本等信息。对于一些网站来说，它会 阅读全文

摘要：一、写在前面 有时候你的爬虫刚开始的时候可以正常运行，能够正常的爬取数据，但是过了一会，却出现了一个“403 Forbidden"，或者是”您的IP访问频率太高“这样的提示，这就意味着你的IP被ban了，好一点的情况是过一段时间你就能继续爬取了，坏一点的情况就是你的IP已经进入别人的黑名单了，然后你 阅读全文

摘要：一、写在前面 之前写过一篇用Python发送天气预报邮件的博客，但是因为要手动输入城市名称，还要打开邮箱才能知道天气情况，这也太麻烦了。于是乎，有了这一篇博客，这次我要做的就是用Python获取本机IP地址，并根据这个IP地址获取物理位置也就是我所在的城市名称，然后用之前的办法实现查询天气，再利用百 阅读全文

摘要：一、写在前面 这个标题是借用的路人甲大佬的一篇文章的标题（百度一下，坑死你），而且这次的爬虫也是看了这篇文章后才写出来的，感兴趣的可以先看下这篇文章。 前段时间有篇文章《搜索引擎百度已死》引起了很多讨论，而百度对此的回复是：百家号的内容在百度搜索结果中不超过10%。但是这个10%是第一页的10%还是 阅读全文