2018年10月2日
requests 模块
摘要： 补充小知识： User-Agent 那么User-Agent到底是什么呢？ User-Agent会告诉网站服务器，访问者是通过什么工具来请求的，如果是爬虫请求，一般会拒绝，如果是用户浏览器，就会应答 那么User-Agent到底是什么呢？ User-Agent会告诉网站服务器，访问者是通过什么工具来 阅读全文
posted @ 2018-10-02 23:49 可爱的红领巾 阅读(490) 评论(0) 推荐(0)
初始爬虫
摘要： 爬虫简介 概述 近年来，随着网络应用的逐渐扩展和深入，如何高效的获取网上数据成为了无数公司和个人的追求，在大数据时代，谁掌握了更多的数据，谁就可以获得更高的利益，而网络爬虫是其中最为常用的一种从网上爬取数据的手段。 网络爬虫，即Web Spider，是一个很形象的名字。如果把互联网比喻成一个蜘蛛网， 阅读全文
posted @ 2018-10-02 12:24 可爱的红领巾 阅读(214) 评论(0) 推荐(0)