摘要: 上一篇介绍的主要是爬虫的工作原理,大致分为四个步骤:获取数据 解析数据 提取数据 存储数据 。这一篇主要就从获取数据介绍起。 获取数据 1.requests 库下载安装 MAC :电脑打开终端软件,输入pip3 install requests winds:打开命令提示符(windows +r 快捷 阅读全文
posted @ 2020-09-15 16:32 胖虎大人v 阅读(640) 评论(0) 推荐(0)
摘要: 一、爬虫定义 简单说的话,爬虫就像一个虚拟的虫子,然后利用这只虫子,我们可以在网上获取到我们想要的信息。 二、爬虫的工作原理 浏览器工作原理 一般情况下,我们获取数据都是打开浏览器,然后搜索关键字,浏览器去工作,然后显示出来我们要的数据,我们再进行复制粘贴或者其他操作。 类似于下图 这里的客户端是我 阅读全文
posted @ 2020-09-15 10:20 胖虎大人v 阅读(388) 评论(0) 推荐(0)