python超简单实用爬虫操作---1、爬虫介绍

python超简单实用爬虫操作---1、爬虫介绍

一、总结

一句话总结：

爬虫就是自动获取网页内容的程序，比如google、百度等搜索引擎本质就是爬虫，爬虫的在互联网中应用的特别多，用爬虫可以非常方便的爬取数据，从而节约大量人力

 

 

二、爬虫介绍

博客对应课程的视频位置：1、爬虫介绍-范仁义-读书编程笔记
https://www.fanrenyi.com/video/35/317

 

爬虫介绍

爬虫就是自动获取网页内容的程序

google、百度等搜索引擎本质就是爬虫

虽然大部分编程语言几乎都能做爬虫，但是做爬虫最火的编程语言还是python

python中爬取网页的库有python自带的urllib，还有第三方库requests等，

requests这个库是基于urllib，功能都差不多，但是操作啥的要简单方便特别多

Requests is an elegant and simple HTTP library for Python, built for human beings.

---

 

爬虫实例

比如我的网站 https://fanrenyi.com

比如电影天堂 等等

---

 

课程介绍

讲解python爬虫操作中特别常用的操作，比如爬取网页、post方式爬取网页、模拟登录爬取网页等等