随笔分类 -  爬虫实战案例

结合自己的理解，分享一些大拿的爬虫案例
40行代码爬取猫眼电影TOP100榜所有信息
摘要：主要内容： 一、基础爬虫框架的三大模块 二、完整代码解析及效果展示 1️⃣ 基础爬虫框架的三大模块 1、HTML下载器：利用requests模块下载HTML网页。 2、HTML解析器：利用re正则表达式解析出有效的数据。 3、数据存储器：将有效数据通过文件或者数据库的形式存储起来。 2️⃣ 完整代码 阅读全文
posted @ 2018-06-03 16:52 暮光微凉 阅读(773) 评论(0) 推荐(0)