最后一个小白Lz

摘要： "数据解析之re" "数据解析之Bs4" "数据解析之XPath" 阅读全文

摘要： Scrapy基础命令 创建目录 : 创建爬虫 进入项目 创建爬虫 生成文件 : (生成某种类型的文件) 运行爬虫 : 列出所有爬虫 : 获取配置信息 : Scrapy文件 scrapy.cfg : 项目配置文件 scrapytest : 生成的项目文件 items : 创建容器的文件，爬取的信息分别 阅读全文

摘要： Requests requests模块是由python编写的一个用于发起网络请求的模块 Requests入门 安装requests模块 导入 发送一个get请求 使用requests发送各种请求 Requests响应内容 Requests请求参数 阅读全文

摘要： 爬虫 网络爬虫是一种按照一定的规则，自动的抓取万维网信息的程序或者脚本 分类 通用爬虫 : 通过一些种子URL爬取到一整张页面，主要用于大型搜索引擎和大型web服务提供商采集数据。 聚焦爬虫 : 通过制订规则，只爬取特定的目标和数据 增量式爬虫 : 对已经下载的网页采取增量式更新，只爬取新产生的或者 阅读全文