2024年8月11日
python爬虫
摘要： 爬虫 一、爬虫的分类 1、通用爬虫 实例 百度，360，google、搜狗等搜索引擎 功能 访问网页-》抓取数据-》数据存储-》数据处理-》提供检测服务 robots协议 一个约定俗成的协议，添加robots.txt文件，来说明本网站哪些内容不可以被抓取，之际写的爬虫无需遵守 网站排名 1、根据pa 阅读全文
posted @ 2024-08-11 18:09 食尸之鬼 阅读(110) 评论(0) 推荐(0)