11 2020 档案

摘要:一、介绍 Beautiful Soup 是 python 的一个库,最主要的功能是从网页抓取数据。官方解释如下: Beautiful Soup 提供一些简单的、python 式的函数用来处理导航、搜索、修改分析树等功能。它是一个工具箱,通过解析文档为用户提供需要抓取的数据,因为简单,所以不需要多少代 阅读全文
posted @ 2020-11-21 20:49 小测试00 阅读(272) 评论(0) 推荐(0)
摘要:一、介绍 requests库是用python编写的,基于urllib,采用Apache2 License开源协议封装的HTTP库。 二、requests安装 pip install requests pip show requests来查看requests的信息 三、发送请求 HTTP的请求方法GE 阅读全文
posted @ 2020-11-18 19:57 小测试00 阅读(469) 评论(0) 推荐(0)
摘要:1.介绍 robots协议也叫robots.txt(统一小写)是一种ASCII编码的文本文件,它通常告诉网络搜索引擎的爬虫,此网站中的哪些内容是不应被搜索引擎获取的,哪些是可以被获取的。因为一些系统中的URL是大小写敏感的,所以robots.txt的文件名应统一为小写。robots.txt应放置于网 阅读全文
posted @ 2020-11-10 14:41 小测试00 阅读(566) 评论(0) 推荐(0)
摘要:一、介绍 postman提供功能强大的 Web API & HTTP 请求调试,可以用来进行接口测试。Postman分为native app 和chorme插件2种,chorme插件已不再维护,文章中使用的是native app。下载地址:https://www.postman.com/postma 阅读全文
posted @ 2020-11-09 21:52 小测试00 阅读(1149) 评论(0) 推荐(1)