摘要: (1).DAS、SAN、NAS三种存储方式 参考:https://blog.csdn.net/qq_23348071/article/details/73963407 DAS全称Direct-Attached Storage,中文名直连式存储,是一种计算机存储,它直接连接到某台计算机且其他计算机无法 阅读全文
posted @ 2021-07-30 15:51 zyg_100 阅读(327) 评论(0) 推荐(0) 编辑
摘要: 一次使用TreeView 插件时遇到问题如下: 页面使用了TreeView相关js和css; 表单中出现: 阅读全文
posted @ 2019-08-23 16:46 zyg_100 阅读(291) 评论(0) 推荐(0) 编辑
摘要: Ajax形式的请求时JS动态渲染的一种手段,我们可以通过requests和urllib库来实现页面数据抓取,但是js动态渲染页面不仅仅是AJAX一种形式, 有的网页是由JS直接生成的,并非原始HTML,可能还不包含AJAX请求;例如一些报表工具ECharts 官网的实例,图形都是通过JS生成的;例如 阅读全文
posted @ 2019-01-18 16:16 zyg_100 阅读(4812) 评论(0) 推荐(1) 编辑
摘要: 下面实例是抓取头条图片信息,只是抓取了查询列表返回的json中image,大图标,由于该结果不会包含该链接详情页的所有图片列表;因此这里抓取不全;后续有时间在完善; 1、抓取头条街拍相关图片请求如下: 2、通过debug可以看到请求参数以及相应结果数据: 3、响应结果,比较重要的是data(grou 阅读全文
posted @ 2019-01-14 15:34 zyg_100 阅读(706) 评论(0) 推荐(0) 编辑
摘要: 待续。。。 阅读全文
posted @ 2019-01-09 10:39 zyg_100 阅读(719) 评论(0) 推荐(0) 编辑
摘要: 用解析器解析出的数据后,可以通过TXT、JSON、CSV等文件形式进行存储; 1、TXT形式此处略; 2、JSON文件存储 json即js 对象标记,是一种数据格式; json格式: json对象:{"username":"ADMIN","pwd":"xxxx","address":"北京"} js 阅读全文
posted @ 2019-01-02 17:37 zyg_100 阅读(1238) 评论(0) 推荐(0) 编辑
摘要: pyquery安装: pip install pyquery 初始化: 1)html字符串 2)url初始化 3)本地html文件初始化 例如: css选择器和find方法查找: 获取子节点children('选择器')和相关标签属性:【 获取父节点parent()parents(“选择器”) 用法 阅读全文
posted @ 2019-01-02 16:42 zyg_100 阅读(586) 评论(0) 推荐(0) 编辑
摘要: Beautiful Soup 是Python的一个HTML或者XML的解析库;会自动将输入的文档转化为Unicode编码,输出文档转换为UTF-8编码; 安装: C:\Users\issuser>pip install beautifulsoup4 Beautiful Soup在解析时实际上依赖解析 阅读全文
posted @ 2019-01-02 15:06 zyg_100 阅读(457) 评论(0) 推荐(0) 编辑
摘要: 上面程序通过yield返回迭代器,修改如下: 阅读全文
posted @ 2018-12-28 18:01 zyg_100 阅读(367) 评论(0) 推荐(0) 编辑
摘要: requests库比urllib跟家方便操作Cookie、登录验证、代理设置等; 例如: 除了get方法以外,可以通过post、put、delete、head、options方法实现不同方式的请求; 注意:上面如果相应结果不是json格式,则r.json()方法会报异常错误; 抓取一个网页,例如: 阅读全文
posted @ 2018-12-28 15:42 zyg_100 阅读(1127) 评论(0) 推荐(0) 编辑