随笔分类 -  爬虫

解析数据(正则,xpath)
摘要：正则表达式拆分 注意事项 拆分实例 阅读全文
posted @ 2019-03-29 23:58 ^sun^ 阅读(592) 评论(0) 推荐(0)
requests 后续1
摘要：正则表达式 匹配数字 范围匹配 阅读全文
posted @ 2019-03-29 21:35 ^sun^ 阅读(349) 评论(0) 推荐(0)
第三方库requests
摘要：带header 阅读全文
posted @ 2019-03-20 23:12 ^sun^ 阅读(243) 评论(0) 推荐(0)
带参数,头信息,代理,cookie爬取
摘要：1.get传参 (1)汉字报错 :解释器器ascii没有汉字 url汉字转码 urllib.parse.quote safe="string.printtable" (2)字典传参 urllib.parse.urlencode() post: urlib.request.openurl(url,da 阅读全文
posted @ 2019-03-18 22:27 ^sun^ 阅读(574) 评论(0) 推荐(0)
初识爬虫
摘要：1.http:(1)当⽤用户在地址输⼊入了了⽹网址 发送⽹网络请求的过程是什什么 (2)http的请求⽅方式 get请求 (1)⽐比较便便捷 缺点:不不安全:明⽂文 参数的⻓长度有限制 post请求 (1)⽐比较安全 (2)数据整体没有限制 (3)上传⽂文件 put(不不完全的) delete(删除 阅读全文
posted @ 2019-03-18 22:21 ^sun^ 阅读(244) 评论(0) 推荐(0)