随笔分类 -  python爬虫随笔

python为什么换行时会空一行_当Python使用open进行写操作时,每写一行都会有空行
摘要:python3.7在使用open写入文件时,出现写入文件后,每一行都会出现跟随空行的情况。python3更改了二级制写入方式,需要添加新参数,newline with open('data3.csv', 'w', newline='') as csvfile: 阅读全文

posted @ 2021-05-21 18:11 沙漠飞猪 阅读(947) 评论(0) 推荐(0)

爬虫正则常用函数
摘要:res = re.compile() #正则预加载 res.findall() #匹配查找所有,返回列表res.finditer() #匹配查找所有,返回迭代器,效率更高 .*? 惰性匹配(?P<起个名字>.*?) for i in res.finditer(): i.group('起个名字') r 阅读全文

posted @ 2021-05-21 08:56 沙漠飞猪 阅读(85) 评论(0) 推荐(0)

urllib,requests请求返回数据的一个区别
摘要:urllib在请求返回结果用priint打印后,在写入文本文件,写入的是空,而requests打印后可以正常写入。 阅读全文

posted @ 2021-05-21 08:30 沙漠飞猪 阅读(76) 评论(0) 推荐(0)

从零开始学习python爬虫
摘要:爬虫多多少少写了一点,但是不够系统,每次写的时候都要回顾前面写的,知识点也比较凌乱,代码不够优美。从今天开始记录学习中的点点滴滴,争取把不熟练的搞明白。学习根据路飞学城的《2021年最新Python爬虫教程+实战项目案例》https://www.bilibili.com/video/BV1i54y1 阅读全文

posted @ 2021-05-20 11:21 沙漠飞猪 阅读(82) 评论(0) 推荐(0)