随笔分类 -  Python

摘要:好久没写博客了,也许人还处在迷茫状态一天浑浑噩噩的。最近写了一个爬虫脚本爬某APP的用户厂商数据,由于数据有12W+加上sleep的时间跑起来花费的时间很长。所以我将脚本分开写了先抓一级页面的请求参数再抓二级页面的详细数据,也可以将两个脚本合并,抓到的请求参数会存放在列表中在二脚本循环读取。数据量过 阅读全文
posted @ 2021-10-15 15:48 Fire_Li 阅读(805) 评论(0) 推荐(1)
摘要:#-*- codding = utf-8 -*- #@Time: 2020/7/7 14:47 #@Author: liruifeng #@File: zhuaqu.py #@Software: PyCharm from bs4 import BeautifulSoup import urllib. 阅读全文
posted @ 2020-07-24 15:25 Fire_Li 阅读(650) 评论(2) 推荐(0)
摘要:#-*- codding = utf-8 -*- #@Time: 2020/6/22 10:09 #@Author: liruifeng #@File: demo1.py #@Software: PyCharm from bs4 import BeautifulSoup #网页解析获取数据 impo 阅读全文
posted @ 2020-07-24 15:22 Fire_Li 阅读(264) 评论(2) 推荐(0)
摘要:1.1 编程风格 语法要求 缩进同一 [root@k8s-master data]# cat hello.py def main(): print 'hello' print 'world' main() [root@k8s-master data]# python hello.py hello w 阅读全文
posted @ 2019-12-31 17:02 Fire_Li 阅读(280) 评论(0) 推荐(0)