会员
周边
新闻
博问
AI培训
云市场
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
钢铁侠的知识库
钢铁知识库,高级运维开发,多年系统架构经验,擅长python爬虫、数据分析、有Kubernetes(k8s)维护管理能力; 熟悉Docker、ELK、Jenkins、Git、Zookeeper、Redis、Kafka、Rabbitmq、Nginx、Tomcat等框架和组件; 熟悉Zabbix、Prometheus、Grafana、ansible、pssh监控及运维工具;
博客园
首页
新随笔
联系
订阅
管理
2022年9月9日
python 基于aiohttp的异步爬虫实战
摘要:
钢铁知识库,一个学习python爬虫、数据分析的知识库。人生苦短,快用python。 之前我们使用requests库爬取某个站点的时候,每发出一个请求,程序必须等待网站返回响应才能接着运行,而在整个爬虫过程中,整个爬虫程序是一直在等待的,实际上没有做任何事情。 像这种占用磁盘/内存IO、网络IO的任
阅读全文
posted @ 2022-09-09 11:44 钢铁侠的知识库
阅读(841)
评论(0)
推荐(1)
编辑
公告