06 2021 档案

使用异步生成器的一个爬虫例子
摘要：在学习python协程的过程中，结合生成器函数，实现了新浪新闻的深度爬取，深度爬取可以一边获得新生成的url，一边向URL发出请求，下面上代码 import aiohttpfrom lxml import etreeimport csvimport asyncioimport osfrom logu 阅读全文
posted @ 2021-06-09 17:46 高内聚低耦合 阅读(104) 评论(0) 推荐(0)