摘要: class UrlManager(): #url管理器 def __init__():#设置新老url数组,分别为未爬取和已爬取 self.new_urls = set() self.old_urls = set() def add_new_url(self,url):#添加单个url if url 阅读全文
posted @ 2023-07-17 14:33 子过杨梅 阅读(45) 评论(0) 推荐(0)