2019 年 6月 3 日随笔档案 - 百里丶落云

2019年6月3日

摘要：前情提要: 一：图片懒加载（面对图片懒加载怎么办）－－－用ｓｅｌｅｎｉｕｍ设置图片加载的位置－－－　分析懒加载的属性，直接获取二：如何提高ｓｃｒａｐｙ的爬取效率增加并发：默认scrapy开启的并发线程为32个，可以适当进行增加。在settings配置文件中修改CONCURRENT_REQU 阅读全文

posted @ 2019-06-03 18:55 百里丶落云阅读(210) 评论(0) 推荐(0)