2021年2月18日

摘要： 一、梨视频获取分析、猜想、思考过程以及解决方案 -1、get访问 https://www.pearvideo.com/category_5 2、访问：https://www.pearvideo.com/video_1720499进入某个视频的详细页面 问：这个响应包里的videoStatus.jsp 阅读全文

摘要： 高性能异步爬虫 目的：在爬虫中使用异步实现高性能的数据爬取操作 异步爬虫的方式： -多线程，多进程（不建议）： 好处：可以为相关阻塞的操作单独开启线程或者进程，阻塞操作旧可以异步执行。 弊端：无法无限制的开启多线程或者多进程。 -线程池、进程池（适当的使用）： 好处：我们可以降低系统对进程或者线程创 阅读全文