2019 年 9月 1 日随笔档案 - MC_Hotdog

2019年9月1日

摘要：执行流程 1.引擎找到要执行的爬虫，并执行爬虫的start_requests方法，并得到一个迭代器 2.迭代器循环时候会获取到Request对象，而request对象中封装了要访问的url和回调函数 3.将所有的request对象(任务)放到调度器中，用于以后被下载器下载 4.下载器去调度器中获取要阅读全文

posted @ 2019-09-01 22:10 MC_Hotdog 阅读(736) 评论(0) 推荐(0)