白菜园到三位真火

摘要： 学到哪种程度 暂且把目标定位初级爬虫工程师，简单列一下吧： （必要部分） 熟悉多线程编程、网络编程、HTTP协议相关 开发过完整爬虫项目（最好有全站爬虫经验，这个下面会说到） 反爬相关，cookie、ip池、验证码等等 熟练使用分布式 了解企业级爬虫和个人爬虫的差异（企业级爬虫，首先在数据量上跟我们 阅读全文