摘要：笔者最近对scrapy的学习可谓如火如荼，虽然但是，即使是一整天地学习下来也会有中间两三个小时的“无效学习”，不是笔者开小差，而是掉进了深坑出不来。 在此，给各位分享一下作为一名Scrapy框架的初学者，笔者在学习过程中遇到的各个大坑和小技巧吧。 1. user_agent 这个，在某些网站看来这无 阅读全文