摘要：新浪网分类资讯爬虫,爬取新浪网导航页所有下所有大类、小类、小类里的子链接，以及子链接页面的新闻内容，并将数据下载到本地文件系统存储 阅读全文

摘要：Scrapy爬取豆瓣电影top250的电影数据、海报，并保存在MySQL中。动态切换User-Agent,动态切换代理IP（ip池需要自己填充），下载延迟2.5秒 阅读全文