scrapy笔记-让scrapy在pycharm中debug运行

让scrapy在debug运行

编写scrapy的时候, 可能需要调试
下面写一种调试方法
在spider文件中最下方写上此代码就可以在右键调试了

if __name__ == '__main__':
    process = CrawlerProcess(get_project_settings())
    process.crawl('amazon')  # 你需要将此处的spider_name替换为你自己的爬虫名称
    process.start()