scrapy在pychram中调试

方法一

# Name:配置项目的名称
# Script path:scrapy package中的cmdline.py文件路径
# Parameters:启动scrapy爬虫所需参数(也就是传参)
# Python Interpreter:选择所用的Python环境(我用的自己创建的anaconda虚拟环境,找cmdline.py文件时也是在虚拟环境中的site-packages找到,这点要注意)
# Working directory:你scrapy爬虫项目根目录

方法二

在 Scrapy 项目的根目录创建一个 main.py文件,然后在里面写下如下一段代码:

from scrapy.cmdline import execute

execute('scrapy crawl 爬虫名'.split())

然后,以这个文件作为入口文件,在这个文件上右键,选择Debug 'main',就可以正确启动 PyCharm 的调试模式并在第一个断点上停下来了。

posted @ 2024-08-01 09:03  wanxxx  阅读(80)  评论(0)    收藏  举报