Windows环境安装Scrapy
虽然可以使用 pip 在 Windows 上安装 Scrapy,但还是建议用 Anaconda 安装教程
1.创建虚拟环境(可选但推荐)
打开 Anaconda Prompt,执行以下命令:
创建名为scrapy_env的虚拟环境
conda create -n scrapy_env python=3.12(这里假设使用 Python 3.12,你可以根据需要选择其他版本)。
2.激活虚拟环境:
conda activate scrapy_env
接着继续在 Anaconda Prompt 中输入:
pip install Scrapy或者pip3 install Scrapy
3.安装完后,验证一下:
scrapy

4.创建一个爬虫项目
#先cd到目标文件夹
cd /d E:\spider
# /d表示切换磁盘分区
#创建名为 mySpider 的项目
scrapy startproject mySpider
cd mySpider
#创建爬虫文件,爬虫名叫`db`,要爬取的网站是 `豆瓣电影`
scrapy genspider db movie.douban.com
5.使用 PyCharm 打开项目文件夹
在设置中,找到Project: [项目名称] -> Python Interpreter选项。
添加虚拟环境,选择已存在的,anaconda的path是安装目录下的\anaconda3\condabin\conda.bat
选择之前建好的虚拟环境scrapy_env


浙公网安备 33010602011771号