Windows环境安装Scrapy
虽然可以使用 pip 在 Windows 上安装 Scrapy,但还是建议用 Anaconda 安装教程
1.创建虚拟环境(可选但推荐)
打开 Anaconda Prompt,执行以下命令:
创建名为scrapy_env
的虚拟环境
conda create -n scrapy_env python=3.12
(这里假设使用 Python 3.12,你可以根据需要选择其他版本)。
2.激活虚拟环境:
conda activate scrapy_env
接着继续在 Anaconda Prompt 中输入:
pip install Scrapy
或者pip3 install Scrapy
3.安装完后,验证一下:
scrapy
4.创建一个爬虫项目
#先cd到目标文件夹 cd /d E:\spider # /d表示切换磁盘分区 #创建名为 mySpider 的项目 scrapy startproject mySpider cd mySpider #创建爬虫文件,爬虫名叫`db`,要爬取的网站是 `豆瓣电影` scrapy genspider db movie.douban.com
5.使用 PyCharm 打开项目文件夹
在设置
中,找到Project: [项目名称] -> Python Interpreter
选项。
添加虚拟环境,选择已存在的,anaconda的path是安装目录下的\anaconda3\condabin\conda.bat
选择之前建好的虚拟环境scrapy_env
本文作者:Ritchie里其
本文链接:https://www.cnblogs.com/wang-zeyu/p/18546525
版权声明:本作品采用知识共享署名-非商业性使用-禁止演绎 2.5 中国大陆许可协议进行许可。
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步