Win 環境
1 檢查本地的python版本:
python -V
Python 3.9.8(我本地是)
2 whl方式安裝 twisted
-
1 因為scrapy需要twisted的環境,所以我們直接去下載whl文件
根據自己的Python版本在https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted選擇下載
- 2 下載好後,Twisted‑20.3.0‑cp39‑cp39‑win_amd64.whl,將這個文件存放到python安裝路徑下的script文件夾中。
如下:
-
3 執行安裝
pip install twisted_iocpsupport-1.0.2-cp39-cp39-win_amd64.whl3 安裝scrapy
pip install scrapy
4 安裝pywin32
pip install pywin32
5 檢查是否安裝成功
scrapy startproject baidu baidu.com
顯示類似如下,説明scrapy 已經成功安裝
New Scrapy project 'baidu', using template directory 'D:\python398\lib\site-
packages\scrapy\templates\project', created in:
F:\test\baidu.com
You can start your first spider with:
cd baidu.com
scrapy genspider example example.com
Linux 環境
直接 執行 命令:
pip install scrapy