python的scrapy框架的安裝實錄

2021-10-07 19:11:04 字數 917 閱讀 9659

我在這裡不做重複性敘述,我就記錄一下我成功安裝的步驟。

我是win10 cmd64 python3.8的環境。

準備:

先切換到python安裝的目錄。在該目錄出右擊空白處,選擇opencmdhere開啟控制台

輸入pip --version或者pip -v來檢查pip是不是最新的。

注意:以下需要輸入的命令列請手動輸入到自己的控制台,不要複製我寫的。因為複製可能導致空格、符號或其他地方的不同而讓安裝失敗。

第一步:

安裝wheel:pip install wheel

第二步:

要下哪個檔案: cp38就是python 3.8, amd64就是當初安裝的64位的python

根據這個對應的來下。

第三步:

在命令列輸入install命令:

pip install lxml-4.5.1-cp38-cp38-win_amd64.whl

pip install pywin32-228-cp38-cp38-win_amd64.whl

pip install twisted-20.3.0-cp38-cp38-win_amd64.whl

第四步:

安裝scrapy框架:pip install scrapy

第五步:

測試是否安裝成功:scrapy -h

python安裝scrapy框架

說明之前在 window 10 64 python 3.5 64 環境下就已經成功安裝了 scrapy,當然也費了不少周折。為了方便後來的朋友,特將 python 3.5 下的 scrapy 安裝步驟記錄如下 注意 本文基於環境 windows 7 64 python 3.5 64 1 安裝 pyw...

Python爬蟲 scrapy框架

開源的,對平台的爬蟲框架 舊版本 需要預先定義所需欄位 class myitem scrapy.item url scrapy.field 再將所需欄位填充 class myspier scrapy.spider defparse self,response return sudo apt inst...

python爬蟲scrapy框架

安裝 pip install scrapy startproject 建立乙個新專案 genspider 根據模板生成乙個新爬蟲 crawl 執行爬蟲 shell 啟動互動式抓取控制台 進入專案目錄 scrapy startproject crawlertest project name cd cr...