參考:
1.安裝python
2.安裝setuptools 或者 pip
ubuntu linux: sudo apt-get install python-pip
解壓後進入資料夾執行:python setup.py install
3.安裝lxml
lxml是一種使用 python 編寫的庫,可以迅速、靈活地處理 xml。選擇對應的python版本安裝。;
安裝命令:pip install lxml
驗證是否安裝成功:>>>import lxml
4.安裝zope.inte***ce,安裝命令:
pip install zope.inte***ce
5.安裝twisted
twisted是用python實現的基於事件驅動的網路引擎框架,安裝命令:
pip install twisted
6.安裝pyopenssl
pyopenssl是python的openssl介面,安裝命令:
pip install pyopenssl
7.安裝win32py (windows需要)
8.安裝scrapy
easy_install scrapy
或者:pip install scrapy
9.測試是否scrapy可用:
scrapy bench
安裝完成,開始使用吧!
python安裝scrapy步驟及問題
近期自學python,在安裝scrapy時遇到了超時的問題,經過檢視相關教程和不斷摸索,最終成功安裝,現把安裝過程做記錄並且分享給大家,希望有所幫助。安裝步驟 此處先po出在無意外情況下安裝scrapy的步驟,如在安裝過程中有遇到問題,可以參考文末的 其他問題解決方法 根據所學教程裡面,安裝scra...
Scrapy 專案步驟
1.建立專案 scrapy starproject 專案名 2.編寫 items.py檔案 設定需要儲存的資料字段,明確想要抓取的目標,用來儲存爬到的資料。3.建立爬蟲 scrapy genspider 爬蟲名 爬取的 4.進入專案專案名 spiders 3個預設建立的 name 編寫爬蟲檔案,檔案...
Window安裝scrapy框架步驟(詳細)
如果你電腦裡只有python3可以使用以下方法 mkvirtualenv p python scrapy如果還有python2 mkvirtualenv p python3 scrapypip install lxml pip install parsel pip install w3lib pip...