scrapy 命令列模式的一些引數

2021-09-20 02:57:49 字數 693 閱讀 9090

官網位址

scrapy genspider -l 檢視爬蟲模板的命令

scrapy genspider example example.com

scrapy genspider -t scrapyorg scrapy.org 這個是另乙個的爬蟲規則

scrapy list 檢視自己的爬蟲

--headers

--no-redirect

可以這麼用

scrapy fetch --nolog-headers url

scrapy view url 在瀏覽器中開啟指定的url以檢視是否和自己預期的一樣

scrapy shell url可以是url和檔案的路徑

scrapy shell --nolog -c (responde.status, response.url)

scrapy version 檢視scrapy的版本號

scrapy bench 0.17版本新增的具體是什麼我也不知道,有興趣可以查檢視, 就是給出一些資訊像一分鐘能爬取多少頁啊

也可以自己建立一些命令一般人應該用不上

commands_module = 'mybot.commands'

from setuptools import setup, find_packages setup(name='scrapy-mymodule', entry_points=, )

一些命令列指令

linux下的一些指令 mkdir a 建立乙個名稱為a的資料夾 ls 檢視當前資料夾下的檔案 ll 檢視當前資料夾下的檔案的詳細資訊 pwd 檢視當前命令列所在的路徑 cd 返回上級目錄 d 進入d盤 touch index.html 新建乙個檔案 npm的一些指令 npm install g c...

Ionic Framework的一些命令列解釋

npm install g ionic 安裝ionic ionic lib update ionic serve options 啟動乙個本地的server,在瀏覽器中開啟,並可監視檔案變化,隨時重新整理瀏覽器。可以在主目錄下的ionic.project檔案的watchpatterns中配置要監視的...

Git的一些命令列

1 建立乙個分支git branch 分支名字 2 提交git commit 3 換主支git checkout 要換到的名字那兒 4合併git merge 分支名字,合併到當前那個支上,且那個支會指向兩個父節點 5git rebase取出一系列操作,複製到另乙個操作中 6 head指向master...