抓取貓眼電影排行

2021-10-06 21:39:38 字數 380 閱讀 8860

今天學習《python3網路爬蟲》第三章時,在章節尾部的爬取貓眼電影排行練習中成功實現,但這一部分有點不明白,先記錄下來:

def get_one_page(url):

try:

headers =

response = requests.get(url, headers=headers)

if response.status_code == 200:

return response.text

return none # ??????

except requestexception:

return none

注釋那行的return none不知是何作用。

抓取貓眼電影排行

首先將第乙個頁面抓取下來 import requests 抓取乙個 def get one page url headers response requests.get url,headers headers 判斷響應的狀態碼 if response.status code 200 return r...

抓取貓眼電影排行

抓取貓眼電影排行 1.抓取分析 需要抓取的目標url為 開啟之後便可以檢視到電影的排行,如下圖 可以發現第二頁的url為第三頁的url為以此類推。2.抓取第一頁 定義乙個函式用於抓取乙個頁面,函式的引數就是url,將我們要抓取頁面的url傳給函式,返回的結果就是伺服器端的響應。import requ...

學習抓取貓眼電影排行

抓取目標貓眼電影top100的電影資訊 使用requests和正規表示式 抓取分析 站點url為,開啟看到榜單資訊等 跳轉第二頁url變為?offset 10,第三頁?offset 20,對比不難發現url中引數offset代表電影序號偏移量。抓取首頁 import requests def get...