Python爬蟲requests基礎

2021-09-16 19:29:37 字數 1267 閱讀 3012

import requests

url=''

data = {}

headers = {}

proxies =

#加密**

# proxies =

cookies = {}

files =

#get

res = request.get(url,params=data, headers=headers, proxies=proxies,cookies=cookies)

#post

res =requests.post(url,data=data,headers=headers,

proxies=proxies,cookies=cookies)

#檔案res = requests.post(url,files=files)

二進位制網頁

res.content

經過預設utf-8解碼的網頁,亂碼就自己修改解碼方式

res.text

狀態碼res.status_code

網頁cookie,用來模擬登入

res.cookies

字典化cookies

res.cookies.get_dict()

禁止重定向

allow_redirects=ture

超時設定

timeout=2

#用法和requests差不多

最簡單的,把內容複製下來

訪問可以看到請求資訊

Python爬蟲 Request模組

文章說明了request模組的意義,且強調了request模組使用更加方便。接下來介紹幾種常用的request操作,並且會在後續補充說明一些特定用法。匯入檔案 import requests一 請求 右邊為請求語句,返回值為response回應 r requests.get r requests.p...

python爬蟲利器 request庫

request庫比urllib2庫更為高階,因為其功能更強大,更易於使用。使用該庫可以十分方便我們的抓取。基本請求 r requests.get r requests.post r requests.put r requests.delete r requests.head r requests.o...

爬蟲 python(二)初識request

from urllib.request import urlopen 傳送請求,獲取伺服器給的響應 url response urlopen url 讀取結果,無法正常顯示中文 html response.read 進行解碼操作,轉為utf 8 html decode html.decode 列印結...