3 25 爬蟲學習筆記(二)Http 協議詳解

2021-09-13 14:54:44 字數 437 閱讀 2447

http 協議

什麼是協議?雙方規定的傳輸形式

http 協議:**原理 應用層的協議 ftp(21)(檔案傳輸協議)

http(80) 和 https(443) ssh(22) mysql(3306) redis(6379) mongo(27017)

http 和 https 協議的區別

廖雪峰 http 協議詳解(** http 協議)

連線的過程有 4 步,建立連線,傳送請求,響應請求,斷開連線

深入淺出 http 協議

乙個完整的 http 請求包含:請求行、請求頭、請求內容

x-requested-with : xmlhttprequest 代表通過 ajax 方式進行訪問

爬蟲學習筆記(二)http請求詳解

上篇部落格裡面寫了,爬蟲就是發http請求 瀏覽器裡面開啟傳送的都是http請求 然後獲取到response,咱們再從response裡面找到想要的資料,儲存到本地。咱們本章就來說一下什麼是http請求,它裡面都有哪些東西,我們在寫爬蟲的時候,怎麼http請求裡面哪些對我們的爬蟲有影響。咱們開啟乙個...

scrapy爬蟲框架學習之路 3 25

上回我們說到,如何使用python的requests請求庫爬取豆瓣高分電影榜,本次就說一說如何使用scrapy這個python爬蟲框架去實現爬蟲功能。首先,使用scrapy的框架需要經歷一下步驟 建立工程專案 scrapy的工程建立在命令列中完成的。首先在命令列中輸入,就可以建立乙個名字叫做cnbl...

HTTP學習筆記(二)

一 uri和url的區別 uri unifrom resource identifier 統一資源標誌符。url unifrom resource locator 統一資源定位符。rfc2396對3個單詞的定義 unifrom 規定統一的格式可方便處理多種不同型別的資源。如ftp http reso...