本課程完全從零基礎出發，只要你有一點 python 基礎就可以聽懂本課程！第1章:爬蟲前奏課程從基礎到高階，讓你 21 天破繭成蝶成為高階爬蟲工程師！
小節1【爬蟲前奏】什麼是網路爬蟲23:05
小節2【爬蟲前奏】http協議介紹16:29
小節3【爬蟲前奏】抓包工具的使用24:49
第2章:網路請求
小節4【urllib庫】urlopen函式用法09:42+ s6 l$ q
小節5【urllib庫】urlretrieve函式用法04:35
小節6【urllib庫】引數編碼和解碼函式10:01
小節7【urllib庫】urlparse和urlsplit函式用法10:17:
小節8【urllib庫】實戰-用request爬取拉勾網職位資訊18:36
小節9【urllib庫】作業-內涵段子爬蟲作業02:14
小節10【urllib庫】proxyhandler實現**ip23:08
小節11【urllib庫】cookie原理和格式詳解13:01
小節12【urllib庫】實戰-爬蟲使用cookie模擬登入14:05
小節13【urllib庫】實戰-爬蟲自動登入訪問授權頁面22:27
小節14【urllib庫】cookie資訊的載入與儲存12:35
小節15【requests庫】requests庫的基本使用18:36
小節16【requests庫】requests傳送post請求08:14
小節17【requests庫】requests使用**ip11:21
小節18【requests庫】requests處理cookie資訊08:58
小節19【requests庫】requests處理不信任的ssl證書02:02
第3章:資料解析
小節20【xpath解析】xpath介紹和工具安裝09:00
小節21【xpath解析】xpath語法詳解22:57
.....................
21天pyhton分布式爬蟲 爬蟲基礎2
http協議 全稱是hypertext transfer protocol，中文意思是超文字傳輸協議，是一種發布和接收html頁面的方法。伺服器端口號為80埠 https 協議 是http協議的加密版本，在http下加入了ssl層，伺服器端口號是443埠 當使用者在瀏覽器的位址中輸入乙個url並按回...
21天打造分布式爬蟲 requests庫（二）
簡單使用 import requests response requests.get text返回的是unicode的字串，可能會出現亂碼情況 print response.text content返回的是位元組，需要解碼 print response.content.decode utf 8 pr...
21天打造分布式爬蟲 urllib庫（一）
encoding utf 8 from urllib import request res request.urlopen print res.readlines urlopen的引數 def urlopen url,data none,timeout socket.global default t...