總結下這過程中使用到的一些知識。
1 http請求
通過chrome瀏覽器自帶的開發者工具檢視每次請求的資訊,分析請求,包括請求方式,請求url的構造,請求頭,收發資料的資料型別等。
在**中,偽造成瀏覽器發出請求。
post請求的資料型別有:form表單的資料,json資料。
請求頭:user-agent content-type referer host cookie 這幾個引數是比較關鍵的,一般需要在爬蟲過程中設定這幾個引數才能大概率爬取到資料。
2 **
有些**會監測請求的頻率,因此如果不適度的話,就會被禁ip,這時候就需要通過**的方式發出請求。
我方將請求轉接到**ip,再從**ip將請求發到目標**獲取響應。
微信開發總結
5.網頁授權的總結 5.1.網頁授權的步驟 1 引導使用者進入授權頁面同意授權,獲取code 2 通過code換取網頁授權access token 與基礎支援中的access token不同 3 如果需要,開發者可以重新整理網頁授權access token,避免過期 4 通過網頁授權access t...
微信開發技術總結
1 獲取openid的方法 步驟 獲取code獲取openid if auth code else 2 伺服器端session快取access token的方法 設定過期時間 session set cookie params lifetime session start 判斷快取是否存在 if 如...
微信開發資料 小總結
2.公眾平台推出使用者標籤介面,涉及到的更新包括 使用者標籤管理 獲取使用者基本資訊 unionid機制 個性化選單介面 高階 介面等。其位址為本次更新讓測試帳號獲得了與認證服務號相同的能力,包括js sdk相關能力。2.便捷獲取快速使用,降低開發和設計成本 13.jsapi網頁支付 14.商戶訂單...