1.user-agent：
user agent中文名為使用者**，簡稱 ua，它是乙個特殊字串頭，使得伺服器能夠識別客戶使用的作業系統及版本、cpu 型別、瀏覽器及版本、瀏覽器渲染引擎、瀏覽器語言、瀏覽器外掛程式等。
2.**ip
西次**
快**什麼是高匿名、匿名和透明**？它們有什麼區別？
1.使用透明**ip，對方伺服器可以知道你使用了**，並且也知道你的真實ip。
2.使用匿名**ip，對方伺服器可以知道你使用了**，但不知道你的真實ip。
3.使用高匿名**ip，對方伺服器不知道你使用了**，更不知道你的真實ip。
3.驗證碼訪問
打碼平台
雲打碼平台
超級?4.動態載入網頁 **返回的是js資料 並不是網頁的真實資料
selenium驅動真實的瀏覽器傳送請求/splash
5.資料加密
分析js**
python爬蟲反爬 爬蟲怎麼測試反爬？
有沒有反爬，如果你沒有用爬蟲抓取過，你是不可能知道的。就算要測試，你還要嘗試不同的delay。如果設定的 delay 在 的反爬頻率外，那就測不出來。如果在頻率內，那就被封。或者封ip，或者封賬號。如果一定要測出來，就簡單粗暴的方法，你不要設定delay，就不間斷的抓，最後出現兩種情況，1 有反爬，...
Python常見的反爬手段和反反爬蟲方法
因為反爬蟲暫時是個較新的領域，因此有些定義要自己下 誤傷 在反爬蟲的過程中，錯誤的將普通使用者識別為爬蟲。誤傷率高的反爬蟲策略，效果再好也不能用。攔截 成功地阻止爬蟲訪問。這裡會有攔截率的概念。通常來說，攔截率越高的反爬蟲策略，誤傷的可能性就越高。因此需要做個權衡。資源 機器成本與人力成本的總和。這...
Python反爬手段之User Agent池
user agent即使用者 簡稱ua，它是乙個特殊字串頭，使得伺服器能夠識別客戶使用的作業系統及版本 cpu型別 瀏覽器及版本 瀏覽器渲染引擎 瀏覽器語言 瀏覽器外掛程式等。一些 常常通過判斷ua來給不同的作業系統 不同的瀏覽器傳送不同的頁面，因此可能造成某些頁面無法在某個瀏覽器中正常顯示，但通過...