那麼什麼又是反爬蟲呢？
反爬蟲是指使用任何技術手段阻止別人批量獲取自己**資訊的一種方式。
不返回網頁是比較傳統的反爬蟲手段，也就是在爬蟲傳送請求給相應**位址後，**返回404頁面，表示伺服器無法正常提供資訊或伺服器無法回應；**也可能長時間不返回資料，這代表對爬蟲已經進行了**。
例如去哪兒網的**
你有張良計，我有過梁梯，那麼如何反反爬蟲呢？
修改請求頭中user-agent
這個在之前的文章中已經有示例，可以翻閱之前的文章檢視。
使用time模組的sleep()函式來控制查詢的間隔。
**（proxy）是一種特殊的網路服務，允許乙個網路終端（一般為客戶端）通過這個服務與另乙個網路終端（一般為伺服器）進行非直接的連線。形象地說，**就是網路資訊的中轉站。**伺服器就像乙個大的緩衝區，這樣能夠顯著提高瀏覽速度和效率。
import requests
link =
''proxies =
response = requests.get(link,proxies=proxies)
爬蟲 反爬蟲 反反爬蟲基本流程理解（一）
資訊保安課程的乙個任務，正好在了解的同時記錄一下，都是很基礎的概念和理解，如有問題希望各位大佬多多指正。經過討論，我們認為此次課設的目的為讓我們更多的了解爬蟲 反爬蟲 反反爬蟲機制，了解基礎的反爬蟲手段，與相應的反反爬蟲模式，並根據網路資料對一些經典的反反爬蟲案例進行復現 簡介爬蟲的原理與基本過程 ...
Python爬蟲（一） 了解爬蟲
爬蟲即網路爬蟲，即將網上的資源抓取下來。比如在抓取乙個網頁，在這個網中發現一條道路，這個道路就是指向網頁的超連結那就可以抓到該網的資源 瀏覽網頁的過程其實就是使用者輸入 之後，經過dns伺服器，找到伺服器主機，向伺服器發出乙個請求，伺服器經過解析之後，傳送給使用者的瀏覽器html,js,css等檔案...
一文了解Flink State Backends
當我們使用flink進行流式計算時，通常會產生各種形式的中間結果，我們稱之為state。有狀態產生，就必然涉及到狀態的儲存，那麼flink中定義了哪些形式的狀態儲存呢，下面一一給大家介紹一下。顧名思義，memorystatebackend狀態後端是將狀態資料以object的形式存放於j a heap...