一、什麼是網路爬蟲
爬蟲是乙個模擬人類請求**行為的程式。可以自動請求網頁、並資料抓取下來，然後使用一定的規則提取有價值的資料。
二、爬蟲的種類
網路爬蟲按照系統結構和實現技術，大致可以分為以下幾種型別：通用網路爬蟲（general purpose web crawler）、聚焦網路爬蟲（focused web crawler）、增量式網路爬蟲（incremental web crawler）、深層網路爬蟲（deep web crawler）。
三、工作原理
搜尋引擎網路爬蟲的基本工作流程如下：
第一步：抓取網頁
第二步：資料儲存
第三步：預處理
工作原理如下圖：
Python的應用領域
目錄 web應用開發 自動化運維 人工智慧領域 網路爬蟲 科學計算 遊戲開發 python 經常被用於 web 開發，儘管目前 php js 依然是 web 開發的主流語言，但 python 上公升勢頭更猛勁。尤其隨著 python 的 web 開發框架逐漸成熟 比如 django flask tu...
Python主要應用領域1
1.web開發最火的python web框架django,支援非同步高併發的tormado框架，短小精悍的flask,bottle,django官方的標語把django定義為the frameworkfor perfectionist with deadlines 大意是乙個為完全主義者開發的高效率...
Linux的應用領域
linux 似乎在我們平時的生活中很少看到，那麼它應用在哪些領域呢？其實，在生活中隨時隨地都有 linux 為我們服務著。圖 1 netcraft 圖2 www.baidu.com 伺服器歷史 netcraft 可以理解為乙個基於 web 頁面的掃瞄器，至於掃瞄，就好像小偷踩點。小偷在偷東西之前拿一...