如果我們爬取的資料是動態的， 就需要關注 xhr 資料。因為動態頁面的原理就是通過原生的 xhr 物件發出 http 請求，得到伺服器返回的資料之後，再進行處理。xhr 會用於在後台與伺服器交換資料。
我們需要使用瀏覽器的外掛程式檢視 xhr資料，比如在 chrome 瀏覽器中使用開發者工具。
有時候，網頁會使用 js 請求資料，那麼只有 js 都載入完成之後，我們才能獲取完整的 html 檔案。xpath 可以不受載入的限制，幫我們定位想要的元素。
但是有時候當我們直接用 requests 獲取 html的時候，發現想要的 xpath 並不存在，這是因為 html 還沒有載入完，因此你需要乙個工具，來進行網頁載入的模擬，直到完成載入之後再給你完整的 html。
python + selenium + 第三方瀏覽器可以讓我們處理多種複雜場景，包括網頁動態 載入、js 響應、post 表單等。因為 selenium 模擬的就是乙個真實的使用者的操作行為，就 不用擔心 cookie 追蹤和隱藏欄位的干擾了。
xhr是什麼縮寫 XHR 建立物件
ajax 建立 xmlhttprequest 物件 xmlhttprequest 是 ajax 的基礎。xmlhttprequest 術語縮寫為xhr，中文可以解釋為可擴充套件超文字傳輸請求。xmlhttprequest 物件可以在不向伺服器提交整個頁面的情況下，實現區域性更新網頁。xmlhttpr...
xhr返回值 資料互動 http請求 xhr
web瀏覽器通過http請求來獲取伺服器的資料或服務，http請求是一種無狀態連線，用完即關閉，再用需重連線。這麼設計能極大地減輕伺服器壓力。http請求 乙個http請求分為以下7個步驟 1，建立tcp連線 2，瀏覽器向伺服器傳送請求命令 3，瀏覽器想伺服器傳送請求頭資訊 4，伺服器響應 5，伺服...
什麼是稀疏資料？什麼是池化？
一 稀疏資料 在資料庫中，稀疏資料是指在二維表中含有大量空值的資料 即稀疏資料是指，在資料集中絕大多數數值缺失或者為零的資料。稀疏資料絕對不是無用資料，只不過是資訊不完全，通過適當的手段是可以挖掘出大量有用資訊。稀疏資料是指，資料框中絕大多數數值缺失或者為零的資料。在現代社會中，隨著資訊的 式增長，...