python爬蟲要用到的庫：
請求庫：實現 http 請求操作
觀點www.cppcns.com擴充套件：
學習爬蟲，最初的操作便是模擬瀏覽器向伺服器發出請求，那麼我們需要從哪個地方開始做起呢？請求需要我們自己來構造嗎？需要關心請求這個資料結構的實現嘛？需要了解http、tcp、ip層的網路傳輸通訊嗎？需要直到伺服器的響應和應答原理嗎？
可能你對這些根本不了解，也沒辦法下手。但是沒關係，python為我們提供了功能齊全的類庫來幫助我們完成這些請求。最基礎的http庫有urllib、requests、treq等。
以urllib為例，有了它，我們只需要關心請求的連線是什麼。需要傳的引數是什麼，以及如何設定可選的請求頭就好了，不用深入到底層去了解它到底是怎樣傳輸和通訊的。有了它，兩行**就可以完成乙個請求和相應的處理過程，得到網頁內容，是不是感覺方便極了？
python需要用到的筆記
總結 pycharm常用的一些命令 建立django專案的 django admin startproject 專案名稱 讓模型類轉變為資料表，生成遷移檔案 python manage.py makemigrations 執行遷移生成表 python manage.py migrate git命令 ...
GIT主要用到的命令
git add 新增到暫存檔 git commit m 備註 提交到本地倉庫 git push 提交到遠端倉庫 fetch更新本地倉庫兩種方式 方法一 git fetch origin master git log p master.origin master 比較本地的倉庫和遠端參考的區別 方法二...
關於java開發中需要用到的外掛程式總結
報表工具 pentaho reporting ireport dynamicreports等。文件處理 poi itext等。工作流引擎 jbpm openwfe snaker swamp等。作業排程 quartz jobserver oddjob等。快取服務 ehcache memcached s...