1.採集模組
2.資料分析模組
由於網路採集存在各種不確定性，資料分析部分在根據需要做好資料解析之後，要做好異常處理及定位重啟功能，避免出現程式異常退出或者資料採集遺漏、重複的情況。
3.反爬策略模組
分析目標伺服器的爬蟲策略，控制爬蟲請求頻率甚至包括驗證碼、加密資料的破解，同時使用優質**或爬蟲**，比如神龍ip這類業務獨享、網路穩定、高併發、低延遲的**產品，確保目標伺服器沒法進行反爬限制及預警。
基本上採用以上各項優化策略，就可以保證爬蟲程式長期穩定的執行。
哪幾點是選擇伺服器需要注意的
俗話說的好，世界上沒有懶女人只有醜女人，護膚好的女人的 雪白雪白的，在陽光下閃著白瓷般迷人的光澤。時常猶如美麗的少女。不保養 的女人的 既黑又皺，活像一張粗糙的皮革，同樣的伺服器也是一樣，也需要適當的保養，才會穩定健康的長久使用壽命。1 電力 伺服器硬體應用最重要的就是要實現執行的穩定性與持續性，而...
學習程式設計需要注意的幾點
1 不要死記硬背語法 程式開發的語法 規範特別多，不可能全記下來，只要知道有這麼乙個功能即可，需要的時候再翻書或查詢幫助。這樣省時省力，可以將更多的時間和精力用在技術的提高上。2 多動手，多練習 死讀書是成不了程式設計高手的！只有多練習，多上機編寫程式，才能在實踐中提高對程式設計的認識。3 遇到問題...
Object c block需要注意的幾點問題
摘自 date 2015 12 4 1.block定義 1 說明 a.block是oc中的一種資料型別，在ios開發中被廣泛使用 b.是block的特有標記 c.block的實現 包含在 之間 d.大多情況下，以內聯inline函式的方式被定義和使用 e.block與c語言的函式指標有些相似，但使用...