監控系統體系1 資料流監控系統

2021-10-13 15:27:18 字數 364 閱讀 6632

監控系統整體設計 總結

通常當乙個系統的作用越來越重要的時候,對系統的穩定性和系統資料的準確性的要求就會越來越高時,需要引入監控系統

監控系統多種多樣,但是包含兩個要素:資料正確性驗證邏輯+告警

如一般的微服務架構:1.資料接收節點 2.訊息中介軟體(kafka)3.資料計算節點 4.資料持久化節點

1.資料接收節點統計計數(寫入分布式快取redis)

2.資料計算節點統計計數(寫入分布式快取redis)

3.資料寫入節點統計計數(寫入分布式快取redis)

對於監控系統而言,有時需要複雜的設計和複雜的技術才能實現。有時只需要最簡單的統計計數也可以很好的監控系統的運**況;適合的,代價最小的就是最好的設計

Flume 資料流監控

安裝 httpd 服務與 php yum y install httpd php安裝其他依賴 yum y install rrdtool perl rrdtool rrdtool devel yum y install apr devel 安裝 ganglia rpm uvhyum y instal...

Flume資料流監控

注 此安裝的背景是 3臺伺服器 1 三颱機器安裝epel源 mark hadoop102 flume sudo yum install y epel release2 在102安裝web,meta和monitor mark hadoop102 flume sudo yum y install gan...

大資料Flume資料流監控

2 操作 flume 測試監控 ganglia 由 gmond gmetad 和 gweb 三部分組成。gmond ganglia monitoring daemon 是一種輕量級服務,安裝在每台需要收集指標資料的節點主機上。使用 gmond,你可以很容易收集很多系統指標資料,如 cpu 記憶體 磁...