Taildirsource採集日誌

2021-10-25 18:00:16 字數 1177 閱讀 4266

taildirsource採用的是正規表示式,不可隨意修改名字否則回出現重複採集問題

1是agent的名稱,a1中定義了乙個叫r1的source,如果有多個,使用空格間隔

a1.sources = r1

a1.sinks = k1

a1.channels = c1

#組名名.屬性名=屬性值

a1.sources.r1.type=taildir

a1.sources.r1.filegroups=f1 f2 f3

a1.sources.r1.filegroups.f1=/root/flume/01

a1.sources.r1.filegroups.f2=/root/flume/02

a1.sources.r1.filegroups.f3=/root/flume/03

#定義sink

a1.sinks.k1.type=logger

a1.sinks.k1.maxbytestolog=

100#定義chanel

a1.channels.c1.type=memory

a1.channels.c1.capacity=

1000

#連線元件 同乙個source可以對接多個channel,乙個sink只能從乙個channel拿資料!

taildirsource會自動記錄採集記錄 如下

但可能存在重複採集問題,如日誌檔案寫入時,名稱為*.tmp寫入完成為**.log,將會重新採集一遍,最主要的是命名的改變

採集俠 採集

安裝好之後 採集測試 先新增欄目,1 rss採集,xml路徑 採集測試 3 定向採集 新增採集規則 1 目標頁編碼 檢視目標網頁charset,是什麼圖中就選什麼 2 列表 如果只採集乙個列表頁,那麼輸入乙個列表首頁 即可,如 要採集所有列表頁就需要設定萬用字元了,萬用字元 1 20 代表1 20頁...

採集與反採集或說防採集

反採集原理 集程式的主要步驟如下 一 獲取被採集的頁面的內容 二 從獲取 中提取所有用的資料 這種辦法,比較流行的採集器就是火車頭的2.1版本,今天我也測試了一下這個版本,用著還是不錯 它的例程上面講的是採集落伍的貼子,我發現落伍對此還是 非常大方的,雖然discuz程式針對採集也採取了反採集的策略...

採集gpu GPU溫度的採集

監控gpu引數通常由以下幾種方式 一 直接檢視windows資源管理器裡面gpu引數。windows資源監控管理器,能看到gpu各種占有率引數,但看不到gpu的溫度,且通過這ui種方式只能在windows系統中檢視,無法將資料傳的傳輸後台監控。同時win7的任務管理器不支援gpu引數顯示。二.gpu...