taildirsource採用的是正規表示式,不可隨意修改名字否則回出現重複採集問題
1是agent的名稱,a1中定義了乙個叫r1的source,如果有多個,使用空格間隔
a1.sources = r1
a1.sinks = k1
a1.channels = c1
#組名名.屬性名=屬性值
a1.sources.r1.type=taildir
a1.sources.r1.filegroups=f1 f2 f3
a1.sources.r1.filegroups.f1=/root/flume/01
a1.sources.r1.filegroups.f2=/root/flume/02
a1.sources.r1.filegroups.f3=/root/flume/03
#定義sink
a1.sinks.k1.type=logger
a1.sinks.k1.maxbytestolog=
100#定義chanel
a1.channels.c1.type=memory
a1.channels.c1.capacity=
1000
#連線元件 同乙個source可以對接多個channel,乙個sink只能從乙個channel拿資料!
taildirsource會自動記錄採集記錄 如下
但可能存在重複採集問題,如日誌檔案寫入時,名稱為*.tmp寫入完成為**.log,將會重新採集一遍,最主要的是命名的改變
採集俠 採集
安裝好之後 採集測試 先新增欄目,1 rss採集,xml路徑 採集測試 3 定向採集 新增採集規則 1 目標頁編碼 檢視目標網頁charset,是什麼圖中就選什麼 2 列表 如果只採集乙個列表頁,那麼輸入乙個列表首頁 即可,如 要採集所有列表頁就需要設定萬用字元了,萬用字元 1 20 代表1 20頁...
採集與反採集或說防採集
反採集原理 集程式的主要步驟如下 一 獲取被採集的頁面的內容 二 從獲取 中提取所有用的資料 這種辦法,比較流行的採集器就是火車頭的2.1版本,今天我也測試了一下這個版本,用著還是不錯 它的例程上面講的是採集落伍的貼子,我發現落伍對此還是 非常大方的,雖然discuz程式針對採集也採取了反採集的策略...
採集gpu GPU溫度的採集
監控gpu引數通常由以下幾種方式 一 直接檢視windows資源管理器裡面gpu引數。windows資源監控管理器,能看到gpu各種占有率引數,但看不到gpu的溫度,且通過這ui種方式只能在windows系統中檢視,無法將資料傳的傳輸後台監控。同時win7的任務管理器不支援gpu引數顯示。二.gpu...