搞了無數次的filebeat-->logstash今天栽了跟頭
filebeat在讀取如下檔案的時候,openchgw.log 軟連線speechgw.log.20170703183729檔案
lrwxrwxrwx 1 admin admin 44 jul 3 18:37speechgw.log-> /home/admin/logs/speechgw.log.20170703183729
如果filebeat中配置
#*************************== filebeat prospectors *************************====filebeat.prospectors:# each -is a prospector. most options can be set at the prospector level, so
# you can use different prospectors
forvarious configurations.
# below are the prospector specific configurations.
-input_type: log
paths:
- /home/admin/logs/speechgw.logdocument_type: open-gw
則不會收取日誌,必須配置如下成實體檔案,才能夠成功。
#*************************== filebeat prospectors *************************====filebeat.prospectors:# each -is a prospector. most options can be set at the prospector level, so
# you can use different prospectors
forvarious configurations.
# below are the prospector specific configurations.
-input_type: log
paths:
- /home/admin/logs/speechgw.log.20170703183729
document_type: open-gw
感覺elk是不是應該修復一下這個問題。
在filebeat.full.yml中開啟引數
symlinks: true
解決問題。多謝zolinxu @zolinxu 2018-02-28的指教。
謝謝!
(五)ELK系列之Filebeat搭建
一 elk系列之elk介紹 二 elk系列之elasticsearch搭建 三 elk系列之kibana搭建 四 elk系列之logstash搭建 1 filebeat包準備 提取碼 fbjo 當然也可以直接用wget在linux裡面獲取 root es1 master node test wget...
ELK日誌處理之Filebeat工作原理
beats是elastic stack技術棧中輕量級的日誌採集器,beats家族包括以下五個成員 elk架構中使用logstash收集 解析日誌,但是logstash對記憶體 cpu io等資源消耗比較高。相比 logstash,beats所佔系統的cpu和記憶體幾乎可以忽略不計。elasticse...
ELK日誌處理之Filebeat工作原理
beats是elastic stack技術棧中輕量級的日誌採集器,beats家族包括以下五個成員 filebeat 輕量級的日誌採集器,可用於收集檔案資料。metricbeat 5.0版本之前名為topbeat,蒐集系統 程序和檔案系統級別的 cpu 和記憶體使用情況等資料。packetbeat 收...