filebeat es 6 5 搭建注意事項

2021-09-11 01:52:17 字數 1065 閱讀 5217

filebeat修改配置檔案

vim /usr/local/filebeat/filebeat.yml檔案:

關於json格式的日誌可能用到的配置引數:

json.keys_under_root:

json.overwrite_keys:

json.add_error_key:

json.message_key:

es日誌清理策略

#/bin/bash

#es-index-clear

#只保留7天內的日誌索引

last_data=`date -d "-7 days" "+%y.%m.%d"`

#刪除7天內份所有的索引

curl -xdelete ''$'*'

crontab -e每天0點刪除日誌

0 0 * * * /usr/local/elasticsearch/es-index-clear.sh

4、logstash使用piplline方式來啟動

4.1、vim /usr/local/logstash/config

新增如下內容:

- pipeline.id: pipeline_nginx

queue.type: memory

path.config: "/usr/local/logstash/config/logstash.conf"

(可以配置多個配置檔案,多個管道)

#- pipeline.id: pipeline_other

#  queue.type: memory

#  path.config: "/usr/local/logstash/logstash-other.conf"

4.2、將所編寫的配置檔案放置在path.config對應的目錄之下

配置檔案的內容如下:

input

}output"}

}4.3、啟動方式(不加配置檔案,預設是以pipeline方式啟動的)

cd /usr/local/logstash/bin/

nohup ./logstash &

5、logstash的kafka外掛程式介紹(重要)

Kafka Zookeeper集群搭建及注意事項

說明 只配置主要的配置,其他都是預設 ip hostname 192.168.174.140 kafka 01 192.168.174.141 kafka 02 192.168.174.142 kafka 03 網上有一些部落格,就是把zookeeper和kafka的預設配置也寫出來,然後埠也寫錯等...

centos6 5下安裝vsftp配置與注意事項

最近在公司伺服器環境下部署應用,需要用到ftp來傳,在配置許可權上走了一些彎路,現把步驟記錄下來,做後續參考 1,yum y install vsftp 快速安裝 2,service vsftp start stop restart 開啟 關閉 重啟 安裝成功後,可以在本地使用 ftp軟體連線,匿名...

window搭建flutter開發環境注意事項

2 flutter和androidhome的環境變數一定要配置,最好先按照flutter sdk然後配置好所有環境變數,再安裝android studio 3 flutter doctor命令實在太香了,可以檢測你的開發環境包括編譯器外掛程式配置情況,安裝完android studio和flutte...