Elasticsearch 史上最全最常用工具清單

2022-06-11 13:48:11 字數 2234 閱讀 5465

基礎類工具

1、head外掛程式

1)功能概述:

es集群狀態檢視、索引資料檢視、es dsl實現(增、刪、改、查操作)

比較實用的地方:json串的格式化

2、kibana工具

除了支援各種資料的視覺化之外,最重要的是:支援dev tool進行restful api增刪改查操作。

——比postman工具和curl都方便很多。

3、elastichd工具

強勢功能——支援sql轉dsl,不要完全依賴,可以借鑑用。

集群監控工具

4、cerebro工具

5、elaticsearch-hq工具

管理elasticsearch集群以及通過web介面來進行查詢操作

集群遷移工具

6、elasticsearch-migration工具

支援多個版本間的資料遷移,使用scroll+bulk

7、elasticsearch-exporter

將es中的資料向其他匯出的簡單指令碼實現。

8、elasticsearch-dump

移動和儲存索引的工具。

集群資料處理工具

9、elasticsearch-curator

elasticsearch官方工具,能實現諸如資料只保留前七天的資料的功能。

安全類工具

10、x-pack工具

11、search-guard 第三方工具

search guard 是 elasticsearch 的安全外掛程式。它為後端系統(如ldap或kerberos)提供身份驗證和授權,並向elasticsearch新增審核日誌記錄和文件/字段級安全性。

search guard所有基本安全功能(非全部)都是免費的,並且內建在search guard中。 search guard支援openssl並與kibana和logstash配合使用。

視覺化類工具

12、grafana工具

grafana工具與kibana視覺化的區別:

如果你的業務線資料較少且單一,可以用kibana做出很棒很直觀的資料分析。

而如果你的資料來源很多並且業務線也多,建議使用grafana,可以減少你的工作量

自動化運維工具

elasticsearch免費的自動化運維工具

13、ansible

14、puppet

15、cookbook

以上三個工具來自medcl大神社群問題的回覆,我沒有實踐過三個工具。

類sql查詢工具

16、elasticsearch-sql 工具

sql 一款國人nlp-china團隊寫的通過類似sql語法進行查詢的工具

es6.3+以後的新版本會整合sql。

增強類工具

17、conveyor 工具

kibna外掛程式——圖形化資料匯入工具

18、kibana_markdown_doc_view 工具

kibana文件檢視強化外掛程式,以markdown格式展示文件

19、 indices_view工具

20、dremio 工具

支援sql轉dsl,

支援elasticsearch、mysql、oracle、mongo、csv等多種格式視覺化處理;

支援es多表的join操作

報警類

21、elastalert

elastalert 是 yelp 公司開源的一套用 python2.6 寫的報警框架。屬於後來 elastic.co 公司出品的 watcher 同類產品。

使用舉例:當我們把elk搭建好、病順利的收集到日誌,但是日誌裡發生了什麼事,我們並不能第一時間知道日誌裡到底發生了什麼,運維需要第一時間知道日誌發生了什麼事,所以就有了elastalert的郵件報警。

22、sentinl

sentinl 6擴充套件了siren investigate和kibana的警報和報告功能,使用標準查詢,可程式設計驗證器和各種可配置操作來監控,通知和報告資料系列更改 - 將其視為乙個獨立的「watcher」 「報告」功能(支援png / pdf快照)。

sentinl還旨在簡化在siren investigate / kibana 6.x中通過其本地應用程式介面建立和管理警報和報告的過程,或通過在kibana 6.x +中使用本地監視工具來建立和管理警報和報告的過程。

小結突然想起魯迅先生筆下的孔乙己「茴香豆的茴字有幾種寫法?」

管幾種寫法,適合自己的工具才是較好的!

史上最強的黑客

這是我當黑客以來接到的一項最具挑戰性的生意,是去黑另乙個黑客的電腦。工欲善其事,必先利其器,我很明白現今裝備的重要性,於是我把自己從頭武裝到腳,包裝上了全黑的緊身夜行衣和戴上墨鏡。這樣我看起來就很黑很客,很重很要了。一出門,我就給車撞了 司機下車後,打著強光手電筒找了好半天才找得到躺在地上的我,說了...

史上最強Git教程

史上最強 git教程 1.git 分布式倉庫 git是乙個開源的分布式版本控制系統,用於敏捷高效地處理任何或小或大的專案。git 與常用的版本控制工具 cvs,subversion 等不同,它採用了分布式版本庫的方式,不必伺服器端軟體支援。詳情參考 使用git前,需要先建立乙個倉庫 reposito...

史上最全scss教程

1.資料型別 sassscript 支援 6 種主要的資料型別 將帶引號的字串轉化為無引號字串 mixin b selector includeb header 2.變數 通常在專案中會建立variable.scss用來儲存一些全域性變數 普通變數 g primary 409eff 解構 value...