elasticsearch引數詳解

2022-08-16 13:24:17 字數 3254 閱讀 3273

elasticsearch.yml

cluster.name: elasticsearch

配置es的集群名稱,預設是elasticsearch,es會自動發現在同一網段下的es,如果在同一網段下有多個集群,就可以用這個屬性來區分不同的集群。

node.name: "franz kafka"

節點名,預設隨機指定乙個name列表中名字,該列表在es的jar包中config資料夾裡name.txt檔案中,其中有很多作者新增的有趣名字。

node.master: true

指定該節點是否有資格被選舉成為node,預設是true,es是預設集群中的第一台機器為master,如果這台機掛了就會重新選舉master。

node.data: true

指定該節點是否儲存索引資料,預設為true。

index.number_of_shards: 5

設定預設索引分片個數,預設為5片。

index.number_of_replicas: 1

設定預設索引副本個數,預設為1個副本。

path.conf: /path/to/conf

設定配置檔案的儲存路徑,預設是es根目錄下的config資料夾。

path.data: /path/to/data

設定索引資料的儲存路徑,預設是es根目錄下的data資料夾,可以設定多個儲存路徑,用逗號隔開,例:

path.data: /path/to/data1,/path/to/data2

path.work: /path/to/work

設定臨時檔案的儲存路徑,預設是es根目錄下的work資料夾。

path.logs: /path/to/logs

設定日誌檔案的儲存路徑,預設是es根目錄下的logs資料夾

path.plugins: /path/to/plugins

設定外掛程式的存放路徑,預設是es根目錄下的plugins資料夾

bootstrap.mlockall: true

network.bind_host: 192.168.0.1

設定繫結的ip位址,可以是ipv4或ipv6的,預設為0.0.0.0。

network.publish_host: 192.168.0.1

設定其它節點和該節點互動的ip位址,如果不設定它會自動判斷,值必須是個真實的ip位址。

network.host: 192.168.0.1

這個引數是用來同時設定bind_host和publish_host上面兩個引數。

transport.tcp.port: 9300

設定節點間互動的tcp埠,預設是9300。

transport.tcp.compress: true

設定是否壓縮tcp傳輸時的資料,預設為false,不壓縮。

設定對外服務的http埠,預設為9200。

設定內容的最大容量,預設100mb

是否使用http協議對外提供服務,預設為true,開啟。

gateway.type: local

gateway的型別,預設為local即為本地檔案系統,可以設定為本地檔案系統,分布式檔案系統,hadoop的hdfs,和amazon的s3伺服器,其它檔案系統的設定方法下次再詳細說。

gateway.recover_after_nodes: 1

設定集群中n個節點啟動時進行資料恢復,預設為1。

gateway.recover_after_time: 5m

設定初始化資料恢復程序的超時時間,預設是5分鐘。

gateway.expected_nodes: 2

設定這個集群中節點的數量,預設為2,一旦這n個節點啟動,就會立即進行資料恢復。

cluster.routing.allocation.node_initial_primaries_recoveries: 4

初始化資料恢復時,併發恢復執行緒的個數,預設為4。

cluster.routing.allocation.node_concurrent_recoveries: 2

新增刪除節點或負載均衡時併發恢復執行緒的個數,預設為4。

indices.recovery.max_size_per_sec: 0

設定資料恢復時限制的頻寬,如入100mb,預設為0,即無限制。

indices.recovery.concurrent_streams: 5

設定這個引數來限制從其它分片恢復資料時最大同時開啟併發流的個數,預設為5。

discovery.zen.minimum_master_nodes: 1

設定這個引數來保證集群中的節點可以知道其它n個有master資格的節點。預設為1,對於大的集群來說,可以設定大一點的值(2-4)

discovery.zen.ping.timeout: 3s

設定集群中自動發現其它節點時ping連線超時時間,預設為3秒,對於比較差的網路環境可以高點的值來防止自動發現時出錯。

discovery.zen.ping.multicast.enabled: false

設定是否開啟多播發現節點,預設是true。

discovery.zen.ping.unicast.hosts: ["host1", "host2:port", "host3[portx-porty]"]

設定集群中master節點的初始列表,可以通過這些節點來自動發現新加入集群的節點。

下面是一些查詢時的慢日誌引數設定

index.search.slowlog.level: trace

index.search.slowlog.threshold.query.warn: 10s

index.search.slowlog.threshold.query.info: 5s

index.search.slowlog.threshold.query.debug: 2s

index.search.slowlog.threshold.query.trace: 500ms

index.search.slowlog.threshold.fetch.warn: 1s

index.search.slowlog.threshold.fetch.info: 800ms

index.search.slowlog.threshold.fetch.debug:500ms

index.search.slowlog.threshold.fetch.trace: 200ms

來自為知筆記(wiz)

elasticsearch引數優化

elasticsearch.yml中的配置 indices.memory.index buffer size 30 應該至少為系統cache預留一半的可用物理記憶體,更大的記憶體有更高的cache命中率。使用更快的硬體。為了讓搜尋時的成本更低,文件應該合理建模。特別是應該避免join操作,巢狀 ne...

elasticsearch引數配置

前一段時間配置了公司offline,online的es服務兩組,根據節點分工不同,分為master,client,data三種型別節點 伺服器引數修改如下 etc sysctl.conf 增加 vm.max map count 262144 然後執行sysctl p生效 etc security l...

ElasticSearch 引數調優

系統層面的調優主要是記憶體的設定與避免交換記憶體。es 安裝後預設設定的堆記憶體是1gb,這很明顯是不夠的,那麼接下來就會有乙個問題出現 我們要設定多少記憶體給 es 呢?其實這是要看我們集群節點的記憶體大小,還取決於我們是否在伺服器節點上還是否要部署其他服務。那我們在建立索引的時候,應該建立多少個...