溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

Elasticsearch中如何實現分片大小設定和容量規劃

發布時間:2021-12-16 17:15:11 來源:億速云 閱讀:1345 作者:柒染 欄目:大數據

本篇文章給大家分享的是有關Elasticsearch中如何實現分片大小設定和容量規劃,小編覺得挺實用的,因此分享給大家學習,希望大家閱讀完這篇文章后可以有所收獲,話不多說,跟著小編一起來看看吧。

以 Elasticsearch 7.9.2 為準。

分片大小

日志類:單個分片不超過 50G

搜索類:單個分片不超過 20G

先估算總數據量,再根據分片大小,確定分片數。

容量規劃

容量規劃時要考慮的因素:

  • 機器的軟硬件配置

  • 單個文檔的尺寸,文檔總數,索引大小,分片個數,副本個數

  • 文檔寫入方式(如 bulk 的單次數據量)

  • 文檔的復雜度

  • 文檔的讀取方式(如,要進行怎樣的查詢和聚合)

容量規劃的步驟:

  1. 先進行性能評估:例如每秒寫多少,每秒讀多少,讀單個文檔能接受多大延遲。

  2. 再觀察數據:mapping 的樣子,需要什么樣的查詢和聚合。

兩個典型的場景:

  • 搜索:數據增長較慢。

  • 日志:增長快,需要冷熱分離,需要自動刪除。

硬件配置:

搜索之類的高性能場景,磁盤要 SSD,磁盤 GB 數/內存 GB 數 = 1/10

日志和并發不高的場景,磁盤可以機械硬盤,磁盤 GB 數/內存 GB 數 = 1/50

單節點的數據量最好 2 TB 之內,最大不超過 5 TB。

JVM 的內存配機器內存的一半,同時 JVM 內存不超過 32 GB。

以上就是Elasticsearch中如何實現分片大小設定和容量規劃,小編相信有部分知識點可能是我們日常工作會見到或用到的。希望你能通過這篇文章學到更多知識。更多詳情敬請關注億速云行業資訊頻道。

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

亚洲午夜精品一区二区_中文无码日韩欧免_久久香蕉精品视频_欧美主播一区二区三区美女