本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。
Amazon MSK 佈建叢集的建議 CloudWatch 警示
監控您的 Amazon MSK 佈建叢集,在問題影響您的應用程式之前對其進行偵測。當 CloudWatch 指標在經過一些時間超過指定的值時,CloudWatch 警示會執行動作。例如,如果您的分割區計數超過代理程式執行個體大小的建議值超過 15 分鐘,您可能會想要收到電子郵件通知。建議使用下表中的關鍵警示,但它們不是您可以建立來監控叢集的警示完整清單。
如需設定警示的詳細資訊,請參閱《Amazon CloudWatch 使用者指南》中的建立 Amazon CloudWatch 警示。 Amazon CloudWatch
下表列出同時適用於標準和快速代理程式的警示。
| 警示 | 問題 |
|---|---|
|
維度: |
一或多個代理程式的平均 CPUUser+CPUSystem 超過建議的 60%。如需詳細資訊,請參閱 監控 CPU 用量。 |
|
維度: |
一或多個代理程式的分割區大於建議的分割區計數限制。如需了解詳細資訊,請參閱 正確調整叢集大小:每個標準代理程式的分割區數量 和 快速代理程式分割區配額。 |
|
維度: |
主題中所有分割區的彙總位移延遲超過 X。 如需延遲的詳細資訊,您可以使用分割區層級 |
下表列出僅適用於標準代理程式的警示。
| 警示 | 問題 |
|---|---|
|
維度: |
一或多個主題分割區無法使用。當分割區無法使用時,產生和使用這些分割區的操作會失敗。離線分割區不應發生在平衡良好、大小正確且設定正確的叢集上。如需詳細資訊,請參閱 建置高可用性叢集。 |
|
維度: |
一或多個主題具有低於最小設定同步內複本集 (ISR) 的分割區。當分割區低於最小 ISR 時,產生操作會失敗 (使用生產者 |
|
維度: |
一個或多個代理程式的資料磁碟用量為 80% 或以上。如需詳細資訊,請參閱 監控磁碟空間。 |
|
維度: |
一或多個中介裝置在垃圾回收後,有 60% 或更多的總堆積記憶體在使用中。如需詳細資訊,請參閱 監控 Apache Kafka 記憶體。 |
|
(Sum( 維度: |
一或多個代理程式具有基礎磁碟區讀取和寫入活動,使用其最多 80% 的可用磁碟區輸送量。若要進一步了解,請參閱佈建的儲存輸送量。 |
|
維度: |
這僅與 t3.small 代理程式類型相關。一個或多個代理程式已耗盡其 CPU 點數餘額,從最高 576 到低於 100。當餘額達到 0 時,代理程式不能超過 20% CPU 基準。若要避免 CPU 點數耗盡,請從 t3 代理程式執行個體類型升級至不使用 CPU 點數的 m7g 執行個體類型。 |
|
維度: |
一個或多個代理程式正在負責處理請求的執行緒集區上看到活動擁塞 (執行緒集區閒置少於 30%)。此處的飽和度表示請求緩慢,這可能會導致用戶端逾時。此外,請檢閱您的用戶端是否產生過多的請求。例如,未經授權的用戶端可能會積極重試代理程式拒絕的請求。若要進一步了解如何最佳化叢集輸送量,請參閱 最佳化 m5.4xl、m7g.4xl 或更大執行個體的叢集輸送量。 |
|
維度: |
一個或多個代理程式正在網路連線執行緒集區上看到活動擁塞 (執行緒集區閒置不到 30%)。此處的飽和度可能會導致逾時。此外,請檢閱您的用戶端是否產生過多的請求。例如,未經授權的用戶端可能會積極重試代理程式拒絕的請求。若要進一步了解如何最佳化叢集輸送量,請參閱 最佳化 m5.4xl、m7g.4xl 或更大執行個體的叢集輸送量。 |
|
維度: |
在代理程式上使用的檔案描述項百分比。在 100% 耗盡時,Kafka 代理程式可能無法啟動。檔案描述項計數會隨著分割區數量、每個分割區中的日誌區段數量,以及用戶端連線數量而增加。檢閱您是否有 |
|
維度: |
在代理程式上使用的記憶體映射檔案百分比。在 100% 耗盡時,Kafka 代理程式可能無法啟動。記憶體映射檔案用量計數會隨著分割區數量和每個分割區中的日誌區段數量而增加。檢閱您是否具有低 |
IAM 存取控制警示
除了上述警示之外,我們建議為下列 IAM 存取控制特定的指標建立警示。這些警示適用於已啟用 IAM 身分驗證的標準和快速代理程式。Amazon MSK 會對 IAM 連線設定邏輯限制,以保護代理程式免於 IAM 連線請求過載。違反任何這些限制會導致用戶端連線逾時,這將影響您的工作負載。
| 警示 | 問題 |
|---|---|
|
維度: |
一個或多個代理程式的連線計數等於連線限制的 80%。IAM 存取控制的每個代理程式預設 TCP 連線數上限為 3000。您可以變更此值。如需詳細資訊,請參閱Amazon MSK Express 代理程式配額適用於 Express 代理程式的 和Amazon MSK Standard 代理程式配額適用於標準代理程式的 。 |
|
維度: |
一個或多個代理程式的用戶端建立 IAM 連線的速率等於其連線建立速率限制的 80%。IAM 存取控制的每個代理程式的最大 TCP 連線速率取決於執行個體大小。如需詳細資訊,請參閱Amazon MSK Express 代理程式配額適用於 Express 代理程式的 和Amazon MSK Standard 代理程式配額適用於標準代理程式的 。 |