TiFlashアラート ルール

このドキュメントでは、 TiFlashクラスターのアラート ルールを紹介します。

TiFlash_schema_error

• アラート ルール:

  increase(tiflash_schema_apply_count{type="failed"}[15m]) > 0

• 説明：

  スキーマ適用エラーが発生すると、アラートがトリガーされます。

• 解決：

  エラーは、間違ったロジックが原因である可能性があります。 PingCAP またはコミュニティから支持を得ます 。

TiFlash_schema_apply_duration

• アラート ルール:

  histogram_quantile(0.99, sum(rate(tiflash_schema_apply_duration_seconds_bucket[1m])) BY (le, instance)) > 20

• 説明：

  適用時間が 20 秒を超える確率が 99% を超えると、アラートがトリガーされます。

• 解決：

  これは、 TiFlashstorageエンジンの内部の問題が原因である可能性があります。 PingCAP またはコミュニティから支持を得ます 。

TiFlash_raft_read_index_duration

• アラート ルール:

  histogram_quantile(0.99, sum(rate(tiflash_raft_read_index_duration_seconds_bucket[1m])) BY (le, instance)) > 3

• 説明：

  読み取りインデックスの継続時間が 3 秒を超える確率が 99% を超えると、アラートがトリガーされます。

  ノート：

  read indexは、TiKV リーダーに送信される kvproto リクエストです。 TiKV リージョンの再試行、ビジー ストア、またはネットワークの問題により、要求時間がread indexに長くなる可能性があります。

• 解決：

  頻繁な再試行は、TiKV クラスターの頻繁な分割または移行が原因である可能性があります。 TiKV クラスターのステータスをチェックして、再試行の理由を特定できます。

TiFlash_raft_wait_index_duration

• アラート ルール:

  histogram_quantile(0.99, sum(rate(tiflash_raft_wait_index_duration_seconds_bucket[1m])) BY (le, instance)) > 2

• 説明：

  TiFlashのリージョン Raft Index の待ち時間が 2 秒を超える確率が 99% を超えると、アラートがトリガーされます。

• 解決：

  TiKV とプロキシ間の通信エラーが原因である可能性があります。 PingCAP またはコミュニティから支持を得ます 。