TiFlash アラート ルール

このドキュメントでは、TiFlash クラスターのアラート ルールを紹介します。

TiFlash_schema_error

  • アラート ルール:

    increase(tiflash_schema_apply_count{type="failed"}[15m]) > 0

  • 説明:

    スキーマ適用エラーが発生すると、アラートがトリガーされます。

  • 解決:

    エラーは、間違ったロジックが原因である可能性があります。サポートについては、 TiFlash 研究開発にお問い合わせください。

TiFlash_schema_apply_duration

  • アラート ルール:

    histogram_quantile(0.99, sum(rate(tiflash_schema_apply_duration_seconds_bucket[1m])) BY (le, instance)) > 20

  • 説明:

    適用時間が 20 秒を超える確率が 99% を超えると、アラートがトリガーされます。

  • 解決:

    これは、TiFlash ストレージ エンジンの内部の問題が原因である可能性があります。サポートについては、 TiFlash 研究開発にお問い合わせください。

TiFlash_raft_read_index_duration

  • アラート ルール:

    histogram_quantile(0.99, sum(rate(tiflash_raft_read_index_duration_seconds_bucket[1m])) BY (le, instance)) > 3

  • 説明:

    読み取りインデックスの継続時間が 3 秒を超える確率が 99% を超えると、アラートがトリガーされます。

    ノート:

    read indexは、TiKV リーダーに送信される kvproto リクエストです。 TiKV リージョンの再試行、ビジー ストア、またはネットワークの問題により、要求時間がread indexに長くなる可能性があります。

  • 解決:

    頻繁な再試行は、TiKV クラスターの頻繁な分割または移行が原因である可能性があります。 TiKV クラスターのステータスをチェックして、再試行の理由を特定できます。

TiFlash_raft_wait_index_duration

  • アラート ルール:

    histogram_quantile(0.99, sum(rate(tiflash_raft_wait_index_duration_seconds_bucket[1m])) BY (le, instance)) > 2

  • 説明:

    TiFlash のリージョン Raft Index の待ち時間が 2 秒を超える確率が 99% を超えると、アラートがトリガーされます。

  • 解決:

    TiKV とプロキシ間の通信エラーが原因である可能性があります。サポートについては、 TiFlash 研究開発にお問い合わせください。

エコシステム
TiDB
TiKV
TiSpark
Chaos Mesh
© 2022 PingCAP. All Rights Reserved.