TiDB データ移行におけるアラートの処理
このドキュメントでは、DM でアラート情報を処理する方法について説明します。
高可用性に関連するアラート
DM_master_all_down
説明:
すべての DM マスター ノードがオフラインの場合、このアラートがトリガーされます。
解決:
アラートを処理するには、次の手順を実行できます。
- クラスターの環境を確認します。
- トラブルシューティングのために、すべての DM マスター ノードのログを確認します。
DM_worker_offline
説明:
DM ワーカー ノードが 1 時間以上オフラインの場合、このアラートがトリガーされます。高可用性アーキテクチャでは、このアラートによってタスクが直接中断されることはありませんが、中断のリスクが高まります。
解決:
アラートを処理するには、次の手順を実行できます。
- 対応する DM ワーカー ノードの動作ステータスをビュー。
- ノードが接続されているかどうかを確認します。
- ログを通じてエラーをトラブルシューティングします。
DM_DDL_error
説明:
このエラーは、DM がシャーディング DDL 操作を処理しているときに発生します。
解決:
DM のトラブルシューティングを参照してください。
DM_pending_DDL
説明:
シャーディング DDL 操作が 1 時間以上保留になっている場合、このアラートがトリガーされます。
解決:
シナリオによっては、保留中のシャーディング DDL 操作がユーザーの期待どおりになる場合があります。それ以外の場合は、解決策についてはDM でシャーディング DDL ロックを手動で処理するを参照してください。
タスクステータスに関連するアラートルール
DM_task_state
説明:
DM ワーカーのサブタスクが 20 分以上
Paused
状態にある場合、アラートがトリガーされます。解決:
DM のトラブルシューティングを参照してください。
リレーログに関連するアラートルール
DM_relay_process_exits_with_error
説明:
リレー ログ処理ユニットで自動回復不可能なエラー (たとえば、 binlogファイルが見つからない) が発生した場合、または短時間 (たとえば、2 分間に 3 回以上) に回復可能なエラー (たとえば、ネットワークの問題) が複数発生した場合、このアラートがトリガーされます。
解決:
DM のトラブルシューティングを参照してください。
DM_remain_storage_of_relay_log
説明:
リレーログが保存されているディスクの空き容量が 10G 未満になると、アラートがトリガーされます。
解決策:
アラートを処理するには、次の方法があります。
- 不要なデータを手動で削除して、空きディスク容量を増やします。
- リレーログの自動データ消去戦略またはデータを手動で消去するを再構成します。
- コマンド
pause-relay
を実行して、リレー ログ プル プロセスを一時停止します。十分な空きディスク領域が確保されたら、コマンドresume-relay
を実行してプロセスを再開します。リレー ログ プル プロセスが一時停止された後、プルされていないアップストリームbinlogファイルを消去してはならないことに注意してください。
DM_relay_log_data_corruption
説明:
リレーログ処理ユニットが上流から読み取ったbinlogイベントを検証し、異常なチェックサム情報を検出すると、このユニットは
Paused
状態に移行し、アラートがトリガーされます。解決:
DM のトラブルシューティングを参照してください。
DM_fail_to_read_binlog_from_master
説明:
リレーログ処理ユニットが上流からbinlogイベントを読み取ろうとしたときにエラーが発生した場合、このユニットは
Paused
状態に移行し、アラートがトリガーされます。解決:
DM のトラブルシューティングを参照してください。
DM_fail_to_write_relay_log
説明:
リレー ログ処理ユニットがbinlogイベントをリレー ログ ファイルに書き込むときにエラーが発生すると、このユニットは
Paused
状態に移行し、アラートがトリガーされます。解決:
DM のトラブルシューティングを参照してください。
DM_binlog_file_gap_between_master_relay
説明:
現在のアップストリーム MySQL/MariaDB 内のbinlogファイルの数が、リレー ログ処理ユニットによってプルされた最新のbinlogファイルの数を 10 分間で 1以上超過すると、アラートがトリガーされます。
解決:
DM のトラブルシューティングを参照してください。
ダンプ/ロードに関連するアラートルール
DM_dump_process_exists_with_error
説明:
ダンプ処理ユニットで自動回復不可能なエラー (たとえば、 binlogファイルが見つからない) が発生した場合、または短期間に (たとえば、2 分間に 3 回以上) 回復可能なエラー (たとえば、ネットワークの問題) が複数発生した場合、このアラートがトリガーされます。
解決:
DM のトラブルシューティングを参照してください。
DM_load_process_exists_with_error
説明:
ロード処理ユニットで自動回復不可能なエラー (たとえば、 binlogファイルが見つからない) が発生した場合、または短期間に (たとえば、2 分間に 3 回以上) 回復可能なエラー (たとえば、ネットワークの問題) が複数発生した場合、このアラートがトリガーされます。
解決:
DM のトラブルシューティングを参照してください。
binlogレプリケーションに関連するアラートルール
DM_sync_process_exists_with_error
説明:
binlogレプリケーション処理ユニットで自動回復不可能なエラー (binlogファイルが見つからないなど) が発生した場合、または短期間に (たとえば、2 分間に 3 回以上) 回復可能なエラー (たとえば、ネットワークの問題) が複数発生した場合、このアラートがトリガーされます。
解決:
DM のトラブルシューティングを参照してください。
DM_binlog_file_gap_between_master_syncer
説明:
現在のアップストリーム MySQL/MariaDB 内のbinlogファイルの数が、リレー ログ処理ユニットによって処理された最新のbinlogファイルの数を 10 分間で 1以上超えると、アラートがトリガーされます。
解決:
パフォーマンスの問題に対処するを参照してください。
DM_binlog_file_gap_between_relay_syncer
説明:
現在のリレーログ処理単位内のbinlogファイルの数が、binlogレプリケーション処理単位で処理された最新のbinlogファイルの数を 10 分間で 1以上超えると、アラートがトリガーされます。
解決:
パフォーマンスの問題に対処するを参照してください。