TiDB バックアップと復元のユースケース

TiDB スナップショットのバックアップと復元ガイドおよびTiDB ログ バックアップと PITR ガイドでは、TiDB が提供するバックアップおよび復元ソリューション、つまりスナップショット (完全) バックアップと復元、ログ バックアップ、およびポイントインタイム リカバリ (PITR) について説明します。このドキュメントは、特定のユース ケースで TiDB のバックアップおよび復元ソリューションをすぐに開始するのに役立ちます。

AWS に TiDB本番クラスターをデプロイし、ビジネスチームが次の要件を要求しているとします。

  • データの変更をタイムリーにバックアップします。データベースに障害が発生した場合、最小限のデータ損失でアプリケーションを迅速に回復できます (許容できるデータ損失は数分のみ)。
  • 毎月、特定の時間に業務監査を実行します。監査リクエストを受け取ったら、要求に応じて過去 1 か月の特定の時点のデータを照会するためのデータベースを提供する必要があります。

PITR を使用すると、前述の要件を満たすことができます。

TiDBクラスタとBRをデプロイ

PITR を使用するには、TiDB クラスター >= v6.2.0 をデプロイし、 BR をTiDB クラスターと同じバージョンに更新する必要があります。このドキュメントでは、例として v7.5.3 を使用します。

次の表は、TiDB クラスターで PITR を使用するために推奨されるハードウェア リソースを示しています。

成分CPUメモリディスクAWSインスタンスインスタンス数
ティビ8コア以上16GB以上スカンジナビア航空c5.2特大2
PD8コア以上16GB以上ソリッドステートドライブc5.2特大3
ティクヴ8コア以上32GB以上ソリッドステートドライブm5.2xラージ3
BR8コア以上16GB以上スカンジナビア航空c5.2特大1
モニター8コア以上16GB以上スカンジナビア航空c5.2特大1

注記:

  • BR がバックアップおよび復元タスクを実行する場合、PD および TiKV にアクセスする必要があります。BRがすべての PD および TiKV ノードに接続できることを確認してください。
  • BRサーバーと PD サーバーは同じタイムゾーンを使用する必要があります。

TiUPを使用して TiDB クラスターをデプロイまたはアップグレードします。

TiUPを使用してBR をインストールまたはアップグレードします。

  • インストール:

    tiup install br:v7.5.3
  • アップグレード:

    tiup update br:v7.5.3

バックアップstorageを構成する (Amazon S3)

バックアップ タスクを開始する前に、次の点を考慮してバックアップstorageを準備します。

  1. バックアップデータを保存する S3 バケットとディレクトリを準備します。
  2. S3 バケットにアクセスするための権限を設定します。
  3. 各バックアップデータを保存するサブディレクトリを計画します。

詳細な手順は次のとおりです。

  1. バックアップ データを保存するためのディレクトリを S3 に作成します。この例のディレクトリはs3://tidb-pitr-bucket/backup-dataです。

    1. バケットを作成します。バックアップデータを保存する既存の S3 を選択できます。存在しない場合は、 AWS ドキュメント: バケットの作成を参照して S3 バケットを作成します。この例では、バケット名はtidb-pitr-bucketです。
    2. バックアップデータ用のディレクトリを作成します。バケット( tidb-pitr-bucket )にbackup-dataという名前のディレクトリを作成します。詳細な手順については、 AWS ドキュメント: フォルダーを使用して Amazon S3 コンソールでオブジェクトを整理するを参照してください。
  2. BRと TiKV が S3 ディレクトリにアクセスするための権限を設定します。S3 バケットにアクセスする最も安全な方法であるIAMメソッドを使用して権限を付与することをお勧めします。詳細な手順については、 AWS ドキュメント: ユーザーポリシーによるバケットへのアクセスの制御を参照してください。必要な権限は次のとおりです。

    • バックアップ クラスター内の TiKV とBRにs3://tidb-pitr-bucket/backup-data s3:GetObject s3:DeleteObject s3:ListBucket 、およびs3:AbortMultipartUpload権限s3:PutObject必要です。
    • 復元クラスター内の TiKV とBRには、 s3://tidb-pitr-bucket/backup-dataディレクトリのs3:ListBuckets3:GetObjects3:DeleteObject 、およびs3:PutObject権限が必要です。
  3. スナップショット (完全) バックアップやログ バックアップなどのバックアップ データを保存するディレクトリ構造を計画します。

    • すべてのスナップショット バックアップ データはs3://tidb-pitr-bucket/backup-data/snapshot-${date}ディレクトリに保存されます。 ${date}スナップショット バックアップの開始時刻です。たとえば、2022/05/12 00:01:30 に開始するスナップショット バックアップはs3://tidb-pitr-bucket/backup-data/snapshot-20220512000130に保存されます。
    • ログバックアップデータはs3://tidb-pitr-bucket/backup-data/log-backup/ディレクトリに保存されます。

バックアップポリシーを決定する

最小限のデータ損失、迅速な回復、および 1 か月以内のビジネス監査の要件を満たすには、次のようにバックアップ ポリシーを設定できます。

  • ログ バックアップを実行して、データベース内のデータの変更を継続的にバックアップします。
  • 2 日ごとに午前 00:00 にスナップショット バックアップを実行します。
  • スナップショット バックアップ データとログ バックアップ データを 30 日以内に保持し、30 日以上経過したバックアップ データをクリーンアップします。

ログバックアップを実行する

ログ バックアップ タスクが開始されると、TiKV クラスターでログ バックアップ プロセスが実行され、データベースのデータ変更が S3storageに継続的に送信されます。ログ バックアップ タスクを開始するには、次のコマンドを実行します。

tiup br log start --task-name=pitr --pd="${PD_IP}:2379" \ --storage='s3://tidb-pitr-bucket/backup-data/log-backup'

ログ バックアップ タスクの実行中に、バックアップ ステータスを照会できます。

tiup br log status --task-name=pitr --pd="${PD_IP}:2379" ● Total 1 Tasks. > #1 < name: pitr status: ● NORMAL start: 2022-05-13 11:09:40.7 +0800 end: 2035-01-01 00:00:00 +0800 storage: s3://tidb-pitr-bucket/backup-data/log-backup speed(est.): 0.00 ops/s checkpoint[global]: 2022-05-13 11:31:47.2 +0800; gap=4m53s

スナップショットバックアップを実行する

crontab などの自動ツールを使用して、スナップショット バックアップ タスクを定期的に実行できます。たとえば、2 日ごとに 00:00 にスナップショット バックアップを実行します。

以下に 2 つのスナップショット バックアップの例を示します。

  • 2022/05/14 00:00:00にスナップショットバックアップを実行します

    tiup br backup full --pd="${PD_IP}:2379" \ --storage='s3://tidb-pitr-bucket/backup-data/snapshot-20220514000000' \ --backupts='2022/05/14 00:00:00 +08:00'
  • 2022/05/16 00:00:00にスナップショットバックアップを実行します

    tiup br backup full --pd="${PD_IP}:2379" \ --storage='s3://tidb-pitr-bucket/backup-data/snapshot-20220516000000' \ --backupts='2022/05/16 00:00:00 +08:00'

PITRを実行する

2022/05/15 18:00:00 のデータをクエリする必要があるとします。PITR を使用して、2022/05/14 に作成されたスナップショット バックアップと、スナップショットから 2022/05/15 18:00:00 までのログ バックアップ データを復元することで、クラスターをその時点に復元できます。

コマンドは次のとおりです。

tiup br restore point --pd="${PD_IP}:2379" \ --storage='s3://tidb-pitr-bucket/backup-data/log-backup' \ --full-backup-storage='s3://tidb-pitr-bucket/backup-data/snapshot-20220514000000' \ --restored-ts '2022-05-15 18:00:00+0800' Full Restore <--------------------------------------------------------------------------------------------------------------------------------------------------------> 100.00% [2022/05/29 18:15:39.132 +08:00] [INFO] [collector.go:69] ["Full Restore success summary"] [total-ranges=12] [ranges-succeed=xxx] [ranges-failed=0] [split-region=xxx.xxxµs] [restore-ranges=xxx] [total-take=xxx.xxxs] [restore-data-size(after-compressed)=xxx.xxx] [Size=xxxx] [BackupTS={TS}] [total-kv=xxx] [total-kv-size=xxx] [average-speed=xxx] Restore Meta Files <--------------------------------------------------------------------------------------------------------------------------------------------------> 100.00% Restore KV Files <----------------------------------------------------------------------------------------------------------------------------------------------------> 100.00% [2022/05/29 18:15:39.325 +08:00] [INFO] [collector.go:69] ["restore log success summary"] [total-take=xxx.xx] [restore-from={TS}] [restore-to={TS}] [total-kv-count=xxx] [total-size=xxx]

古いデータをクリーンアップする

crontab などの自動ツールを使用して、2 日ごとに古いデータをクリーンアップできます。

たとえば、次のコマンドを実行して、古いデータをクリーンアップできます。

  • 2022/05/14 00:00:00より前のスナップショットデータを削除します

    rm s3://tidb-pitr-bucket/backup-data/snapshot-20220514000000
  • 2022/05/14 00:00:00より前のログバックアップデータを削除します

    tiup br log truncate --until='2022-05-14 00:00:00 +0800' --storage='s3://tidb-pitr-bucket/backup-data/log-backup'

参照

このページは役に立ちましたか?