📣新登場!TiDB Cloud BYOC、TiDB Cloud Filesystem、PostgreSQL-compatible TiDB Cloud Starter がパブリックプレビュー中。このページは自動翻訳されたものです。原文はこちらからご覧ください。

gh-ost または pt-osc を使用するデータベースからの継続的なレプリケーション



本番環境では、DDL実行中のテーブルロックによって、データベースからの読み取りまたは書き込みがある程度ブロックされる可能性があります。そのため、読み取りと書き込みへの影響を最小限に抑えるため、オンラインDDLツールを使用してDDLを実行することがよくあります。一般的なDDLツールはgh-ostとpt-oscです。

DM を使用して MySQL から TiDB にデータを移行する場合、 online-ddlを有効にして DM と gh-ost または pt-osc の連携を許可できます。

詳細なレプリケーション手順については、シナリオごとに次のドキュメントを参照してください。

DM でオンライン DDL を有効にする

DM のタスク設定ファイルで、以下に示すように、グローバルパラメーターonline-ddlをtrueに設定します。

# ----------- Global configuration ----------- ## ********* Basic configuration ********* name: test # The name of the task. Should be globally unique. task-mode: all # The task mode. Can be set to `full`, `incremental`, or `all`. shard-mode: "" # Optional. The default value is "", which disables sharding DDL coordination. Set this parameter to "pessimistic" only if you need DM to coordinate schema changes across sharded tables in a shard merge task. You can also use "optimistic" after understanding its principles and restrictions. meta-schema: "dm_meta" # The downstream database that stores the `meta` information. online-ddl: true # Enable online-ddl support on DM to support automatic processing of "gh-ost" and "pt-osc" for the upstream database.

online-ddl を有効にした後のワークフロー

DM で online-ddl を有効にすると、gh-ost または pt-osc を複製する DM によって生成される DDL文が変更されます。

gh-ost または pt-osc のワークフロー:

  • DDL 実テーブルのテーブルスキーマに従ってゴーストテーブルを作成します。

  • ゴーストテーブルに DDL を適用します。

  • DDL 実テーブルのデータをゴーストテーブルに複製します。

  • 2 つのテーブル間でデータの一貫性が保たれたら、名前変更ステートメントを使用して実際のテーブルをゴーストテーブルに置き換えます。

DM のワークフロー:

  • 下流のゴーストテーブルの作成をスキップします。

  • ゴーストテーブルに適用された DDL を記録します。

  • 実テーブルの DML イベントを複製し、ゴーストテーブルの DML イベントは無視します。

  • アップストリームでゴーストテーブルの名前が変更されて実テーブルが置き換えられたときに、記録された DDL をダウンストリームの実テーブルに適用します。

dm-online-ddl

ワークフローの変更により、次のような利点がもたらされます。

  • ダウンストリーム TiDB はゴーストテーブルを作成して複製する必要がないため、ストレージスペースとネットワーク転送のオーバーヘッドが節約されます。

  • シャードテーブルからデータを移行およびマージする場合、レプリケーションの正確性を確保するために、シャードゴーストテーブルごとに RENAME 操作は無視されます。

参照

オンライン DDL ツールを使用した DM の動作詳細

このページは役に立ちましたか?