ターゲット データベースのTiDB Lightning要件

TiDB Lightningを使用する前に、環境が要件を満たしているかどうかを確認する必要があります。これにより、インポート中のエラーが軽減され、インポートが確実に成功します。

ターゲットデータベースの権限

インポート モードと有効な機能に基づいて、ターゲット データベース ユーザーに異なる権限を付与する必要があります。次の表は参考資料です。

特徴範囲必要な権限備考
必須基本関数ターゲットテーブル作成、選択、挿入、更新、削除、ドロップ、変更DROP は、tidb-lightning-ctl がcheckpoint-destroy-all コマンドを実行する場合にのみ必要です。
ターゲットデータベース作成
必須論理インポートモード情報スキーマ.列選択する
物理インポートモードmysql.tidb選択する
-素晴らしい
- RESTRICTED_VARIABLES_ADMIN、RESTRICTED_TABLES_ADMINターゲット TiDB が SEM を有効にする場合に必要
おすすめされた競合検出、最大エラーlightning.task-info-schema-name に設定されたスキーマ選択、挿入、更新、削除、作成、ドロップ必要ない場合は、値を「」に設定する必要があります。
オプション並行輸入品lightning.meta-schema-name に設定されたスキーマ選択、挿入、更新、削除、作成、ドロップ必要ない場合は、値を「」に設定する必要があります。
オプションチェックポイント.ドライバー = "mysql"チェックポイント.スキーマ設定選択、挿入、更新、削除、作成、ドロップチェックポイント情報がファイルではなくデータベースに保存される場合に必要です

ターゲットデータベースのストレージスペース

ターゲット TiKV クラスターには、インポートされたデータを保存するのに十分なディスク容量が必要です。 標準的なハードウェア要件に加えて、ターゲット TiKV クラスターのstorage容量は、データ ソースのサイズ x レプリカの数 x 2より大きくなければなりません。たとえば、クラスターがデフォルトで 3 つのレプリカを使用する場合、ターゲット TiKV クラスターにはデータ ソースのサイズの 6 倍を超えるstorageスペースが必要です。この式には x 2 が含まれています。その理由は次のとおりです。

  • インデックスには余分なスペースが必要になる場合があります。
  • RocksDB には空間増幅効果があります。

Dumplingによって MySQL からエクスポートされる正確なデータ量を計算することは困難です。ただし、次の SQL ステートメントを使用して、information_schema.tables テーブルのデータ長フィールドを要約することで、データ量を見積もることができます。

すべてのスキーマのサイズを MiB 単位で計算します。 ${schema_name} を実際のスキーマ名に置き換えます。

SELECT table_schema, SUM(data_length)/1024/1024 AS data_length, SUM(index_length)/1024/1024 AS index_length, SUM(data_length+index_length)/1024/1024 AS sum FROM information_schema.tables WHERE table_schema = "${schema_name}" GROUP BY table_schema;

最大のテーブルのサイズを MiB 単位で計算します。 ${schema_name} を実際のスキーマ名に置き換えます。

SELECT table_name, table_schema, SUM(data_length)/1024/1024 AS data_length, SUM(index_length)/1024/1024 AS index_length,sum(data_length+index_length)/1024/1024 AS sum FROM information_schema.tables WHERE table_schema = "${schema_name}" GROUP BY table_name,table_schema ORDER BY sum DESC LIMIT 5;
Playground
新規
登録なしで TiDB の機能をワンストップでインタラクティブに体験できます。
製品
TiDB Cloud
TiDB
価格
PoC お問い合わせ
エコシステム
TiKV
TiFlash
OSS Insight
© 2023 PingCAP. All Rights Reserved.