TiDB データ移行のソフトウェアおよびハードウェア要件

TiDB データ マイグレーション (DM) は、主流の Linux オペレーティング システムをサポートします。特定のバージョン要件については、次の表を参照してください。

Linux OSバージョン
レッドハット エンタープライズ リナックス7.3以降
CentOS7.3以降
Oracle エンタープライズ Linux7.3以降
Ubuntu LTS16.04以降

DM は、Intelアーキテクチャのサーバーおよび主流の仮想化環境に導入して実行できます。

DM は、64 ビットの汎用ハードウェアサーバープラットフォーム (Intel x86-64アーキテクチャ) 上で展開して実行できます。このセクションでは、開発、テスト、本番環境で使用されるサーバーについて、推奨されるハードウェア構成を示します (これらには、オペレーティング システムで使用されるリソースは含まれません)。

開発およびテスト環境

成分CPUメモリローカルストレージ通信網インスタンスの数 (最小要件)
DMマスター4コア以上8GB以上SAS、200GB以上ギガビットネットワークカード1
DMワーカー8コア以上16GB以上SAS、200 GB+ (移行されたデータのサイズより大きい)ギガビットネットワークカード上流の MySQL インスタンスの数

注記:

  • テスト環境では、機能検証に使用するDM-masterとDM-workerを同一サーバー上に配置できます。
  • パフォーマンス テスト結果の精度への干渉を防ぐため、低パフォーマンスのstorageおよびネットワーク ハードウェア構成を使用することはお勧めできません
  • 機能のみを検証する必要がある場合は、単一のマシンに DM マスターをデプロイできます。デプロイされる DM ワーカーの数は、上流の MySQL インスタンスの数以上である必要があります。高可用性を確保するには、より多くの DM ワーカーをデプロイすることをお勧めします。
  • DM-worker は、 dumploadフェーズで完全なデータを保存します。したがって、DM-worker のディスク容量は、移行するデータの総量よりも大きい必要があります。移行タスクに対してリレー ログが有効になっている場合、DM ワーカーにはアップストリームのbinlogデータを保存するための追加のディスク領域が必要です。

本番環境

成分CPUメモリハードディスクの種類通信網インスタンスの数 (最小要件)
DMマスター4コア以上8GB以上SAS、200GB以上ギガビットネットワークカード3
DMワーカー16コア以上32GB以上SSD、200 GB+ (移行されたデータのサイズより大きい)10ギガビットネットワークカード上流の MySQL インスタンスの数より大きい
モニター8コア以上16GB以上SAS、200GB以上ギガビットネットワークカード1

注記:

  • 本番環境では、DM マスターと DM ワーカーを同じサーバーにデプロイして実行することはお勧めできません。DM ワーカーがデータをディスクに書き込むと、DM マスターの高可用性コンポーネントによるディスクの使用が妨げられる可能性があるためです。 。
  • パフォーマンスの問題が発生した場合は、 DMのコンフィグレーションを最適化するドキュメントに従ってタスク構成ファイルを変更することをお勧めします。構成ファイルを調整してもパフォーマンスが効果的に最適化されない場合は、サーバーのハードウェアをアップグレードしてみることができます。

ダウンストリームのstorageスペース要件

ターゲット TiKV クラスターには、インポートされたデータを保存するのに十分なディスク容量が必要です。 標準的なハードウェア要件に加えて、ターゲット TiKV クラスターのstorage容量は、データ ソースのサイズ x レプリカの数 x 2より大きくなければなりません。たとえば、クラスターがデフォルトで 3 つのレプリカを使用する場合、ターゲット TiKV クラスターにはデータ ソースのサイズの 6 倍を超えるstorageスペースが必要です。この式にx 2含まれるのは、次の理由からです。

  • インデックスには余分なスペースが必要になる場合があります。
  • RocksDBには空間増幅効果があります。

次の SQL ステートメントを使用してDATA_LENGTHフィールドを要約することで、データ量を見積もることができます。

-- Calculate the size of all schemas SELECT TABLE_SCHEMA, FORMAT_BYTES(SUM(DATA_LENGTH)) AS 'Data Size', FORMAT_BYTES(SUM(INDEX_LENGTH)) 'Index Size' FROM information_schema.tables GROUP BY TABLE_SCHEMA; -- Calculate the 5 largest tables SELECT TABLE_NAME, TABLE_SCHEMA, FORMAT_BYTES(SUM(data_length)) AS 'Data Size', FORMAT_BYTES(SUM(index_length)) AS 'Index Size', FORMAT_BYTES(SUM(data_length+index_length)) AS 'Total Size' FROM information_schema.tables GROUP BY TABLE_NAME, TABLE_SCHEMA ORDER BY SUM(DATA_LENGTH+INDEX_LENGTH) DESC LIMIT 5;

このページは役に立ちましたか?