統合タスク

TiDB Cloud Lake の統合タスクは、ソースから TiDB Cloud Lake へどのようにデータが流れるかを定義します。各タスクは既存のデータソースを参照し、ソース設定、ターゲットの場所または結果の表示方法、およびタスクタイプ固有の実行時パラメータを指定します。

データソースとは異なり、統合タスクは実際にデータ移動、同期、またはメッセージ消費を実行する実行単位です。データソースはアクセス設定を保持し、タスクはスケジューリング、取り込み、同期、消費、停止、再開、および監視を処理します。

サポートされるタスクタイプ

読み進め方

推奨される読み進め方は次のとおりです。

1. まず タスク管理 を参照して、タスク作成フロー、開始 / 停止の動作、ステータス、および実行履歴を理解してください。
2. 次に、設定したいソースタイプに対応するタスク固有のガイドを参照してください。

タスクタイプごとの違い

• S3 タスクはファイルインポートのシナリオ向けに設計されており、主にファイルパスパターン、ファイル形式、および取り込み動作に重点を置いています。
• SQS (S3) タスクは S3 イベント駆動のデータ取り込み向けに設計されており、主に SQS キュー、S3 イベントフィルタ、IAM Role、およびターゲットテーブルに重点を置いています。
• MySQL、PostgreSQL、および TiDB タスクはテーブル同期のシナリオ向けに設計されており、主に同期モード、主キー、増分キャプチャ、およびアーカイブスケジューリングに重点を置いています。
• Kafka Consumer タスクはメッセージ消費のシナリオ向けに設計されており、主にトピック、開始位置、バッチサイズ、バッチ待機間隔、およびテナント Stage クエリに重点を置いています。