FastScan を使用する
このドキュメントでは、FastScan を使用してオンライン分析処理 (OLAP) シナリオでクエリを高速化する方法について説明します。
デフォルトでは、 TiFlash はクエリ結果の精度とデータの一貫性を保証します。 FastScan 機能を使用すると、 TiFlash はより効率的なクエリ パフォーマンスを提供しますが、クエリ結果の精度とデータの一貫性は保証されません。
一部の OLAP シナリオでは、クエリ結果の精度に対してある程度の許容範囲が許容されます。このような場合、より高いクエリ パフォーマンスが必要な場合は、セッション レベルまたはグローバル レベルで FastScan 機能を有効にすることができます。変数tiflash_fastscan
を構成することで、FastScan 機能を有効にするかどうかを選択できます。
制限
FastScan 機能が有効になっている場合、クエリ結果にはテーブルの古いデータが含まれる可能性があります。これは、同じ主キーを持つデータ、または削除されたデータの履歴バージョンを複数取得する可能性があることを意味します。
例えば:
CREATE TABLE t1 (a INT PRIMARY KEY, b INT);
ALTER TABLE t1 SET TIFLASH REPLICA 1;
INSERT INTO t1 VALUES(1,2);
INSERT INTO t1 VALUES(10,20);
UPDATE t1 SET b = 4 WHERE a = 1;
DELETE FROM t1 WHERE a = 10;
SET SESSION tidb_isolation_read_engines='tiflash';
SELECT * FROM t1;
+------+------+
| a | b |
+------+------+
| 1 | 4 |
+------+------+
SET SESSION tiflash_fastscan=ON;
SELECT * FROM t1;
+------+------+
| a | b |
+------+------+
| 1 | 2 |
| 1 | 4 |
| 10 | 20 |
+------+------+
TiFlash はバックグラウンドで古いデータの圧縮を自動的に開始できますが、古いデータは圧縮され、そのデータ バージョンが GC セーフ ポイントよりも古いまで、物理的にクリーンアップされません。物理的なクリーニング後、クリーニングされた古いデータは FastScan モードで返されなくなります。データ圧縮のタイミングは、さまざまな要因によって自動的にトリガーされます。 ALTER TABLE ... COMPACT
ステートメントを使用してデータ圧縮を手動でトリガーすることもできます。
FastScan を有効または無効にする
デフォルトでは、変数はセッション レベルおよびグローバル レベルでtiflash_fastscan=OFF
です。つまり、FastScan 機能は有効になっていません。次のステートメントを使用して変数情報を表示できます。
show variables like 'tiflash_fastscan';
+------------------+-------+
| Variable_name | Value |
+------------------+-------+
| tiflash_fastscan | OFF |
+------------------+-------+
show global variables like 'tiflash_fastscan';
+------------------+-------+
| Variable_name | Value |
+------------------+-------+
| tiflash_fastscan | OFF |
+------------------+-------+
変数tiflash_fastscan
はセッション レベルおよびグローバル レベルで設定できます。現在のセッションで FastScan を有効にする必要がある場合は、次のステートメントを使用して有効にすることができます。
set session tiflash_fastscan=ON;
グローバル レベルでtiflash_fastscan
を設定することもできます。新しい設定は新しいセッションで有効になりますが、現在および以前のセッションでは有効になりません。また、新しいセッションでは、セッション レベルとグローバル レベルのtiflash_fastscan
が両方とも新しい値になります。
set global tiflash_fastscan=ON;
次のステートメントを使用して FastScan を無効にできます。
set session tiflash_fastscan=OFF;
set global tiflash_fastscan=OFF;
FastScanの仕組み
TiFlashのstorageレイヤーのデータは、デルタレイヤーと安定レイヤーの 2 つの層に保存されます。
デフォルトでは、FastScan は有効になっておらず、TableScan オペレーターは次の手順でデータを処理します。
- データの読み取り: デルタレイヤーと安定レイヤーに個別のデータ ストリームを作成して、それぞれのデータを読み取ります。
- ソートマージ:手順1で作成したデータストリームをマージし、(主キー列、タイムスタンプ列)の順にソートしてデータを返します。
- 範囲フィルター: データ範囲に従って、手順 2 で生成されたデータをフィルターし、データを返します。
- MVCC +カラムフィルター: 手順 3 で生成されたデータを MVCC を通じて (つまり、主キー列とタイムスタンプ列に従ってデータ バージョンをフィルター処理して)、列を通じて (つまり、不要な列をフィルターして除外して) フィルター処理し、データ。
FastScan は、データの一貫性をある程度犠牲にすることで、クエリ速度を向上させます。 FastScan では、通常のスキャン プロセスのステップ 2 とステップ 4 の MVCC 部分が省略されるため、クエリのパフォーマンスが向上します。