TiDB 7.5.1 リリースノート
リリース日:2024年2月29日
TiDB バージョン: 7.5.1
クイックアクセス: クイックスタート | 本番環境へのデプロイ
互換性の変更
- セキュリティ強化モード(SEM)で
require_secure_transportをONに設定することを禁止し、ユーザーの潜在的な接続問題を防ぎます。 #47665 @tiancaiamao - ログ出力のオーバーヘッドを減らすために、 TiFlashは
logger.levelのデフォルト値を"debug"から"info"に変更します。 #8641 @JaySon-Huang - TiKV設定項目
gc.num-threadsを導入して、enable-compaction-filterがfalseの場合のGCスレッド数を設定します。 #16101 @tonyxuqqi - TiCDC Changefeed では、次の新しい設定項目が導入されています。
compression: REDOログファイルの圧縮動作を設定できます#10176 @sdojjysink.cloud-storage-config: オブジェクトストレージにデータを複製するときに履歴データの自動クリーンアップを設定できます。 #10109 @CharlesCheung96consistent.flush-concurrency: 単一のREDOファイルのアップロードの同時実行を設定できます #10226 @sdojjy
改善点
TiDB
DDLスキーマの再ロードプロセス中に
tikv_client_read_timeoutを使用して、クラスターでのメタリージョンLeaderの読み取り不可の影響を軽減します。 #48124 @cfzjywxkリソース制御に関する可観測性を強化する#49318 @glorv @bufferflies @nolouch
リソースグループを使用してアプリケーションのワークロードを分離するユーザーが増えるにつれ、リソースコントロールはリソースグループに基づいた拡張データを提供します。これにより、リソースグループのワークロードと設定を監視し、次のような問題を迅速に特定し、正確に診断できるようになります。
- スロークエリ : リソースグループ名、リソースユニット (RU) の消費量、およびリソースの待機時間を追加します。
- ステートメントサマリーテーブル : リソースグループ名、RU 消費量、リソースの待機時間を追加します。
- システム変数
tidb_last_query_infoに、SQL文によって消費されたリソース量RUを示す新しいエントリru_consumptionを追加します。この変数を使用して、セッション内の最後の文のリソース消費量を取得できます。 - リソースグループに基づいてデータベースメトリックを追加します: QPS/TPS、実行時間 (P999/P99/P95)、障害数、接続数。
いくつかの型変換を処理する際の TiDB 実装を最適化し、関連する問題を修正しました#47945 #47864 #47829 #47816 @YangKeao @lcwangchao
非バイナリ照合順序が設定され、クエリに
LIKEが含まれている場合、オプティマイザーは実行効率を向上させるためにIndexRangeScanを生成します#48181 #49138 @time-and-fate通常の
ADD INDEXタスクにフォールバックするのではなく、複数の加速されたADD INDEXDDL タスクをキューに入れて実行できるようにサポートします。 #47758 @tangenta
TiKV
- 低速ストア検出アルゴリズムを強化し、感度を向上させ、特に集中的な読み取りおよび書き込み負荷のシナリオで誤検出率を低減します#15909 @LykxSassinator
TiFlash
- RU値をより安定させるためにリクエストユニット(RU)計算方法を改善する#8391 @guo-shaoge
- ディスクパフォーマンスジッターによる読み取りレイテンシーへの影響を軽減#8583 @JaySon-Huang
- バックグラウンド GC タスクによる読み取りおよび書き込みタスクのレイテンシーへの影響を軽減します#8650 @JaySon-Huang
ツール
Backup & Restore (BR)
- より効率的なアルゴリズムを使用して、データ復元中に SST ファイルをマージする速度を改善します #50613 @Leavrth
- データ復元中にデータベースをバッチで作成するサポート#50767 @Leavrth
- データ復元中に SST ファイルをバッチで取り込むことをサポート#16267 @3pointer
- ログバックアップ中に、ログとメトリックのグローバルチェックポイントの進行に影響を与える最も遅いリージョンの情報を出力します。 #51046 @YuJuncen
- 大規模なデータセットのシナリオで
RESTORE文のテーブル作成パフォーマンスを向上 #48301 @Leavrth - BRは
merge-schedule-limit設定を0に設定することでリージョンのマージを一時停止できます。 #7148 @3pointer - BR例外処理メカニズムをリファクタリングして、未知のエラーに対する許容度を高めます#47656 @3pointer
TiCDC
- TiDB DashboardでのTiCDCログの検索をサポート #10263 @CharlesCheung96
- チェンジフィードの下流同期ステータスの照会をサポートし、TiCDC が受信した上流データの変更が下流システムに完全に同期されているかどうかを判断するのに役立ちます#10289 @hongyunyan
- 並列処理を増やすことで、TiCDC がオブジェクトストレージにデータを複製する際のパフォーマンスが向上します。 #10098 @CharlesCheung96
TiDB Lightning
バグ修正
TiDB
- システム変数
tidb_service_scopeの設定が反映されない問題を修正 #49245 @ywqzzy - 圧縮が有効になっている場合、通信プロトコルが16 MB以上のパケットを処理できない問題を修正#47157 #47161 @dveeden
approx_percentile関数が TiDB panicを引き起こす可能性がある問題を修正しました #40463 @xzhangxian1008- 文字列関数の引数が
NULL定数の場合に TiDB が暗黙的にfrom_binary関数を挿入し、一部の式がTiFlash にプッシュダウンできない問題を修正しました。 #49526 @YangKeao HashJoinオペレーターがディスクにスピルできない場合に発生する可能性のある goroutine リークの問題を修正しました。 #50841 @wshwsh12BIT型の列が一部の関数の計算に関係する場合にデコード失敗によりクエリエラーが発生する可能性がある問題を修正しました#49566 #50850 #50855 @jiyfhust- CTEクエリのメモリ使用量が制限を超えたときに発生するgoroutineリークの問題を修正しました #50337 @guo-shaoge
- TiFlash の遅延マテリアライゼーションが関連列 を処理するときに間違った結果が返される可能性がある問題を修正しました #51204 @Lloyd-Pottiger #49241
- TiDB が履歴統計を記録するときに TiDB のバックグラウンドジョブスレッドがpanicになる可能性がある問題を修正しました #49076 @hawkingrei
- TiDBがパーティションテーブルのグローバル統計のヒストグラムをマージするときに発生する可能性のあるエラーを修正しました。 #49023 @hawkingrei
- パーティションが削除された後、
stats_metaテーブルの履歴統計が更新されない問題を修正しました #49334 @hi-rustin - 複数値インデックスが誤って
Index Joinプローブ側として選択されたために発生する誤ったクエリ結果の問題を修正しました。 #50382 @AilinKid USE_INDEX_MERGEヒントが複数値インデックスに効果がない問題を修正しました #50553 @AilinKidINFORMATION_SCHEMA.ANALYZE_STATUSシステムテーブルをクエリするときにユーザーがエラーを受け取る可能性がある問題を修正しました #48835 @hi-rustin- TiDB が
group byの定数値を誤って削除することによる間違ったクエリ結果の問題を修正しました #38756 @hi-rustin - テーブルに対する
ANALYZEタスクのprocessed_rowsが、そのテーブルの合計行数を超える可能性がある問題を修正しました。 #50632 @hawkingrei tidb_enable_prepared_plan_cacheシステム変数が有効になってから無効になった後にEXECUTE文を使用してPREPARE STMTを実行すると、TiDB がpanicになる可能性がある問題を修正しました#49344 @qw4990- クエリで
NATURAL JOINが使用される場合に発生する可能性のあるColumn ... in from clause is ambiguousエラーを修正します #32044 @AilinKid - 多値インデックスを使用して空の JSON 配列にアクセスすると、誤った結果が返される可能性がある問題を修正しました#50125 @YangKeao
- 集計関数をグループ計算に使用すると発生する可能性のある
Can't find column ...エラーを修正#50926 @qw4990 - 文字列型の変数に対する
SET_VARの制御が無効になる可能性がある問題を修正#50507 @qw4990 tidb_server_memory_limitによる長期メモリ圧迫により TiDB の CPU 使用率が上昇する問題を修正 #48741 @XuHuaiyu- 依存関係のある 2つの DDL タスクの完了時間が誤って順序付けられる問題を修正しました。 #49498 @tangenta
- 無効なオプティマイザーヒントによって有効なヒントが無効になる可能性がある問題を修正#49308 @hawkingrei
CHECK制約の DDL 文がスタックする問題を修正しました #47632 @jiyfhustCHECK制約のENFORCEDオプションの動作がMySQL 8.0 と一致しない問題を修正 #47631 @jiyfhust #47567- CTEクエリが再試行プロセス中にエラー
type assertion for CTEStorageMap failedを報告する可能性がある問題を修正しました #46522 @tiancaiamao tidb_multi_statement_modeモードが有効になっている場合、インデックス検索を使用するDELETEおよびUPDATE文でエラーが報告される可能性がある問題を修正しました#50012 @tangentaWITH RECURSIVECTE を含むUPDATEまたはDELETE文で誤った結果が生成される可能性がある問題を修正しました#48969 @winoros- 特定のシナリオでオプティマイザーがTiFlash選択パスを DUAL テーブルに誤って変換する問題を修正しました #49285 @AilinKid
- 同じクエリプランで、場合によっては
PLAN_DIGEST値が異なる問題を修正しました #47634 @King-Dylan - 自動統計更新の時間枠を設定した後、その時間枠外でも統計が更新される可能性がある問題を修正#49552 @hawkingrei
ENUM型の列を結合キーとして使用した場合にクエリ結果が正しくない問題を修正しました #48991 @winorosORDER BY句でUNIQUEインデックス検索を実行するとエラーが発生する可能性がある問題を修正しました #49920 @jackysp- 複数レベルのネストされた
UNIONクエリのLIMITが無効になる可能性がある問題を修正しました#49874 @Defined2014 - MPPで計算された
COUNT(INT)の結果が正しくない可能性がある問題を修正#48643 @AilinKid ENUMまたはSET型の無効な値を解析すると、SQL文エラーが直接発生する問題を修正しました。 #49487 @winoros- TiDBがパニックを起こし、エラー
invalid memory address or nil pointer dereferenceを報告する問題を修正 #42739 @CbcWestwolf - 最初のサブノードとしてDUALテーブルを使用して
UNION ALLを実行すると、エラーが発生する可能性がある問題を修正しました。 #48755 @winoros - 共通ヒントが
UNION ALL文で有効にならない問題を修正 #50068 @hawkingrei - 正常なシャットダウン中に TiDBサーバーがpanicする可能性がある問題を修正#36793 @bb7133
- 一部のタイムゾーンで夏時間が正しく表示されない問題を修正 #49586 @overvenus
- 静的
CALIBRATE RESOURCEが Prometheusデータに依存している問題を修正 #49174 @glorv REPLACE INTO文でヒントが使用できない問題を修正 #34325 @YangKeaoGROUP_CONCAT(ORDER BY)構文を含むクエリを実行するとエラーが返される可能性がある問題を修正しました #49986 @AilinKid- 監査ログ用のEnterpriseプラグインを使用すると、TiDBサーバーが大量のリソースを消費する可能性がある問題を修正しました#49273 @lcwangchao
- 古いインターフェースを使用するとテーブルのメタデータに不整合が発生する可能性がある問題を修正しました。 #49751 @hawkingrei
tidb_enable_collect_execution_infoを無効にするとコプロセッサーキャッシュがpanicになる問題を修正#48212 @you06- パーティション列タイプが
DATETIMEの場合にALTER TABLE ... LAST PARTITION実行が失敗する問題を修正しました #48814 @crazycs520 COM_STMT_EXECUTEを介して実行されたCOMMITまたはROLLBACK操作が、タイムアウトしたトランザクションを終了できない問題を修正しました。 #49151 @zyguan- ヒストグラムの境界に
NULLが含まれている場合、ヒストグラム統計が読み取り可能な文字列に解析されない可能性がある問題を修正しました。 #49823 @AilinKid - 共通テーブル式 (CTE) を含むクエリがメモリ制限を超えたときに予期せず停止する問題を修正#49096 @AilinKid
- DDL所有者がネットワークから分離された後に
ADD INDEXを実行すると、TiDB分散実行フレームワーク(DXF)でデータが不整合になる問題を修正しました #49773 @tangenta AUTO_ID_CACHE=1のAUTO_INCREMENT列を使用すると同時競合によりAUTO_INCREMENT ID 割り当てでエラーが報告される問題を修正しました。 #50519 @tiancaiamao- クエリに Apply オペレーターが含まれており、
fatal error: concurrent map writesエラーが発生すると TiDB がpanicになる可能性がある問題を修正しました。 #50347 @SeaRise - DDL
jobIDが 0 に復元されたときに発生する TiDB ノードpanicの問題を修正しました #46296 @jiyfhust STREAM_AGG()が CI を誤って処理したためにクエリ結果が正しくない問題を修正しました #49902 @wshwsh12- 多数のテーブルまたはパーティションを処理するときに TiDB ノードが OOM エラーに遭遇する可能性がある問題を軽減します。 #50077 @zimulala
LEADINGヒントがUNION ALLステートメントで有効にならない問題を修正しました #50067 @hawkingrei- ネストされた
UNIONのクエリでLIMITとORDER BYが無効になる可能性がある問題を修正しました #49377 @AilinKid - メモリが
tidb_mem_quota_queryを超えると IndexHashJoin オペレーターを含むクエリが停止する問題を修正しました #49033 @XuHuaiyu - 定数伝播で
ENUMまたはSET型を処理するときに TiDB が間違ったクエリ結果を返す問題を修正しました #49440 @winoros PREPAREメソッドを使用してSELECT INTO OUTFILEを実行すると、エラーではなく、誤って成功メッセージが返される問題を修正しました。 #49166 @qw4990- クエリがソートを強制するオプティマイザーヒント(
STREAM_AGG()など)を使用し、その実行計画にIndexMergeが含まれている場合、強制ソートが無効になる可能性がある問題を修正しました。 #49605 @AilinKid - テーブルが多数ある場合に、
AUTO_ID_CACHE=1のテーブルによって gRPC クライアントリークが発生する可能性がある問題を修正しました。 #48869 @tiancaiamao - 非厳密モード(
sql_mode = '')で、INSERT実行中に切り捨てが行われても、エラーが報告される問題を修正しました。 #49369 @tiancaiamao - データの末尾にスペースが含まれている場合に
LIKEで_ワイルドカードを使用すると、誤ったクエリ結果が返される可能性がある問題を修正しました #48983 @time-and-fate tidb_mem_quota_queryシステム変数を更新した後にADMIN CHECKを実行するとERROR 8175が返される問題を修正しました #49258 @tangenta- Golang の暗黙的な変換アルゴリズムによって発生する統計情報の構築における過剰な統計エラーの問題を修正しました #49801 @qw4990
- CTE を含むクエリが、
tidb_max_chunk_sizeが小さい値に設定されている場合にruntime error: index out of range [32] with length 32を報告する問題を修正しました。 #48808 @guo-shaoge
- システム変数
TiKV
tidb_enable_row_level_checksumを有効にすると TiKV がpanicを起こす可能性がある問題を修正#16371 @cfzjywxk- gRPC スレッドが
is_shutdownをチェックしているときに TiKV がpanicする可能性がある問題を修正しました #16236 @pingyu - TiKVがブラジルとエジプトのタイムゾーンを誤って変換する問題を修正#16220 @overvenus
- Titanの
blob-run-modeをオンラインで更新できない問題を修正 #15978 @tonyxuqqi DECIMAL算術乗算切り捨てを処理するときに TiDB と TiKV が矛盾した結果を生成する可能性がある問題を修正しました #16268 @solotzgnotLeaderまたはregionNotFoundに遭遇するとフラッシュバックが停止する可能性がある問題を修正しました #15712 @HuSharp- 破損したSSTファイルが他のTiKVノードに広がる可能性がある問題を修正 #15986 @Connor1996
- TiKV の実行速度が非常に遅い場合、リージョンのマージ後にpanicする可能性がある問題を修正しました #16111 @overvenus
- スケールアウトするときに DR 自動同期のジョイント状態がタイムアウトする可能性がある問題を修正しました #15817 @Connor1996
- Resolved TSが2時間ブロックされる可能性がある問題を修正#11847 #15520 #39130 @overvenus
cast_duration_as_timeが誤った結果を返す可能性がある問題を修正#16211 @gengliqi- コーナーケース(ディスクI/O操作がブロックされている場合など)でTiKVがハングし、可用性に影響する問題を修正しました。 #16368 @LykxSassinator
PD
- リソースグループをバッチでクエリすると PD がpanicになる可能性がある問題を修正しました #7206 @nolouch
- PDが
systemdで起動したときにリソース制限を読み取れない問題を修正 #7628 @bufferflies - PD ディスクレイテンシーの継続的なジッターにより、PD が新しいリーダーを選択できない可能性がある問題を修正しました。 #7251 @HuSharp
- PD のネットワークパーティションにより、スケジュールがすぐに開始されない可能性がある問題を修正#7016 @HuSharp
- リーダースイッチ後にPD監視項目
learner-peer-countが古い値を同期しない問題を修正 #7728 @CabinfeverB - PDリーダーが転送され、新しいリーダーとPDクライアントの間にネットワークパーティションがある場合、PDクライアントがリーダーの情報を更新できない問題を修正しました。 #7416 @CabinfeverB
- Gin Web Framework のバージョンを v1.8.1 から v1.9.1 にアップグレードして、いくつかのセキュリティ問題を修正しました#7438 @niubell
- レプリカ数が要件を満たしていない場合に孤立ピアが削除される問題を修正しました #7584 @bufferflies
pd-ctlを使用してリーダーのないリージョンを照会すると、PD がpanicになる可能性がある問題を修正しました。 #7630 @rleungx
TiFlash
- レプリカ移行中に PD とのネットワーク接続が不安定になり、 TiFlash がpanicする可能性がある問題を修正しました #8323 @JaySon-Huang
- TiFlashレプリカを削除して再度追加すると、 TiFlash でデータ破損が発生する可能性がある問題を修正しました。 #8695 @JaySon-Huang
DROP TABLEがデータ挿入の直後に実行されると、FLASHBACK TABLEまたはRECOVER TABLEが一部のTiFlashレプリカのデータを回復できない可能性がある潜在的な問題を修正しました。 #8395 @JaySon-Huang- Grafana の一部のパネルの最大パーセンタイル時間の表示が誤っていた問題を修正 #8076 @JaySon-Huang
- リモート読み取り中にTiFlashがクラッシュする可能性がある問題を修正 #8685 @guo-shaoge
ENUM値が 0 の場合にTiFlash がENUMを誤って処理する問題を修正しました #8311 @solotzg- 短いクエリが正常に実行され、過剰な情報ログが出力される問題を修正しました。 #8592 @windtalker
- クエリの低速化によりメモリ使用量が大幅に増加する問題を修正 #8564 @JinheLin
lowerUTF8とupperUTF8関数で、大文字と小文字が異なるバイトを占めることができない問題を修正しました。 #8484 @gengliqi- ストリーム読み取り中に複数のパーティションテーブルをスキャンするときに発生する可能性のある OOM 問題を修正しました。 #8505 @gengliqi
- クエリ中にTiFlash がメモリ制限に遭遇した場合のメモリリークの問題を修正しました #8447 @JinheLin
- TiFlash が同時 DDL 実行中に競合に遭遇した場合のTiFlash panic問題を修正#8578 @JaySon-Huang
- null 許容列を非 null 許容に変更する
ALTER TABLE ... MODIFY COLUMN ... NOT NULLを実行した後に TiFlash がパニックを起こす問題を修正しました。 #8419 @JaySon-Huang ColumnRef in (Literal, Func...)のようなフィルタリング条件でクエリを実行したときにクエリ結果が正しくない問題を修正しました #8631 @Lloyd-PottigerFLASHBACK DATABASEを実行した後もTiFlashレプリカのデータがガベージコレクションされる問題を修正しました #8450 @JaySon-Huang- ストレージとコンピューティングの分離アーキテクチャで、 TiFlash がオブジェクトストレージデータの GC 所有者を選択できない可能性がある問題を修正しました。 #8519 @JaySon-Huang
- 定数文字列パラメーターを含む
GREATESTまたはLEAST関数で発生する可能性のある、ランダムに無効なメモリアクセスの問題を修正しました。 #8604 @windtalker - ポイントインタイムリカバリ(PITR)を実行した後、または
FLASHBACK CLUSTER TOを実行した後にTiFlashレプリカデータが誤って削除され、データ異常が発生する可能性がある問題を修正しました。 #8777 @JaySon-Huang - 結合に非等価条件が含まれている場合に、 TiFlash Anti Semi Join が誤った結果を返す可能性がある問題を修正しました。 #8791 @windtalker
ツール
Backup & Restore (BR)
- TiKVノードにリーダーがいないためにデータの復元が遅くなる問題を修正しました #50566 @Leavrth
--filterオプションを指定した後でも、完全な復元を行うにはターゲットクラスターが空である必要があるという問題を修正しました#51009 @3pointer- データの復元に失敗した後、チェックポイントから再開するとエラー
the target cluster is not freshが発生する問題を修正しました#50232 @Leavrth - ログバックアップタスクを停止すると TiDB がクラッシュする問題を修正#50839 @YuJuncen
- 古いバージョンのバックアップからデータを復元するときに
Unsupported collationエラーが報告される問題を修正しました #49466 @3pointer - タスク初期化中にPDへの接続に失敗すると、ログバックアップタスクは開始できるが正常に動作しない問題を修正#16056 @YuJuncen
- BRが外部ストレージファイルに対して誤ったURIを生成する問題を修正 #48452 @3AceShowHand
- 同じノードで TiKV IP アドレスを変更した後にログバックアップが停止する問題を修正しました #50445 @3pointer
- S3 からファイルコンテンツを読み取っているときにエラーが発生した場合にBR が再試行できない問題を修正しました #49942 @Leavrth
TiCDC
- Syncpoint が有効な場合にエラーが発生し、シンクモジュールが正常に再起動しない問題を修正 (
enable-sync-point = true) #10091 @hicqu - ストレージシンクの使用時に、ストレージサービスによって生成されたファイルシーケンス番号が正しく増加しない可能性がある問題を修正しました。 #10352 @CharlesCheung96
- Syncpoint テーブルが誤って複製される可能性がある問題を修正#10576 @asddongmen
- Apache Pulsarをダウンストリームとして使用すると、OAuth2.0、TLS、mTLSが正しく有効化できない問題を修正 #10602 @asddongmen
- 複数のチェンジフィードを同時に作成すると TiCDC が
ErrChangeFeedAlreadyExistsエラーを返す問題を修正しました #10430 @CharlesCheung96 - 極端なケースでチェンジフィードの
resolved tsが進まない問題を修正#10157 @sdojjy - 特定の特殊なシナリオで TiCDC が TiKV との接続を誤って閉じる問題を修正#10239 @hicqu
- オブジェクトストレージサービスにデータを複製するときに TiCDCサーバーがpanicする可能性がある問題を修正しました #10137 @sdojjy
- アップストリームテーブルで
TRUNCATE PARTITIONを実行した後に、changefeed がエラーを報告する問題を修正しました。 #10522 @sdojjy ignore-eventでadd table partitionイベントをフィルタリングするように設定した後、TiCDC が関連パーティションの他のタイプの DML 変更をダウンストリームに複製しない問題を修正しました。 #10524 @CharlesCheung96kv-client初期化中に発生する可能性のあるデータ競合問題を修正 #10095 @3AceShowHand
- Syncpoint が有効な場合にエラーが発生し、シンクモジュールが正常に再起動しない問題を修正 (
TiDB Data Migration (DM)