TiDB 7.1.1 Release Notes

发版日期：2023 年 7 月 24 日

TiDB 版本：7.1.1

试用链接：快速体验 | 生产部署 | 下载离线包

兼容性变更

• TiDB 新增 tidb_lock_unchanged_keys 变量用于控制是否对于没有修改的 key 加锁 #44714 @ekexium

行为变更

• TiCDC 在处理 Update 事件时，如果事件的主键或者非空唯一索引的列值发生改变，则会将该条事件拆分为 Delete 和 Insert 两条事件。更多信息，请参考用户文档。

改进提升

• TiDB

  • 执行计划缓存支持带有超过 200 个参数的查询 #44823 @qw4990
  • 优化与落盘相关的 chunk 读取的性能 #45125 @YangKeao
  • 优化构造索引扫描范围的逻辑，支持将一些复杂条件转化为索引扫描范围 #41572 #44389 @xuyifangreeneyes
  • 当 Stale Read 的 retry leader 遇到 lock 时，resolve lock 之后强制重试 leader，避免无谓开销 #43659 @you06

• PD

  • 未开启 Swagger server 时，PD 默认屏蔽 Swagger API #6786 @bufferflies

• Tools

  • TiCDC

    • 优化 TiCDC 同步到对象存储时对二进制字段的编码格式 #9373 @CharlesCheung96
    • 在同步到 Kafka 场景下，支持 OAUTHBEARER 认证方式 #8865 @hi-rustin

  • TiDB Lightning

    • 改进 TiDB Lightning 在 checksum 阶段对 PD ClientTSOStreamClosed 错误的重试逻辑 #45301 @lance6716
    • 数据导入完成后使用 SQL 方式校验 checksum，提升数据校验的稳定性 #41941 @GMHDBJD

  • Dumpling

    • 避免 Dumpling 在使用 --sql 参数时执行表查询语句，从而减少导出开销 #45239 @lance6716

  • TiDB Binlog

    • 优化表信息的获取方式，降低 Drainer 的初始化时间和内存占用 #1137 @lichunzhu

错误修复

• TiDB

  • 修复 GC resolve lock 可能错过一些悲观锁的问题 #45134 @MyonKeminta
  • 修复创建新会话时 Stats Collector 可能会造成死锁的问题 #44502 @xuyifangreeneyes
  • 修复 memory tracker 潜在的泄露问题 #44612 @wshwsh12
  • 修复 batch coprocessor 重试时可能会生成错误 Region 信息导致查询失败的问题 #44622 @windtalker
  • 修复 index scan 中可能存在的数据竞争问题 #45126 @wshwsh12
  • 修复当开启 tidb_enable_parallel_apply 时，MPP 模式下的查询结果出错的问题 #45299 @windtalker
  • 修复带 indexMerge 的查询被 kill 时可能会 hang 住的问题 #45279 @xzhangxian1008
  • 修复极端情况下，统计 SQL execution detail 的信息占用太多内存导致 TiDB OOM 的问题 #44047 @wshwsh12
  • 修复对于过长的 SQL 输入，FormatSQL() 方法无法正常截断的问题 #44542 @hawkingrei
  • 修复集群升级过程中，DDL 操作卡住导致升级失败的问题 #44158 @zimulala
  • 修复在 TiDB 节点故障后其它 TiDB 节点没有接管 TTL 任务的问题 #45022 @lcwangchao
  • 修复当使用 MySQL 的 Cursor Fetch 协议时，结果集占用的内存超过 tidb_mem_quota_query 的限制导致 TiDB OOM 的问题。修复后，TiDB 会自动将结果集写入磁盘以释放内存资源 #43233 @YangKeao
  • 修复即使用户没有权限，也能查看 INFORMATION_SCHEMA.TIFLASH_REPLICA 表信息的问题 #45320 @Lloyd-Pottiger
  • 修复 ADMIN SHOW DDL JOBS 语句的返回结果中 ROW_COUNT 不准确的问题 #44044 @tangenta
  • 修复查询 Range COLUMNS 分区表时可能遇到报错的问题 #43459 @mjonss
  • 修复 DDL 任务从暂停状态到恢复时，恢复出错的问题 #44217 @dhysum
  • 修复内存悲观锁导致 FLASHBACK 失败并且数据不一致的问题 #44292 @JmPotato
  • 修复删除表之后还能从 INFORMATION_SCHEMA 读取到该表的问题 #43714 @tangenta
  • 修复集群升级前，如果有暂停的 DDL，会出现升级失败的问题 #44225 @zimulala
  • 修复通过 BR 恢复 AUTO_ID_CACHE=1 的表时，会遇到 duplicate entry 报错的问题 #44716 @tiancaiamao
  • 修复 DDL owner 切换数次之后导致数据索引不一致的问题 #44619 @tangenta
  • 修复当取消处于 none 状态的 ADD INDEX DDL 任务时，因为分布式执行框架任务队列没有清理此任务而导致的内存泄漏问题 #44205 @tangenta
  • 修复代理协议在处理某些错误数据时报错 Header read timeout 的问题 #43205 @blacktear23
  • 修复 PD 隔离可能会导致运行的 DDL 阻塞的问题 #44267 @wjhuang2016
  • 修复 SELECT CAST(n AS CHAR) 语句中的 n 为负数时，查询结果出错的问题 #44786 @xhebox
  • 修复创建大量空分区表后内存占用过多的问题 #44308 @hawkingrei
  • 修复 Join Reorder 可能会造成 Outer Join 结果错误的问题 #44314 @AilinKid
  • 修复包含 CTE 的查询可能导致磁盘可用空间不足的问题 #44477 @guo-shaoge
  • 修复删除数据库导致 GC 推进慢的问题 #33069 @tiancaiamao
  • 修复在 ingest 模式下创建索引失败的问题 #44137 @tangenta
  • 修复当分区表定义中使用了 FLOOR() 函数对分区列进行取整时 SELECT 语句返回错误的问题 #42323 @jiyfhust
  • 修复 follower read 未处理 flashback 错误而进行重试，导致查询报错的问题 #43673 @you06
  • 修复 memTracker 配合 cursor fetch 使用导致内存泄漏的问题 #44254 @YangKeao
  • 修复 SHOW PROCESSLIST 语句无法显示子查询时间较长语句的事务的 TxnStart 的问题 #40851 @crazycs520
  • 修复 LEADING hint 不支持查询块别名 (query block alias) 的问题 #44645 @qw4990
  • 修复 PREPARE stmt FROM "ANALYZE TABLE xxx" 会被 tidb_mem_quota_query kill 掉的问题 #44320 @chrysan
  • 修复 processInfo 为空导致的 panic 问题 #43829 @zimulala
  • 修复 ON UPDATE 语句没有正确更新主键导致数据索引不一致的问题 #44565 @zyguan
  • 修复开启 tidb_opt_agg_push_down 时查询可能返回错误结果的问题 #44795 @AilinKid
  • 修复同时使用 CTE 和关联子查询可能导致查询结果出错或者 panic 的问题 #44649 #38170 #44774 @winoros @guo-shaoge
  • 修复取消处于 rollback 状态的 DDL 任务导致相关元数据出错的问题 #44143 @wjhuang2016
  • 修复 UPDATE 语句因为检查外键约束导致执行报错的问题 #44848 @crazycs520

• PD

  • 修复 Resource Manager 重复初始化 default 资源组的问题 #6787 @glorv
  • 修复 Placement Rules in SQL 设置的 location-labels 在特定条件下不按预期调度的问题 #6662 @rleungx
  • 修复在特殊情况下冗余副本无法自动修复的问题 #6573 @nolouch

• TiFlash

  • 修复存算分离模式下，TiFlash 计算节点获取的 CPU 核数信息不准确的问题 #7436 @guo-shaoge
  • 修复 TiFlash 在使用 Online Unsafe Recovery 之后重启时间过长的问题 #7671 @hongyunyan

• Tools

  • Backup & Restore (BR)

    • 修复某些情况下误报 checksum mismatch 的问题 #44472 @Leavrth
    • 修复当 TiDB 集群不存在 PITR 备份任务时，resolve lock 频率过高的问题 #40759 @joccau

  • TiCDC

    • 修复 PD 异常时可能导致同步任务卡住的问题 #8808 #9054 @asddongmen @fubinzh
    • 修复同步到对象存储时内存消耗过大的问题 #8894 @CharlesCheung96
    • 修复在打开 redo log 且下游出现异常时可能会导致同步任务卡住的问题 #9172 @CharlesCheung96
    • 修复在下游出现故障时 TiCDC 持续重试导致重试时间过长的问题 #9272 @asddongmen
    • 修复同步到 Kafka 场景下，读取下游 Metadata 太频繁导致下游压力过大的问题 #8959 @hi-rustin
    • 修复当下游为 Kafka 时，TiCDC 查询下游的元信息频率过高导致下游负载过大的问题 #8957 #8959 @hi-rustin
    • 修复在某些特殊场景下 sorter 组件内存使用过多导致 OOM 的问题 #8974 @hicqu
    • 修复使用 Avro 或 CSV 协议场景下 UPDATE 操作不能输出旧值的问题 #9086 @3AceShowHand
    • 修复同步数据到存储服务时，下游 DDL 语句对应的 JSON 文件中没有记录表中字段默认值的问题 #9066 @CharlesCheung96
    • 修复同步到 TiDB 或 MySQL 场景下，频繁设置下游双向复制相关变量导致下游日志过多的问题 #9180 @asddongmen
    • 修复当 Kafka 消息过大导致同步出错时，在 Log 中记录了消息体的问题 #9031 @darraes
    • 修复 PD 出现网络隔离或 PD Owner 节点重启等故障时 TiCDC 卡住问题 #8808 #8812 #8877 @asddongmen
    • 修复 Avro 协议识别到错误的 Enum 类型数据值的问题 #9259 @3AceShowHand

  • TiDB Data Migration (DM)

    • 修复 DM-master 在迁移唯一索引包含空列的表时异常退出的问题 #9247 @lance6716

  • TiDB Lightning

    • 修复 TiDB Lightning 连接 PD 失败无法重试的问题，提高导入成功率 #43400 @lichunzhu
    • 修复 TiDB Lightning 写入数据到 TiKV 返回空间不足的错误时无法正确显示错误信息的问题 #44733 @lance6716
    • 修复 checksum 过程中报错 Region is unavailable 的问题 #45462 @D3Hunter
    • 修复开启 experimental.allow-expression-index 且默认值是 UUID 时导致 TiDB Lightning panic 的问题 #44497 @lichunzhu
    • 修复竞态条件可能导致磁盘配额 (disk quota) 不准确的问题 #44867 @D3Hunter
    • 修复逻辑导入模式下，导入期间下游删除表可能导致 TiDB Lightning 元信息未及时更新的问题 #44614 @dsdashun

  • Dumpling

    • 修复 Dumpling 在 --sql 查询结果集为空时异常退出的问题 #45200 @D3Hunter

  • TiDB Binlog

    • 修复 TiDB 在 PD 地址完全变更后无法通过 SHOW PUMP STATUS 或 SHOW DRAINER STATUS 正确查询 Binlog 节点状态的问题 #42643 @lichunzhu
    • 修复 TiDB 在 PD 地址完全变更后无法写 binlog 的问题 #42643 @lance6716
    • 修复 etcd client 初始化时没有自动同步最新节点信息的问题 #1236 @lichunzhu