TiDB 7.1.4 Release Notes
发版日期:2024 年 3 月 11 日
TiDB 版本:7.1.4
兼容性变更
- 为减少日志打印的开销,TiFlash 配置项
logger.level
默认值由"debug"
改为"info"
#8641 @JaySon-Huang - 新增 TiKV 配置项
gc.num-threads
,用于设置当enable-compaction-filter
为false
时 GC 的线程个数 #16101 @tonyxuqqi
改进提升
TiDB
- 增强特定情况下
OUTER JOIN
转INNER JOIN
的能力 #49616 @qw4990 - 当设置
force-init-stats
为true
时,即 TiDB 启动时等待统计信息初始化完成后再对外提供服务,这一设置不再影响 HTTP server 提供服务,用户仍可查看监控 #50854 @hawkingrei
- 增强特定情况下
TiKV
PD
TiFlash
- 减少后台数据 GC 任务对读、写任务延迟的影响 #8650 @JaySon-Huang
- 降低磁盘性能抖动对读取延迟的影响 #8583 @JaySon-Huang
Tools
Backup & Restore (BR)
- 支持在数据恢复过程中批量创建数据库 #50767 @Leavrth
- 提升了
RESTORE
语句在大数据量表场景下的建表性能 #48301 @Leavrth - 使用更优的算法,提升数据恢复过程中 SST 文件合并的速度 #50613 @Leavrth
- 支持在数据恢复过程中批量 ingest SST 文件 #16267 @3pointer
- 在日志备份过程中,增加了在日志和监控指标中打印影响 global checkpoint 推进的最慢的 Region 的信息 #51046 @YuJuncen
- 移除使用 Google Cloud Storage (GCS) 作为外部存储时一个过时的兼容性检查 #50533 @lance6716
- 通过加锁机制避免同时执行多个清理日志备份数据任务 (
br log truncate
) #49414 @YuJuncen
TiCDC
- 当下游为 Kafka 时,topic 表达式中允许
schema
为可选项,并且支持直接指定 topic 名 #9763 @3AceShowHand - 支持查询 changefeed 的下游同步状态,以确认 TiCDC 是否已将所接收到的上游变更完全同步到下游 #10289 @hongyunyan
- 支持在 TiDB Dashboard 中搜索 TiCDC 日志 #10263 @CharlesCheung96
- 当下游为 Kafka 时,topic 表达式中允许
TiDB Lightning
错误修复
TiDB
- 修复开启
tidb_multi_statement_mode
模式时,使用索引点查的DELETE
和UPDATE
语句可能会报错的问题 #50012 @tangenta - 修复 CTE 查询在重试过程中可能会报错
type assertion for CTEStorageMap failed
的问题 #46522 @tiancaiamao - 修复构造统计信息时因为 Golang 隐式转换算法导致统计信息误差过大的问题 #49801 @qw4990
- 修复并发合并分区表的全局统计信息时可能遇到报错的问题 #48713 @hawkingrei
- 修复 TiDB 错误地消除
group by
中的常量值导致查询结果出错的问题 #38756 @hi-rustin - 修复
BIT
类型的列在参与一些函数计算时,可能会因为 decode 失败导致查询出错的问题 #49566 #50850 #50855 @jiyfhust - 修复多级嵌套的
UNION
查询中LIMIT
无效的问题 #49874 @Defined2014 - 修复使用
AUTO_ID_CACHE=1
的自增列时,由于并发冲突导致自增 ID 分配报错的问题 #50519 @tiancaiamao - 修复查询使用
NATURAL JOIN
时可能报错Column ... in from clause is ambiguous
的问题 #32044 @AilinKid - 修复当查询使用了会强制排序的优化器 hint(例如
STREAM_AGG()
)且其执行计划包含IndexMerge
时,强制排序可能会失效的问题 #49605 @AilinKid - 修复由于
STREAM_AGG()
错误处理 CI 导致查询结果有误的问题 #49902 @wshwsh12 - 修复当
HashJoin
算子落盘失败时 goroutine 可能泄露的问题 #50841 @wshwsh12 - 修复无法在
REPLACE INTO
语句中使用 hint 的问题 #34325 @YangKeao - 修复查询语句包含
GROUP_CONCANT(ORDER BY)
语法时,执行可能出错的问题 #49986 @AilinKid - 修复当 JSON 数组为空数组时,使用多值索引访问可能返回错误结果的问题 #50125 @YangKeao
- 修复 CTE 查询使用的内存超限时可能会导致 goroutine 泄露的问题 #50337 @guo-shaoge
- 修复使用旧接口导致表的元信息可能不一致的问题 #49751 @hawkingrei
- 修复执行包含
ORDER BY
的UNIQUE
索引点查时可能报错的问题 #49920 @jackysp - 修复常见 hint 在
UNION ALL
语句中未生效的问题 #50068 @hawkingrei - 修复包含 IndexHashJoin 算子的查询由于内存超过
tidb_mem_quota_query
而卡住的问题 #49033 @XuHuaiyu - 修复包含递归 (
WITH RECURSIVE
) CTE 的UPDATE
或DELETE
语句可能会产生错误结果的问题 #48969 @winoros - 修复直方图的边界包含
NULL
时,直方图统计信息可能无法解析成可读字符串的问题 #49823 @AilinKid - 修复包含 Apply 操作的查询在报错
fatal error: concurrent map writes
后导致 TiDB 崩溃的问题 #50347 @SeaRise - 修复使用聚合函数分组计算时可能报错
Can't find column ...
的问题 #50926 @qw4990 - 修复常量传播在处理
ENUM
或SET
类型时结果出错的问题 #49440 @winoros - 修复有依赖关系的两个 DDL 任务的完成时间顺序不正确的问题 #49498 @tangenta
- 修复如果开启
tidb_enable_prepared_plan_cache
变量之后再关闭此变量,使用EXECUTE
语句执行PREPARE STMT
时可能 panic 的问题 #49344 @qw4990 - 修复在嵌套的
UNION
查询中LIMIT
和OPRDERBY
可能无效的问题 #49377 @AilinKid - 修复
LEADING
hint 在UNION ALL
语句中无法生效的问题 #50067 @hawkingrei - 修复通过
COM_STMT_EXECUTE
方式执行的COMMIT
或ROLLBACK
操作无法结束已超时事务的问题 #49151 @zyguan - 修复不合法的优化器 hint 可能会导致合法 hint 不生效的问题 #49308 @hawkingrei
- 修复在某些时区下夏令时显示有误的问题 #49586 @overvenus
- 修复使用
PREPARE
方式执行SELECT INTO OUTFILE
语句时,应报错却返回执行成功的问题 #49166 @qw4990 - 修复通过
tiup cluster upgrade/start
方式进行滚动升级时,与 PD 交互出现问题可能导致 TiDB panic 的问题 #50152 @zimulala - 修复对空表添加索引时优化未生效的问题 #49682 @zimulala
- 修复创建大量表或分区时 TiDB 可能 OOM 的问题 #50077 @zimulala
- 修复在网络环境不稳定时,执行添加索引操作可能会导致索引数据不一致的问题 #49773 @tangenta
- 修复 DDL 作业的执行顺序,以防止 TiCDC 接收到乱序的 DDL #49498 @tangenta
- 修复修改变量
tidb_server_memory_limit
后,tidb_gogc_tuner_threshold
未进行相应调整的问题 #48180 @[hawkingrei] - 修复某些情况下,由于错误的分区裁剪导致查询 Range Partition 的结果不正确的问题 #50082 @Defined2014
- 修复当
CREATE TABLE
语句中包含特定分区或约束的表达式时,表名变更等 DDL 操作会卡住的问题 #50972 @lcwangchao - 修复当列的默认值被删除时,获取该列的默认值会报错的问题 #50043 #51324 @crazycs520
- 修复 Grafana 监控指标
tidb_statistics_auto_analyze_total
没有显示为整数的问题 #51051 @hawkingrei - 修复
auto analyze
在处理分区表时,tidb_merge_partition_stats_concurrency
变量未生效的问题 #47594 @hawkingrei - 修复当查询语句涉及 JOIN 操作时可能出现
index out of range
报错的问题 #42588 @AilinKid - 修复在 TiFlash 延迟物化在处理关联列时结果可能出错的问题 #49241 #51204 @Lloyd-Pottiger
- 修复并行 Apply 在表为聚簇索引时可能导致结果错误的问题 #51372 @guo-shaoge
- 修复开启
TiKV
- 修复休眠的 Region 在异常情况下未被及时唤醒的问题 #16368 @LykxSassinator
- 通过在执行下线节点操作前检查该 Region 所有副本的上一次心跳时间,修复下线一个副本导致整个 Region 不可用的问题 #16465 @tonyxuqqi
- 修复开启 Titan 时 RocksDB 中存储的表属性可能不准确的问题 #16319 @hicqu
- 修复当集群中存在 TiFlash 节点时,执行
tikv-ctl compact-cluster
失败的问题 #16189 @frew - 修复 gRPC threads 在检查
is_shutdown
时可能出现 panic 的问题 #16236 @pingyu - 修复 TiDB 和 TiKV 处理
DECIMAL
算术乘法截断时结果不一致的问题 #16268 @solotzg - 修复
cast_duration_as_time
可能返回错误结果的问题 #16211 @gengliqi - 修复巴西和埃及时区转换错误的问题 #16220 @overvenus
- 修复 JSON 整型数值在大于
INT64
最大值但小于UINT64
最大值时会被 TiKV 解析成FLOAT64
导致结果和 TiDB 不一致的问题 #16512 @YangKeao
PD
- 修复资源组 (Resource Group) 客户端中未完全删除的 slot 导致分配 token 低于给定值的问题 #7346 @guo-shaoge
- 修复 TSO 部分日志没有打印报错原因的问题 #7496 @CabinfeverB
- 修复默认资源组在启用
BURSTABLE
时累积不必要的 token 的问题 #7206 @CabinfeverB - 修复调用
evict-leader-scheduler
接口时没有输出结果的问题 #7672 @CabinfeverB - 修复
watch etcd
没有正确关闭导致内存泄露的问题 #7807 @rleungx - 修复调用
MergeLabels
函数时存在数据竞争的问题 #7535 @lhy1024 - 修复在开启 TLS 时,TiDB Dashboard 获取 TiKV profile 失败的问题 #7561 @Connor1996
- 修复在不满足副本数量需求时,删除 orphan peer 的问题 #7584 @bufferflies
- 修复采用自适应同步部署模式 (DR Auto-Sync) 的集群
available_stores
计算错误的问题 #7221 @disksing - 修复采用自适应同步部署模式 (DR Auto-Sync) 的集群在 Placement Rule 的配置较复杂时,
canSync
和hasMajority
可能计算错误的问题 #7201 @disksing - 修复采用自适应同步部署模式 (DR Auto-Sync) 的集群在从 AZ 宕机时主 AZ 不能添加 TiKV 节点的问题 #7218 @disksing
- 修复批量查询 Resource Group 可能会导致 PD Panic 的问题 #7206 @nolouch
- 修复使用
pd-ctl
查询没有 Leader 的 Region 时可能导致 PD panic 的问题 #7630 @rleungx - 修复 PD 监控项
learner-peer-count
在发生 Leader 切换后未同步旧监控值的问题 #7728 @CabinfeverB - 修复 PD 在通过
systemd
启动时无法读取资源限制的问题 #7628 @bufferflies
TiFlash
- 修复副本迁移时,因 TiFlash 与 PD 之间网络连接不稳定可能引发的 TiFlash panic 的问题 #8323 @JaySon-Huang
- 修复 TiFlash 错误处理
ENUM
偏移量为 0 的问题 #8311 @solotzg - 修复
GREATEST
或LEAST
函数在包含常量字符串参数时,可能发生的随机无效内存访问的问题 #8604 @windtalker - 修复 lowerUTF8/upperUTF8 不允许大小写字符占据不同字节数的错误 #8484 @gengliqi
- 修复成功执行的短查询打印过多信息日志的问题 #8592 @windtalker
- 修复慢查询导致内存使用显著增加的问题 #8564 @JinheLin
- 修复在执行
ALTER TABLE ... MODIFY COLUMN ... NOT NULL
时,将原本可为空的列修改为不可为空之后,导致 TiFlash panic 的问题 #8419 @JaySon-Huang - 修复终止查询后 TiFlash 上大量任务被同时取消,由于并发数据冲突导致 TiFlash 崩溃的问题 #7432 @SeaRise
- 修复 TiFlash 发生远程读时可能会 crash 的问题 #8685 @zanmato1984
- 修复当 TiFlash Anti Semi Join 存在非等值连接条件时,可能出现错误结果的问题 #8791 @windtalker
Tools
Backup & Restore (BR)
TiCDC
- 修复上游表执行了
TRUNCATE PARTITION
后 changefeed 报错的问题 #10522 @sdojjy - 修复在极端情况下 changefeed 的
resolved ts
不推进的问题 #10157 @sdojjy - 修复 Syncpoint 表可能被错误同步的问题 #10576 @asddongmen
- 修复在
ignore-event
中设置了过滤掉add table partition
事件后,TiCDC 未将相关分区的其它类型 DML 变更事件同步到下游的问题 #10524 @CharlesCheung96 - 修复使用 storage sink 时,在存储服务生成的文件序号可能出现回退的问题 #10352 @CharlesCheung96
- 修复并发创建多个 changefeed 时 TiCDC 返回
ErrChangeFeedAlreadyExists
错误的问题 #10430 @CharlesCheung96 - 修复恢复 changefeed 时 changefeed 的
checkpoint-ts
小于 TiDB 的 GC safepoint,没有及时报错snapshot lost caused by GC
的问题 #10463 @sdojjy - 修复 TiCDC 在开启单行数据正确性校验后由于时区不匹配导致
TIMESTAMP
类型 checksum 验证失败的问题 #10573 @3AceShowHand
- 修复上游表执行了
TiDB Data Migration (DM)
TiDB Lightning