tencent cloud

云数据库 MySQL

动态与公告
产品动态
产品公告
新手指引
产品简介
产品概述
产品优势
应用场景
数据库架构
隔离策略
经济型实例
产品功能列表
数据库实例
高可用性（多可用区）
地域和可用区
自研内核
内核概述
内核版本更新动态
功能类特性
性能类特性
安全类特性
稳定类特性
TXRocks 引擎
内核问题检查与修复
购买指南
计费概述
选型指南
购买方式
续费说明
欠费说明
退费说明
按量转包年包月
调整实例费用说明
备份空间收费说明
数据库审计计费说明
数据库代理商业化计费和活动说明
数据库代理计费周期说明
查看费用账单
快速入门
入门概述
创建 MySQL 实例
连接 MySQL 实例
SQL 洞察（原数据库审计）
数据库审计简介
查看审计实例列表
开通审计服务
查看审计日志
日志投递
配置事后告警
修改审计规则
修改审计服务
关闭审计服务
审计规则模板
SQL 审计规则（旧版）
查看审计任务
授权子用户使用数据库审计
MySQL 云盘版
MySQL 云盘版概述
创建 MySQL 云盘版实例
维护管理实例
查看实例监控
调整实例配置
其他功能相关操作
迁移或升级至 MySQL 云盘版
操作指南
使用限制
操作总览
维护管理实例
升级实例
CPU 弹性扩容
只读/灾备实例
数据库代理
数据库管理（DMC）
账号管理
参数配置
备份与回档
数据迁移
网络与安全
监控与告警
日志中心
只读分析引擎
标签
实践教程
腾讯云 MySQL 帮助实现 MySQL 5.7升级至 MySQL 8.0
MySQL 5.6升级到 MySQL 5.7方法和说明
云数据库 MySQL 数据库审计等保实践
构建全场景高可用架构
云数据库 MySQL 使用规范
应用程序配置自动重连功能
MySQL 主实例参数修改的影响
MyISAM 自动转换为 InnoDB 引擎限制
为云数据库 MySQL 创建 VPC
使用云数据库 MySQL 提高业务负载能力
两地三中心灾备建设
读写分离扩展云数据库 MySQL 性能
使用 DTS 将 InnoDB 数据迁移至 RocksDB
构建 LAMP 堆栈 Web 应用程序
构建 Drupal 网站
通过 Python 语言使用 MySQL API
主备实例查询数据不一致
白皮书
性能白皮书
安全白皮书
故障处理
连接相关
性能相关
实例数据同步延迟
设置大小写不敏感失败
通过命令获取 slow_query_log_file 失败
API 文档
History
Introduction
API Category
Instance APIs
调用方式
Data Import APIs
Database Proxy APIs
数据库审计相关接口
Security APIs
Task APIs
Backup APIs
Account APIs
Rollback APIs
Parameter APIs
Database APIs
Monitoring APIs
Log-related API
Data Types
Error Codes
常见问题
选型相关
计费相关
备份相关
回档相关
连接登录
参数修改
升级相关
账号权限
性能内存
运维相关
数据迁移
功能特性
控制台相关
日志相关
事件相关
数据库审计
实例切换影响
API 2.0 切换 3.0 指引
相关协议
服务等级协议
服务条款
通用参考
标准与认证
联系我们
词汇表
文档云数据库 MySQL自研内核性能类特性大事务复制

大事务复制

PDF
聚焦模式
字号
最后更新时间： 2024-12-31 15:52:04

功能介绍

在 row 模式下，单个语句更新多行的大事务每行生成1个 event，一方面产生大量 binlog，另一方面复制时备库 apply 的时候也比较慢，导致备库复制延迟。 腾讯云内核团队通过对大事务复制场景的分析和优化，开发了该能力，大事务复制优化功能将自动识别大事务，并将 row 模式的 binlog 转化为 statement 格式的 binlog，从而减少 binlog 并提升复制效率。

支持版本

内核版本 MySQL 5.6 20210630 及以上
内核版本 MySQL 5.7 20200630 及以上
内核版本 MySQL 8.0 20200830 及以上

适用场景

该功能主要提升 row 模式下无主键表的大事务回放速度，在确定是由无主键回放慢导致延迟时可以打开。
该功能主要针对 row 模式下存在大事务，出现复制较慢的场景。

性能数据

update 场景复制时间减少85%，insert 场景减少约30%。

使用说明

大事务复制优化功能是基于 SQL 历史执行的统计情况去判断它是否有可能是大事务； 当识别为大事务时并且有可能被优化时，会自动将它的隔离级别提升至 RR（可重复读）的级别，将 binlog 落成 Statement 格式，以达到缩短大事务备库执行的时间。 其中：
cdb_optimize_large_trans_binlog 为该功能的开关。
cdb_sql_statistics 为 SQL 运行情况进行统计的开关。
cdb_optimize_large_trans_binlog_last_affected_rows_threshold 和 cdb_optimize_large_trans_binlog_aver_affected_rows_threshold 共同组成了大事务的阈值条件。
cdb_sql_statistics_info_threshold 为内存中保持中的历史统计数据条数。
为了更好的监控事务运行情况，还增加了 information_schema 库下的表 CDB_SQL_STATISTICS 用于查询当前事务的统计情况。

新增参数

名称
状态
类型
默认
说明
cdb_optimize_large_trans_binlog
true
bool
false
binlog 大事务优化的开关
cdb_optimize_large_trans_binlog_last_affected_rows_threshold
true
ulonglong
10000
大事务优化的条件：上次影响行数的阈值
cdb_optimize_large_trans_binlog_aver_affected_rows_threshold
true
ulonglong
10000
大事务优化的条件：平均影响行数的阈值
cdb_sql_statistics
true
bool
false
是否开始对 SQL 运行情况进行统计的开关
cdb_sql_statistics_info_threshold
true
ulonglong
10000
CDB_SQL_STATISTICS 的 map 里保存最多的统计的 SQL 个数
说明：
用户目前无法直接修改以上参数的参数值，如需修改可 提交工单 进行修改。

新增 information_schema.CDB_SQL_STATISTICS 表

名称
类型
说明
DIGEST_MD5
MYSQL_TYPE_STRING
该条 SQL 的 digest 换算出来的 MD5
DIGEST_TEXT
MYSQL_TYPE_STRING
SQL 的 digest 文本格式
SQL_COMMAND
MYSQL_TYPE_STRING
SQL 命令的类型
FIRST_UPDATE_TIMESTAMP
MYSQL_TYPE_DATETIME
该条统计信息第一次产生的时间
LAST_UPDATE_TIMESTAMP
MYSQL_TYPE_DATETIME
该条统计息上一次更新的时间
LAST_ACCESS_TIMESTAMP
MYSQL_TYPE_DATETIME
该条统计信息上一次被访问的时间
EXECUTE_COUNT
MYSQL_TYPE_LONGLONG
这类 SQL 被执行次数
TOTAL_AFFECTED_ROWS
MYSQL_TYPE_LONGLONG
总影响的行数
AVER_AFFECTED_ROWS
MYSQL_TYPE_LONGLONG
平均影响的行数
LAST_AFFECTED_ROWS
MYSQL_TYPE_LONGLONG
上次影响的行数
STMT_BINLOG_FORMAT_IF_POSSIBLE
MYSQL_TYPE_STRING
这类 SQL 是否可以落成 statement 格式的 binlog，TRUE 或者 FALSE
上一篇: 查看并行查询下一篇: 计划缓存点查优化

帮助和支持

本页内容是否解决了您的问题？

填写满意度调查问卷，共创更好文档体验。

文档反馈