## 1. 通过日志识别
– 查看TiDB日志：
[root@fgedu.net.cn ~]# tail -f /tidb/app/log/tidb/tidb.log | grep -i “large transaction”

– 查看慢查询日志：
[root@fgedu.net.cn ~]# tail -f /tidb/app/log/tidb/slow-query.log | grep -i “transaction”

## 2. 通过监控识别
– Prometheus监控：
– tidb_transaction_size_bytes
– tidb_transaction_entries

– Grafana面板：
– 事务大小监控
– 事务执行时间监控

## 3. 通过SQL识别
– 查询大事务：
SELECT * FROM information_schema.tidb_trx WHERE trx_size > 10485760; — 10MB

– 查询长事务：
SELECT * FROM information_schema.tidb_trx WHERE trx_duration > 60; — 60秒

## 1. 拆分大事务
– 按批次处理：
for i in range(0, total_rows, batch_size):
start = i
end = min(i + batch_size, total_rows)
# 处理批次数据
commit()

## 2. 使用批量操作
– 批量插入：
INSERT INTO fgedu_users (name, email) VALUES (‘user1’, ‘user1@fgedu.net.cn’), (‘user2’, ‘user2@fgedu.net.cn’), …;

– 批量更新：
UPDATE fgedu_orders SET status = ‘processed’ WHERE id IN (1, 2, 3, …);

## 3. 优化SQL语句
– 使用索引：确保查询使用索引
– 减少查询范围：使用WHERE子句限制数据范围
– 避免全表扫描：使用合适的索引
– 优化JOIN操作：减少JOIN表数量

## 4. 调整系统参数
– 增加事务大小限制：
SET GLOBAL tidb_txn_total_size_limit = 209715200; — 200MB

– 增加批处理大小：
SET GLOBAL tidb_txn_batch_size = 20000;

## 1. 通过日志识别
– 查看TiDB日志：
[root@fgedu.net.cn ~]# tail -f /tidb/app/log/tidb/tidb.log | grep -i “long transaction”

– 查看慢查询日志：
[root@fgedu.net.cn ~]# tail -f /tidb/app/log/tidb/slow-query.log | grep -i “duration”

## 2. 通过监控识别
– Prometheus监控：
– tidb_transaction_duration_seconds
– tidb_transaction_active_count

– Grafana面板：
– 事务执行时间监控
– 活跃事务数量监控

## 3. 通过SQL识别
– 查询长事务：
SELECT * FROM information_schema.tidb_trx WHERE trx_duration > 60; — 60秒

– 查询活跃事务：
SELECT * FROM information_schema.tidb_trx WHERE trx_state = ‘active’;

## 1. 缩短事务时间
– 减少事务范围：只包含必要的操作
– 避免在事务中进行非数据库操作：如网络请求、文件IO等
– 优化SQL语句：提高执行效率
– 使用异步处理：非关键操作异步执行

## 2. 拆分长事务
– 按功能拆分：将复杂事务拆分为多个简单事务
– 按时间拆分：将长时间运行的事务拆分为多个短事务
– 按数据范围拆分：将大范围内的数据操作拆分为多个小范围操作

## 3. 优化并发控制
– 使用合适的隔离级别：根据业务需求选择
– 避免热点数据：合理设计数据分布
– 优化锁粒度：减少锁竞争
– 使用乐观锁：减少锁持有时间

## 4. 调整系统参数
– 增加事务超时时间：
SET GLOBAL tidb_txn_timeout = 1200; — 1200秒

– 增加锁超时时间：
SET GLOBAL tidb_lock_timeout = 100; — 100秒

## 1. 全局配置
– 修改tidb.toml配置文件：
[performance]
txn-entry-size-limit = “10MB”
txn-total-size-limit = “100MB”
txn-batch-size = 10000
txn-timeout = 600
lock-timeout = 50

– 重启TiDB服务：
[root@fgedu.net.cn ~]# systemctl restart tidb.service

## 2. 会话级别配置
– 设置会话级事务大小限制：
SET SESSION tidb_txn_total_size_limit = 104857600;

– 设置会话级事务超时：
SET SESSION tidb_txn_timeout = 600;

## 3. 监控配置
– 配置Prometheus告警：
– 事务大小超过阈值告警
– 事务执行时间超过阈值告警
– 活跃事务数量超过阈值告警

– 配置Grafana面板：
– 事务大小监控面板
– 事务执行时间监控面板
– 活跃事务监控面板

## 4. 定期检查
– 定期检查大事务：
[root@fgedu.net.cn ~]# mysql -h 192.168.1.1 -P 4000 -u fgedu -p -e “SELECT * FROM information_schema.tidb_trx WHERE trx_size > 10485760;”

– 定期检查长事务：
[root@fgedu.net.cn ~]# mysql -h 192.168.1.1 -P 4000 -u fgedu -p -e “SELECT * FROM information_schema.tidb_trx WHERE trx_duration > 60;”

## 1. Prometheus配置
– 添加事务监控指标：
– tidb_transaction_size_bytes
– tidb_transaction_duration_seconds
– tidb_transaction_active_count
– tidb_transaction_conflicts_total

## 2. Grafana面板配置
– 创建事务监控面板：
– 事务大小趋势图
– 事务执行时间趋势图
– 活跃事务数量趋势图
– 事务冲突率趋势图

## 3. 告警配置
– 设置事务大小告警：
– 事务大小超过8MB时告警
– 事务大小超过10MB时严重告警

– 设置事务执行时间告警：
– 事务执行时间超过300秒时告警
– 事务执行时间超过600秒时严重告警

– 设置活跃事务数量告警：
– 活跃事务数量超过50时告警
– 活跃事务数量超过100时严重告警

## 4. 日志监控
– 配置日志监控：
– 监控TiDB日志中的大事务和长事务信息
– 监控慢查询日志中的长事务
– 监控错误日志中的事务失败信息