GoldenGate教程FG063-OGG数据迁移过程中的性能优化实战
本文详细介绍OGG数据迁移过程中的性能优化策略与实战技巧，涵盖初始加载优化、增量同步调优、网络传输优化、数据库端优化等多个维度。风哥教程参考GoldenGate官方文档GoldenGate性能调优指南、GoldenGate大数据迁移最佳实践等内容，结合生产环境实际案例，帮助读者掌握OGG数据迁移性能优化的核心方法。
目录大纲
Part01-基础概念与理论知识
1.1 OGG数据迁移性能影响因素分析
1.2 OGG数据迁移性能基准测试方法
1.3 OGG数据迁移性能优化目标设定
Part02-生产环境规划与建议
2.1 OGG数据迁移硬件资源配置建议
2.2 OGG数据迁移网络带宽规划
2.3 OGG数据迁移并行度设计原则
Part03-生产环境项目实施方案
3.1 OGG初始加载性能优化实施
3.2 OGG增量同步性能优化配置
3.3 OGG网络传输优化配置
3.4 OGG数据库端优化配置
Part04-生产案例与实战讲解
4.1 500GB数据库迁移性能优化案例
4.2 OGG数据迁移性能监控与分析
4.3 OGG数据迁移性能瓶颈排查
Part05-风哥经验总结与分享
5.1 OGG数据迁移性能优化最佳实践
5.2 OGG数据迁移常见性能问题总结
5.3 OGG数据迁移性能优化脚本工具
Part01-基础概念与理论知识
1.1 OGG数据迁移性能影响因素分析
OGG数据迁移性能受多种因素影响，主要包括源端数据库性能、网络带宽、目标端数据库性能、OGG进程配置等。在进行性能优化前，需要全面了解各因素的影响程度，学习交流加群风哥微信: itpux-com。
主要影响因素：
1. 源端数据库性能：数据库IO能力、CPU资源、内存配置、归档日志生成速度
2. OGG Extract进程：抽取速度、Trail文件写入速度、内存缓冲区配置
3. 网络传输：带宽限制、网络延迟、TCP参数配置
4. OGG Replicat进程：应用速度、批量提交配置、内存配置
5. 目标端数据库性能：索引维护、约束检查、触发器执行、IO能力
1.2 OGG数据迁移性能基准测试方法
在进行性能优化前，需要建立性能基准测试，以便评估优化效果。OGG提供了多种性能监控工具和指标。
GGSCI (fgedu.net.cn)> STATS EXTRACT E_FGEDU01, TOTAL
Extract E_FGEDU01 statistics:
Total inserts 1,256,789
Total updates 456,234
Total deletes 89,567
Total discards 0
Total operations 1,802,590
Extract started : 2024-01-15 08:00:00
Extract stopped : 2024-01-15 18:30:00
Total run time : 10 hours 30 minutes
Avg operations/sec : 47.7
Peak operations/sec : 156
GGSCI (fgedu.net.cn)> STATS REPLICAT R_FGEDU01, TOTAL
Replicat R_FGEDU01 statistics:
Total inserts 1,256,789
Total updates 456,234
Total deletes 89,567
Total discards 0
Total operations 1,802,590
Replicat started : 2024-01-15 08:00:00
Replicat stopped : 2024-01-15 18:30:00
Total run time : 10 hours 30 minutes
Avg operations/sec : 47.7
Peak operations/sec : 142
Last committed transaction: 2024-01-15 18:29:56
Current lag : 00:00:04
1.3 OGG数据迁移性能优化目标设定
性能优化目标需要根据业务需求和实际环境设定，更多视频教程www.fgedu.net.cn。合理的优化目标包括：
性能优化目标参考：
1. 初始加载速度：根据数据量设定，如100GB/小时
2. 增量同步延迟：生产环境建议控制在秒级
3. 网络利用率：充分利用带宽，达到80%以上
4. 数据库负载：迁移过程不影响正常业务
5. 数据一致性：确保迁移数据完整准确
Part02-生产环境规划与建议
2.1 OGG数据迁移硬件资源配置建议
硬件资源是数据迁移性能的基础保障，合理的资源配置能够显著提升迁移效率。
# CPU核心数
lscpu | grep “CPU(s)”
On-line CPU(s) list: 0-31
Thread(s) per core: 2
Core(s) per socket: 16
Socket(s): 1
free -h
Mem: 125Gi 45Gi 60Gi 2.1Gi 20Gi 75Gi
Swap: 16Gi 0B 16Gi
fio –name=randread –ioengine=libaio –iodepth=16 –rw=randread –bs=8k –direct=1 –size=1G –numjobs=4 –runtime=60 –group_reporting
…
fio-3.16
Starting 4 processes
randread: (groupid=0, jobs=4): err= 0: pid=12345: Mon Jan 15 10:00:00 2024
read: IOPS=52.4k, BW=409MiB/s (429MB/s)(4096MiB/10001msec)
slat (usec): min=3, max=1256, avg=12.45, stdev=8.76
clat (usec): min=45, max=18567, avg=1215.23, stdev=456.78
lat (usec): min=50, max=18600, avg=1228.12, stdev=458.90
cpu : usr=2.35%, sys=15.67%, ctx=52345, majf=0, minf=128
IO depths : 1=0.1%, 2=0.1%, 4=0.1%, 8=0.1%, 16=100.0%, 32=0.0%, >=64=0.0%
lat (usec) : 100=0.01%, 250=0.05%, 500=0.15%, 750=0.35%, 1000=25.00%
lat (msec) : 2=65.00%, 4=9.00%, 10=0.44%, 20=0.01%
lat (msec) : 50=0.01%
硬件配置建议：
1. CPU：建议16核以上，支持多进程并行处理
2. 内存：建议64GB以上，配置大内存页
3. 存储：建议SSD存储，IO性能达到300MB/s以上
4. 网络：建议千兆或万兆网络，带宽充足
2.2 OGG数据迁移网络带宽规划
网络带宽是跨地域数据迁移的关键因素，学习交流加群风哥QQ113257174。需要根据数据量和迁移时间窗口合理规划带宽。
iperf3 -c 192.168.1.102 -t 60 -i 10
[ 5] local 192.168.1.101 port 45678 connected to 192.168.1.102 port 5201
[ ID] Interval Transfer Bitrate Retr Cwnd
[ 5] 0.00-10.00 sec 1.10 GBytes 945 Mbits/sec 0 456 KBytes
[ 5] 10.00-20.00 sec 1.12 GBytes 962 Mbits/sec 0 512 KBytes
[ 5] 20.00-30.00 sec 1.08 GBytes 928 Mbits/sec 0 489 KBytes
[ 5] 30.00-40.00 sec 1.11 GBytes 951 Mbits/sec 0 501 KBytes
[ 5] 40.00-50.00 sec 1.09 GBytes 936 Mbits/sec 0 478 KBytes
[ 5] 50.00-60.00 sec 1.10 GBytes 944 Mbits/sec 0 492 KBytes
– – – – – – – – – – – – – – – – – – – – – – – – –
[ ID] Interval Transfer Bitrate Retr
[ 5] 0.00-60.00 sec 6.60 GBytes 944 Mbits/sec 0 sender
[ 5] 0.00-60.00 sec 6.60 GBytes 944 Mbits/sec receiver
iperf Done.
2.3 OGG数据迁移并行度设计原则
并行度设计是提升迁移性能的核心策略，需要根据表结构、数据分布、业务特点合理设计。
并行度设计原则：
1. 按表拆分：大表单独配置Extract/Replicat进程
2. 按业务拆分：不同业务模块独立进程
3. 按数据类型拆分：INSERT/UPDATE/DELETE分开处理
4. 协调进程数：避免进程数过多导致资源竞争
Part03-生产环境项目实施方案
3.1 OGG初始加载性能优化实施
初始加载是数据迁移的关键阶段，通过优化配置可以显著提升加载速度，更多学习教程公众号风哥教程itpux_com。
GGSCI (fgedu.net.cn)> EDIT PARAMS E_FGEDU_INIT
USERID fgedu, PASSWORD fgedu123
RMTHOST 192.168.1.102, MGRPORT 7809, COMPRESS
RMTTRAIL /GoldenGate/app/dirdat/ia
— 初始加载优化参数
TRANLOGOPTIONS BUFSIZE 1048576
TRANLOGOPTIONS ASYNCBUFSIZE 1048576
— 大表并行抽取
TABLE fgedu01.fgedu_orders, KEYCOLS(order_id);
TABLE fgedu01.fgedu_order_items, KEYCOLS(item_id);
TABLE fgedu01.fgedu_products;
TABLE fgedu01.fgedu_customers;
TABLE fgedu02.*;
GGSCI (fgedu.net.cn)> EDIT PARAMS R_FGEDU_INIT01
USERID fgedu, PASSWORD fgedu123
ASSUMETARGETDEFS
— 批量提交优化
BATCHSQL
BATCHTRANSOPS 10000
— 禁用约束检查加速加载
DBOPTIONS DEFERREFCONST
DBOPTIONS SUPPRESSTRIGGERS
— 并行应用配置
MAP fgedu01.fgedu_orders, TARGET fgedu01.fgedu_orders;
MAP fgedu01.fgedu_order_items, TARGET fgedu01.fgedu_order_items;
GGSCI (fgedu.net.cn)> EDIT PARAMS R_FGEDU_INIT02
USERID fgedu, PASSWORD fgedu123
ASSUMETARGETDEFS
BATCHSQL
BATCHTRANSOPS 10000
DBOPTIONS DEFERREFCONST
DBOPTIONS SUPPRESSTRIGGERS
MAP fgedu01.fgedu_products, TARGET fgedu01.fgedu_products;
MAP fgedu01.fgedu_customers, TARGET fgedu01.fgedu_customers;
MAP fgedu02.*, TARGET fgedu02.*;
GGSCI (fgedu.net.cn)> ADD EXTRACT E_FGEDU_INIT, SOURCEISTABLE
GGSCI (fgedu.net.cn)> ADD RMTTRAIL /GoldenGate/app/dirdat/ia, EXTRACT E_FGEDU_INIT, MEGABYTES 500
RMTTRAIL added.
GGSCI (fgedu.net.cn)> ADD REPLICAT R_FGEDU_INIT01, SPECIALRUN
GGSCI (fgedu.net.cn)> ADD REPLICAT R_FGEDU_INIT02, SPECIALRUN
REPLICAT added.
3.2 OGG增量同步性能优化配置
增量同步是数据迁移的持续阶段，需要优化配置以保证同步效率和数据一致性。
GGSCI (fgedu.net.cn)> EDIT PARAMS E_FGEDU01
USERID fgedu, PASSWORD fgedu123
EXTTRAIL /GoldenGate/app/dirdat/ea
— 缓冲区优化
TRANLOGOPTIONS BUFSIZE 1048576
TRANLOGOPTIONS ASYNCBUFSIZE 1048576
— 检查点优化
CHECKPOINTSECS 10
— 过滤不需要的字段减少数据量
TABLE fgedu01.fgedu_orders, EXCEPTCOLS (create_time, update_time);
TABLE fgedu01.fgedu_order_items;
TABLE fgedu01.fgedu_products;
TABLE fgedu02.*;
GGSCI (fgedu.net.cn)> EDIT PARAMS R_FGEDU01
USERID fgedu, PASSWORD fgedu123
ASSUMETARGETDEFS
— 批量应用优化
BATCHSQL
BATCHTRANSOPS 5000
BATCHOPSMAXSPACE 5000, 500
— 提交频率优化
COMMITFREQUENCY 1000
— 内存优化
CACHESIZE 64M
— 错误处理
REPERROR (DEFAULT, DISCARD)
DISCARDFILE /GoldenGate/app/dirrpt/R_FGEDU01.dsc, APPEND, MEGABYTES 100
MAP fgedu01.*, TARGET fgedu01.*;
MAP fgedu02.*, TARGET fgedu02.*;
3.3 OGG网络传输优化配置
网络传输优化可以显著提升跨地域数据迁移效率，from GoldenGate视频:www.itpux.com。
GGSCI (fgedu.net.cn)> EDIT PARAMS E_FGEDU01
USERID fgedu, PASSWORD fgedu123
RMTHOST 192.168.1.102, MGRPORT 7809, COMPRESS, COMPRESSTHRESHOLD 1000
RMTTRAIL /GoldenGate/app/dirdat/ea
— TCP参数优化
RMTHOSTOPTIONS TCPBUFSIZE 1048576, TCPFLUSHBYTES 1048576
TABLE fgedu01.*;
TABLE fgedu02.*;
cat >> /etc/sysctl.conf << 'EOF'
# TCP优化参数
net.core.rmem_max = 16777216
net.core.wmem_max = 16777216
net.ipv4.tcp_rmem = 4096 87380 16777216
net.ipv4.tcp_wmem = 4096 65536 16777216
net.ipv4.tcp_window_scaling = 1
net.ipv4.tcp_timestamps = 1
net.ipv4.tcp_sack = 1
net.core.netdev_max_backlog = 5000
EOF
sysctl -p
net.core.wmem_max = 16777216
net.ipv4.tcp_rmem = 4096 87380 16777216
net.ipv4.tcp_wmem = 4096 65536 16777216
net.ipv4.tcp_window_scaling = 1
net.ipv4.tcp_timestamps = 1
net.ipv4.tcp_sack = 1
net.core.netdev_max_backlog = 5000
3.4 OGG数据库端优化配置
数据库端优化是提升迁移性能的重要环节，包括索引、约束、触发器等方面的优化。
sqlplus / as sysdba
Version 19.21.0.0.0
Copyright (c) 1982, 2022, Oracle. All rights reserved.
Connected to:
Oracle Database 19c Enterprise Edition Release 19.0.0.0.0 – Production
Version 19.21.0.0.0
SQL>
SQL> BEGIN
FOR c IN (SELECT constraint_name, table_name FROM user_constraints WHERE constraint_type = ‘R’ AND table_name LIKE ‘FGEDU%’) LOOP
EXECUTE IMMEDIATE ‘ALTER TABLE ‘ || c.table_name || ‘ DISABLE CONSTRAINT ‘ || c.constraint_name;
END LOOP;
END;
/
PL/SQL procedure successfully completed.
SQL> BEGIN
FOR t IN (SELECT trigger_name FROM user_triggers WHERE table_name LIKE ‘FGEDU%’) LOOP
EXECUTE IMMEDIATE ‘ALTER TRIGGER ‘ || t.trigger_name || ‘ DISABLE’;
END LOOP;
END;
/
PL/SQL procedure successfully completed.
SQL> ALTER TABLE fgedu01.fgedu_orders NOLOGGING;
SQL> ALTER TABLE fgedu01.fgedu_order_items NOLOGGING;
SQL> ALTER TABLE fgedu01.fgedu_products NOLOGGING;
Table altered.
Table altered.
Part04-生产案例与实战讲解
4.1 500GB数据库迁移性能优化案例
本案例介绍一个500GB生产数据库迁移的性能优化实践，包括初始加载和增量同步的完整优化过程。
sqlplus / as sysdba
SUM(bytes)/1024/1024/1024 AS size_gb
FROM dba_segments
WHERE owner IN (‘FGEDU01’, ‘FGEDU02’);
SIZE_GB
———-
512.45
SQL> SELECT
table_name,
ROUND(num_rows * avg_row_len / 1024 / 1024 / 1024, 2) AS size_gb,
num_rows
FROM user_tables
WHERE table_name LIKE ‘FGEDU%’
ORDER BY size_gb DESC;
—————————- ———- ———-
FGEDU_ORDERS 185.32 125678901
FGEDU_ORDER_ITEMS 156.78 256789012
FGEDU_PRODUCTS 45.23 12345678
FGEDU_CUSTOMERS 38.56 8901234
FGEDU_TRANSACTIONS 32.45 5678901
FGEDU_LOGS 28.12 45678901
FGEDU_INVENTORY 15.67 3456789
FGEDU_PAYMENTS 10.32 2345678
8 rows selected.
vi /GoldenGate/app/scripts/parallel_init_load.sh
# parallel_init_load.sh
# from:www.itpux.com.qq113257174.wx:itpux-com
# web: http://www.fgedu.net.cn
OGG_HOME=/GoldenGate/app
LOG_FILE=/GoldenGate/app/logs/parallel_load.log
echo “开始并行初始加载: $(date)” >> $LOG_FILE
# 启动大表Extract进程
cd $OGG_HOME
echo “START EXTRACT E_FGEDU_ORDERS” | ./ggsci >> $LOG_FILE 2>&1
echo “START EXTRACT E_FGEDU_ITEMS” | ./ggsci >> $LOG_FILE 2>&1
# 等待5秒后启动其他表
sleep 5
echo “START EXTRACT E_FGEDU_OTHERS” | ./ggsci >> $LOG_FILE 2>&1
echo “并行加载已启动: $(date)” >> $LOG_FILE
chmod +x /GoldenGate/app/scripts/parallel_init_load.sh
/GoldenGate/app/scripts/parallel_init_load.sh
Sending START request to MANAGER …
EXTRACT E_FGEDU_ORDERS starting
Sending START request to MANAGER …
EXTRACT E_FGEDU_ITEMS starting
Sending START request to MANAGER …
EXTRACT E_FGEDU_OTHERS starting
并行加载已启动: Mon Jan 15 08:00:05 CST 2024
GGSCI (fgedu.net.cn)> SEND EXTRACT E_FGEDU_ORDERS, STATUS
EXTRACT E_FGEDU_ORDERS
Status RUNNING
Checkpoint Position : 2024-01-15 08:15:23.456789
Current Read Position: 2024-01-15 08:15:23.456789
Statistics:
Total inserts : 45,678,901
Total updates : 0
Total deletes : 0
Total operations : 45,678,901
Throughput: 12,500 rows/sec
4.2 OGG数据迁移性能监控与分析
性能监控是优化过程的重要环节，通过实时监控可以及时发现瓶颈并进行调整。
vi /GoldenGate/app/scripts/perf_monitor.sh
# perf_monitor.sh
# from:www.itpux.com.qq113257174.wx:itpux-com
# web: http://www.fgedu.net.cn
OGG_HOME=/GoldenGate/app
LOG_FILE=/GoldenGate/app/logs/perf_monitor.log
while true; do
echo “========== $(date) ==========” >> $LOG_FILE
# 获取Extract统计
echo “— Extract Statistics —” >> $LOG_FILE
echo “STATS EXTRACT E_FGEDU01” | $OGG_HOME/ggsci 2>/dev/null | grep -E “(Total|Throughput|Lag)” >> $LOG_FILE
# 获取Replicat统计
echo “— Replicat Statistics —” >> $LOG_FILE
echo “STATS REPLICAT R_FGEDU01” | $OGG_HOME/ggsci 2>/dev/null | grep -E “(Total|Throughput|Lag)” >> $LOG_FILE
# 获取系统资源使用
echo “— System Resources —” >> $LOG_FILE
top -bn1 | head -5 >> $LOG_FILE
# 获取网络流量
echo “— Network Traffic —” >> $LOG_FILE
ifconfig eth0 | grep “RX packets\|TX packets” >> $LOG_FILE
sleep 60
done
nohup /GoldenGate/app/scripts/perf_monitor.sh &
nohup: ignoring input and appending output to ‘nohup.out’
tail -50 /GoldenGate/app/logs/perf_monitor.log
— Extract Statistics —
Total inserts 1,256,789
Total updates 456,234
Total operations 1,802,590
— Replicat Statistics —
Total inserts 1,256,789
Total updates 456,234
Total operations 1,802,590
Current lag : 00:00:05
— System Resources —
top – 10:30:00 up 5 days, 12:30, 2 users, load average: 2.45, 2.12, 1.89
Tasks: 156 total, 2 running, 154 sleeping, 0 stopped, 0 zombie
%Cpu(s): 25.3 us, 15.6 sy, 0.0 ni, 58.1 id, 0.5 wa, 0.0 hi, 0.5 si
MiB Mem : 128000.0 total, 75000.0 free, 45000.0 used, 8000.0 buff/cache
— Network Traffic —
RX packets 12345678 bytes 8567890123 (8.0 GiB)
TX packets 9876543 bytes 6543210987 (6.1 GiB)
4.3 OGG数据迁移性能瓶颈排查
性能瓶颈排查是优化过程中的关键环节，需要系统性地分析各个环节的性能状况。
GGSCI (fgedu.net.cn)> LAG EXTRACT E_FGEDU01
EXTRACT E_FGEDU01
Lag 00:00:02
At 2024-01-15 10:35:00
Last Checkpoint: 2024-01-15 10:34:58
Current Read : 2024-01-15 10:35:00
Extract is running normally with minimal lag.
GGSCI (fgedu.net.cn)> LAG REPLICAT R_FGEDU01
REPLICAT R_FGEDU01
Lag 00:05:32
At 2024-01-15 10:35:00
Last Checkpoint: 2024-01-15 10:29:28
Current Read : 2024-01-15 10:35:00
WARNING: Replicat lag is higher than expected!
sqlplus / as sysdba
FROM v$session_wait
WHERE sid IN (SELECT sid FROM v$session WHERE username = ‘FGEDU’)
GROUP BY event
ORDER BY 2 DESC;
EVENT COUNT(*)
——————————– ———-
db file sequential read 15
log file sync 8
buffer busy waits 5
gc buffer busy 3
SQL*Net message from client 2
SQL> SELECT
sql_id,
executions,
elapsed_time/1000000 as elapsed_sec,
cpu_time/1000000 as cpu_sec
FROM v$sql
WHERE parsing_schema_name = ‘FGEDU’
ORDER BY elapsed_time DESC
FETCH FIRST 10 ROWS ONLY;
————- ———- ———– ———–
a1b2c3d4e5f6 5678 125.45 98.23
b2c3d4e5f6g7 4567 89.12 76.45
c3d4e5f6g7h8 3456 67.89 54.32
d4e5f6g7h8i9 2345 45.67 38.90
e5f6g7h8i9j0 1234 23.45 19.87
5 rows selected.
Part05-风哥经验总结与分享
5.1 OGG数据迁移性能优化最佳实践
基于多年的生产环境实践经验，总结OGG数据迁移性能优化的最佳实践建议。
最佳实践总结：
1. 充分的前期规划：评估数据量、网络带宽、硬件资源
2. 合理的并行设计：根据表大小和业务特点拆分进程
3. 优化初始加载：禁用约束、使用批量模式、并行加载
4. 优化增量同步：调整批量提交、内存配置、检查点频率
5. 持续监控调优：实时监控、及时发现问题、动态调整
vi /GoldenGate/app/scripts/perf_checklist.sh
# perf_checklist.sh
# from:www.itpux.com.qq113257174.wx:itpux-com
# web: http://www.fgedu.net.cn
echo “========== OGG性能优化检查清单 ==========”
echo “”
echo “1. 检查OGG进程状态”
echo “INFO ALL” | /GoldenGate/app/ggsci | grep -E “EXTRACT|REPLICAT”
echo “”
echo “2. 检查进程延迟”
for proc in E_FGEDU01 R_FGEDU01; do
echo “LAG $proc” | /GoldenGate/app/ggsci 2>/dev/null | grep -E “Lag|EXTRACT|REPLICAT”
done
echo “”
echo “3. 检查Trail文件大小”
ls -lh /GoldenGate/app/dirdat/ | tail -10
echo “”
echo “4. 检查磁盘空间”
df -h /GoldenGate/app
echo “”
echo “5. 检查内存使用”
free -h
echo “”
echo “6. 检查网络连接状态”
netstat -an | grep 7809 | head -5
5.2 OGG数据迁移常见性能问题总结
在生产环境中常见的性能问题及其解决方案总结。
常见问题与解决方案：
1. Extract延迟高：检查归档日志生成速度、调整TRANLOGOPTIONS参数
2. Replicat延迟高：检查目标端索引、禁用触发器、调整批量提交
3. 网络瓶颈：启用压缩传输、调整TCP参数、增加带宽
4. 磁盘IO瓶颈：使用SSD存储、调整Trail文件大小、分离IO
5. 内存不足：调整CACHEMGR参数、增加系统内存、启用大页
vi /GoldenGate/app/scripts/diagnose_perf.sh
# diagnose_perf.sh
# from:www.itpux.com.qq113257174.wx:itpux-com
# web: http://www.fgedu.net.cn
echo “========== OGG性能诊断报告 ==========”
echo “生成时间: $(date)”
echo “”
# 1. 检查延迟
echo “【延迟检查】”
extract_lag=$(echo “LAG EXTRACT E_FGEDU01” | /GoldenGate/app/ggsci 2>/dev/null | grep “Lag” | awk ‘{print $2}’)
replicat_lag=$(echo “LAG REPLICAT R_FGEDU01” | /GoldenGate/app/ggsci 2>/dev/null | grep “Lag” | awk ‘{print $2}’)
echo “Extract延迟: $extract_lag”
echo “Replicat延迟: $replicat_lag”
if [[ “$replicat_lag” =~ “00:0[5-9]” ]] || [[ “$replicat_lag” =~ “00:[1-5]” ]]; then
echo “警告: Replicat延迟较高，建议检查目标端性能!”
fi
echo “”
echo “【资源使用】”
echo “CPU负载: $(uptime | awk -F’load average:’ ‘{print $2}’)”
echo “内存使用: $(free -h | grep Mem | awk ‘{print $3 “/” $2}’)”
echo “磁盘使用: $(df -h /GoldenGate/app | tail -1 | awk ‘{print $5}’)”
echo “”
echo “【网络状态】”
echo “OGG连接数: $(netstat -an | grep 7809 | grep ESTABLISHED | wc -l)”
echo “网络流量: $(ifconfig eth0 | grep ‘RX packets’ | awk ‘{print $3, $4}’)”
5.3 OGG数据迁移性能优化脚本工具
提供一套完整的性能优化脚本工具，方便日常运维使用。
vi /GoldenGate/app/scripts/optimize_perf.sh
# optimize_perf.sh
# from:www.itpux.com.qq113257174.wx:itpux-com
# web: http://www.fgedu.net.cn
OGG_HOME=/GoldenGate/app
echo “========== OGG性能优化工具 ==========”
echo “1. 调整批量提交参数”
echo “2. 清理Trail文件”
echo “3. 重启延迟进程”
echo “4. 生成性能报告”
echo “5. 退出”
echo “”
read -p “请选择操作: ” choice
case $choice in
1)
echo “调整批量提交参数…”
echo “SEND REPLICAT R_FGEDU01, BATCHTRANSOPS 10000” | $OGG_HOME/ggsci
echo “批量提交参数已调整”
;;
2)
echo “清理过期Trail文件…”
find $OGG_HOME/dirdat -name “*.tmp” -mtime +7 -delete
echo “Trail文件清理完成”
;;
3)
echo “重启延迟进程…”
echo “STOP REPLICAT R_FGEDU01” | $OGG_HOME/ggsci
sleep 5
echo “START REPLICAT R_FGEDU01” | $OGG_HOME/ggsci
echo “进程已重启”
;;
4)
echo “生成性能报告…”
$OGG_HOME/scripts/perf_checklist.sh > /GoldenGate/app/logs/perf_report_$(date +%Y%m%d).txt
echo “报告已生成: /GoldenGate/app/logs/perf_report_$(date +%Y%m%d).txt”
;;
5)
echo “退出”
exit 0
;;
*)
echo “无效选择”
;;
esac
chmod +x /GoldenGate/app/scripts/optimize_perf.sh
/GoldenGate/app/scripts/optimize_perf.sh
1. 调整批量提交参数
2. 清理Trail文件
3. 重启延迟进程
4. 生成性能报告
5. 退出
请选择操作: 4
生成性能报告…
报告已生成: /GoldenGate/app/logs/perf_report_20240115.txt
本文由风哥教程整理发布,仅用于学习测试使用,转载注明出处:http://www.fgedu.net.cn/10327.html
联系我们
在线咨询：
微信号：itpux-com
工作日：9:30-18:30，节假日休息
