# 容量管理最佳实践
#
# 1. 容量规划准备
– 详细评估：详细评估容量需求
– 工具选择：选择合适的容量管理工具
– 环境准备：准备容量管理环境和工具
– 文档准备：准备容量管理文档
#
# 2. 容量规划实施
– 分步实施：采用分步实施的策略
– 数据验证：每步完成后验证数据
– 日志记录：详细记录容量规划过程
– 进度监控：实时监控容量规划进度
#
# 3. 容量规划测试
– 全面测试：全面测试容量规划
– 性能测试：测试容量性能
– 功能测试：测试容量功能
– 数据测试：测试容量数据
#
# 4. 容量监控
– 实时监控：实时监控容量使用情况
– 定期分析：定期分析容量使用趋势
– 预警机制：建立容量预警机制
– 扩容准备：准备容量扩容方案
#
# 5. 容量优化
– 资源优化：优化资源配置
– 性能优化：优化容量性能
– 成本优化：优化容量成本
– 利用率优化：优化资源利用率
#
# 6. 容量维护
– 容量监控：监控容量使用情况
– 问题处理：及时处理容量问题
– 扩容实施：实施容量扩容
– 文档更新：更新容量管理文档
#
# 7. 容量管理 更多视频教程www.fgedu.net.cn
– 责任明确：明确容量管理的责任
– 流程规范：建立规范的容量管理流程
– 持续改进：根据实际情况持续改进
– 经验总结：总结容量管理的经验

# 存储容量规划
#
# 1. 数据增长分析
##
# 当前数据量分析
$ disql SYSDBA/SYSDBA << EOF -- 查看当前数据量 select tablespace_name, round(sum(bytes)/1024/1024/1024, 2) size_gb from dba_data_files group by tablespace_name order by size_gb desc; -- 查看表数据量 select owner, table_name, round(num_rows, 0) row_count, round(avg_row_len, 2) avg_row_len, round(num_rows * avg_row_len / 1024 / 1024 / 1024, 2) size_gb from dba_tables where owner = 'FGEDU' order by size_gb desc; EOF ## # 历史增长分析 $ disql SYSDBA/SYSDBA << EOF -- 查看历史数据增长 select to_char(create_time, 'YYYY-MM') month, round(sum(bytes)/1024/1024/1024, 2) size_gb from dba_data_files where create_time >= add_months(sysdate, -12)
group by to_char(create_time, ‘YYYY-MM’)
order by month;
EOF
#
# 2. 增长预测
##
# 线性增长预测 更多学习教程公众号风哥教程itpux_com
# 假设每月增长率为5%
# 当前数据量：100GB
# 12个月后：100 * (1 + 0.05) ^ 12 = 179.6GB
##
# 指数增长预测
# 假设每月增长率为10%
# 当前数据量：100GB
# 12个月后：100 * (1 + 0.10) ^ 12 = 313.8GB
#
# 3. 容量规划
##
# 存储容量计算
# 当前数据量：100GB
# 预计增长：200GB（12个月）
# 备份空间：300GB（3倍）
# 临时空间：100GB
# 总容量需求：700GB
##
# 存储配置建议
# 数据文件：/dm/data 300GB SSD
# 日志文件：/dm/log 100GB SSD
# 备份文件：/dm/backup 300GB HDD
# 临时文件：/dm/temp 100GB SSD
#
# 4. 表空间规划
##
# 表空间创建
$ disql SYSDBA/SYSDBA << EOF -- 创建表空间 create tablespace USERS datafile '/dm/data/users01.dbf' size 1024M autoextend on maxsize 10240M; create tablespace INDEX datafile '/dm/data/index01.dbf' size 1024M autoextend on maxsize 10240M; create tablespace LOB datafile '/dm/data/lob01.dbf' size 1024M autoextend on maxsize 10240M; -- 查看表空间 select tablespace_name, round(sum(bytes)/1024/1024/1024, 2) size_gb, round(sum(bytes)/1024/1024/1024 * 100 / (select sum(bytes)/1024/1024/1024 from dba_data_files), 2) usage_pct from DB视频:www.itpux.com from dba_data_files group by tablespace_name order by usage_pct desc; EOF # # 5. 容量监控 ## # 存储使用监控 #!/bin/bash # check_storage.sh # from:www.itpux.com.qq113257174.wx:itpux-com # web: `http://www.fgedu.net.cn` # 检查存储使用率 DATA_USAGE=$(df -h /dm/data | tail -1 | awk '{print $5}' | sed 's/%//') LOG_USAGE=$(df -h /dm/log | tail -1 | awk '{print $5}' | sed 's/%//') BACKUP_USAGE=$(df -h /dm/backup | tail -1 | awk '{print $5}' | sed 's/%//') TEMP_USAGE=$(df -h /dm/temp | tail -1 | awk '{print $5}' | sed 's/%//') echo "[$(date '+%Y-%m-%d %H:%M:%S')] 数据目录使用率: $DATA_USAGE%" echo "[$(date '+%Y-%m-%d %H:%M:%S')] 日志目录使用率: $LOG_USAGE%" echo "[$(date '+%Y-%m-%d %H:%M:%S')] 备份目录使用率: $BACKUP_USAGE%" echo "[$(date '+%Y-%m-%d %H:%M:%S')] 临时目录使用率: $TEMP_USAGE%" # 检查是否超过阈值 if [ $DATA_USAGE -gt 80 ]; then echo "[$(date '+%Y-%m-%d %H:%M:%S')] 数据目录使用率过高: $DATA_USAGE%" # 发送告警 send_alert "DM数据库数据目录使用率过高" "warning" "数据目录使用率: $DATA_USAGE%" fi if [ $LOG_USAGE -gt 80 ]; then echo "[$(date '+%Y-%m-%d %H:%M:%S')] 日志目录使用率过高: $LOG_USAGE%" # 发送告警 send_alert "DM数据库日志目录使用率过高" "warning" "日志目录使用率: $LOG_USAGE%" fi if [ $BACKUP_USAGE -gt 80 ]; then echo "[$(date '+%Y-%m-%d %H:%M:%S')] 备份目录使用率过高: $BACKUP_USAGE%" # 发送告警 send_alert "DM数据库备份目录使用率过高" "warning" "备份目录使用率: $BACKUP_USAGE%" fi if [ $TEMP_USAGE -gt 80 ]; then echo "[$(date '+%Y-%m-%d %H:%M:%S')] 临时目录使用率过高: $TEMP_USAGE%" # 发送告警 send_alert "DM数据库临时目录使用率过高" "warning" "临时目录使用率: $TEMP_USAGE%" fi

# 计算容量规划
#
# 1. 性能需求分析
##
# 当前性能分析
$ disql SYSDBA/SYSDBA << EOF -- 查看当前性能指标 select name, value from v\$sysstat where name in ('CPU TIME', 'MEMORY USAGE', 'DISK READ', 'DISK WRITE', 'NET READ', 'NET WRITE') order by name; EOF ## # 历史性能分析 $ disql SYSDBA/SYSDBA << EOF -- 查看历史性能指标 select to_char(sample_time, 'YYYY-MM-DD HH24:MI:SS') sample_time, name, value from v\$sysstat_history where sample_time >= sysdate – 1
and name in (‘CPU TIME’, ‘MEMORY USAGE’, ‘DISK READ’, ‘DISK WRITE’, ‘NET READ’, ‘NET WRITE’)
order by sample_time, name;
EOF
#
# 2. 负载预测
##
# CPU负载预测
# 当前CPU使用率：50%
# 预计增长：30%（业务增长）
# 12个月后：50 * (1 + 0.30) = 65%
# 建议配置：16核CPU
##
# 内存负载预测
# 当前内存使用率：60%
# 预计增长：40%（业务增长）
# 12个月后：60 * (1 + 0.40) = 84%
# 建议配置：128GB内存
#
# 3. 容量规划
##
# 计算容量计算
# CPU需求：16核（当前使用率50%，预计使用率65%）
# 内存需求：128GB（当前使用率60%，预计使用率84%）
# 磁盘IO需求：10000 IOPS（当前5000 IOPS，预计增长100%）
# 网络带宽需求：1Gbps（当前500Mbps，预计增长100%）
##
# 计算配置建议
# CPU：16核（当前8核，预计增长100%）
# 内存：128GB（当前64GB，预计增长100%）
# 磁盘：SSD 1TB（当前500GB，预计增长100%）
# 网络：万兆网卡（当前千兆，预计增长100%）
#
# 4. 性能监控
##
# 计算资源监控
#!/bin/bash
# check_compute.sh
# from:www.itpux.com.qq113257174.wx:itpux-com
# web: `http://www.fgedu.net.cn`
# 检查CPU使用率
CPU_USAGE=$(top -bn1 | grep “Cpu(s)” | awk ‘{print $2}’ | sed ‘s/%us,//’)
# 检查内存使用率
MEMORY_USAGE=$(free -m | awk ‘NR==2{printf “%.2f”, $3*100/$2 }’)
# 检查磁盘IO
DISK_IO=$(iostat -x 1 2 | tail -1 | awk ‘{print $4}’)
# 检查网络IO
NET_IO=$(sar -n DEV 1 2 | tail -1 | awk ‘{print $5}’)
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] CPU使用率: $CPU_USAGE%”
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 内存使用率: $MEMORY_USAGE%”
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 磁盘IO: $DISK_IO”
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 网络IO: $NET_IO”
# 检查是否超过阈值
if [ $(echo “$CPU_USAGE > 80” | bc) -eq 1 ]; then
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] CPU使用率过高: $CPU_USAGE%”
# 发送告警
send_alert “DM数据库CPU使用率过高” “warning” “CPU使用率: $CPU_USAGE%”
fi
if [ $(echo “$MEMORY_USAGE > 80” | bc) -eq 1 ]; then
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 内存使用率过高: $MEMORY_USAGE%”
# 发送告警
send_alert “DM数据库内存使用率过高” “warning” “内存使用率: $MEMORY_USAGE%”
fi

# 存储监控
#
# 1. 表空间监控
##
# 表空间使用率监控
$ disql SYSDBA/SYSDBA << EOF -- 查看表空间使用率 select tablespace_name, round(sum(bytes)/1024/1024/1024, 2) size_gb, round(sum(bytes)/1024/1024/1024 * 100 / (select sum(bytes)/1024/1024/1024 from dba_data_files), 2) usage_pct, round(sum(free_bytes)/1024/1024/1024, 2) free_gb from dba_tablespaces order by usage_pct desc; EOF ## # 表空间增长监控 $ disql SYSDBA/SYSDBA << EOF -- 查看表空间增长趋势 select to_char(create_time, 'YYYY-MM') month, tablespace_name, round(sum(bytes)/1024/1024/1024, 2) size_gb from dba_data_files where create_time >= add_months(sysdate, -12)
group by to_char(create_time, ‘YYYY-MM’), tablespace_name
order by month, tablespace_name;
EOF
#
# 2. 数据文件监控
##
# 数据文件大小监控
$ disql SYSDBA/SYSDBA << EOF -- 查看数据文件大小 select tablespace_name, file_name, round(bytes/1024/1024/1024, 2) size_gb, round(autoextensible, 0) autoextensible, round(maxbytes/1024/1024/1024, 2) maxsize_gb from dba_data_files order by size_gb desc; EOF ## # 数据文件增长监控 $ disql SYSDBA/SYSDBA << EOF -- 查看数据文件增长趋势 select to_char(create_time, 'YYYY-MM') month, tablespace_name, round(sum(bytes)/1024/1024/1024, 2) size_gb from dba_data_files where create_time >= add_months(sysdate, -12)
group by to_char(create_time, ‘YYYY-MM’), tablespace_name
order by month, tablespace_name;
EOF
#
# 3. 存储监控脚本
##
# 存储监控脚本
#!/bin/bash
# monitor_storage.sh
# from:www.itpux.com.qq113257174.wx:itpux-com
# web: `http://www.fgedu.net.cn`
export DM_HOME=/dm/app
export PATH=$PATH:$DM_HOME/bin
# 配置参数
DB_USER=SYSDBA
DB_PASS=SYSDBA
LOG_DIR=/dm/logs
ALERT_DIR=/dm/alerts
DATE=$(date +%Y%m%d)
# 创建日志目录
mkdir -p $LOG_DIR
mkdir -p $ALERT_DIR
# 检查表空间使用率
check_tablespace() {
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 检查表空间使用率”
disql $DB_USER/$DB_PASS << EOF > $LOG_DIR/tablespace_usage_$DATE.log
— 查看表空间使用率
select tablespace_name,
round(sum(bytes)/1024/1024/1024, 2) size_gb,
round(sum(bytes)/1024/1024/1024 * 100 / (select sum(bytes)/1024/1024/1024 from dba_data_files), 2) usage_pct
from dba_data_files
group by tablespace_name
order by usage_pct desc;
EOF
# 检查表空间使用率是否超过阈值
USAGE=$(grep “USERS” $LOG_DIR/tablespace_usage_$DATE.log | awk ‘{print $3}’ | sed ‘s/%//’)
if [ $(echo “$USAGE > 80” | bc) -eq 1 ]; then
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] USERS表空间使用率过高: $USAGE%”
# 发送告警
send_alert “DM数据库表空间使用率过高” “warning” “USERS表空间使用率: $USAGE%”
fi
}
# 检查数据文件大小
check_datafile() {
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 检查数据文件大小”
disql $DB_USER/$DB_PASS << EOF > $LOG_DIR/datafile_size_$DATE.log
— 查看数据文件大小
select tablespace_name,
file_name,
round(bytes/1024/1024/1024, 2) size_gb
from dba_data_files
order by size_gb desc;
EOF
}
# 检查磁盘使用率
check_disk() {
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 检查磁盘使用率”
DATA_USAGE=$(df -h /dm/data | tail -1 | awk ‘{print $5}’ | sed ‘s/%//’)
LOG_USAGE=$(df -h /dm/log | tail -1 | awk ‘{print $5}’ | sed ‘s/%//’)
BACKUP_USAGE=$(df -h /dm/backup | tail -1 | awk ‘{print $5}’ | sed ‘s/%//’)
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 数据目录使用率: $DATA_USAGE%”
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 日志目录使用率: $LOG_USAGE%”
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 备份目录使用率: $BACKUP_USAGE%”
# 检查磁盘使用率是否超过阈值
if [ $DATA_USAGE -gt 80 ]; then
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 数据目录使用率过高: $DATA_USAGE%”
# 发送告警
send_alert “DM数据库数据目录使用率过高” “warning” “数据目录使用率: $DATA_USAGE%”
fi
if [ $LOG_USAGE -gt 80 ]; then
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 日志目录使用率过高: $LOG_USAGE%”
# 发送告警
send_alert “DM数据库日志目录使用率过高” “warning” “日志目录使用率: $LOG_USAGE%”
fi
if [ $BACKUP_USAGE -gt 80 ]; then
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 备份目录使用率过高: $BACKUP_USAGE%”
# 发送告警
send_alert “DM数据库备份目录使用率过高” “warning” “备份目录使用率: $BACKUP_USAGE%”
fi
}
# 发送告警
send_alert() {
ALERT_NAME=$1
ALERT_LEVEL=$2
ALERT_MESSAGE=$3
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 发送告警: $ALERT_NAME”
# 保存告警信息
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 告警名称: $ALERT_NAME” >> $ALERT_DIR/dm_alert_$DATE.log
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 告警级别: $ALERT_LEVEL” >> $ALERT_DIR/dm_alert_$DATE.log
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 告警消息: $ALERT_MESSAGE” >> $ALERT_DIR/dm_alert_$DATE.log
}
# 主函数
main() {
case $1 in
tablespace)
check_tablespace
;;
datafile)
check_datafile
;;
disk)
check_disk
;;
all)
check_tablespace
check_datafile
check_disk
;;
*)
echo “Usage: $0 {tablespace|datafile|disk|all}”
exit 1
esac
}
# 执行主函数
main $*
# 记录日志
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 存储监控完成” >> $LOG_DIR/dm_storage_monitor.log

# 表空间扩容
#
# 1. 表空间扩容方法
##
# 添加数据文件
$ disql SYSDBA/SYSDBA << EOF -- 添加数据文件 alter tablespace USERS add datafile '/dm/data/users02.dbf' size 1024M autoextend on maxsize 10240M; -- 查看表空间 select tablespace_name, file_name, round(bytes/1024/1024/1024, 2) size_gb from dba_data_files where tablespace_name = 'USERS' order by file_name; EOF ## # 扩展数据文件 $ disql SYSDBA/SYSDBA << EOF -- 扩展数据文件 alter database datafile '/dm/data/users01.dbf' resize 2048M; -- 查看数据文件 select tablespace_name, file_name, round(bytes/1024/1024/1024, 2) size_gb from dba_data_files where file_name = '/dm/data/users01.dbf'; EOF ## # 开启自动扩展 $ disql SYSDBA/SYSDBA << EOF -- 开启自动扩展 alter tablespace USERS autoextend on; -- 查看表空间 select tablespace_name, round(autoextensible, 0) autoextensible, round(maxbytes/1024/1024/1024, 2) maxsize_gb from dba_tablespaces where tablespace_name = 'USERS'; EOF # # 2. 表空间扩容脚本 ## # 表空间扩容脚本 #!/bin/bash # expand_tablespace.sh # from:www.itpux.com.qq113257174.wx:itpux-com # web: `http://www.fgedu.net.cn` export DM_HOME=/dm/app export PATH=$PATH:$DM_HOME/bin # 配置参数 DB_USER=SYSDBA DB_PASS=SYSDBA LOG_DIR=/dm/logs DATE=$(date +%Y%m%d) # 创建日志目录 mkdir -p $LOG_DIR # 扩展表空间 expand_tablespace() { TABLESPACE_NAME=$1 DATAFILE_SIZE=$2 echo "[$(date '+%Y-%m-%d %H:%M:%S')] 扩展表空间: $TABLESPACE_NAME" # 检查表空间使用率 USAGE=$(disql $DB_USER/$DB_PASS << EOF set echo off set heading off select round(sum(bytes)/1024/1024/1024 * 100 / (select sum(bytes)/1024/1024/1024 from dba_data_files), 2) from dba_data_files where tablespace_name = '$TABLESPACE_NAME'; EOF ) echo "[$(date '+%Y-%m-%d %H:%M:%S')] 表空间使用率: $USAGE%" # 检查是否需要扩容 if [ $(echo "$USAGE > 80″ | bc) -eq 1 ]; then
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 表空间使用率超过80%，需要扩容”
# 添加数据文件
DATAFILE_NAME=”/dm/data/${TABLESPACE_NAME}$(date +%Y%m%d%H%M%S).dbf”
disql $DB_USER/$DB_PASS << EOF alter tablespace $TABLESPACE_NAME add datafile '$DATAFILE_NAME' size ${DATAFILE_SIZE}M autoextend on maxsize 10240M; EOF if [ $? -eq 0 ]; then echo "[$(date '+%Y-%m-%d %H:%M:%S')] 表空间扩容成功: $DATAFILE_NAME" # 发送通知 send_notification "DM数据库表空间扩容" "表空间 $TABLESPACE_NAME 扩容成功" else echo "[$(date '+%Y-%m-%d %H:%M:%S')] 表空间扩容失败" # 发送告警 send_alert "DM数据库表空间扩容失败" "critical" "表空间 $TABLESPACE_NAME 扩容失败" fi else echo "[$(date '+%Y-%m-%d %H:%M:%S')] 表空间使用率正常，无需扩容" fi } # 发送通知 send_notification() { NOTIFICATION_NAME=$1 NOTIFICATION_MESSAGE=$2 echo "[$(date '+%Y-%m-%d %H:%M:%S')] 发送通知: $NOTIFICATION_NAME" # 发送邮件通知 echo "$NOTIFICATION_MESSAGE" | mail -s "[通知] $NOTIFICATION_NAME" dba@fgedu.net.cn } # 发送告警 send_alert() { ALERT_NAME=$1 ALERT_LEVEL=$2 ALERT_MESSAGE=$3 echo "[$(date '+%Y-%m-%d %H:%M:%S')] 发送告警: $ALERT_NAME" # 发送邮件告警 echo "$ALERT_MESSAGE" | mail -s "[告警] $ALERT_NAME" dba@fgedu.net.cn } # 主函数 main() { case $1 in USERS) expand_tablespace "USERS" 1024 ;; INDEX) expand_tablespace "INDEX" 1024 ;; LOB) expand_tablespace "LOB" 1024 ;; all) expand_tablespace "USERS" 1024 expand_tablespace "INDEX" 1024 expand_tablespace "LOB" 1024 ;; *) echo "Usage: $0 {USERS|INDEX|LOB|all}" exit 1 esac } # 执行主函数 main $* # 记录日志 echo "[$(date '+%Y-%m-%d %H:%M:%S')] 表空间扩容完成" >> $LOG_DIR/dm_expand_tablespace.log

#
# 容量规划案例
##
# 场景描述
某企业需要为DM数据库进行容量规划，确保数据库能够满足未来12个月的业务增长需求。
##
# 实施步骤
# 1. 需求分析
#
# 业务需求
– 当前数据量：100GB
– 预计增长率：每月10%
– 业务类型：在线交易系统
– 并发用户：1000
#
# 技术需求
– 性能要求：响应时间<1秒 - 可用性要求：99.9% - 备份要求：每天全量备份，每小时增量备份 - 灾备要求：RTO<1小时，RPO<5分钟 # 2. 容量计算 # # 存储容量计算 # 当前数据量：100GB # 12个月后：100 * (1 + 0.10) ^ 12 = 313.8GB # 备份空间：313.8 * 3 = 941.4GB # 临时空间：100GB # 总容量需求：313.8 + 941.4 + 100 = 1355.2GB # # 计算容量计算 # CPU需求：当前8核，预计使用率50%，12个月后使用率65% # 内存需求：当前64GB，预计使用率60%，12个月后使用率84% # 磁盘IO需求：当前5000 IOPS，预计增长100% # 网络带宽需求：当前500Mbps，预计增长100% # 3. 容量规划 # # 存储配置 # 数据文件：/dm/data 500GB SSD # 日志文件：/dm/log 200GB SSD # 备份文件：/dm/backup 1000GB HDD # 临时文件：/dm/temp 200GB SSD # # 计算配置 # CPU：16核（当前8核，预计增长100%） # 内存：128GB（当前64GB，预计增长100%） # 磁盘：SSD 1TB + HDD 1TB # 网络：万兆网卡 # 4. 容量验证 ## # 存储验证 $ df -h /dm/data $ df -h /dm/log $ df -h /dm/backup $ df -h /dm/temp ## # 计算验证 $ top -bn1 | grep "Cpu(s)" $ free -m $ iostat -x 1 2 $ sar -n DEV 1 2 # 5. 效果评估 ## # 容量效果 - 存储容量充足 - 计算资源充足 - 网络带宽充足 - 性能满足要求 ## # 成本效果 - 资源配置合理 - 成本控制良好 - 资源利用率高 - 投资回报良好

#
# 容量监控案例
##
# 场景描述
某企业需要为DM数据库搭建容量监控系统，实时监控数据库的容量使用情况。
##
# 实施步骤
# 1. 环境准备
#
# 数据库环境
– 主机名：fgedu-db
– IP地址：192.168.1.200
– 操作系统：Oracle Linux 9.3
– 数据库：DM8
– 内存：64GB
– CPU：16核
– 磁盘：1TB
# 2. 创建监控脚本
#!/bin/bash
# monitor_capacity.sh
# from:www.itpux.com.qq113257174.wx:itpux-com
# web: `http://www.fgedu.net.cn`
export DM_HOME=/dm/app
export PATH=$PATH:$DM_HOME/bin
# 配置参数
DB_USER=SYSDBA
DB_PASS=SYSDBA
LOG_DIR=/dm/logs
ALERT_DIR=/dm/alerts
DATE=$(date +%Y%m%d)
TIME=$(date +%H%M%S)
# 创建日志目录
mkdir -p $LOG_DIR
mkdir -p $ALERT_DIR
# 检查表空间使用率
check_tablespace() {
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 检查表空间使用率”
disql $DB_USER/$DB_PASS << EOF > $LOG_DIR/tablespace_usage_$DATE.log
— 查看表空间使用率
select tablespace_name,
round(sum(bytes)/1024/1024/1024, 2) size_gb,
round(sum(bytes)/1024/1024/1024 * 100 / (select sum(bytes)/1024/1024/1024 from dba_data_files), 2) usage_pct
from dba_data_files
group by tablespace_name
order by usage_pct desc;
EOF
# 检查表空间使用率是否超过阈值
while read TABLESPACE_NAME USAGE; do
if [ $(echo “$USAGE > 80” | bc) -eq 1 ]; then
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 表空间 $TABLESPACE_NAME 使用率过高: $USAGE%”
# 发送告警
send_alert “DM数据库表空间使用率过高” “warning” “表空间 $TABLESPACE_NAME 使用率: $USAGE%”
fi
done < <(grep -v "^$" $LOG_DIR/tablespace_usage_$DATE.log | awk '{print $1, $3}') } # 检查磁盘使用率 check_disk() { echo "[$(date '+%Y-%m-%d %H:%M:%S')] 检查磁盘使用率" DATA_USAGE=$(df -h /dm/data | tail -1 | awk '{print $5}' | sed 's/%//') LOG_USAGE=$(df -h /dm/log | tail -1 | awk '{print $5}' | sed 's/%//') BACKUP_USAGE=$(df -h /dm/backup | tail -1 | awk '{print $5}' | sed 's/%//') echo "[$(date '+%Y-%m-%d %H:%M:%S')] 数据目录使用率: $DATA_USAGE%" echo "[$(date '+%Y-%m-%d %H:%M:%S')] 日志目录使用率: $LOG_USAGE%" echo "[$(date '+%Y-%m-%d %H:%M:%S')] 备份目录使用率: $BACKUP_USAGE%" # 检查磁盘使用率是否超过阈值 if [ $DATA_USAGE -gt 80 ]; then echo "[$(date '+%Y-%m-%d %H:%M:%S')] 数据目录使用率过高: $DATA_USAGE%" # 发送告警 send_alert "DM数据库数据目录使用率过高" "warning" "数据目录使用率: $DATA_USAGE%" fi if [ $LOG_USAGE -gt 80 ]; then echo "[$(date '+%Y-%m-%d %H:%M:%S')] 日志目录使用率过高: $LOG_USAGE%" # 发送告警 send_alert "DM数据库日志目录使用率过高" "warning" "日志目录使用率: $LOG_USAGE%" fi if [ $BACKUP_USAGE -gt 80 ]; then echo "[$(date '+%Y-%m-%d %H:%M:%S')] 备份目录使用率过高: $BACKUP_USAGE%" # 发送告警 send_alert "DM数据库备份目录使用率过高" "warning" "备份目录使用率: $BACKUP_USAGE%" fi } # 检查计算资源使用率 check_compute() { echo "[$(date '+%Y-%m-%d %H:%M:%S')] 检查计算资源使用率" # 检查CPU使用率 CPU_USAGE=$(top -bn1 | grep "Cpu(s)" | awk '{print $2}' | sed 's/%us,//') # 检查内存使用率 MEMORY_USAGE=$(free -m | awk 'NR==2{printf "%.2f", $3*100/$2 }') echo "[$(date '+%Y-%m-%d %H:%M:%S')] CPU使用率: $CPU_USAGE%" echo "[$(date '+%Y-%m-%d %H:%M:%S')] 内存使用率: $MEMORY_USAGE%" # 检查是否超过阈值 if [ $(echo "$CPU_USAGE > 80″ | bc) -eq 1 ]; then
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] CPU使用率过高: $CPU_USAGE%”
# 发送告警
send_alert “DM数据库CPU使用率过高” “warning” “CPU使用率: $CPU_USAGE%”
fi
if [ $(echo “$MEMORY_USAGE > 80” | bc) -eq 1 ]; then
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 内存使用率过高: $MEMORY_USAGE%”
# 发送告警
send_alert “DM数据库内存使用率过高” “warning” “内存使用率: $MEMORY_USAGE%”
fi
}
# 发送告警
send_alert() {
ALERT_NAME=$1
ALERT_LEVEL=$2
ALERT_MESSAGE=$3
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 发送告警: $ALERT_NAME”
# 保存告警信息
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 告警名称: $ALERT_NAME” >> $ALERT_DIR/dm_alert_$DATE.log
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 告警级别: $ALERT_LEVEL” >> $ALERT_DIR/dm_alert_$DATE.log
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 告警消息: $ALERT_MESSAGE” >> $ALERT_DIR/dm_alert_$DATE.log
# 发送邮件告警
echo “$ALERT_MESSAGE” | mail -s “[告警] $ALERT_NAME” dba@fgedu.net.cn
}
# 主函数
main() {
case $1 in
tablespace)
check_tablespace
;;
disk)
check_disk
;;
compute)
check_compute
;;
all)
check_tablespace
check_disk
check_compute
;;
*)
echo “Usage: $0 {tablespace|disk|compute|all}”
exit 1
esac
}
# 执行主函数
main $*
# 记录日志
echo “[$(date ‘+%Y-%m-%d %H:%M:%S’)] 容量监控完成” >> $LOG_DIR/dm_capacity_monitor.log
# 3. 配置定时任务
# 每10分钟检查表空间使用率
*/10 * * * * /dm/scripts/monitor_capacity.sh tablespace >> /dm/logs/monitor_tablespace.log 2>&1
# 每10分钟检查磁盘使用率
*/10 * * * * /dm/scripts/monitor_capacity.sh disk >> /dm/logs/monitor_disk.log 2>&1
# 每10分钟检查计算资源使用率
*/10 * * * * /dm/scripts/monitor_capacity.sh compute >> /dm/logs/monitor_compute.log 2>&1
# 4. 验证监控
##
# 查看监控日志
$ tail -f /dm/logs/monitor_tablespace.log
$ tail -f /dm/logs/monitor_disk.log
$ tail -f /dm/logs/monitor_compute.log
##
# 查看告警日志
$ tail -f /dm/alerts/dm_alert_*.log
# 5. 效果评估
##
# 监控效果
– 监控脚本正常运行
– 监控数据准确
– 监控实时性良好
##
# 告警效果
– 告警及时发送
– 告警内容准确
– 告警处理及时

#
# 容量扩容案例
##
# 场景描述
某企业需要为DM数据库进行容量扩容，以满足业务增长需求。
##
# 实施步骤
# 1. 扩容需求分析
#
# 表空间扩容需求
– 当前表空间使用率：85%
– 扩容目标：使用率<70% - 扩容方式：添加数据文件 - 扩容大小：1024MB # # 存储扩容需求 - 当前存储使用率：90% - 扩容目标：使用率<70% - 扩容方式：添加磁盘 - 扩容大小：500GB # 2. 表空间扩容 ## # 扩展USERS表空间 $ disql SYSDBA/SYSDBA << EOF -- 查看当前表空间使用情况 select tablespace_name, round(sum(bytes)/1024/1024/1024, 2) size_gb, round(sum(bytes)/1024/1024/1024 * 100 / (select sum(bytes)/1024/1024/1024 from dba_data_files), 2) usage_pct from dba_data_files where tablespace_name = 'USERS' group by tablespace_name; -- 添加数据文件 alter tablespace USERS add datafile '/dm/data/users02.dbf' size 1024M autoextend on maxsize 10240M; -- 查看扩容后的表空间 select tablespace_name, file_name, round(bytes/1024/1024/1024, 2) size_gb from dba_data_files where tablespace_name = 'USERS' order by file_name; EOF ## # 扩展INDEX表空间 $ disql SYSDBA/SYSDBA << EOF -- 添加数据文件 alter tablespace INDEX add datafile '/dm/data/index02.dbf' size 1024M autoextend on maxsize 10240M; -- 查看扩容后的表空间 select tablespace_name, file_name, round(bytes/1024/1024/1024, 2) size_gb from dba_data_files where tablespace_name = 'INDEX' order by file_name; EOF # 3. 存储扩容 ## # 添加新磁盘 # 1. 物理添加新磁盘 # 2. 创建文件系统 $ mkfs.ext4 /dev/sdb $ mkdir -p /dm/data2 $ mount /dev/sdb /dm/data2 # 3. 创建数据文件 $ disql SYSDBA/SYSDBA << EOF -- 添加数据文件到新磁盘 alter tablespace USERS add datafile '/dm/data2/users03.dbf' size 2048M autoextend on maxsize 20480M; alter tablespace INDEX add datafile '/dm/data2/index03.dbf' size 2048M autoextend on maxsize 20480M; EOF # 4. 验证扩容 ## # 查看表空间使用率 $ disql SYSDBA/SYSDBA << EOF -- 查看表空间使用率 select tablespace_name, round(sum(bytes)/1024/1024/1024, 2) size_gb, round(sum(bytes)/1024/1024/1024 * 100 / (select sum(bytes)/1024/1024/1024 from dba_data_files), 2) usage_pct from dba_data_files group by tablespace_name order by usage_pct desc; EOF ## # 查看磁盘使用率 $ df -h /dm/data $ df -h /dm/data2 # 5. 效果评估 ## # 扩容效果 - 表空间使用率降低到70% - 存储使用率降低到65% - 性能恢复正常 - 业务运行正常 ## # 成本效果 - 扩容成本合理 - 资源利用率提高 - 投资回报良好