kingbase教程FG160-金仓数据库数据泵工具使用实战
本文档风哥主要介绍金仓数据库数据泵工具使用实战相关知识，包括数据泵的概念、特性、优势、环境要求、使用规划、实现方法、监控技巧、实战案例等内容，风哥教程参考金仓官方文档数据迁移相关内容编写，适合DBA人员在学习和测试中使用，如果要应用于生产环境则需要自行确认。
Part01-基础概念与理论知识
1.1 金仓数据库数据泵概念
金仓数据库数据泵是一种用于数据导入导出的工具，它可以高效地在金仓数据库之间或与其他数据库之间传输数据。数据泵支持全库导出、模式导出、表导出等多种导出方式，同时支持并行操作，提高数据传输效率。
金仓数据库数据泵的特点：
# 数据泵的主要特性
1. 支持多种导出方式：
– 全库导出：导出整个数据库
– 模式导出：导出指定模式
– 表导出：导出指定表
– 查询导出：导出查询结果
2. 支持多种导入方式：
– 全库导入：导入整个数据库
– 模式导入：导入指定模式
– 表导入：导入指定表
– 数据导入：只导入数据
3. 支持并行操作：
– 并行导出：多个进程同时导出数据
– 并行导入：多个进程同时导入数据
4. 支持数据压缩：
– 导出时压缩数据，减少数据传输量
– 导入时解压缩数据
5. 支持数据过滤：
– 按条件导出数据
– 按表空间导出数据
– 按对象类型导出数据
- 高效的数据导入导出工具
- 支持全库导出、模式导出、表导出等多种方式
- 支持并行操作，提高数据传输效率，学习交流加群风哥微信: itpux-com
- 支持数据压缩，减少数据传输量
- 支持数据过滤，只导出需要的数据
1.2 金仓数据库数据泵特性
金仓数据库数据泵的特性：
# 数据泵的主要特性
1. 支持多种导出方式：
– 全库导出：导出整个数据库
– 模式导出：导出指定模式
– 表导出：导出指定表
– 查询导出：导出查询结果
2. 支持多种导入方式：
– 全库导入：导入整个数据库
– 模式导入：导入指定模式
– 表导入：导入指定表
– 数据导入：只导入数据
3. 支持并行操作：
– 并行导出：多个进程同时导出数据
– 并行导入：多个进程同时导入数据
4. 支持数据压缩：
– 导出时压缩数据，减少数据传输量
– 导入时解压缩数据
5. 支持数据过滤：
– 按条件导出数据
– 按表空间导出数据
– 按对象类型导出数据
1.3 金仓数据库数据泵优势
金仓数据库数据泵的优势：
- 高效：支持并行操作，提高数据传输效率
- 灵活：支持多种导出导入方式，满足不同需求
- 可靠：支持断点续传，确保数据传输的可靠性，学习交流加群风哥QQ113257174
- 安全：支持数据加密，保护数据安全
- 便捷：提供命令行和图形界面，使用方便
风哥提示：数据泵是金仓数据库中用于数据迁移和备份的重要工具，合理使用数据泵可以显著提高数据传输效率，减少数据迁移时间。
# 硬件要求
– CPU：多核CPU，建议至少4核以上
– 内存：足够的内存，建议至少8GB以上
– 磁盘：足够的磁盘空间，用于存储导出文件
– 网络：稳定的网络连接，用于远程数据传输
# 软件要求
– 金仓数据库版本：KingbaseES V8.0及以上
– 操作系统：Oracle Linux 9.3 / RHEL 9.3 / 8.x / 7.x、麒麟操作系统 Kylin v10 SP3
# 数据库参数要求
– work_mem：适当增大，提高数据泵性能
– maintenance_work_mem：适当增大，提高维护操作性能
– shared_buffers：适当增大，提高数据缓存能力
– max_worker_processes：适当增大，支持并行操作
# 导出规划
– 导出方式：根据需求选择全库导出、模式导出或表导出
– 导出时间：选择业务低峰期进行导出
– 导出路径：选择有足够空间的目录
– 导出文件大小：预估导出文件大小，确保有足够空间
– 并行度：根据系统资源设置合适的并行度
# 导入规划
– 导入方式：根据导出文件选择对应的导入方式
– 导入时间：选择业务低峰期进行导入
– 目标数据库：确保目标数据库有足够空间
– 索引处理：决定是否在导入后重建索引
– 约束处理：决定是否在导入后启用约束
# 数据泵参数规划
– 并行度：根据系统资源设置合适的并行度
– 压缩：根据网络带宽和存储空间决定是否启用压缩
– 缓冲区大小：根据系统内存设置合适的缓冲区大小
– 日志级别：根据需要设置合适的日志级别
Part02-生产环境规划与建议
2.1 数据泵环境要求
金仓数据库数据泵的环境要求：
# 硬件要求
– CPU：多核CPU，建议至少4核以上
– 内存：足够的内存，建议至少8GB以上
– 磁盘：足够的磁盘空间，用于存储导出文件
– 网络：稳定的网络连接，用于远程数据传输
# 软件要求
– 金仓数据库版本：KingbaseES V8.0及以上
– 操作系统：Oracle Linux 9.3 / RHEL 9.3 / 8.x / 7.x、麒麟操作系统 Kylin v10 SP3
# 数据库参数要求
– work_mem：适当增大，提高数据泵性能
– maintenance_work_mem：适当增大，提高维护操作性能
– shared_buffers：适当增大，提高数据缓存能力
– max_worker_processes：适当增大，支持并行操作
2.2 数据泵使用规划
金仓数据库数据泵的使用规划：
# 导出规划
– 导出方式：根据需求选择全库导出、模式导出或表导出
– 导出时间：选择业务低峰期进行导出
– 导出路径：选择有足够空间的目录
– 导出文件大小：预估导出文件大小，确保有足够空间
– 并行度：根据系统资源设置合适的并行度
# 导入规划
– 导入方式：根据导出文件选择对应的导入方式
– 导入时间：选择业务低峰期进行导入
– 目标数据库：确保目标数据库有足够空间
– 索引处理：决定是否在导入后重建索引
– 约束处理：决定是否在导入后启用约束
# 数据泵参数规划
– 并行度：根据系统资源设置合适的并行度
– 压缩：根据网络带宽和存储空间决定是否启用压缩
– 缓冲区大小：根据系统内存设置合适的缓冲区大小
– 日志级别：根据需要设置合适的日志级别
2.3 数据泵性能考量
金仓数据库数据泵的性能考量：
- 并行度：并行度设置过高会导致系统资源竞争，设置过低则无法充分利用系统资源
- 压缩：启用压缩可以减少数据传输量，但会增加CPU开销，更多视频教程www.fgedu.net.cn
- 缓冲区大小：适当增大缓冲区大小可以提高数据传输效率
- 网络带宽：网络带宽是远程数据传输的瓶颈，需要确保有足够的网络带宽
- 磁盘I/O：磁盘I/O是本地数据传输的瓶颈，需要确保磁盘I/O性能良好
生产环境建议：在使用数据泵时，应该根据系统资源和数据量选择合适的并行度和参数设置，避免设置过高导致系统资源竞争。同时，应该选择业务低峰期进行数据泵操作，减少对业务的影响。
# 连接数据库
$ ksql -U system -d fgedudb
# 查看当前数据泵相关参数
SHOW work_mem;
SHOW maintenance_work_mem;
SHOW shared_buffers;
SHOW max_worker_processes;
# 修改数据泵相关参数
ALTER SYSTEM SET work_mem = ’64MB’;
ALTER SYSTEM SET maintenance_work_mem = ‘256MB’;
ALTER SYSTEM SET shared_buffers = ‘2GB’;
ALTER SYSTEM SET max_worker_processes = 8;
# 重启数据库使参数生效
$ systemctl restart kingbase
# 验证参数设置
$ ksql -U system -d fgedudb -c “SHOW work_mem;”
$ ksql -U system -d fgedudb -c “SHOW maintenance_work_mem;”
$ ksql -U system -d fgedudb -c “SHOW shared_buffers;”
$ ksql -U system -d fgedudb -c “SHOW max_worker_processes;”
# 创建导出目录
$ mkdir -p /kingbase/export
# 设置目录权限
$ chown kingbase:kingbase /kingbase/export
$ chmod 755 /kingbase/export
# 查看目录
$ ls -l /kingbase/export
# 使用数据泵导出全库
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=full.dmp full=y parallel=4 compression=all
# 查看导出结果
$ ls -l /kingbase/export/full.dmp
# 导出日志
Export: Release 8.0.0 – Production on Fri Apr 9 10:00:00 2026
Copyright (c) 2000, 2026, Kingbase Corporation. All rights reserved.
Starting “SYSTEM”.”SYS_EXPORT_FULL_01″: system/********@fgedudb directory=DATA_PUMP_DIR dumpfile=full.dmp full=y parallel=4 compression=all
Estimate in progress using BLOCKS method…
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/TABLE_DATA
Total estimation using BLOCKS method: 100 MB
Processing object type DATABASE_EXPORT/TABLESPACE
Processing object type DATABASE_EXPORT/SCHEMA
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/TABLE
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/INDEX/INDEX
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/CONSTRAINT/CONSTRAINT
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/INDEX/STATISTICS/INDEX_STATISTICS
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/STATISTICS/TABLE_STATISTICS
Processing object type DATABASE_EXPORT/SCHEMA/USER
Processing object type DATABASE_EXPORT/SCHEMA/ROLE
Processing object type DATABASE_EXPORT/SCHEMA/GRANT/SYSTEM_GRANT
Processing object type DATABASE_EXPORT/SCHEMA/GRANT/OBJECT_GRANT
Processing object type DATABASE_EXPORT/SCHEMA/GRANT/ROLE_GRANT
Processing object type DATABASE_EXPORT/SCHEMA/SEQUENCE/SEQUENCE
Processing object type DATABASE_EXPORT/SCHEMA/PROCEDURE/PROCEDURE
Processing object type DATABASE_EXPORT/SCHEMA/FUNCTION/FUNCTION
Processing object type DATABASE_EXPORT/SCHEMA/PACKAGE/PACKAGE_SPEC
Processing object type DATABASE_EXPORT/SCHEMA/PACKAGE/PACKAGE_BODY
. . exported “SYSTEM”.”FGEDU_EMPLOYEE” 10 MB
. . exported “SYSTEM”.”FGEDU_ORDER” 20 MB
. . exported “SYSTEM”.”FGEDU_CUSTOMER” 15 MB
. . exported “SYSTEM”.”FGEDU_PRODUCT” 25 MB
. . exported “SYSTEM”.”FGEDU_TRANSACTION” 30 MB
Master table “SYSTEM”.”SYS_EXPORT_FULL_01″ successfully loaded/unloaded
******************************************************************************
Dump file set for SYSTEM.SYS_EXPORT_FULL_01 is:
/kingbase/export/full.dmp
Job “SYSTEM”.”SYS_EXPORT_FULL_01″ successfully completed at Fri Apr 9 10:30:00 2026 elapsed 0 00:30:00
# 使用数据泵导出指定模式
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=schema.dmp schemas=fgedu parallel=4 compression=all
# 查看导出结果
$ ls -l /kingbase/export/schema.dmp
# 导出日志
Export: Release 8.0.0 – Production on Fri Apr 9 11:00:00 2026
Copyright (c) 2000, 2026, Kingbase Corporation. All rights reserved.
Starting “SYSTEM”.”SYS_EXPORT_SCHEMA_01″: system/********@fgedudb directory=DATA_PUMP_DIR dumpfile=schema.dmp schemas=fgedu parallel=4 compression=all
Estimate in progress using BLOCKS method…
Processing object type SCHEMA_EXPORT/TABLE/TABLE_DATA
Total estimation using BLOCKS method: 80 MB
Processing object type SCHEMA_EXPORT/TABLESPACE
Processing object type SCHEMA_EXPORT/SCHEMA
Processing object type SCHEMA_EXPORT/TABLE/TABLE
Processing object type SCHEMA_EXPORT/TABLE/INDEX/INDEX
Processing object type SCHEMA_EXPORT/TABLE/CONSTRAINT/CONSTRAINT
Processing object type SCHEMA_EXPORT/TABLE/INDEX/STATISTICS/INDEX_STATISTICS
Processing object type SCHEMA_EXPORT/TABLE/STATISTICS/TABLE_STATISTICS
Processing object type SCHEMA_EXPORT/SEQUENCE/SEQUENCE
Processing object type SCHEMA_EXPORT/PROCEDURE/PROCEDURE
Processing object type SCHEMA_EXPORT/FUNCTION/FUNCTION
. . exported “FGEDU”.”EMPLOYEE” 10 MB
. . exported “FGEDU”.”ORDER” 20 MB
. . exported “FGEDU”.”CUSTOMER” 15 MB
. . exported “FGEDU”.”PRODUCT” 25 MB
. . exported “FGEDU”.”TRANSACTION” 10 MB
Master table “SYSTEM”.”SYS_EXPORT_SCHEMA_01″ successfully loaded/unloaded
******************************************************************************
Dump file set for SYSTEM.SYS_EXPORT_SCHEMA_01 is:
/kingbase/export/schema.dmp
Job “SYSTEM”.”SYS_EXPORT_SCHEMA_01″ successfully completed at Fri Apr 9 11:20:00 2026 elapsed 0 00:20:00
# 使用数据泵导出指定表
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=tables.dmp tables=fgedu.employee,fgedu.order parallel=4 compression=all
# 查看导出结果
$ ls -l /kingbase/export/tables.dmp
# 导出日志
Export: Release 8.0.0 – Production on Fri Apr 9 12:00:00 2026
Copyright (c) 2000, 2026, Kingbase Corporation. All rights reserved.
Starting “SYSTEM”.”SYS_EXPORT_TABLE_01″: system/********@fgedudb directory=DATA_PUMP_DIR dumpfile=tables.dmp tables=fgedu.employee,fgedu.order parallel=4 compression=all
Estimate in progress using BLOCKS method…
Processing object type TABLE_EXPORT/TABLE/TABLE_DATA
Total estimation using BLOCKS method: 30 MB
Processing object type TABLE_EXPORT/TABLE/TABLE
Processing object type TABLE_EXPORT/TABLE/INDEX/INDEX
Processing object type TABLE_EXPORT/TABLE/CONSTRAINT/CONSTRAINT
Processing object type TABLE_EXPORT/TABLE/INDEX/STATISTICS/INDEX_STATISTICS
Processing object type TABLE_EXPORT/TABLE/STATISTICS/TABLE_STATISTICS
. . exported “FGEDU”.”EMPLOYEE” 10 MB
. . exported “FGEDU”.”ORDER” 20 MB
Master table “SYSTEM”.”SYS_EXPORT_TABLE_01″ successfully loaded/unloaded
******************************************************************************
Dump file set for SYSTEM.SYS_EXPORT_TABLE_01 is:
/kingbase/export/tables.dmp
Job “SYSTEM”.”SYS_EXPORT_TABLE_01″ successfully completed at Fri Apr 9 12:10:00 2026 elapsed 0 00:10:00
# 使用数据泵导入数据
$ kimpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=full.dmp full=y parallel=4
# 导入日志
Import: Release 8.0.0 – Production on Fri Apr 9 13:00:00 2026
Copyright (c) 2000, 2026, Kingbase Corporation. All rights reserved.
Starting “SYSTEM”.”SYS_IMPORT_FULL_01″: system/********@fgedudb directory=DATA_PUMP_DIR dumpfile=full.dmp full=y parallel=4
Processing object type DATABASE_EXPORT/TABLESPACE
Processing object type DATABASE_EXPORT/SCHEMA
Processing object type DATABASE_EXPORT/SCHEMA/USER
Processing object type DATABASE_EXPORT/SCHEMA/ROLE
Processing object type DATABASE_EXPORT/SCHEMA/GRANT/SYSTEM_GRANT
Processing object type DATABASE_EXPORT/SCHEMA/GRANT/OBJECT_GRANT
Processing object type DATABASE_EXPORT/SCHEMA/GRANT/ROLE_GRANT
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/TABLE
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/TABLE_DATA
. . imported “SYSTEM”.”FGEDU_EMPLOYEE” 10 MB
. . imported “SYSTEM”.”FGEDU_ORDER” 20 MB
. . imported “SYSTEM”.”FGEDU_CUSTOMER” 15 MB
. . imported “SYSTEM”.”FGEDU_PRODUCT” 25 MB
. . imported “SYSTEM”.”FGEDU_TRANSACTION” 30 MB
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/INDEX/INDEX
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/CONSTRAINT/CONSTRAINT
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/INDEX/STATISTICS/INDEX_STATISTICS
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/STATISTICS/TABLE_STATISTICS
Processing object type DATABASE_EXPORT/SCHEMA/SEQUENCE/SEQUENCE
Processing object type DATABASE_EXPORT/SCHEMA/PROCEDURE/PROCEDURE
Processing object type DATABASE_EXPORT/SCHEMA/FUNCTION/FUNCTION
Processing object type DATABASE_EXPORT/SCHEMA/PACKAGE/PACKAGE_SPEC
Processing object type DATABASE_EXPORT/SCHEMA/PACKAGE/PACKAGE_BODY
Master table “SYSTEM”.”SYS_IMPORT_FULL_01″ successfully loaded/unloaded
******************************************************************************
Import completed successfully without warnings.
Job “SYSTEM”.”SYS_IMPORT_FULL_01″ successfully completed at Fri Apr 9 13:40:00 2026 elapsed 0 00:40:00
# 查看数据泵作业状态
$ ksql -U system -d fgedudb
SELECT
job_name,
operation,
job_mode,
state,
attached_sessions
FROM dba_datapump_jobs;
# 查看数据泵作业详细信息
SELECT
job_name,
object_type,
status,
completed_rows,
total_rows
FROM dba_datapump_job_details;
# 查看系统负载
$ top
# 查看I/O性能
$ iostat -x
# 查看网络性能
$ netstat -i
# 查看数据泵导出日志
$ tail -f /kingbase/app/log/expdp.log
# 查看数据泵导入日志
$ tail -f /kingbase/app/log/impdp.log
# 分析数据泵日志
# 查找错误信息
$ grep -i error /kingbase/app/log/expdp.log
# 查找警告信息
$ grep -i warning /kingbase/app/log/expdp.log
# 查找完成信息
$ grep -i completed /kingbase/app/log/expdp.log
Part03-生产环境项目实施方案
3.1 金仓数据库数据泵配置
3.1.1 配置数据泵参数
# 连接数据库
$ ksql -U system -d fgedudb
# 查看当前数据泵相关参数
SHOW work_mem;
SHOW maintenance_work_mem;
SHOW shared_buffers;
SHOW max_worker_processes;
# 修改数据泵相关参数
ALTER SYSTEM SET work_mem = ’64MB’;
ALTER SYSTEM SET maintenance_work_mem = ‘256MB’;
ALTER SYSTEM SET shared_buffers = ‘2GB’;
ALTER SYSTEM SET max_worker_processes = 8;
# 重启数据库使参数生效
$ systemctl restart kingbase
# 验证参数设置
$ ksql -U system -d fgedudb -c “SHOW work_mem;”
$ ksql -U system -d fgedudb -c “SHOW maintenance_work_mem;”
$ ksql -U system -d fgedudb -c “SHOW shared_buffers;”
$ ksql -U system -d fgedudb -c “SHOW max_worker_processes;”
3.1.2 准备导出目录
# 创建导出目录
$ mkdir -p /kingbase/export
# 设置目录权限
$ chown kingbase:kingbase /kingbase/export
$ chmod 755 /kingbase/export
# 查看目录
$ ls -l /kingbase/export
3.2 金仓数据库数据泵实现
3.2.1 全库导出
# 使用数据泵导出全库
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=full.dmp full=y parallel=4 compression=all
# 查看导出结果
$ ls -l /kingbase/export/full.dmp
# 导出日志
Export: Release 8.0.0 – Production on Fri Apr 9 10:00:00 2026
Copyright (c) 2000, 2026, Kingbase Corporation. All rights reserved.
Starting “SYSTEM”.”SYS_EXPORT_FULL_01″: system/********@fgedudb directory=DATA_PUMP_DIR dumpfile=full.dmp full=y parallel=4 compression=all
Estimate in progress using BLOCKS method…
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/TABLE_DATA
Total estimation using BLOCKS method: 100 MB
Processing object type DATABASE_EXPORT/TABLESPACE
Processing object type DATABASE_EXPORT/SCHEMA
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/TABLE
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/INDEX/INDEX
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/CONSTRAINT/CONSTRAINT
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/INDEX/STATISTICS/INDEX_STATISTICS
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/STATISTICS/TABLE_STATISTICS
Processing object type DATABASE_EXPORT/SCHEMA/USER
Processing object type DATABASE_EXPORT/SCHEMA/ROLE
Processing object type DATABASE_EXPORT/SCHEMA/GRANT/SYSTEM_GRANT
Processing object type DATABASE_EXPORT/SCHEMA/GRANT/OBJECT_GRANT
Processing object type DATABASE_EXPORT/SCHEMA/GRANT/ROLE_GRANT
Processing object type DATABASE_EXPORT/SCHEMA/SEQUENCE/SEQUENCE
Processing object type DATABASE_EXPORT/SCHEMA/PROCEDURE/PROCEDURE
Processing object type DATABASE_EXPORT/SCHEMA/FUNCTION/FUNCTION
Processing object type DATABASE_EXPORT/SCHEMA/PACKAGE/PACKAGE_SPEC
Processing object type DATABASE_EXPORT/SCHEMA/PACKAGE/PACKAGE_BODY
. . exported “SYSTEM”.”FGEDU_EMPLOYEE” 10 MB
. . exported “SYSTEM”.”FGEDU_ORDER” 20 MB
. . exported “SYSTEM”.”FGEDU_CUSTOMER” 15 MB
. . exported “SYSTEM”.”FGEDU_PRODUCT” 25 MB
. . exported “SYSTEM”.”FGEDU_TRANSACTION” 30 MB
Master table “SYSTEM”.”SYS_EXPORT_FULL_01″ successfully loaded/unloaded
******************************************************************************
Dump file set for SYSTEM.SYS_EXPORT_FULL_01 is:
/kingbase/export/full.dmp
Job “SYSTEM”.”SYS_EXPORT_FULL_01″ successfully completed at Fri Apr 9 10:30:00 2026 elapsed 0 00:30:00
3.2.2 模式导出
# 使用数据泵导出指定模式
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=schema.dmp schemas=fgedu parallel=4 compression=all
# 查看导出结果
$ ls -l /kingbase/export/schema.dmp
# 导出日志
Export: Release 8.0.0 – Production on Fri Apr 9 11:00:00 2026
Copyright (c) 2000, 2026, Kingbase Corporation. All rights reserved.
Starting “SYSTEM”.”SYS_EXPORT_SCHEMA_01″: system/********@fgedudb directory=DATA_PUMP_DIR dumpfile=schema.dmp schemas=fgedu parallel=4 compression=all
Estimate in progress using BLOCKS method…
Processing object type SCHEMA_EXPORT/TABLE/TABLE_DATA
Total estimation using BLOCKS method: 80 MB
Processing object type SCHEMA_EXPORT/TABLESPACE
Processing object type SCHEMA_EXPORT/SCHEMA
Processing object type SCHEMA_EXPORT/TABLE/TABLE
Processing object type SCHEMA_EXPORT/TABLE/INDEX/INDEX
Processing object type SCHEMA_EXPORT/TABLE/CONSTRAINT/CONSTRAINT
Processing object type SCHEMA_EXPORT/TABLE/INDEX/STATISTICS/INDEX_STATISTICS
Processing object type SCHEMA_EXPORT/TABLE/STATISTICS/TABLE_STATISTICS
Processing object type SCHEMA_EXPORT/SEQUENCE/SEQUENCE
Processing object type SCHEMA_EXPORT/PROCEDURE/PROCEDURE
Processing object type SCHEMA_EXPORT/FUNCTION/FUNCTION
. . exported “FGEDU”.”EMPLOYEE” 10 MB
. . exported “FGEDU”.”ORDER” 20 MB
. . exported “FGEDU”.”CUSTOMER” 15 MB
. . exported “FGEDU”.”PRODUCT” 25 MB
. . exported “FGEDU”.”TRANSACTION” 10 MB
Master table “SYSTEM”.”SYS_EXPORT_SCHEMA_01″ successfully loaded/unloaded
******************************************************************************
Dump file set for SYSTEM.SYS_EXPORT_SCHEMA_01 is:
/kingbase/export/schema.dmp
Job “SYSTEM”.”SYS_EXPORT_SCHEMA_01″ successfully completed at Fri Apr 9 11:20:00 2026 elapsed 0 00:20:00
3.2.3 表导出
# 使用数据泵导出指定表
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=tables.dmp tables=fgedu.employee,fgedu.order parallel=4 compression=all
# 查看导出结果
$ ls -l /kingbase/export/tables.dmp
# 导出日志
Export: Release 8.0.0 – Production on Fri Apr 9 12:00:00 2026
Copyright (c) 2000, 2026, Kingbase Corporation. All rights reserved.
Starting “SYSTEM”.”SYS_EXPORT_TABLE_01″: system/********@fgedudb directory=DATA_PUMP_DIR dumpfile=tables.dmp tables=fgedu.employee,fgedu.order parallel=4 compression=all
Estimate in progress using BLOCKS method…
Processing object type TABLE_EXPORT/TABLE/TABLE_DATA
Total estimation using BLOCKS method: 30 MB
Processing object type TABLE_EXPORT/TABLE/TABLE
Processing object type TABLE_EXPORT/TABLE/INDEX/INDEX
Processing object type TABLE_EXPORT/TABLE/CONSTRAINT/CONSTRAINT
Processing object type TABLE_EXPORT/TABLE/INDEX/STATISTICS/INDEX_STATISTICS
Processing object type TABLE_EXPORT/TABLE/STATISTICS/TABLE_STATISTICS
. . exported “FGEDU”.”EMPLOYEE” 10 MB
. . exported “FGEDU”.”ORDER” 20 MB
Master table “SYSTEM”.”SYS_EXPORT_TABLE_01″ successfully loaded/unloaded
******************************************************************************
Dump file set for SYSTEM.SYS_EXPORT_TABLE_01 is:
/kingbase/export/tables.dmp
Job “SYSTEM”.”SYS_EXPORT_TABLE_01″ successfully completed at Fri Apr 9 12:10:00 2026 elapsed 0 00:10:00
3.2.4 数据导入
# 使用数据泵导入数据
$ kimpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=full.dmp full=y parallel=4
# 导入日志
Import: Release 8.0.0 – Production on Fri Apr 9 13:00:00 2026
Copyright (c) 2000, 2026, Kingbase Corporation. All rights reserved.
Starting “SYSTEM”.”SYS_IMPORT_FULL_01″: system/********@fgedudb directory=DATA_PUMP_DIR dumpfile=full.dmp full=y parallel=4
Processing object type DATABASE_EXPORT/TABLESPACE
Processing object type DATABASE_EXPORT/SCHEMA
Processing object type DATABASE_EXPORT/SCHEMA/USER
Processing object type DATABASE_EXPORT/SCHEMA/ROLE
Processing object type DATABASE_EXPORT/SCHEMA/GRANT/SYSTEM_GRANT
Processing object type DATABASE_EXPORT/SCHEMA/GRANT/OBJECT_GRANT
Processing object type DATABASE_EXPORT/SCHEMA/GRANT/ROLE_GRANT
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/TABLE
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/TABLE_DATA
. . imported “SYSTEM”.”FGEDU_EMPLOYEE” 10 MB
. . imported “SYSTEM”.”FGEDU_ORDER” 20 MB
. . imported “SYSTEM”.”FGEDU_CUSTOMER” 15 MB
. . imported “SYSTEM”.”FGEDU_PRODUCT” 25 MB
. . imported “SYSTEM”.”FGEDU_TRANSACTION” 30 MB
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/INDEX/INDEX
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/CONSTRAINT/CONSTRAINT
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/INDEX/STATISTICS/INDEX_STATISTICS
Processing object type DATABASE_EXPORT/SCHEMA/TABLE/STATISTICS/TABLE_STATISTICS
Processing object type DATABASE_EXPORT/SCHEMA/SEQUENCE/SEQUENCE
Processing object type DATABASE_EXPORT/SCHEMA/PROCEDURE/PROCEDURE
Processing object type DATABASE_EXPORT/SCHEMA/FUNCTION/FUNCTION
Processing object type DATABASE_EXPORT/SCHEMA/PACKAGE/PACKAGE_SPEC
Processing object type DATABASE_EXPORT/SCHEMA/PACKAGE/PACKAGE_BODY
Master table “SYSTEM”.”SYS_IMPORT_FULL_01″ successfully loaded/unloaded
******************************************************************************
Import completed successfully without warnings.
Job “SYSTEM”.”SYS_IMPORT_FULL_01″ successfully completed at Fri Apr 9 13:40:00 2026 elapsed 0 00:40:00
3.3 金仓数据库数据泵监控
3.3.1 监控数据泵执行情况
# 查看数据泵作业状态
$ ksql -U system -d fgedudb
SELECT
job_name,
operation,
job_mode,
state,
attached_sessions
FROM dba_datapump_jobs;
# 查看数据泵作业详细信息
SELECT
job_name,
object_type,
status,
completed_rows,
total_rows
FROM dba_datapump_job_details;
# 查看系统负载
$ top
# 查看I/O性能
$ iostat -x
# 查看网络性能
$ netstat -i
3.3.2 监控数据泵日志
# 查看数据泵导出日志
$ tail -f /kingbase/app/log/expdp.log
# 查看数据泵导入日志
$ tail -f /kingbase/app/log/impdp.log
# 分析数据泵日志
# 查找错误信息
$ grep -i error /kingbase/app/log/expdp.log
# 查找警告信息
$ grep -i warning /kingbase/app/log/expdp.log
# 查找完成信息
$ grep -i completed /kingbase/app/log/expdp.log
风哥提示：监控数据泵的执行情况和日志是确保数据泵操作成功的重要手段。通过监控，可以及时发现问题并采取相应的措施，确保数据泵操作的顺利完成。
# 1. 分析需求
# 将生产数据库中的数据迁移到测试环境，数据量约500GB
# 2. 配置数据泵参数
ALTER SYSTEM SET work_mem = ‘128MB’;
ALTER SYSTEM SET maintenance_work_mem = ‘512MB’;
ALTER SYSTEM SET shared_buffers = ‘4GB’;
ALTER SYSTEM SET max_worker_processes = 16;
# 重启数据库
$ systemctl restart kingbase
# 3. 准备导出目录
$ mkdir -p /kingbase/export
$ chown kingbase:kingbase /kingbase/export
$ chmod 755 /kingbase/export
# 4. 执行数据泵导出
$ kexpdp system/manager@prod_db directory=DATA_PUMP_DIR dumpfile=prod_data.dmp full=y parallel=8 compression=all
# 5. 复制导出文件到测试环境
$ scp /kingbase/export/prod_data.dmp test_server:/kingbase/import/
# 6. 在测试环境准备导入目录
$ mkdir -p /kingbase/import
$ chown kingbase:kingbase /kingbase/import
$ chmod 755 /kingbase/import
# 7. 执行数据泵导入
$ kimpdp system/manager@test_db directory=DATA_PUMP_DIR dumpfile=prod_data.dmp full=y parallel=8
# 8. 比较迁移时间
# 传统方法：约8小时
# 数据泵方法：约2小时
# 9. 验证迁移结果
$ ksql -U system -d test_db -c “SELECT COUNT(*) FROM fgedu.employee;”
$ ksql -U system -d prod_db -c “SELECT COUNT(*) FROM fgedu.employee;”
# 1. 基于CPU核心数优化并行度
# 对于8核CPU，设置parallel=4
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=schema.dmp schemas=fgedu parallel=4 compression=all
# 对于16核CPU，设置parallel=8
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=schema.dmp schemas=fgedu parallel=8 compression=all
# 2. 基于数据量优化并行度
# 对于小数据量，设置parallel=2
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=small.dmp tables=fgedu.small_table parallel=2 compression=all
# 对于大数据量，设置parallel=8
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=large.dmp tables=fgedu.large_table parallel=8 compression=all
# 1. 启用压缩
# 对于网络传输，启用压缩减少数据传输量
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=compressed.dmp schemas=fgedu parallel=4 compression=all
# 2. 选择合适的压缩级别
# 压缩级别：LOW, MEDIUM, HIGH, ALL
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=compressed.dmp schemas=fgedu parallel=4 compression=high
# 1. 调整数据泵缓冲区大小
# 设置较大的缓冲区大小，提高数据传输效率
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=buffer.dmp schemas=fgedu parallel=4 compression=all buffer=104857600
# 2. 调整数据库参数
# 增大work_mem参数
ALTER SYSTEM SET work_mem = ‘128MB’;
# 增大maintenance_work_mem参数
ALTER SYSTEM SET maintenance_work_mem = ‘512MB’;
# 故障1：数据泵导出失败
# 错误信息：ORA-39002: invalid operation
# 解决方案：
– 检查导出命令语法
– 检查用户权限
– 检查导出目录权限
# 故障2：数据泵导入失败
# 错误信息：ORA-39083: Object type TABLE failed to create with error:
# 解决方案：
– 检查目标数据库是否存在同名表
– 检查用户权限
– 检查表空间是否存在
# 故障3：数据泵并行度设置过高
# 错误信息：ORA-39097: Data Pump job encountered unexpected error -12801
# 解决方案：
– 减少并行度设置
– 检查系统资源使用情况
# 故障4：数据泵导出文件过大
# 错误信息：ORA-39095: Dump file space has been exhausted
# 解决方案：
– 增加导出目录空间
– 使用分段导出
– 启用压缩
# 故障5：数据泵网络传输失败
# 错误信息：ORA-39014: Import failed because of missing object
# 解决方案：
– 检查网络连接
– 检查导出文件是否完整
– 重新导出数据
Part04-生产案例与实战讲解
4.1 金仓数据库数据泵实战案例
4.1.1 案例背景
某金融企业需要将生产数据库中的数据迁移到测试环境，数据量约500GB。传统的导出导入方法需要数小时才能完成，影响系统的正常运行。企业希望通过使用数据泵工具来提高数据迁移效率，减少迁移时间。
4.1.2 实施方案
# 1. 分析需求
# 将生产数据库中的数据迁移到测试环境，数据量约500GB
# 2. 配置数据泵参数
ALTER SYSTEM SET work_mem = ‘128MB’;
ALTER SYSTEM SET maintenance_work_mem = ‘512MB’;
ALTER SYSTEM SET shared_buffers = ‘4GB’;
ALTER SYSTEM SET max_worker_processes = 16;
# 重启数据库
$ systemctl restart kingbase
# 3. 准备导出目录
$ mkdir -p /kingbase/export
$ chown kingbase:kingbase /kingbase/export
$ chmod 755 /kingbase/export
# 4. 执行数据泵导出
$ kexpdp system/manager@prod_db directory=DATA_PUMP_DIR dumpfile=prod_data.dmp full=y parallel=8 compression=all
# 5. 复制导出文件到测试环境
$ scp /kingbase/export/prod_data.dmp test_server:/kingbase/import/
# 6. 在测试环境准备导入目录
$ mkdir -p /kingbase/import
$ chown kingbase:kingbase /kingbase/import
$ chmod 755 /kingbase/import
# 7. 执行数据泵导入
$ kimpdp system/manager@test_db directory=DATA_PUMP_DIR dumpfile=prod_data.dmp full=y parallel=8
# 8. 比较迁移时间
# 传统方法：约8小时
# 数据泵方法：约2小时
# 9. 验证迁移结果
$ ksql -U system -d test_db -c “SELECT COUNT(*) FROM fgedu.employee;”
$ ksql -U system -d prod_db -c “SELECT COUNT(*) FROM fgedu.employee;”
4.1.3 实施效果
通过使用数据泵工具，企业成功实现了以下目标：
- 数据迁移时间从8小时减少到2小时，性能提升了75%
- 系统的响应速度显著提高，减少了对业务的影响，更多学习教程公众号风哥教程itpux_com
- 充分利用了系统资源，提高了硬件利用率
- 数据迁移过程更加可靠，减少了数据丢失的风险
4.2 金仓数据库数据泵优化
4.2.1 并行度优化
# 1. 基于CPU核心数优化并行度
# 对于8核CPU，设置parallel=4
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=schema.dmp schemas=fgedu parallel=4 compression=all
# 对于16核CPU，设置parallel=8
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=schema.dmp schemas=fgedu parallel=8 compression=all
# 2. 基于数据量优化并行度
# 对于小数据量，设置parallel=2
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=small.dmp tables=fgedu.small_table parallel=2 compression=all
# 对于大数据量，设置parallel=8
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=large.dmp tables=fgedu.large_table parallel=8 compression=all
4.2.2 压缩优化
# 1. 启用压缩
# 对于网络传输，启用压缩减少数据传输量
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=compressed.dmp schemas=fgedu parallel=4 compression=all
# 2. 选择合适的压缩级别
# 压缩级别：LOW, MEDIUM, HIGH, ALL
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=compressed.dmp schemas=fgedu parallel=4 compression=high
4.2.3 缓冲区优化
# 1. 调整数据泵缓冲区大小
# 设置较大的缓冲区大小，提高数据传输效率
$ kexpdp system/manager@fgedudb directory=DATA_PUMP_DIR dumpfile=buffer.dmp schemas=fgedu parallel=4 compression=all buffer=104857600
# 2. 调整数据库参数
# 增大work_mem参数
ALTER SYSTEM SET work_mem = ‘128MB’;
# 增大maintenance_work_mem参数
ALTER SYSTEM SET maintenance_work_mem = ‘512MB’;
4.3 金仓数据库数据泵故障处理
4.3.1 常见故障及解决方案
# 故障1：数据泵导出失败
# 错误信息：ORA-39002: invalid operation
# 解决方案：
– 检查导出命令语法
– 检查用户权限
– 检查导出目录权限
# 故障2：数据泵导入失败
# 错误信息：ORA-39083: Object type TABLE failed to create with error:
# 解决方案：
– 检查目标数据库是否存在同名表
– 检查用户权限
– 检查表空间是否存在
# 故障3：数据泵并行度设置过高
# 错误信息：ORA-39097: Data Pump job encountered unexpected error -12801
# 解决方案：
– 减少并行度设置
– 检查系统资源使用情况
# 故障4：数据泵导出文件过大
# 错误信息：ORA-39095: Dump file space has been exhausted
# 解决方案：
– 增加导出目录空间
– 使用分段导出
– 启用压缩
# 故障5：数据泵网络传输失败
# 错误信息：ORA-39014: Import failed because of missing object
# 解决方案：
– 检查网络连接
– 检查导出文件是否完整
– 重新导出数据
生产环境建议：在使用数据泵时，应该根据系统资源和数据量选择合适的参数设置，避免设置过高导致系统资源竞争。同时，应该监控数据泵的执行情况和日志，及时发现问题并采取相应的措施。
# 常见问题1：数据泵导出失败
– 原因：命令语法错误，用户权限不足，或导出目录权限不足
– 解决方案：检查命令语法，检查用户权限，检查导出目录权限
# 常见问题2：数据泵导入失败
– 原因：目标数据库存在同名表，用户权限不足，或表空间不存在
– 解决方案：检查目标数据库，检查用户权限，检查表空间
# 常见问题3：数据泵并行度设置过高
– 原因：并行度设置超过系统资源的承载能力
– 解决方案：减少并行度设置，检查系统资源使用情况
# 常见问题4：数据泵导出文件过大
– 原因：导出目录空间不足，或数据量过大
– 解决方案：增加导出目录空间，使用分段导出，启用压缩
# 常见问题5：数据泵网络传输失败
– 原因：网络连接不稳定，或导出文件不完整
– 解决方案：检查网络连接，检查导出文件完整性，重新导出数据
Part05-风哥经验总结与分享
5.1 金仓数据库数据泵最佳实践
金仓数据库数据泵的最佳实践：
- 合理设置并行度：根据CPU核心数和系统资源设置合适的并行度
- 启用压缩：对于网络传输或存储空间有限的情况，启用压缩减少数据传输量
- 选择合适的导出方式：根据需求选择全库导出、模式导出或表导出
- 监控执行情况：定期监控数据泵的执行情况和日志，及时发现问题
- 选择合适的操作时间：避开业务高峰期，减少对业务的影响，from DB视频:www.itpux.com
- 测试数据泵操作：在生产环境部署前，进行充分的测试
- 备份导出文件：导出完成后，备份导出文件到安全的位置
- 验证导入结果：导入完成后，验证数据的完整性和一致性
5.2 金仓数据库数据泵常见问题
金仓数据库数据泵的常见问题及解决方案：
# 常见问题1：数据泵导出失败
– 原因：命令语法错误，用户权限不足，或导出目录权限不足
– 解决方案：检查命令语法，检查用户权限，检查导出目录权限
# 常见问题2：数据泵导入失败
– 原因：目标数据库存在同名表，用户权限不足，或表空间不存在
– 解决方案：检查目标数据库，检查用户权限，检查表空间
# 常见问题3：数据泵并行度设置过高
– 原因：并行度设置超过系统资源的承载能力
– 解决方案：减少并行度设置，检查系统资源使用情况
# 常见问题4：数据泵导出文件过大
– 原因：导出目录空间不足，或数据量过大
– 解决方案：增加导出目录空间，使用分段导出，启用压缩
# 常见问题5：数据泵网络传输失败
– 原因：网络连接不稳定，或导出文件不完整
– 解决方案：检查网络连接，检查导出文件完整性，重新导出数据
5.3 金仓数据库数据泵应用场景
金仓数据库数据泵的应用场景：
- 数据迁移：在不同环境之间迁移数据，如从生产环境到测试环境
- 数据备份：定期导出数据作为备份，确保数据安全
- 数据整合：将多个数据库的数据整合到一个数据库中
- 数据清理：导出需要的数据，清理数据库中的无效数据
- 数据库升级：在数据库升级前导出数据，确保数据安全
- 应用迁移：在应用迁移时，同时迁移相关数据
风哥提示：数据泵是金仓数据库中用于数据迁移和备份的重要工具，合理使用数据泵可以显著提高数据传输效率，减少数据迁移时间。在使用数据泵时，应该根据系统资源和数据量选择合适的参数设置，并注意监控数据泵的执行情况和日志，及时发现问题并采取相应的措施。
持续改进：数据泵的配置和优化是一个持续的过程，需要根据业务需求的变化和系统资源的情况，不断调整和优化参数设置，以获得最佳性能。
本文由风哥教程整理发布,仅用于学习测试使用,转载注明出处:http://www.fgedu.net.cn/10327.html
联系我们
在线咨询：
微信号：itpux-com
工作日：9:30-18:30，节假日休息