Oracle安装-Oracle11gR2 RAC集群安装配置 FOR RHEL/OEL9 Linux详细过程

1. 硬件环境要求

在安装Oracle 11gR2 RAC之前，必须对服务器的硬件环境进行全面检查，确保满足最低要求。更多学习教程www.fgedu.net.cn

# 检查内存大小
# free -h
total used free shared buff/cache available
Mem: 62G 2.1G 58G 8.5M 1.8G 59G
Swap: 32G 0B 32G

# 检查磁盘空间
# df -h
Filesystem Size Used Avail Use% Mounted on
devtmpfs 32G 0 32G 0% /dev
tmpfs 32G 0 32G 0% /dev/shm
tmpfs 32G 8.5M 32G 1% /run
tmpfs 32G 0 32G 0% /sys/fs/cgroup
/dev/sda1 50G 15G 36G 30% /
/dev/sdb1 500G 20G 480G 4% /oracle
/dev/sdc1 200G 0 200G 0% /asm

# 检查CPU核心数
# nproc
32

# 检查系统架构
# uname -m
x86_64

生产环境建议：最小内存16GB（测试环境），生产环境建议64GB以上。每个节点至少需要16GB内存。共享存储建议使用SAN存储，配置多路径以提高可用性。每个节点至少需要2个网络接口（一个公网，一个私网）。

2. 操作系统准备

Oracle 11gR2 RAC支持RHEL/OEL 9操作系统。本文以RHEL 9.2为例。学习交流加群风哥微信: itpux-com

# 检查操作系统版本
# cat /etc/redhat-release
Red Hat Enterprise Linux release 9.2 (Plow)

# 检查内核版本
# uname -r
5.14.0-284.11.1.el9_2.x86_64

# 检查SELinux状态
# getenforce
Disabled

# 关闭SELinux（如未关闭）
# vi /etc/selinux/config
SELINUX=disabled

# 检查防火墙状态
# systemctl status firewalld

# 关闭防火墙（生产环境建议开放特定端口而非完全关闭）
# systemctl stop firewalld
# systemctl disable firewalld

3. 网络配置

RAC集群需要配置多个网络接口，包括公网、私网和VIP网络。

# 检查网络接口
# ip addr show
1: lo: mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
valid_lft forever preferred_lft forever
2: ens160: mtu 1500 qdisc mq state UP group default qlen 1000
link/ether 00:50:56:00:01:01 brd ff:ff:ff:ff:ff:ff
inet 192.168.1.101/24 brd 192.168.1.255 scope global ens160
valid_lft forever preferred_lft forever
3: ens192: mtu 1500 qdisc mq state UP group default qlen 1000
link/ether 00:50:56:00:01:02 brd ff:ff:ff:ff:ff:ff
inet 10.0.0.101/24 brd 10.0.0.255 scope global ens192
valid_lft forever preferred_lft forever

# 配置网络接口（节点1）
# vi /etc/hosts

# 公网配置
192.168.1.101 racnode1
192.168.1.102 racnode2

# VIP配置
192.168.1.201 racnode1-vip
192.168.1.202 racnode2-vip

# SCAN配置
192.168.1.200 rac-scan

# 私网配置
10.0.0.101 racnode1-priv
10.0.0.102 racnode2-priv

# 节点2配置
# vi /etc/hosts

# 公网配置
192.168.1.101 racnode1
192.168.1.102 racnode2

# VIP配置
192.168.1.201 racnode1-vip
192.168.1.202 racnode2-vip

# SCAN配置
192.168.1.200 rac-scan

# 私网配置
10.0.0.101 racnode1-priv
10.0.0.102 racnode2-priv

生产环境建议：RAC集群需要配置三个网络：公网（Public Network）、私网（Private Network/Interconnect）和VIP网络。私网建议使用高速网络（如10GbE），并配置冗余。SCAN地址建议配置3个IP，使用DNS解析。

4. 存储配置

RAC集群需要配置共享存储，用于存储OCR、Voting Disk和数据文件。

# 检查磁盘设备
# lsblk
NAME MAJ:MIN RM SIZE RO TYPE MOUNTPOINT
sda 8:0 0 50G 0 disk
├─sda1 8:1 0 1G 0 part /boot
├─sda2 8:2 0 49G 0 part
│ ├─rl-root
│ │ 253:0 0 45G 0 lvm /
│ └─rl-swap
│ 253:1 0 4G 0 lvm [SWAP]
sdb 8:16 0 500G 0 disk /oracle
sdc 8:32 0 200G 0 disk
sdd 8:48 0 200G 0 disk
sde 8:64 0 200G 0 disk

# 配置多路径（如使用SAN存储）
# dnf install -y device-mapper-multipath
# mpathconf –enable
# systemctl start multipathd
# systemctl enable multipathd

# 检查多路径配置
# multipath -ll
mpath0 (36005076802810d3e800000000000001f) dm-0 IBM,2145
size=200G features=’1 queue_if_no_path’ hwhandler=’1 alua’ wp=rw
|-+- policy=’service-time 0′ prio=50 status=active
| |- 2:0:0:0 sdc 8:32 active ready running
| `- 3:0:0:0 sdd 8:48 active ready running
`-+- policy=’service-time 0′ prio=10 status=enabled
|- 2:0:1:0 sde 8:64 active ready running
`- 3:0:1:0 sdf 8:80 active ready running

生产环境建议：OCR和Voting Disk需要配置冗余（Normal冗余需要3个磁盘，High冗余需要5个磁盘）。建议使用ASM存储OCR和Voting Disk。数据文件存储建议使用ASM，配置多个磁盘组以提高性能和可用性。

5. 依赖包安装

Oracle 11gR2 RAC需要安装一系列依赖包，使用dnf进行安装。

# 安装Oracle预安装包（推荐方式）
# dnf install -y oracle-database-preinstall-11gR2

# 如果无法使用预安装包，手动安装依赖
# dnf install -y binutils compat-libcap1 compat-libstdc++-33 gcc gcc-c++ glibc glibc-devel ksh libaio libaio-devel libgcc libstdc++ libstdc++-devel libXext libXtst libX11 libXau libxcb libXi make sysstat

# 安装额外依赖包
# dnf install -y smartmontools xclock xauth

# 安装ASM相关包
# dnf install -y oracleasm-support

# 安装集群相关包
# dnf install -y cvuqdisk

风哥提示：使用oracle-database-preinstall-11gR2包可以自动完成大部分系统配置，包括用户创建、内核参数设置等，是生产环境推荐的方式。

6. 内核参数配置

内核参数对Oracle RAC的性能和稳定性至关重要，需要根据服务器硬件配置进行调整。学习交流加群风哥QQ113257174

# 编辑sysctl.conf文件
# vi /etc/sysctl.conf

# 添加以下内核参数
fs.file-max = 6815744
kernel.shmmax = 34359738368
kernel.shmall = 8388608
kernel.shmmni = 4096
kernel.sem = 250 32000 100 128
net.ipv4.ip_local_port_range = 9000 65500
net.core.rmem_default = 262144
net.core.rmem_max = 4194304
net.core.wmem_default = 262144
net.core.wmem_max = 1048576
fs.aio-max-nr = 1048576
vm.swappiness = 10
vm.dirty_background_ratio = 5
vm.dirty_ratio = 10

# 使内核参数生效
# sysctl -p

# 验证参数设置
# sysctl -a | grep kernel.sem
kernel.sem = 250 32000 100 128

# sysctl -a | grep fs.file-max
fs.file-max = 6815744

# 配置用户资源限制
# vi /etc/security/limits.conf

# 添加以下内容
oracle soft nproc 2047
oracle hard nproc 16384
oracle soft nofile 1024
oracle hard nofile 65536
oracle soft stack 10240
oracle hard stack 32768
oracle soft memlock 3145728
oracle hard memlock 3145728

生产环境内核参数说明：kernel.shmmax设置为物理内存的一半或更大，用于单个共享内存段的最大大小；kernel.shmall设置为物理内存除以页面大小（通常为4096）；kernel.sem依次为SEMMSL、SEMMNS、SEMOPM、SEMMNI；net.ipv4.ip_local_port_range设置可用端口范围，避免与Oracle端口冲突；vm.swappiness设置为10，减少使用swap。

7. 用户和组配置

Oracle RAC需要特定的用户和组来运行，需要提前创建并配置。

# 创建Oracle用户组
# groupadd -g 54321 oinstall
# groupadd -g 54322 dba
# groupadd -g 54323 oper
# groupadd -g 54324 asmadmin
# groupadd -g 54325 asmdba
# groupadd -g 54326 asmoper

# 创建Oracle用户
# useradd -u 54321 -g oinstall -G dba,oper,asmadmin,asmdba,asmoper oracle

# 设置Oracle用户密码
# passwd oracle
Changing password for user oracle.
New password:
Retype new password:
passwd: all authentication tokens updated successfully.

# 验证用户和组
# id oracle
uid=54321(oracle) gid=54321(oinstall) groups=54321(oinstall),54322(dba),54323(oper),54324(asmadmin),54325(asmdba),54326(asmoper)

# 配置用户资源限制
# vi /etc/security/limits.conf

8. 目录结构配置

按照OFA（Optimal Flexible Architecture）标准创建Oracle目录结构。

# 创建Oracle基础目录
# mkdir -p /oracle/app/oracle
# mkdir -p /oracle/app/oraInventory
# mkdir -p /oracle/app/oracle/product/11.2.0/db_1
# mkdir -p /oracle/app/oracle/product/11.2.0/grid
# mkdir -p /oracle/app/oracle/oradata
# mkdir -p /oracle/app/oracle/fast_recovery_area
# mkdir -p /oracle/app/oracle/admin/fgedudb
# mkdir -p /backup

# 设置目录权限
# chown -R oracle:oinstall /oracle
# chown -R oracle:oinstall /oracle/app/oraInventory
# chmod -R 775 /oracle
# chmod -R 755 /backup

# 验证目录结构
# ls -la /oracle/app/oracle/
total 28
drwxr-xr-x 7 oracle oinstall 4096 Mar 29 10:00 .
drwxr-xr-x 3 oracle oinstall 4096 Mar 29 10:00 ..
drwxr-xr-x 3 oracle oinstall 4096 Mar 29 10:00 admin
drwxr-xr-x 3 oracle oinstall 4096 Mar 29 10:00 fast_recovery_area
drwxr-xr-x 3 oracle oinstall 4096 Mar 29 10:00 oradata
drwxr-xr-x 3 oracle oinstall 4096 Mar 29 10:00 product

风哥提示：OFA目录结构有助于数据库的管理和维护，建议严格按照标准创建。

9. 环境变量配置

配置Oracle用户的环境变量，包括ORACLE_HOME、PATH等。

# 切换到oracle用户
# su – oracle

# 编辑.bash_profile
$ vi ~/.bash_profile

# 添加以下环境变量
export ORACLE_BASE=/oracle/app/oracle
export ORACLE_HOME=/oracle/app/oracle/product/11.2.0/db_1
export ORACLE_SID=fgedudb1
export PATH=$ORACLE_HOME/bin:$PATH
export LD_LIBRARY_PATH=$ORACLE_HOME/lib:/lib:/usr/lib
export CLASSPATH=$ORACLE_HOME/jlib:$ORACLE_HOME/rdbms/jlib
export NLS_LANG=AMERICAN_AMERICA.AL32UTF8
export NLS_DATE_FORMAT=”YYYY-MM-DD HH24:MI:SS”
export TMP=/tmp
export TMPDIR=/tmp
export DISPLAY=:0.0

# 使环境变量生效
$ source ~/.bash_profile

# 验证环境变量
$ echo $ORACLE_HOME
/oracle/app/oracle/product/11.2.0/db_1

$ echo $ORACLE_SID
fgedudb1

$ env | grep ORACLE
ORACLE_BASE=/oracle/app/oracle
ORACLE_HOME=/oracle/app/oracle/product/11.2.0/db_1
ORACLE_SID=fgedudb1

生产环境建议：环境变量配置完成后，建议重新登录验证所有变量是否正确设置。NLS_LANG设置为AL32UTF8以支持中文，NLS_DATE_FORMAT设置为标准日期格式便于日志分析。

10. SSH互信配置

RAC集群需要在所有节点之间配置SSH互信。

# 在节点1上生成SSH密钥
$ ssh-keygen -t rsa
Generating public/private rsa key pair.
Enter file in which to save the key (/home/oracle/.ssh/id_rsa):
Enter passphrase (empty for no passphrase):
Enter same passphrase again:

$ ssh-keygen -t dsa
Generating public/private dsa key pair.
Enter file in which to save the key (/home/oracle/.ssh/id_dsa):
Enter passphrase (empty for no passphrase):
Enter same passphrase again:

# 配置SSH互信
$ cd ~/.ssh
$ cat id_rsa.pub >> authorized_keys
$ cat id_dsa.pub >> authorized_keys

# 复制到节点2
$ ssh racnode2 cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
$ ssh racnode2 cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

# 复制authorized_keys到节点2
$ scp ~/.ssh/authorized_keys racnode2:~/.ssh/authorized_keys

# 测试SSH连接
$ ssh racnode1 date
$ ssh racnode2 date
$ ssh racnode1-priv date
$ ssh racnode2-priv date

生产环境建议：SSH互信配置完成后，建议在每个节点上测试所有连接，确保无需密码即可登录。

11. 时间同步配置

RAC集群需要在所有节点之间配置时间同步。

# 安装chrony
# dnf install -y chrony

# 配置chrony
# vi /etc/chrony.conf

# 添加NTP服务器
server 192.168.1.10 iburst

# 允许集群节点同步
allow 192.168.1.0/24

# 启动chrony服务
# systemctl start chronyd
# systemctl enable chronyd

# 检查时间同步状态
# chronyc sources
MS Name/IP address Stratum Poll Reach LastRx Last sample
===============================================================================
^* 192.168.1.10 2 6 377 45 -12us[ -12us] +/- 23ms

风哥提示：RAC集群要求所有节点时间同步，建议使用chrony服务。时间偏差过大可能导致集群节点被驱逐。

12. Grid Infrastructure安装

在完成所有准备工作后，开始安装Grid Infrastructure。

# 解压Grid Infrastructure安装介质
$ cd /backup
$ unzip -q p13390677_112040_Linux-x86-64_1of7.zip
$ unzip -q p13390677_112040_Linux-x86-64_2of7.zip

# 执行图形化安装
$ cd /backup/grid
$ ./runInstaller

# 安装过程中的关键步骤：
1. 选择”Install and Configure Oracle Grid Infrastructure for a Cluster”
2. 选择”Configure a Standard cluster”
3. 选择”Advanced installation”
4. 添加集群节点：
– 节点1：racnode1
– 节点2：racnode2
5. 配置SSH互信
6. 选择网络接口：
– 公网：192.168.1.0/24
– 私网：10.0.0.0/24
– 不要选择：192.168.1.0/24
7. 配置OCR和Voting Disk：
– 选择”Use Oracle Automatic Storage Management”
– 配置ASM磁盘组：OCR（Normal冗余）
8. 设置ASM密码
9. 选择不使用IPMI
10. 配置操作系统组：
– OSDBA组：dba
– OSOPER组：oper
– OSASM组：asmadmin
11. 设置Oracle基目录：/oracle/app/oracle
12. 设置软件位置：/oracle/app/oracle/product/11.2.0/grid
13. 检查先决条件，点击”下一步”
14. 点击”完成”开始安装
15. 安装完成后，运行root脚本

# 以root用户运行配置脚本（节点1）
# /oracle/app/oracle/product/11.2.0/grid/root.sh
Running Oracle 11g root.sh script…

The following environment variables are set as:
ORACLE_OWNER= oracle
ORACLE_HOME= /oracle/app/oracle/product/11.2.0/grid

Enter the full pathname of the local bin directory: [/usr/local/bin]:
Copying dbhome to /usr/local/bin …
Copying oraenv to /usr/local/bin …
Copying coraenv to /usr/local/bin …

Creating /etc/oratab file…
Entries will be added to the /etc/oratab file as needed by
Database Configuration Assistant when a database is created
Finished running generic part of root.sh script.
Now product-specific root actions will be performed.
2014-03-29 10:00:00: Checking for super user privileges
2014-03-29 10:00:00: User has super user privileges
2014-03-29 10:00:00: Using configuration parameter file: /oracle/app/oracle/product/11.2.0/grid/crs/install/crsconfig_params
Creating trace directory
OLR initialization – successful
root.sh successful.

13. ASM配置

配置Oracle ASM，用于存储数据库文件。

# 检查ASM实例状态
$ crsctl status resource -t
——————————————————————————–
Name Target State Server State details
——————————————————————————–
Local Resources
——————————————————————————–
ora.DATA.dg
ONLINE ONLINE racnode1 STABLE
ONLINE ONLINE racnode2 STABLE
ora.OCR.dg
ONLINE ONLINE racnode1 STABLE
ONLINE ONLINE racnode2 STABLE
ora.LISTENER.lsnr
ONLINE ONLINE racnode1 STABLE
ONLINE ONLINE racnode2 STABLE
ora.asm
ONLINE ONLINE racnode1 Started,STABLE
ONLINE ONLINE racnode2 Started,STABLE
ora.gsd
OFFLINE OFFLINE racnode1 STABLE
OFFLINE OFFLINE racnode2 STABLE
ora.net1.network
ONLINE ONLINE racnode1 STABLE
ONLINE ONLINE racnode2 STABLE
ora.ons
ONLINE ONLINE racnode1 STABLE
ONLINE ONLINE racnode2 STABLE
——————————————————————————–
Cluster Resources
——————————————————————————–
ora.cssd
1 ONLINE ONLINE racnode1 STABLE
2 ONLINE ONLINE racnode2 STABLE
ora.diskmon
1 OFFLINE OFFLINE racnode1 STABLE
2 OFFLINE OFFLINE racnode2 STABLE
ora.evmd
1 ONLINE ONLINE racnode1 STABLE
2 ONLINE ONLINE racnode2 STABLE
ora.mdnsd
1 ONLINE ONLINE racnode1 STABLE
2 ONLINE ONLINE racnode2 STABLE

# 创建DATA磁盘组
$ asmca

# 创建DATA磁盘组的关键步骤：
1. 选择”Create”
2. 输入磁盘组名称：DATA
3. 选择冗余级别：External
4. 选择磁盘：/dev/oracleasm/disks/DATA01, /dev/oracleasm/disks/DATA02
5. 点击”OK”

# 检查磁盘组
$ asmcmd lsdg
State Type Rebal Sector Block AU Total_MB Free_MB Req_mir_free_MB Usable_file_MB Offline_disks Voting_files Name
MOUNTED EXTERN N 512 4096 1048576 102400 51200 0 51200 0 N DATA
MOUNTED NORMAL N 512 4096 1048576 2048 1024 0 1024 0 Y OCR

14. Oracle 11gR2安装

在完成Grid Infrastructure安装后，开始安装Oracle 11gR2数据库软件。

# 解压Oracle 11gR2安装介质
$ cd /backup
$ unzip -q p13390677_112040_Linux-x86-64_1of7.zip
$ unzip -q p13390677_112040_Linux-x86-64_2of7.zip

# 执行图形化安装
$ cd /backup/database
$ ./runInstaller

# 安装过程中的关键步骤：
1. 选择”Install database software only”
2. 选择”Real Application Clusters database installation”
3. 添加集群节点：
– 节点1：racnode1
– 节点2：racnode2
4. 选择企业版
5. 设置Oracle基目录：/oracle/app/oracle
6. 设置软件位置：/oracle/app/oracle/product/11.2.0/db_1
7. 选择”Use Oracle Automatic Storage Management”
8. 选择ASM磁盘组：DATA
9. 设置ASM密码
10. 配置操作系统组：
– OSDBA组：dba
– OSOPER组：oper
11. 检查先决条件，点击”下一步”
12. 点击”完成”开始安装
13. 安装完成后，运行root脚本

15. 数据库创建

安装完成后，使用DBCA工具创建RAC数据库。

# 使用DBCA创建数据库
$ dbca

# 创建数据库的关键步骤：
1. 选择”Create Database”
2. 选择”Real Application Clusters database”
3. 选择”Advanced Configuration”
4. 数据库标识符：
– 全局数据库名：fgedudb
– 系统标识符(SID)：fgedudb
5. 选择”Use Oracle Automatic Storage Management”
6. 选择ASM磁盘组：DATA
7. 配置管理选项：选择”Use Enterprise Manager”
8. 设置数据库密码
9. 选择”File System”
10. 指定数据库文件位置：+DATA
11. 指定快速恢复区：+DATA/FRA
12. 不启用自动维护任务
13. 配置内存参数：
– SGA：20GB
– PGA：4GB
14. 配置字符集：AL32UTF8
15. 配置示例方案
16. 点击”完成”开始创建

16. 安装后配置

安装完成后，需要进行一些必要的配置，包括开启归档、配置监听器等。

— 启动数据库
$ sqlplus / as sysdba

SQL> STARTUP

— 开启归档模式
SQL> SHUTDOWN IMMEDIATE
SQL> STARTUP MOUNT
SQL> ALTER DATABASE ARCHIVELOG;
SQL> ALTER DATABASE OPEN;

— 配置归档日志位置
SQL> ALTER SYSTEM SET log_archive_dest_1=’LOCATION=+DATA/FRA’ SCOPE=SPFILE;

— 配置强制归档
SQL> ALTER SYSTEM SET log_archive_format=’fgedudb_%t_%s_%r.arc’ SCOPE=SPFILE;

— 检查归档模式
SQL> ARCHIVE LOG LIST
Database log mode Archive Mode
Automatic archival Enabled
Archive destination +DATA/FRA
Oldest online log sequence 1
Next log sequence to archive 2
Current log sequence 2

17. 安装验证

验证Oracle 11gR2 RAC数据库是否安装成功。

— 检查数据库版本
SQL> SELECT * FROM v$version;

BANNER
——————————————————————————–
Oracle Database 11g Enterprise Edition Release 11.2.0.4.0 – 64bit Production
PL/SQL Release 11.2.0.4.0 – Production
CORE 11.2.0.4.0 Production
TNS for Linux: Version 11.2.0.4.0 – Production
NLSRTL Version 11.2.0.4.0 – Production

— 检查数据库状态
SQL> SELECT status FROM v$instance;
STATUS
————
OPEN

— 检查RAC实例
SQL> SELECT instance_name, status FROM gv$instance;
INSTANCE_NAME STATUS
—————- ————
fgedudb1 OPEN
fgedudb2 OPEN

— 检查数据文件状态
SQL> SELECT name, status FROM v$datafile;

NAME STATUS
————————————————– ——–
+DATA/fgedudb/system01.dbf SYSTEM
+DATA/fgedudb/sysaux01.dbf ONLINE
+DATA/fgedudb/undotbs01.dbf ONLINE
+DATA/fgedudb/undotbs02.dbf ONLINE
+DATA/fgedudb/users01.dbf ONLINE

— 检查表空间状态
SQL> SELECT tablespace_name, status FROM dba_tablespaces;

TABLESPACE_NAME STATUS
—————————— ——–
SYSTEM ONLINE
SYSAUX ONLINE
UNDOTBS1 ONLINE
UNDOTBS2 ONLINE
TEMP ONLINE
USERS ONLINE

18. 生产环境建议

以下是Oracle 11gR2 RAC集群安装的生产环境建议。

1. 内存配置：
– 每个节点SGA大小建议设置为物理内存的40%-60%
– 每个节点PGA大小建议设置为物理内存的10%-20%
– 配置适当的SGA_TARGET和PGA_AGGREGATE_TARGET
– 确保每个节点有足够的内存

2. ASM配置：
– 使用独立的物理磁盘或SAN存储
– 配置多个ASM磁盘组
– OCR和Voting Disk使用Normal或High冗余
– 定期检查ASM磁盘状态

3. 网络配置：
– 配置监听器使用VIP地址
– 使用SCAN地址简化连接
– 私网建议使用高速网络（如10GbE）
– 配置网络冗余

风哥提示：Oracle 11gR2 RAC是一个成熟稳定的高可用解决方案，适合生产环境使用。建议定期应用补丁，保持集群的安全性和稳定性。

本文由风哥教程整理发布,仅用于学习测试使用,转载注明出处:http://www.fgedu.net.cn/10327.html