• +86 400-9955-698
  • support@vinchin.com
logo
关于我们

技术分享

技术分享 Redhat6.8 Oracle 11G RAC 搭建手册

Redhat6.8 Oracle 11G RAC 搭建手册

2022-03-21


redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC


目  录

1  环境介绍

1.1 网络环境介绍

1.2 系统环境介绍

基础环境配置

2.1 网络配置

2.2 域名解析配置

2.3 安装数据库依赖包

2.4 内核参数调整

2.5 关闭selinux、防火墙服务

2.6 创建用户组

2.7 软件资源限制

2.8 修改profile

2.9 修改csh.login

2.10 配置oracle、grid用户环境变量

2.11 配置ASM共享磁盘

3  数据库软件安装

3.1 grid安装

3.2 DB软件安装

3.3 创建ASM磁盘

3.4 建库

4  常规配置

4.1 开启共享归档

4.2 静态监听配置



1 环境介绍


数据库主机系统、图形化工具安装参考《oracle RAC部署环境准备手册之一:系统与工具安装》


1.1 网络环境介绍

Oracle RAC每个节点需要占用四个IP

  PUBLIC IP:主机对外的通信IP

  PRIVATE IP:RAC节点之间的通信IP

  VIP:节点的虚拟IP,可以飘移

  SCAN IP:RAC的集群服务IP,调节集群服务的IP



PUBLIC   IP

PRIVATE   IP

VIP

SCAN   IP

rac1

192.168.93.39

10.10.10.39

192.168.93.139

192.168.93.141

rac2

192.168.93.40

10.10.10.40

192.168.93.140


PUBLIC IP、VIP、SCAN IP同段,PRICATE IP与其他三个IP不同段

节点共用SCAN IP


1.2 系统环境介绍

Oracle 11g操作系统兼容性如图:

 

redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC


本次采用Redhat6.8作为演示环境


1.3 安装包

在ftp相应路径获取,database1、2是数据库软件包、grid是集群管理软件包

 

redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC


2 基础环境配置


RAC基础环境配置需要在两个节点配置,此处以RAC1示例


2.1 网络配置

两个节点均需按预配置的IP设置PUBLIC IP和PRIVATE IP

 

redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC


vi /etc/sysconfig/network-script/ifcfg-eth0

DEVICE=eth0

HWADDR=00:50:56:94:07:01

TYPE=Ethernet

UUID=4efd263a-5b37-4340-a7e9-556255ce69a8

ONBOOT=yes

NM_CONTROLLED=yes

BOOTPROTO=static

IPADDR=192.168.93.39

NETMASK=255.255.192.0

GATEWAY=192.168.64.1

DNS1=61.139.2.69(可不配置)

 

redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC


vi /etc/sysconfig/network-script/ifcfg-eth1

DEVICE=eth1

HWADDR=00:50:56:94:0a:d6

TYPE=Ethernet

ONBOOT=yes

NM_CONTROLLED=yes

BOOTPROTO=static

IPADDR=10.10.93.139

NETMASK=255.255.255.0 


redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


2.2 域名解析配置

vi /etc/hosts

#PUBLIC

192.168.93.39  rac1

192.168.93.40  rac2

#PRIVATE

10.10.93.39   rac1-priv

10.10.93.40   rac2-priv

#VIP

192.168.93.139  rac1-vip

192.168.93.140  rac2-vip

192.168.93.141  rac-scan 


redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


配置完成后,可以检查一下两个节点hosts文件是否一致,可能会有隐藏符号

cat /etc/hosts 可以看到隐藏符号 

注意:一定保证两个节点的hosts文件一致,不然后续grid安装会报错


2.3 安装数据库依赖包

参考《oracle RAC部署环境准备手册之二: yum源配置》文档配置

yum -y install binutils compat-libstdc++-33 glibc ksh libaio libgcc libstdc++ make compat-libcap1 gcc gcc-c++ glibc-devel libaio-devel libstdc++-devel sysstat

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


2.4 内核参数调整

vi /etc/sysctl.conf

kernel.shmmni = 4096 

kernel.sem = 250 32000 100 128 

fs.file-max = 6815744

fs.aio-max-nr = 1048576

net.ipv4.ip_local_port_range = 9000 65500 

net.core.rmem_default = 262144 

net.core.rmem_max = 4194304 

net.core.wmem_default = 262144 

net.core.wmem_max = 104857

vm.swappiness = 0

vm.dirty_background_ratio = 3

vm.dirty_ratio = 80

vm.dirty_expire_centisecs = 500

vm.dirty_writeback_centisecs = 100

 

redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


sysctl –p  使参数生效

参数可以根据实际情况调整

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


2.5 关闭selinux、防火墙服务

sed -i 's/enforcing/disabled/g' /etc/selinux/config

setenforce 0

service iptables stop

chkconfig iptables off

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


2.6 创建用户组

groupadd -g 1000 oinstall

groupadd -g 1001 dba

groupadd -g 1002 oper

groupadd -g 1003 asmadmin

groupadd -g 1004 asmdba

groupadd -g 1005 asmoper

useradd -u 1001 -g oinstall -G dba,asmadmin,asmdba,asmoper grid

useradd -u 1002 -g oinstall -G dba,oper,asmadmin,asmdba oracle

echo 密码 |passwd --stdin grid

echo 密码 |passwd --stdin oracle 

mkdir -p /oracle/app/oraInventory

chown -R grid:oinstall /oracle/app/oraInventory

chmod -R 775 /oracle/app/oraInventory

mkdir -p /oracle/app/grid

chown -R grid:oinstall /oracle/app/grid

chmod -R 775 /oracle/app/grid

mkdir -p /oracle/app/11.2.0.4/grid

chown -R grid:oinstall /oracle/app/11.2.0.4/grid

chmod -R 775 /oracle/app/11.2.0.4/grid

mkdir -p /oracle/app/oracle 

chown -R oracle:oinstall /oracle/app/oracle

chmod -R 775 /oracle/app/oracle

mkdir -p /oracle/app/oracle/product/11.2.0.4/db_1

chown -R oracle:oinstall /oracle/app/oracle/product/11.2.0.4/db_1

chmod -R 775 /oracle/app/oracle/product/11.2.0.4/db_1


2.7 软件资源限制

vi /etc/security/limits.conf

grid soft nproc 2047    

grid hard nproc 16384   

grid soft nofile 1024   

grid hard nofile 65536  

oracle soft nproc 2047  

oracle hard nproc 16384 

oracle soft nofile 1024 

oracle hard nofile 65536

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾

2.8 修改profile

vi /etc/profile

if [ \$USER = "oracle" ] || [ \$USER = "grid" ]; then

 if [ \$SHELL = "/bin/ksh" ]; then

    ulimit -p 16384

    ulimit -n 65536

 else

    ulimit -u 16384 -n 65536

 fi

umask 022

fi

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


2.9 修改csh.login 

vi /etc/csh.login

if ( \$USER = "oracle" || \$USER = "grid" ) then

limit maxproc 16384

limit descriptors 65536

endif

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


2.10 配置oracle、grid用户环境变量

修改grid用户环境变量

su - grid

vi .bash_profile

export ORACLE_BASE=/oracle/app/grid

export ORACLE_SID=+ASM1  ---节点2 为+ASM2

export ORACLE_HOME=/oracle/app/11.2.0.4/grid

export PATH=$ORACLE_HOME/bin:$ORACLE_HOME/OPatch:$PATH

NAME=`hostname`

PS1="[$NAME:$LOGNAME]:\${PWD}>"  

umask 022

红框的需要注释掉

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾

 

source ~/.bash_profile

env |grep ORACLE


修改oracle环境变量 

su - oracle

vi .bash_profile

export ORACLE_BASE=/oracle/app/oracle

export ORACLE_SID=orcl1  ---节点2 为orcl2

export ORACLE_HOME=$ORACLE_BASE/product/11.2.0.4/db_1

export PATH=$ORACLE_HOME/bin:$ORACLE_HOME/OPatch:$PATH

NAME=`hostname`

PS1="[$NAME:$LOGNAME]:\${PWD}>" 

umask 022

红框的需要注释掉

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


source ~/.bash_profile

env |grep ORACLE


2.11 配置ASM共享磁盘

参考《oracle RAC部署环境准备手册之二:ASM磁盘组建》文档


2.12 配置swap分区

注:安装软件如果预检查报错swap分区过小,可以用此种方法增加swap分区,安装前先配置增加一倍swap分区

创建swap分区 

dd if=/dev/zero of=/oracle/swap1 bs=1M count=2048

创建一个swap类型文件,

mkswap /oracle/swap1

将swpf1生成swap文件

swapon /oracle/swap1

查看一下,swap1起作用了

free -m   

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


实现开机后自动使用新添的swap1分区

vi /etc/fstab

添加swap行

/oracle/swap1       swap       swap      defaults     0 0

修改tmpfs行

tmpfs            /dev/shm   tmpfs   defaults,size=2G    0 0

tmpfs重置一下,使其当下有效

mount -o remount /dev/shm

 

redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


3 数据库软件安装


3.1 grid安装

运行Xmanager中的Broadcast

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


记下图形化工具的窗口号


 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


su - grid    进入grid用户下安装

cd /oracle/grid

export DISPLAY=192.168.128.43:0.0 (图形化工具安装主机IP)

./runInstaller  

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


选择 skip software updates,跳过软件更新

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


选择安装并配置grid软件

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


选择高级安装

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


设置语言:英文

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


输入集群名称和scan名称,scan名称和hosts文件里scan名称保持一致,scan端口默认1521可以修改,不启动GNS 


redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


根据hosts文件里的配置点击Add增加集群节点 


redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


输入grid用户密码,配置节点互信

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


输入grid用户的密码,点击setup,如果提示配置成功,可以点击test测试是否现在是互信状态,如果未setup就test,会报错。 


redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


根据规划,选择好网卡类型,非public和private的网卡选择Do Not Use 


redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


选择Oracle ASM作为共享存储

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


建立CRS磁盘组SYSDG change discovery path 中输入/dev/asm*  确定,选择三块5g的磁盘组成的磁盘组

 

redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


为所有的asm账号设置相同的密码YUNqi123456 

IPMI一般不设置

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


配置ASM用户组属(一般默认)

 redhat6.8,oracle11g,RAC部署手册,oracle,数据库,虚拟机,搭建手册,Oracle 部署,Oracle RAC ,备份,容灾


选择安装路径,保持默认即可  


image.png


选择Inventory目录,保持默认即可 


image.png


开始检查安装环境,检查完毕后会列出不符合项 


image.png


此处需要说明的是:

1)elfutils-libelf-devel-0.97和pdksh在RedHat 6里无需安装,可忽略;

2)resolv.conf为DNS解析的配置,可忽略;

3)Network Time Protocol(NTP)这一项,我们使用CTSSD,不配置NTP,可忽略;

4) ASM检查失败也可忽略。

除上述可忽略的几项外,如果还有其他的未满足项,则需要具体问题具体分析,待解决后再安装GRID。

因此可以选择“Ignore All”,然后单击“Next”按钮执行下一步:

Grid安装到这里时,需要去两个节点分别运行两个脚本

 image.png


用root账户登录,分别先后在rac1 rac2执行两个脚本(执行完一个才能第二个)

 image.png


rac1

 

image.png

image.png

image.png

rac2

 image.png


如果有下图的报错,检查一下两个节点是否能ping通scan IP,如果能通,可以直接忽略

 image.png


3.2 DB软件安装

在oracle用户下安装DB软件

cd /oracle/database

./runInstaller

 image.png


忽略安全更新

 image.png


忽略软件更新

 image.png


选择只安装数据库软件

 image.png


选择oracle rac数据库安装

 image.png


和集群安装一样,这里需要配置互信,输入rac2 oracle用户的密码,点击setup,执行完后点击test测试,测试通过就可以下一步 


image.png


选择语言:英文

 image.png


选择企业版安装

 image.png


选择安装路径,保持默认即可 


image.png


选择操作角色组属 


image.png


安装检查

 image.png


出现如下界面

 image.png


此处需要说明的是:

1)elfutils-libelf-devel-0.97和pdksh在RedHat 6里无需安装,可忽略;

2)resolv.conf为DNS解析的配置,可忽略;

3)Clock Synchronization这一项,我们使用CTSSD,不配置NTP,可忽略;

4) Single Client Access Name(SCAN)这一项,为没有配置DNS所致,可忽略;

除上述可忽略的几项外,如果还有其他的未满足项,则需要具体问题具体分析,待解决后再安装数据库软件。

因此可以选择“Ignore All”,然后单击“Next”按钮执行下一步:

点install进入安装界面

 image.png

image.png 

接着出现如下界面

 image.png


以root用户登陆系统,在节点1、2顺序执行上面的脚本

 image.png


完成安装

 image.png


3.3 创建ASM磁盘

以grid用户登录节点1执行ASMCA创建DATADG和ARCHDG

 image.png


进入界面后点creat

 image.png


创建DATADG

 image.png


创建ARCHDG

 image.png


可以看到已经全部挂载,如果没有的话选择mount all

 image.png


3.4 建库

以oracle用户登录节点1执行DBCA建库

注意要修改相关设置,如字符集、归档模式、redo log大小、multiplex redo log设置等

 image.png


执行dbca后出现如下安装界面:

 image.png


选择创建一个数据库

 image.png


选择General Purpose or Transaction Processing

 image.png


输入数据库名,然后选择select all所有节点

 image.png


选择不创建EM

 image.png


这里统一密码,输入密码

 image.png


确认数据库文件目录为+DATADG

 image.png


将归档放入+ARCHDG中

勾上enable archiving,安装好数据库以后就已经是开启归档的状态,不用再去开归档模式


image.png

 

不需要Sample Schemas 


image.png


配置字符集

 image.png


存储一般默认,点击Next

 image.png


点击创建数据库

 image.png

 image.png


直接点Exit退出安装

 

image.png



4 常规配置


4.1 开启共享归档

①查询是否开启归档

SQL> archive log list;

②创建共享目录

[grid@rac1 ~]$ export ORACLE_SID=+ASM1

[grid@rac1 ~]$ asmcmd

ASMCMD > ls

DATADG/

ARCHDG/

SYSDG/

ASMCMD > cd DATADG/

ASMCMD > ls

Orcl/

ASMCMD > mkdir arch

ASMCMD > cd arch

ASMCMD > pwd

+DATADG/arch

ASMCMD > exit

③将rac设置成单实例模式

SQL > show parameter cluster_database

SQL > alter system set cluster_database=false scope=spfile sid='*';    (两个节点都要执行命令)

④开启归档

分别关闭两个节点实例

shutdown immediate

将节点1启动至mount状态,开启归档,设置归档路径,格式,并打开数据库还原rac模式

SQL> startup mount

SQL> show parameter cluster_database   查看之前设置是否生效

SQL> alter database archivelog;    开启归档

SQL> alter system set log_archive_format='test_%t_%s_%r.log' scope=spfile;  设置归档格式

SQL> alter system set log_archive_start=true  scope=spfile;

SQL> alter system set log_archive_dest_1='location=+DATADG/arch'  scope=spfile;

SQL> alter database open;

SQL> alter system set cluster_database=true scope=spfile sid='*';

SQL> shutdown immediate;

归档格式说明:

%t     重做线程号

%s     日志序列号

%r      resetlogs的id号

⑤打开所有节点数据库

[oracle@rac1 ~]$ srvctl start database -d orcl

使用集群服务打开所有节点数据库

查看是否生效

SQL> archive log list;

切换归档,查看归档是否正常工作

alter system switch logfile; 或者alter system archive log current;


4.2 静态监听配置

vi /oracle/app/11.2.0.4/grid/network/admin/listener.ora

 

image.png




关注云祺,获取更多精彩信息。


二维码.webp

  • 标签:
  • 技术分享

您可能感兴趣的新闻 换一批

现在下载,可享30天免费试用

立即下载