CentOS 7 下搭建高可用集群

发布于 2024-11-13 09:26:36 字数 5521 浏览 3 评论 0

本文以两台机器实现双集热备高可用集群，主机名 node1 的 IP 为 192.168.122.168 ，主机名 node2 的 IP 为 192.168.122.169 。

一、安装集群软件

必须软件 pcs，pacemaker，corosync，fence-agents-all，如果需要配置相关服务，也要安装对应的软件

二、配置防火墙

1、禁止防火墙和 selinux

# systemctl disable firewalld
# systemctl stop firewalld

修改 /etc/sysconfig/selinux 确保 SELINUX=disabled ，然后执行 setenforce 0 或者 reboot 服务器以生效

2、设置防火墙规则

# firewall-cmd --permanent --add-service=high-availability
# firewall-cmd --add-service=high-availability

三、各节点之间主机名互相解析

分别修改 2 台主机名分别为 node1 和 node2，在 centos 7 中直接修改 /etc/hostname 加入本机主机名和主机表，然后重启网络服务即可。

#vi /etc/hostname
node1

#systemctl restart network.service
#hostname
node1

配置 2 台主机的主机表，在 /etc/hosts 中加入

192.168.122.168 node1
192.168.122.169 node2

四、各节点之间时间同步

在 node1 和 node2 分别进行时间同步，可以使用 ntp 实现。

[root@node1 ~]# ntpdate 172.16.0.1 //172.16.0.1 为时间服务器

五、各节点之间配置 ssh 的无密码密钥访问。

下面的操作需要在各个节点上操作。

# ssh-keygen -t rsa -P ‘’   #这个生成一个密码为空的公钥和一个密钥，把公钥复制到对方节点上即可
# ssh-copy-id -i /root/.ssh/id_rsa.pub root@node2 #对方主机名用登录用户名

两台主机都要互相可以通信，所以两台主机都得互相生成密钥和复制公钥，相互的节点上的 hosts 文件是都要解析对方的主机名， 192.168.122.168 node1 192.168.122.169 node2

# ssh node2 ‘date’;date #测试一下是否已经互信

六、通过 pacemaker 来管理高可用集群

1、创建集群用户

为了有利于各节点之间通信和配置集群，在每个节点上创建一个 hacluster 的用户，各个节点上的密码必须是同一个。

# passwd hacluster

Changing password for user hacluster.
New password:
Retype new password:
passwd: all authentication tokens updated successfully.

2、设置 pcsd 开机自启动

# systemctl start pcsd.service
# systemctl enable pcsd.service

3、集群各节点之间进行认证

# pcs cluster auth node1 node2Username: hacluster Password: node1: Authorized node2: Authorized

4、创建并启动集群

[root@z1 ~]# pcs cluster setup --start --name my_cluster node1 node2

node1: Succeeded
node1: Starting Cluster...
node2: Succeeded
node2: Starting Cluster...

5、设置集群自启动

# pcs cluster enable –all

6、查看集群状态信息

[root@z1 ~]# pcs cluster status

7、设置 fence 设备

这个可以参考<Red Hat Enterprise Linux 7 High Availability Add-On Reference>

corosync 默认启用了 stonith，而当前集群并没有相应的 stonith 设备，因此此默认配置目前尚不可用，这可以通过如下命令验证：

#crm_verify -L -V

可以通过如下面命令禁用 stonith：

#pcs property set stonith-enabled=false（默认是 true）

8、配置存储

高可用集群既可以使用本地磁盘来构建纯软件的镜像型集群系统，也可以使用专门的共享磁盘装置来构建大规模的共享磁盘型集群系统，充分满足客户的不同需求。

共享磁盘主要有 iscsi 或 DBRD。本文并没有使用共享磁盘。

9、配置浮点 IP

不管集群服务在哪运行,我们要一个固定的地址来提供服务。在这里我选择 192.168.122.101 作为浮动 IP,给它取一个好记的名字 ClusterIP 并且告诉集群每 30 秒检查它一次。

# pcs resource create VIP ocf:heartbeat:IPaddr2 ip=192.168.122.170 cidr_netmask=24 op monitor interval=30s
# pcs update VIP op monitor interval=15s

10、配置 apache 服务

在 node1 和 node2 上安装 httpd ，确认 httpd 开机被禁用

# systemctl status httpd.service；

配置 httpd 监控页面（貌似不配置也可以通过 systemd 监控），分别在 node1 和 node2 上执行

# cat > /etc/httpd/conf.d/status.conf << EOF
SetHandler server-status
Order deny,allow
Deny from all
Allow from localhost
EOF

首先我们为 Apache 创建一个主页。在 centos 上面默认的 Apache docroot 是/var/www/html,所以我们在这个目录下面建立一个主页。

node1 节点修改如下：

[root@node1 ~]# cat <<-END >/var/www/html/index.html
<html>
<body>Hello node1</body>
</html>

END

node2 节点修改如下：

[root@node2 ~]# cat <<-END >/var/www/html/index.html 
<html>
<body>Hello node2</body>
</html>

END

下面语句是将 httpd 作为资源添加到集群中：

#pcs resource create WEB apache configfile="/etc/httpd/conf/httpd.conf" statusurl="http://127.0.0.1/server-status"

11、创建 group

将 VIP 和 WEB resource 捆绑到这个 group 中，使之作为一个整体在集群中切换。（此配置为可选)

# pcs resource group add MyGroup VIP
# pcs resource group add MyGroup WEB

12、配置服务启动顺序

以避免出现资源冲突，语法：(pcs resource group add 的时候也可以根据加的顺序依次启动，此配置为可选)

# pcs constraint order [action] then [action]
# pcs constraint order start VIP then start WEB

13、指定优先的 Location （此配置为可选)

Pacemaker 并不要求你机器的硬件配置是相同的,可能某些机器比另外的机器配置要好。这种状况下我们会希望设置:当某个节点可用时,资源就要跑在上面之类的规则。为了达到这个效果我们创建 location 约束。同样的,我们给他取一个描述性的名字(prefer-node1),指明我们想在上面跑 WEB 这个服务,多想在上面跑（我们现在指定分值为 50,但是在双节点的集群状态下,任何大于 0 的值都可以达到想要的效果),以及目标节点的名字:

# pcs constraint location WEB prefers node1=50
# pcs constraint location WEB prefers node2=45

这里指定分值越大，代表越想在对应的节点上运行。

14、资源粘性（此配置为可选)

一些环境中会要求尽量避免资源在节点之间迁移。迁移资源通常意味着一段时间内无法提供服务，某些复杂的服务，比如 Oracle 数据库，这个时间可能会很长。

为了达到这个效果，Pacemaker 有一个叫做“资源粘性值”的概念，它能够控制一个服务（资源) 有多想呆在它正在运行的节点上。

Pacemaker 为了达到最优分布各个资源的目的，默认设置这个值为 0。我们可以为每个资源定义不同的粘性值，但一般来说，更改默认粘性值就够了。资源粘性表示资源是否倾向于留在当前节点，如果为正整数，表示倾向，负数则会离开，-inf 表示负无穷，inf 表示正无穷。

# pcs resource defaults resource-stickiness=100

常用命令汇总

查看集群状态：#pcs status
查看集群当前配置：#pcs config
开机后集群自启动：#pcs cluster enable –all
启动集群：#pcs cluster start –all
查看集群资源状态：#pcs resource show
验证集群配置情况：#crm_verify -L -V
测试资源配置：#pcs resource debug-start resource
设置节点为备用状态：#pcs cluster standby node1

分享到QQ

分享到微博

如果你对这篇内容有疑问，欢迎到本站社区发帖提问参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。

发布评论

需要登录才能够评论，你可以免费注册一个本站的账号。

列表为空，暂无数据

关于作者

探春

暂无简介

0 文章

0 评论

23 人气

关注发私信

友情链接

文江博客