文档章节

大数据教程(2.12):keepalived+nginx(主备)高可用集群搭建教程

em_aaron
 em_aaron
发布于 07/17 00:25
字数 2443
阅读 56
收藏 8

    上一章节博主为大家介绍了目前大型互联网项目的系统架构体系,相信大家应该注意到其中很重要的一块知识nginx技术,在本节博主将为大家分享nginx的相关技术以及配置过程。

一、nginx相关概念

(1.1)反向代理

    反向代理(Reverse Proxy)方式是指以代理服务器来接受internet上的连接请求,然后将请求转发给内部网络上的服务器,并将从服务器上得到的结果返回给internet上请求连接的客户端,此时代理服务器对外就表现为一个服务器。

(1.2)负载均衡

    负载均衡,英文名称为Load Balance,是指建立在现有网络结构之上,并提供了一种廉价有效透明的方法扩展网络设备和服务器的带宽、增加吞吐量、加强网络数据处理能力、提高网络的灵活性和可用性。其原理就是数据流量分摊到多个服务器上执行,减轻每台服务器的压力,多台服务器共同完成工作任务,从而提高了数据的吞吐量。

二、安装nginx

(2.1)下载nginx

官网:http://nginx.org/

(2.2)上传并解压nginx,tar -zxvf nginx-1.14.0.tar.gz -C /usr/local/src

(2.3)进入到nginx源码目录:cd /usr/local/src/nginx-1.14.0/

(2.4)检查安装环境,并指定将来要安装的路径: ./configure --prefix=/usr/local/nginx

缺包报错 ./configure: error: C compiler cc is not found

(2.5)由于上一步骤提示缺少C编译器,先安装c编译器;yum -y install gcc

(2.6)继续2.4步骤中的检查安装环境./configure --prefix=/usr/local/nginx

缺包报错./configure: error: the HTTP rewrite module requires the PCRE library.

(2.7)由于上一步骤提示缺少PCRE library,先安装RCRE library;

yum list|grep pcre
yum -y install pcre-devel

(2.7)继续2.4步骤中的检查安装环境./configure --prefix=/usr/local/nginx

缺包报错./configure: error: the HTTP gzip module requires the zlib library.

(2.8)由于上一步骤提示缺少zlib library,先安装zlib library;

yum list|grep zlib
yum -y install zlib-devel

(2.9)继续2.4步骤中的检查安装环境./configure --prefix=/usr/local/nginx,成功

(2.10)执行安装nginx命令:make && make install

(2.11)安装完成后,测试检查nginx是否正常

              ./usr/loca/nginx/sbin/nginx

(2.12)查看端口是否有ngnix进程监听

              netstat -ntlp | grep 80

(2.13)使用浏览器访问,发现打不开nginx默认页面

(2.14)检查linux防火墙发现只接受端口22的数据包

(2.15)添加允许端口80的数据访问,执行:

iptables -I INPUT -p tcp --dport 80 -j ACCEPT

iptables -I OUTPUT -p tcp --sport 80 -j ACCEPT

(2.16)浏览器访问,nginx已经可以正常访问

(2.17)配置nginx反向代理

(2.18)启动tomcat,并重启nginx,浏览器访问;./sbin/nginx 

(2.19)nginx补充配置

#动态资源 index.jsp
location ~ .*\.(jsp|do|action)$ {
    proxy_pass http://centos-aaron-04:8080;
}

#静态资源
location ~ .*\.(html|js|css|gif|jpg|jpeg|png)$ {
    expires 3d;
}

(2.20)nginx负载均衡配置

在http这个节下面配置一个叫upstream的,后面的名字可以随意取,但是要和location下的proxy_pass http://后的保持一致。

http {
    #是在http里面的, 已有http, 不是在server里,在server外面
    upstream tomcats { 
        server 192.168.29.132:8080 weight=1;#weight表示多少个
        server 192.168.29.133:8080 weight=1;
        server 192.168.29.134:8080 weight=1;
}

#卸载server里
location ~ .*\.(jsp|do|action) {
    proxy_pass http://tomcats;        #tomcats是后面的tomcat服务器组的逻辑组号
}
}

(2.21)重新加载nginx配置文件./sbin/nginx -s reload;并浏览器访问服务

三、利用keepalived实现高可靠(HA)

(3.1)高可用概念

    HA(High Available), 高可用性集群,是保证业务连续性的有效解决方案,一般有两个或两个以上的节点,且分为活动节点及备用节点。

(3.2)高可靠软件keepalived

    keepalive是一款可以实现高可靠的软件,通常部署在2台服务器上,分为一主一备。Keepalived可以对本机上的进程进行检测,一旦Master检测出某个进程出现问题,将自己切换成Backup状态,然后通知另外一个节点切换成Master状态。

(3.3)keepalived安装,下载keepalived,官网地址:http://www.keepalived.org/download.html

(3.4)上传keepalived压缩包到服务器

(3.5)将keepalived解压到/usr/local/src目录下:tar -zxvf keepalived-1.4.5.tar.gz -C /usr/local/src

(3.6)进入到/usr/local/src/keepalived-1.4.5/目录:cd /usr/local/src/keepalived-1.4.5/

(3.7)开始configure编译检查:./configure --prefix=/usr/local/keepalived

缺包报错configure: error: 
  !!! OpenSSL is not properly installed on your system. !!!
  !!! Can not include OpenSSL headers files.            !!!

(3.8)由于上一步骤提示缺少OpenSSL包,先安装OpenSSL

yum list|grep openssl
yum install -y openssl openssl-devel 

(3.9)继续执行3.7步骤中的编译检查:./configure --prefix=/usr/local/keepalived,编译检查通过

(3.10)编译并安装:make && make install

安装过程中有很多警告信息:分析后是因为没安装lvs引起.

(3.11)安装LVS

yum install ipvsadm

(3.12)将keepalived添加到系统服务中

拷贝执行文件
cp /usr/local/keepalived/sbin/keepalived /usr/sbin/
将init.d文件拷贝到etc下,加入开机启动项
cp /usr/local/src/keepalived-1.4.5/keepalived/etc/init.d/keepalived /etc/init.d/keepalived
将keepalived文件拷贝到etc下
cp /usr/local/keepalived/etc/sysconfig/keepalived /etc/sysconfig/ 
创建keepalived文件夹
mkdir -p /etc/keepalived
将keepalived配置文件拷贝到etc下
cp /usr/local/keepalived/etc/keepalived/keepalived.conf /etc/keepalived/keepalived.conf
添加可执行权限
chmod +x /etc/init.d/keepalived

##以上所有命令一次性执行:
cp /usr/local/keepalived/sbin/keepalived /usr/sbin/
cp /usr/local/src/keepalived-1.4.5/keepalived/etc/init.d/keepalived /etc/init.d/keepalived
cp /usr/local/keepalived/etc/sysconfig/keepalived /etc/sysconfig/ 
mkdir -p /etc/keepalived
cp /usr/local/keepalived/etc/keepalived/keepalived.conf /etc/keepalived/keepalived.conf
chmod +x /etc/init.d/keepalived
chkconfig --add keepalived	
chkconfig keepalived on

添加keepalived到开机启动
chkconfig --add keepalived	
chkconfig keepalived on

(3.13)配置keepalived虚拟IP;修改配置文件: /etc/keepalived/keepalived.conf

#MASTER节点
global_defs {
}
vrrp_instance VI_1 {
    state MASTER   #指定A节点为主节点 备用节点上设置为BACKUP即可
    interface eth0    #绑定虚拟IP的网络接口
    virtual_router_id 51   #VRRP组名,两个节点的设置必须一样,以指明各个节点属于同一VRRP组
    priority 100   #主节点的优先级(1-254之间),备用节点必须比主节点优先级低
    advert_int 1  #组播信息发送间隔,两个节点设置必须一样
    authentication {    #设置验证信息,两个节点必须一致
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {    #指定虚拟IP, 两个节点设置必须一样
        192.168.29.190/24    #如果两个nginx的ip分别是192.168.29.135,,...139,则此处的虚拟ip跟它俩同一个网段即可
    }
}


#BACKUP节点
global_defs {
}
vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 51
    priority 99
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        192.168.29.190/24
    }
}

  (3.14)分别启动两台机器上的keepalived;命令:service keepalived  start

  (3.15)测试:

    杀掉master上的keepalived进程,你会发现,在slave机器上的eth0网卡多了一个ip地址

    查看ip地址的命令:  ip addr

  (3.16).配置keepalived心跳检查

    原理:Keepalived并不跟nginx耦合,它俩完全不相关的两个软件但是keepalived提供一个机制:让用户自定义一个shell脚本去检测用户自己的程序,返回状态给keepalived就可以了.

#MASTER节点
global_defs {
}
vrrp_script chk_health {
    script "[[ `ps -ef | grep nginx | grep -v grep | wc -l` -ge 2 ]] && exit 0 || exit 1"
    interval 1    #每隔1秒执行上述的脚本,去检查用户的程序ngnix
    weight -2
}
vrrp_instance VI_1 {
    state MASTER   #指定A节点为主节点 备用节点上设置为BACKUP即可
    interface eth0    #绑定虚拟IP的网络接口
    virtual_router_id 51   #VRRP组名,两个节点的设置必须一样,以指明各个节点属于同一VRRP组
    priority 100   #主节点的优先级(1-254之间),备用节点必须比主节点优先级低
    advert_int 1  #组播信息发送间隔,两个节点设置必须一样
    authentication {    #设置验证信息,两个节点必须一致
        auth_type PASS
        auth_pass 1111
    }

    track_script {
        chk_health
    }
    virtual_ipaddress {    #指定虚拟IP, 两个节点设置必须一样
        192.168.29.190/24    #如果两个nginx的ip分别是192.168.29.135,,...139,则此处的虚拟ip跟它俩同一个网段即可
    }    
    notify_master "/usr/local/keepalived/sbin/notify.sh master"
    notify_backup "/usr/local/keepalived/sbin/notify.sh backup"
    notify_fault "/usr/local/keepalived/sbin/notify.sh fault"

}


#BACKUP节点
global_defs {
}
vrrp_script chk_health {
    script "[[ `ps -ef | grep nginx | grep -v grep | wc -l` -ge 2 ]] && exit 0 || exit 1"
    interval 1    #每隔1秒执行上述的脚本,去检查用户的程序ngnix
    weight -2
}
vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 51
    priority 99
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    track_script {
        chk_health
    }
    virtual_ipaddress {
        192.168.29.190/24
    }
    notify_master "/usr/local/keepalived/sbin/notify.sh master"
    notify_backup "/usr/local/keepalived/sbin/notify.sh backup"
    notify_fault "/usr/local/keepalived/sbin/notify.sh fault"

}

(3.17)添加切换通知脚本:vi /usr/local/keepalived/sbin/notify.sh

#!/bin/bash

case "$1" in
    master)
        /usr/local/nginx/sbin/nginx
        exit 0
    ;;
    backup)
        /usr/local/nginx/sbin/nginx -s stop
        /usr/local/nginx/sbin/nginx
        exit 0
    ;;
    fault)
        /usr/local/nginx/sbin/nginx -s stop
        exit 0
    ;;
    *)
        echo 'Usage: notify.sh {master|backup|fault}'
        exit 1
    ;;
esac

(3.18)添加执行权限:chmod +x /usr/local/keepalived/sbin/notify.sh

(3.19)启动两台nginx、tomcat、keepalived测试

    在mater活着的时候,浏览器访问一次,master上nginx日志多一条访问记录;

    关闭master后,浏览器访问一次,backup上的nginx多一条访问日志

    以上是nginx安装搭建以及keeperalived配置主备nginx服务器的全过程;总结:可以将nginx设置为开机启动,这样通知脚本可以使用nginx服务来启动。最后,如果大家对nginx高可用负载均衡或其他技术感兴趣,请点赞博主,博主随时欢迎交流。

参考文档:

http://nginx.org/en/docs/

http://www.keepalived.org/doc/

© 著作权归作者所有

共有 人打赏支持
em_aaron
粉丝 57
博文 50
码字总数 75246
作品 3
黄浦
高级程序员
加载中

评论(2)

em_aaron
em_aaron

引用来自“luo1188”的评论

多活架构
由于时间关系,本次博主打算只分享nginx的高可用主备搭建;多活教程后期再出。
l
luo1188
多活架构
大数据教程(2.13):keepalived+nginx(多主多活)高可用集群搭建教程【自动化脚本】

上一章节博主为大家介绍了目前大型互联网项目的keepalived+nginx(主备)高可用系统架构体系,相信大家应该看了博主的文章对keepalived/nginx技术已经有一定的了解,在本节博主将为大家分享k...

em_aaron
07/22
0
0
云数据库 Redis 版功能特性

关于云数据库 Redis 版详细了解: 云数据库 Redis 版使用教程 (云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高...

mcy0425
03/02
0
0
split-brain 脑裂问题(Keepalived)

脑裂(split-brain) 指在一个高可用(HA)系统中,当联系着的两个节点断开联系时,本来为一个整体的系统,分裂为两个独立节点,这时两个节点开始争抢共享资源,结果会导致系统混乱,数据损坏...

吞吞吐吐的
2017/09/15
0
0
MySQL主从复制与高可用架构方案与项目环境准备_MySQL高可用复制与分布式集群架构01

MySQL高可用复制与分布式集群架构之01:MySQL主从复制与高可用架构方案与项目环境准备 视频教程学习地址 http://edu.51cto.com/course/14238.html 数据库学习专用QQ群:336282998、189070296...

风哥Oracle
08/25
0
0
postgresql 高可用集群搭建资料

多种方案,含zookeeper方案 :PostgreSQL 流行 HA 方案 1. 自己实现高可用集群 有实例 有讲解!postgresql 高可用集群搭建 :PostgreSQLHAwithprimarystandby_2vip 2. pgpool 实现高可用集群...

刘阳0292
2017/10/12
0
0

没有更多内容

加载失败,请刷新页面

加载更多

6. Python3源码—List对象

6.1. List对象 List对象是“变长对象”。 6.1.1. Python中的创建 Python中List对象最重要的创建方法为PyList_New,如下Python语句最终会调用到PyList_New: test = [1, 2, 3, 4, 5] 6.1.2. ...

Mr_zebra
8分钟前
0
0
nginx屏蔽指定接口(URL)

Step1:需求 web平台上线后,需要屏蔽某个服务接口,但又不想重新上线,可以采用nginx屏蔽指定平台接口的办法 Step2:具体操作 location /dist/views/landing/UNIQUE_BEACON_URL { re...

Linux_Anna
15分钟前
0
0
tomcat高并发配置调优

作者:Joker-pan 原文:https://blog.csdn.net/u011622226/article/details/72510385?utm_source=copy --------------------- tomcat 解压就使用的,配置都没动过,肯定不能支持高并发了; ...

imbiao
34分钟前
0
0
mysql 联结,级联查询总结区分

其实我对 数据库的级联或者联结查询一直都是会用,项目能查询出来自己想要的结果即可。 毕竟SQL使用复杂的查询毕竟比较少,而且不难使用。 至于区分他们,我还真的有点模糊。 在看 《SQL必知...

之渊
50分钟前
1
0
区块链入门教程分享区块链POW证明代码实现demo

兄弟连区块链入门教程分享区块链POW证明代码实现demo 这里强调一下区块链的协议分层 应用层 合约层 激励机制 共识层 网络层 数据层 上 一篇主要实现了区块链的 数据层,数据层主...

兄弟连区块链入门教程
57分钟前
2
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部