负载均衡 Nginx Session 一致性

HTTPS 请求跳转


如下面的配置:


location /test {
   proxy_pass http://www.baidu.com/;
}


在访问 URI 为 /test 时会跳转到百度,但此时浏览器中的 URL 也会发生变化。


这是因为:向 http://www.baidu.com/ 发送请求后, Nginx 返回的是一个跳转的响应。


此后, 客户端会重新向 https://www.baidu.com/ 发送请求(此过程不再经历 Nginx)。


所以,最终浏览器发生了跳转, 而非 Nginx 的负载均衡。


问题解决


将配置中的 http 改为 https 即可。


Session 一致性


在使用 Nginx 做反向代理时,如果后端服务器是 Tomcat 等动态服务器,则可能会出现 Session 一致性问题。


即: 无法确保同一个 Session 一定对应同一个 Server;


配置网络


下面使用 Docker 来演示。


配置 IP 地址:



并在 Server1 和 Server2 上启动 Tomcat。


配置 Server


在 Server 端创建 jsp 页面:


Server 1


[root@c5477d71795c ROOT]# pwd
/var/lib/tomcat/webapps/ROOT
[root@c5477d71795c ROOT]# cat index.jsp 
from 172.20.1.101
<br/>
session=<%=session.getId()%>


Server 2


[root@c5477d71795c ROOT]# pwd
/var/lib/tomcat/webapps/ROOT
[root@c5477d71795c ROOT]# cat index.jsp 
from 172.20.1.102
<br/>
session=<%=session.getId()%>


然后访问 http://172.20.1.101:8080/ 和 http://172.20.1.102:8080/。


可分别显示来自哪个 Server 和对应的 SessionId,并且刷新页面时 SessionId 不会变化(即使是使用 Ctrl+F5 刷新)。


配置 Nginx


修改 Nginx 的配置文件, 加入新的 upstream 配置和 server 配置。


upstream tomcat {
    server 172.20.1.101:8080;
    server 172.20.1.102:8080;
}


server {
    ......
    location /cat {
        proxy_pass http://tomcat/;
    }
}


重启 Nginx:


[root@ce12b3b4ce00 sbin]# ./nginx -s reload


访问 http://172.20.1.10/cat 并刷新,发现 from 172.20.1.10x 一直在变化,并且session=xxx 也变化。


说明:此时 Nginx 的配置无法保证 Session 一致性!


解决方案


在 Tomcat 后面部署 Redis,MemCached 等内存数据库来保存 Session 相关信息。


本例中在 Nginx 服务器上安装 memcached 来解决 Session 一致性问题。


安装 memcached


在 Nginx 容器中使用 yum 安装:


yum install -y memcached


启动 memcached


使用 memcached 命令启动:


memcached -d -m 128m -p 11211 -l 172.20.1.10 -u root -P /tmp/


参数说明:


  • -d: 后台启动
  • -m: 缓存大小
  • -p: 端口
  • -l: IP地址
  • -P: 服务启动后系统进程 ID 存储文件的目录
  • -u: 服务器以哪个用户作为管理用户


修改 Tomcat 配置


在两台 Server 中修改 tomcat 的配置:


[root@3a53f7504511 ROOT]# vi /etc/tomcat/context.xml 


# context标签中加入下面的内容
<Manager 
className="de.javakaffee.web.msm.MemcachedBackupSessionManager"
        memcachedNodes="n1:172.20.1.10:11211"
        sticky="false"
        sessionBackupAsync="false"
        lockingMode="auto"
        requestUriIgnorePattern=".*\.(ico|png|gif|jpg|css|js)#34;
        sessionBackupTimeout="1000"          
        transcoderFactoryClass="de.javakaffee.web.msm.serializer.kryo.KryoTranscoderFactory" />


导入 jar 包使用 yum 安装的 Tomcat 可将 jar 包放在 /usr/share/java/tomcat/ 目录下。


需要的 jar 包:



Maven 依赖如下:


<dependency>
    <groupId>asm</groupId>
    <artifactId>asm</artifactId>
    <version>3.2</version>
</dependency>


<dependency>
    <groupId>com.couchbase.client</groupId>
    <artifactId>couchbase-client</artifactId>
    <version>1.4.11</version>
</dependency>


<dependency>
    <groupId>com.googlecode</groupId>
    <artifactId>kryo</artifactId>
    <version>1.04</version>
</dependency>


<dependency>
    <groupId>de.javakaffee</groupId>
    <artifactId>kryo-serializers</artifactId>
    <version>0.11</version>
</dependency>


<dependency>
    <groupId>de.javakaffee.msm</groupId>
    <artifactId>memcached-session-manager</artifactId>
    <version>1.8.2</version>
</dependency>


<dependency>
    <groupId>de.javakaffee.msm</groupId>
    <artifactId>memcached-session-manager-tc7</artifactId>
    <version>1.8.2</version>
</dependency>


<dependency>
    <groupId>com.googlecode</groupId>
    <artifactId>minlog</artifactId>
    <version>1.2</version>
</dependency>


<dependency>
    <groupId>de.javakaffee.msm</groupId>
    <artifactId>msm-kryo-serializer</artifactId>
    <version>1.8.2</version>
</dependency>


<dependency>
    <groupId>com.esotericsoftware</groupId>
    <artifactId>reflectasm</artifactId>
    <version>1.01</version>
</dependency>


<dependency>
    <groupId>net.spy</groupId>
    <artifactId>spymemcached</artifactId>
    <version>2.11.4</version>
</dependency>


注: 如果依赖和 Tomcat 版本不对应可能会什么也不显示,此时响应码为 500。


验证


上述步骤都正确配置之后, 再次访问 http://172.20.1.10/cat 并刷新会发现 SessionId 不再变化。



相关文章

Nginx 从安装到高可用入门教程

Nginx安装1、去官网http://nginx.org/下载对应的nginx包,推荐使用稳定版本2、上传nginx到linux系统3、安装依赖环境(1)安装gcc环境yum install gcc-...

Nginx从安装到高可用,一篇搞定

一、Nginx安装1、去官网http://nginx.org/下载对应的nginx包,推荐使用稳定版本2、上传nginx到linux系统3、安装依赖环境(1)安装gcc环境yum install gc...

Nginx合集-常用功能指导

1)启动、重启以及停止nginx进入sbin目录之后,输入以下命令#启动nginx ./nginx #指定配置文件启动nginx ./nginx -c /usr/local/nginx/conf/n...

Nginx的启动、停止与重启方法

启动 启动代码格式:nginx安装目录地址 -c nginx配置文件地址例如:[root@LinuxServer sbin]# /usr/local/nginx/sbin/nginx -c /usr/...

nginx启动、重启、关闭

一、启动cd usr/local/nginx/sbin./nginx二、重启更改配置重启nginxkill -HUP 主进程号或进程号文件路径或者使用cd /usr/local/nginx/sbin....

老版本nginx存在安全漏洞,请升级至1.18稳定版本

1、场景介绍部门承接了XXX局的安全防控系统,物理机部署在本地XX云上,web服务器使用nginx服务,采用动静分离的部署方式,nginx版本1.14,应XX云安全检测要求现版本暴出漏洞,需要进行版本...