1. 前言
我们在前面的章节已经讲了需要建立一个wisp-ui的集群,当然,如果用户数众多,建立wisp-rs的集群也是有必要的。那么这个集群我们需要考虑对他进行反向代理和负载均衡,同时需要支持https。选择Nginx和Apache对于wisp来说并没有太大的区别。企业用户毕竟并发没有那么高,以至于大多数私有部署基本上一台Jetty直接搞定,当然这也是标准发布版的wisp-ui直接就是https配置的原因。但对于集团性的企业来说,一个稳健的系统就非常重要了。所以,我们非常有必要了解wisp的集群部署的方式。
既然谈到 wisp-rs的集群,你可能要问我wisp-ui和wisp-rs的配比,1:1的配置基本就是极端的配置了。wisp-ui中少有对rs的多线程的请求,大部分情况下wisp-rs是闲置的。通常情况,wisp-ui:wisp-rs 20:1就能满足要求。所以,本例中一直没对wisp-rs进行处理。
wisp-rs的数据库基本是不会采取分片的,为何?因为,wisp为每个客户建了一个数据库。而单个数据库足以满足一个企业的需求。至于以后会不会也加入分片集群?很难说,毕竟wisp上可以构建各类系统,如果拿wisp建一个大型集团内部的邮件系统,估计分片是必须的。
前面讲解了一些基本的部署思路,接下来回到重点,讲解Nginx的配置。
2.在Docker中装一个Nginx,配置并启动
我们先pull一个Nginx下来运行一下。
接下来我们在host上建立一套目录,用于挂载到Ngnix
图片中的logs和ssl目录是Nginx建立的。我们只需建立config目录和data目录。
其实data目录并不需要,反正后面要代理wisp-ui。我们现在建一个就是为了测试一下。
config目录
nginx.conf的配置没啥要改的
conf.d目录下,建一个default.conf文件,先给出80端口的配置。
server {
listen 80;
server_name www.wisplanner.com;
#charset koi8-r;
#access_log /var/log/nginx/host.access.log main;
# 定义首页索引目录和名称
location / {
root /usr/share/nginx/html;
index index.html index.htm;
}
#error_page 404 /404.html;
error_page 500 502 503 504 /50x.html;
location = /50x.html {
root /usr/share/nginx/html;
}
}
然后在data目录里面放置一个index.html文件
接下来,启动容器。
docker run -d --network mongo --name nginx --ip 192.168.100.9 -p 443:443 -p 80:80 \
-v /home/wis/build/nginx/data:/usr/share/nginx/html \
-v /home/wis/build/nginx/config/nginx.conf:/etc/nginx/nginx.conf/ \
-v /home/wis/build/nginx/config/conf.d/default.conf:/etc/nginx/conf.d/default.conf \
-v /home/wis/build/nginx/logs:/var/log/nginx/ \
-v /home/wis/build/nginx/ssl:/etc/nginx/ssl/ \
-d nginx
现在可以看到nginx的启动情况:
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
e34bc63d6188 nginx "nginx -g 'daemon of…" 47 minutes ago Up 9 minutes 0.0.0.0:80->80/tcp, 0.0.0.0:443->443/tcp nginx
89c69c2b22af wisp-ui "./wisp" 6 hours ago Up About an hour 443/tcp, 0.0.0.0:83->80/tcp wisp-ui-2
e6f7fd2045dd wisp-ui "./wisp" 6 hours ago Up About an hour 443/tcp, 0.0.0.0:82->80/tcp wisp-ui-1
5de373caed7f wisp-ui "./wisp" 6 hours ago Up About an hour 443/tcp, 0.0.0.0:81->80/tcp wisp-ui-0
25563448ca12 wisp-rs "./rs" 12 hours ago Up About an hour 0.0.0.0:6123->6123/tcp, 0.0.0.0:9158->9158/tcp wisp-rs
1cfbd13c6cca mongo "docker-entrypoint.s…" 2 days ago Up About an hour 27017/tcp mongo2
788c8440db14 mongo "docker-entrypoint.s…" 2 days ago Up About an hour 27017/tcp mongo1
668ef82126d1 mongo "docker-entrypoint.s…" 2 days ago Up About an hour 27017/tcp mongo0
nginx已经启动了,访问页面看看
3.配置Nginx Https
我们是在阿里云上购买的证书,查看阿里云的配置,放到default.conf中
server {
listen 80; #侦听80端口,如果强制所有的访问都必须是HTTPs的,这行需要注销掉
listen 443 ssl; #SSL协议访问端口号为443。此处如未添加ssl,可能会造成Nginx无法启动。
server_name www.wisplanner.com; #域名
ssl_certificate ssl/wisplanner.com.pem; #将domain name.pem替换成您证书的文件名。
ssl_certificate_key ssl/wisplanner.com.key; #将domain name.key替换成您证书的密钥文件名。
ssl_session_timeout 5m;
ssl_ciphers ECDHE-RSA-AES128-GCM-SHA256:ECDHE:ECDH:AES:HIGH:!NULL:!aNULL:!MD5:!ADH:!RC4; #使用此加密套件。
ssl_protocols TLSv1 TLSv1.1 TLSv1.2; #使用该协议进行配置。
ssl_prefer_server_ciphers on;
#charset koi8-r;
#access_log /var/log/nginx/host.access.log main;
# 定义首页索引目录和名称
location / {
root /usr/share/nginx/html;
index index.html index.htm;
}
#定义错误提示页面
#error_page 404 /404.html;
#重定向错误页面到 /50x.html
error_page 500 502 503 504 /50x.html;
location = /50x.html {
root /usr/share/nginx/html;
}
}
然后重新启动nginx
访问域名地址,已经可以。
4. 反向代理的配置
配置反向代理和负载均衡时需要特别注意的是,我们需要保持每个session。
我们不能将同一ip的访问分配到不同的服务器,本例中,简单使用了ip_hash的方式来处理。
这个方式并不是非常合理,如果我们根据wisp-ui的ui-session的id(这玩意保存在session中)来分配,就更好了。
nginx.conf的配置如下:
user www-data;
worker_processes auto;
pid /run/nginx.pid;
include /etc/nginx/modules-enabled/*.conf;
events {
worker_connections 1024;
# multi_accept on;
}
http {
##
# Basic Settings
##
sendfile on;
tcp_nopush on;
tcp_nodelay on;
keepalive_timeout 65;
types_hash_max_size 2048;
# server_tokens off;
# server_names_hash_bucket_size 64;
# server_name_in_redirect off;
include /etc/nginx/mime.types;
default_type application/octet-stream;
##
# SSL Settings
##
ssl_protocols TLSv1 TLSv1.1 TLSv1.2; # Dropping SSLv3, ref: POODLE
ssl_prefer_server_ciphers on;
##
# Logging Settings
##
log_format main '$remote_addr - $remote_user [$time_local] "$request" '
'$status $body_bytes_sent "$http_referer" '
'"$http_user_agent" "$http_x_forwarded_for"';
access_log /var/log/nginx/access.log;
error_log /var/log/nginx/error.log;
##
# Gzip Settings
##
gzip on;
# gzip_vary on;
# gzip_proxied any;
# gzip_comp_level 6;
# gzip_buffers 16 8k;
# gzip_http_version 1.1;
# gzip_types text/plain text/css application/json application/javascript text/xml application/xml application/xml+rss text/javascript;
##
# Virtual Host Configs
##
include /etc/nginx/conf.d/*.conf;
include /etc/nginx/sites-enabled/*;
}
配置default.conf
server {
listen 443 ssl; #SSL协议访问端口号为443。此处如未添加ssl,可能会造成Nginx无法启动。
server_name www.wisplanner.com; #域名
ssl_certificate ssl/wisplanner.com.pem; #将domain name.pem替换成您证书的文件名。
ssl_certificate_key ssl/wisplanner.com.key; #将domain name.key替换成您证书的密钥文件名。
ssl_session_timeout 5m;
ssl_ciphers ECDHE-RSA-AES128-GCM-SHA256:ECDHE:ECDH:AES:HIGH:!NULL:!aNULL:!MD5:!ADH:!RC4; #使用此加密套件。
ssl_protocols TLSv1 TLSv1.1 TLSv1.2; #使用该协议进行配置。
ssl_prefer_server_ciphers on;
#charset koi8-r;
#access_log /var/log/nginx/host.access.log main;
# 定义首页索引目录和名称
location / {
index index.html index.htm;
proxy_redirect off;
proxy_next_upstream error timeout invalid_header http_500 http_503 http_404;
proxy_max_temp_file_size 128m;
proxy_pass http://wisp-ui;
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_http_version 1.1;
proxy_set_header Connection "";
}
#定义错误提示页面
#error_page 404 /404.html;
#重定向错误页面到 /50x.html
error_page 500 502 503 504 /50x.html;
location = /50x.html {
root /usr/share/nginx/html;
}
}
upstream wisp-ui{
ip_hash;
#weigth参数表示权值
server 192.168.100.6:80 weight=1;
server 192.168.100.7:80 weight=1;
server 192.168.100.8:80 weight=1;
keepalive 300; #长连接
}
5. 现在,我们就可以通过https://www.wispplaner.com来访问了。
通过以上的5个章节,我们完成了wisp整体在docker上的部署。