Nginx多策略流量分发

1、场景描述

在实际生产环境中,流量分发有很多情况,下面主要讲讲以下两种流量分发场景:

新版本上线,为了保证新版本稳定性,需要用线上的流量的引入,对新版本进行真实流量测试。如果新版本上线有问题,为降低影响范围,我们对流量的引入应该为从小到大的策略。
现如今是移动端的时代,而移动端和pc端的设备的不同,需要对移动端和pc的流量进行不同的处理,同时可以针对两种设备的不同需求可以单独升级,可控性强,且架构灵活。
2、nginx策略配置

针对以上两种场景,nginx做为强大的web服务器,通过简单的配置来就可以满足我们的需求,下面我们就开始实战:

nginx version: nginx/1.16.1
os version: centos 7
完成以上需求,主要依赖于nginx的两个模块:

ngx_http_split_clients_module 文档参考地址: http://nginx.org/en/docs/http/ngx_http_split_clients_module.html
ngx_http_map_module 文档参考地址:http://nginx.org/en/docs/http/ngx_http_map_module.html
3、流量按比例分配[ngx_http_split_clients_module]

按比例分配流量,通过ngx_http_split_clients_module模块实现,该模块可通过客户端的某些属性对客户端通过hash算法按比例分配,这些属性包括客户端ip等,通过hash函数,将不同客户端ip进行比例分配,从而可以将部分流量引入新版本服务中,下面看一下具体配置:

user nobody;
worker_processes auto;
error_log /var/log/nginx/error.log;
pid /run/nginx.pid;

events {
worker_connections 1024;
}

http {
log_format main 'remote_addr -remote_user [time_local] "request" '
'statusbody_bytes_sent "http_referer" ' '"http_user_agent" "$http_x_forwarded_for"';
user nobody;
worker_processes auto;
error_log /var/log/nginx/error.log;
pid /run/nginx.pid;

events {
worker_connections 1024;
}

http {
log_format main 'remote_addr -remote_user [time_local] "request" '
'statusbody_bytes_sent "http_referer" ' '"http_user_agent" "$http_x_forwarded_for"';

access_log  /var/log/nginx/access.log  main;

include             /etc/nginx/mime.types;
default_type        application/octet-stream;

# 根据内置变量变量${remote_addr}进行1:1分发,并将v1和v2的值赋予$version变量
split_clients "${remote_addr}AAA" $version {
               50%               v1;
               *                 v2;
}

# v1版本服务
server {
      listen 8081;
      location  / {
          return 200 "v1\n";
      }
}
# v2版本服务
server {
      listen 8082;
      location  / {
          return 200 "v2\n";
      }
}

server {
    listen 80;
    location / {
        proxy_pass http://127.0.0.1/$version;
    }
    # v2版本转发
    location  /v2 {
        proxy_pass http://127.0.0.1:8082/;
    }
    # v1版本转发
    location  /v1 {
        proxy_pass http://127.0.0.1:8081/;
    }
}

}
在配置中,我们利用split_clients指令对remote_addr变量进行hash运算,并按1:1比例随机地将version的值赋予v1和v2,*表示剩余的比例,即1-50%,这样就可以通过$version的值进行流量分配,具体可看nginx配置,已有注释。可以看到在版本转发时,在proxy_pass转发路径最后加了/,是为了把版本路径(v1|v2)去掉,然后再进行转发,可以保持原有的请求uri路径不变,此处算是一个小技巧。
实际效果:

4、移动端和pc端流量分配[ngx_http_map_module]

ngx_http_map_module模块可通过客户端属性按一定规则匹配映射为新的变量,我们可以对客户端的ua进行正则匹配来区分流量,从而进行流量分发,下面是nginx配置文件示例:

user nobody;worker_processes auto;error_log /var/log/nginx/error.log;pid /run/nginx.pid;events {    worker_connections 1024;}http {    log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '                      '$status $body_bytes_sent "$http_referer" '                      '"$http_user_agent" "$http_x_forwarded_for"';    access_log  /var/log/nginx/access.log  main;    include             /etc/nginx/mime.types;    default_type        application/octet-stream;    map "${http_user_agent}" $uatype {           default           nomobile;           "~*mobile"        mobile;    }        # pc端服务    server {          listen 8082;          location  / {              return 200 "nomobile\n";          }    }        # 移动端服务    server {          listen 8081;          location  / {              return 200 "mobile\n";          }    }    server {        listen 80;        location / {            proxy_pass http://127.0.0.1/$uatype;        }        # pc端版本转发        location  /nomobile {            proxy_pass http://127.0.0.1:8082/;        }        # 移动端版本转发        location  /mobile {            proxy_pass http://127.0.0.1:8081/;        }    }}

在nginx配置中,我们可以看到使用map指令,对客户端的ua进行正则匹配,一旦匹配成功,uatype将被分配为mobile,并根据此变量的值进行转发,剩下未匹配的由default 指定,此时uatype为nomobile,从而转发到pc端服务,同时在转发到后端时,同样在proxy_pass后加/,也是为了去掉nomobile和mobile前缀。在使用map的正则匹配时,代表区分大小写的匹配,*则为不区分大小写。

实际效果:

5、总结

以上只是列举典型的流量分发方式,我们可以根据$http_name或者$arg_name来定制化需求,$http_name获取自定义头部,$arg_name获取自定义uri参数,这就给予我们更多的可能,比如我们可以再用户登录后,添加自定义头部,使用自定义头部,map指令进行流量拆分,更多的用途需要我们自行发挥想象进行探索。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,794评论 6 498
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,050评论 3 391
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 161,587评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,861评论 1 290
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,901评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,898评论 1 295
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,832评论 3 416
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,617评论 0 271
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,077评论 1 308
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,349评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,483评论 1 345
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,199评论 5 341
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,824评论 3 325
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,442评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,632评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,474评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,393评论 2 352

推荐阅读更多精彩内容

  • 1.什么是负载均衡?通过某种负载分担技术,将外部发送来的请求按照某种策略分配到服务器集合的某一台服务器上,而接收到...
    少艾_91df阅读 497评论 0 0
  • nginx 编译参数详解 标题是不是很欠揍,个人认为确实值得一看,如果你不了解nginx,或者你刚学nginx,或...
    可不可以_78b2阅读 236评论 0 0
  • 1. 记在前面 configure时遇到错误nginx在编译安装时,进入其源码解压目录后,使用./configur...
    天之蓝色阅读 5,338评论 0 6
  • 大多数 Nginx 新手都会频繁遇到这样一个困惑,那就是当同一个location配置块使用了多个 Nginx 模块...
    SkTj阅读 7,658评论 0 12
  • 泥淖旁荆棘丛生,一条曲折幽深的小径隐没于荆棘丛中。我俯下身来沿着小径走到尽头,小心翼翼地探出头去。眼前出现了一条...
    古木箫师阅读 683评论 4 12