haproxy 负载均衡

  • haproxy 高可用负载均衡
    • haproxy 源码安装
    • haproxy 配置参数
    • haproxy 配置场景
    • haproxy 调度算法
    • haproxy ACL

1.0 源码安装

  • 2台 haproxy 同样安装操作

1.1 部署环境

OSVERSIONIPROLE
CentOS 7.9Haproxy 2.4.0 192.168.1.171haproxy
192.168.1.172haproxy

1.2 haproxy 依赖安装

1
2
3
4
5
6
7
8
9
10
# yum -y install gcc readline-devel openssl-devel systemd-devel socat psmisc            # 依赖安装

// 安装 lua 脚本[需要lua来支持更多复杂的功能]
# wget https://www.lua.org/ftp/lua-5.4.3.tar.gz --no-check-certificate
# mkdir -p /data/apps
# tar -xf lua-5.4.3.tar.gz 
# mv lua-5.4.3 /data/apps/lua
# cd /data/apps/lua
# make linux
# lua -v

1.3 haproxy 下载

1
2
# cd /data/apps/
# wget https://www.haproxy.org/download/2.4/src/haproxy-2.4.0.tar.gz

upload successful

1.4 haproxy 编译

1
2
3
4
5
6
7
8
9
10
11
# tar -xf haproxy-2.4.0.tar.gz
# cd haproxy-2.4.0/
# make ARCH=X86_64 TARGET=linux-glibc USE_PCRE=1 USE_OPENSSL=1 USE_ZLIB=1 USE_SYSTEMD=1 USE_LUA=1 LUA_INC=/data/apps/lua/src LUA_LIB=/data/apps/lua/src
    # 不同版本的编译安装请详见 README、INSTALL 文档
# make install PREFIX=/data/apps/haproxy
# /data/apps/haproxy/sbin/haproxy
    -v		验证安装是否成功
    -h		查看帮助
    -f		指定 haproxy 配置文件
    -c		以非启动方式检查 haproxy 配置文件
    -q		静默方式,不打印输出信息

1.5 haproxy 配置

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
# mkdir /data/apps/haproxy/conf
# useradd -r -s /sbin/nologin -d /data/apps/haproxy haproxy
# vim /data/apps/haproxy/conf/haproxy.cfg
global
    maxconn 100000
    user haproxy
    group haproxy
    daemon
    log 127.0.0.1 local2 info
    pidfile /data/apps/haproxy/haproxy.pid
    stats socket /data/apps/haproxy/haproxy.sock mode 600 level admin

defaults
    option http-keep-alive
    option forwardfor
    maxconn 100000
    mode http
    timeout connect 300000ms
    timeout client 300000ms
    timeout server 300000ms

listen web
    bind *:80
    mode http
    server web01 127.0.0.1:8080 check inter 3000 fall 2 rise 5

1.6 haproxy 启动项

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
# cat /usr/lib/systemd/system/haproxy.service
[Unit]
Description=HAProxy Load Balancer
After=syslog.target network.target

[Service]
ExecStartPre=/data/apps/haproxy/sbin/haproxy -f /data/apps/haproxy/conf/haproxy.cfg -c -q
ExecStart=/data/apps/haproxy/sbin/haproxy -Ws -f /data/apps/haproxy/conf/haproxy.cfg -p /data/apps/haproxy/haproxy.pid
ExecReload=/bin/kill -USR2 $MAINPID

[Install]
WantedBy=multi-user.target

# systemctl daemon-reload
# systemctl enable haproxy.service --now

1.7 haproxy 日志配置

1
2
3
4
5
6
7
8
9
# mkdir /data/apps/haproxy/logs

# vim /etc/rsyslog.conf
$ModLoad imtcp
$InputTCPServerRun 514 
...
local2.*                                                /data/apps/haproxy/logs/haproxy.log

# systemctl restart rsyslog.service

2.0 配置参数

  • 2台 haproxy 同样安装操作

2.1 haproxy 配置示例

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
# cat /data/apps/haproxy/conf/haproxy.cfg
global
    maxconn 100000
    user haproxy
    group haproxy
    daemon
    log127.0.0.1 local2 info
    pidfile /data/apps/haproxy/haproxy.pid
    stats socket /data/apps/haproxy/haproxy.sock mode 600 level admin
    chroot  /data/apps/haproxy

defaults
    option http-keep-alive
    option forwardfor
    maxconn 100000
    mode http
    timeout connect 300000ms
    timeout client 300000ms
    timeout server 300000ms

frontend web
    bind    *:80
    log     global
    mode    http
    default_backend webservers

backend webservers
    balance roundrobin
    server web01 192.168.1.171:80 check port 80 inter 3s rise 2 fall 3 maxconn 2000 weight 1
    server web02 192.168.1.172:80 check port 80 inter 3s rise 2 fall 3 maxconn 2000 weight 1
1
2
3
4
5
haproxy:
    frontend:			# 定义前端   对外提供什么端口
    backend:			# 定义后端   集群资源池中具体有多少节点
    use_backend:		# 关联前端和后端的  类似于nginx中的proxy_pass (基于条件的方式来进行调度)
    default_backend:		# 关联前端和后端的，默认所有的请求都调度

2.2 haproxy 配置参数

2.2.1 global 配置参数
1
2
3
4
5
6
7
8
9
10
11
// Global settings 全局配置,用于设定全局配置参数
    daemon                                # 以守护进程模式运行目录
    chroot /var/lib/haproxy               # 锁定 haproxy 进程用户身份(如果有入侵行为,也只能入侵它的根目录,无法对系统造成损坏)
    user haproxy                          # 运行 haproxy 进程用户身份
    group haproxy                         # 运行 haproxy 进程用户组身份
    maxconn 4000                          # 设定每个 haproxy 进程所接受的最大并发连接数(官方给的是4000,理论上这个值太小)
    nbthread <number>                     # 指定启动haproxy线程数量,默认启动一个线程,不允许和nbproc同时使用
    log 127.0.0.1 local2                  # 日志记录通过本地rsyslog的local2设备写入
    stats socket /var/lib/haproxy/stats   # 基于socket通信,可实现动态变更配置(非常有用)
    spread-checks <0..50, in percent>     # 在haproxy后端有众多节点时,如同时进行健康检查,则会对haproxy造成较大性能影响;此选项将其检查时间间隔长度上增加或减少一定随机时间
                                            官方建议2-5(20%-50%)之间;如后端主机较多(比如1000台甚至更多)能够避免同时并发对后端主机check时,减少对haproxy的性能影响
2.2.2 default 段参数
  • defaults 段用于为所有其它配置段提供默认参数
2.2.2.1 option 参数
1
2
3
4
// option httplog: 用来记录日志,其通常包含但不限于HTTP请求、连接计时器、会话状态、连接数、铺货的首部及cookie、"frontend"、"backend"等信息
// option dontlognull: 不记录健康检查的日志信息
// option redispatch: 当找不到cookie对应的服务器时,重新分配新的节点给客户端
// option forwardfor: 传递客户端真实IP
2.2.2.2 timeout 参数
1
2
3
4
5
6
7
8
// timeout queue 1m: 当请求超过最大并发连接数,多余请求会进入队列,那该请求在等待多长时间则超时
// timeout connect 10s: haproxy 与后端服务器连接超时时间(内网环境建议1-3s)
// timeout client 1m: 定义客户端与haproxy连接后,数据传输完毕,不在有数据传输,即非活动连接的超时时间
// timeout server 1m: 定义haproxy与后端应用服务器的非活动连接超时时间
// timeout check 10s: 健康检测的时间的最大超时时间
// timeout http-request 30s: 客户端发送http请求的超时时间
// timeout http-keep-alive 60s: http请求连接建立的最大超时时间
// timeout maxconn 3000: 最大并发连接数(不可超过global)
2.2.3 haproxy proxies 配置
2.2.3.1 mode 参数
1
2
3
4
// mode 概念: 设置 haproxy 实例运行的协议
// mode 语法: mode { tcp|http }
    tcp: 实例运行于TCP模式,不对7层报文做任何检查;通常用于ssl、ssh、mysql等应用
    http: 实例运行于http模式,客户端请求服务端,服务端重新封装请求报文,请求后端真实节点
2.2.3.2 bind 参数
1
2
3
4
5
// bind 概念: 设置haproxy实例运行的端口
// bind语法: bind [<address>]:<port_range> [,...] interface <interface>
    <address>: 可选选项,其可以为主机名、IPv4地址、IPv6地址或*; 将其指定为 * 或 0.0.0.0 时,将监听当前系统的所有IPv4地址
    <port_range>: 可以是一个特定的TCP端口,也可是一个端口范围,如 8080-9090
    <interface>: 指定物理接口名称,仅能在Linux系统上使用; 其不能使用接口别名,只有管理有权限指定绑定的物理接口
2.2.3.3 maxconn 参数
1
2
3
4
// maxconn 概念: 设定一个前端的最大并发连接数,对于大型站点来说,应该尽可能提高此值,从而避免haproxy无法应答用户请求。当然,此值最大值不能超出global段中的定义。
// maxconn 注意: haproxy会为每个连接维持2个缓冲,每个缓冲的大小为8KB,再加上其它的数据,每个连接将大约占用17KB的RAM空间。这意味着经过适当优化后,1GB的可用RAM空间将能维护40000-50000并发连接
// maxconn 语法: maxconn <conns>
    <conns>: 如果为<conns>指定了一个过大值,极端场景下,其最终占据的空间可能会超出当前主机的可用内存,这可能会带来意想不到的结果；因此,将其设定了一个系统可接受值
2.2.4 haproxy server 参数
  • 为后端声明一个server节点信息。因此,不能用于defaults和frontend区段
  • server 语法: server <name> <address>[:port] [param*]
    • <name>: 为此服务器指定标识名称,会出现在日志文件中
    • <address>: 填写节点的IPv4地址，也支持使用可解析的主机名称
    • [:port]: 指定将连接所发往节点的目标端口,如未设定，则使用客户端请求的端口
    • [param*]: 为此服务器设定的一系列参数；其可用的参数非常多，下面仅说明几个常用的参数
      • backup: 在负载均衡场景中,所有的正常server均不可用时,此backup节点则会顶替提供服务
      • check: 对此server进行TCP的健康状态检查
      • inter DELAY: 设定健康状态检查的时间间隔,单位为毫秒,默认为2000毫秒
      • rise COUNT: 设置离线状态转换至正常状态需要成功检查的次数
      • fall COUNT: 设置正常状态节点转换为不可用状态，需要检查的次数
      • maxconn MAXCONN: 指定此服务器接受的最大并发连接数
      • maxqueue MAXQUEUE: 设定请求队列的最大长度
      • weight WEIGHT: 服务器节点权重,默认为1,最大值为256。0表示不参与负载均衡

3.0 配置场景

3.1 haproxy 子配置管理

  • 当业务众多时，所有配置将在”haproxy.cfg”一个配置文件中，维护起来非常麻烦。可将其拆分成不同的业务的子配置文件，从而方便维护。
主配置文件
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
# cat /data/apps/haproxy/conf/haproxy.cfg
global
    maxconn 100000
    user haproxy
    group haproxy
    daemon
    log	127.0.0.1 local2 info
    pidfile /data/apps/haproxy/haproxy.pid
    stats socket /data/apps/haproxy/haproxy.sock mode 600 level admin
    chroot  /data/apps/haproxy

defaults
    mode    http
    log     global
    option  httplog
    option  dontlognull
    option  http-server-close
    option  forwardfor
    option  redispatch
    option  http-keep-alive
    retries 3
    timeout http-request 10s
    timeout queue 1m
    timeout connect 10s
    timeout client 1m
    timeout server 1m
    timeout http-keep-alive 10s
    timeout check 10s
    maxconn 100000
子配置文件
1
2
3
4
5
6
7
8
9
10
11
12
// 众多子配置文件可以以单独的的配置文件形式存在
# mkdir /data/apps/haproxy/conf/conf.d                # 目录名称自定义即可
# cat /data/apps/haproxy/conf/conf.d/web.ink8s.com.cfg
frontend web
    bind    *:8080
    mode    http
    use_backend app_servers

backend app_servers
    balance roundrobin
    server web01 192.168.1.171:80 check port 80 inter 3s rise 2 fall 3 maxconn 2000 weight 1
    server web02 192.168.1.172:80 check port 80 inter 3s rise 2 fall 3 maxconn 2000 weight 1
启动项修改
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
# cat /usr/lib/systemd/system/haproxy.service
[Unit]
Description=HAProxy Load Balancer
After=syslog.target network.target

[Service]
Type=notify
Environment="CONFIG=/data/apps/haproxy/conf/haproxy.cfg" "PIDFILE=/data/apps/haproxy/haproxy.pid"
Environment="CONFIG_D=/data/apps/haproxy/conf/conf.d/"
ExecStartPre=/data/apps/haproxy/sbin/haproxy -f $CONFIG -f $CONFIG_D -c -q $OPTIONS
ExecStart=/data/apps/haproxy/sbin/haproxy -Ws -f $CONFIG -f $CONFIG_D -p $PIDFILE $OPTIONS
ExecReload=/bin/kill -USR2 $MAINPID

[Install]
WantedBy=multi-user.target

# systemctl daemon-reload
# systemctl restart haproxy.service
# netstat -nlput

3.2 haproxy 状态检测配置

  • haproxy 有统计报告功能，可以让使用者通过 web 页面概览后端服务器的概况，甚至更改它们的状态
状态页配置
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
# cat /data/apps/haproxy/conf/conf.d/stats.ink8s.com.cfg 
listen  stats.ink8s.com.cfg
    mode        http
    bind        *:9999
    stats       enable
    stats       refresh 30s
    stats       hide-version
    stats       uri /haproxy?stats
    stats       realm "HAProxy stats"
    stats       auth admin:ink8s.com
    stats       admin if TRUE
    log         global

// 登录状态页面,可以给IP加解析访问
http://stats.ink8s.com:9999/haproxy?stats
    USER: admin
    PASS: ink8s.com

upload successful

3.3 haproxy 动态上线与下线

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
# cat /data/apps/haproxy/conf/haproxy.cfg
global
    maxconn 100000
    user haproxy
    group haproxy
    daemon
    log	127.0.0.1 local2 info
    pidfile /data/apps/haproxy/haproxy.pid
    stats socket /data/apps/haproxy/stats level admin		# 修改此行配置
    chroot  /data/apps/haproxy

defaults
    mode    http
    log     global
    option  httplog
    option  dontlognull
    option  http-server-close
    option  forwardfor
    option  redispatch
    option  http-keep-alive
    retries 3
    timeout http-request 10s
    timeout queue 1m
    timeout connect 10s
    timeout client 1m
    timeout server 1m
    timeout http-keep-alive 10s
    timeout check 10s
    maxconn 100000

# systemctl restart haproxy
# echo "show info" | socat stdio "/data/apps/haproxy/stats"            		      # web 页面看到的全部在这里能看到
# echo "disable server app_servers/web01" | socat stdio "/data/apps/haproxy/stats"    # 下线节点
# echo "enable server app_servers/web01" | socat stdio "/data/apps/haproxy/stats"     # 上线节点

4.0 调度算法

  • haproxy 根据后端服务器的负载，或其它的计算的标准，判断挑选哪台RS进行请求处理
  • haproxy 调度算法语法，可用于 defaults、listen、backend

4.1 roundrobin

  • roundrobin 基于权重进行轮询，保持均匀分布，这是最平衡、最公平的算法
  • 此算法是动态的，这表示其权重可以在运行时进行调整，不过在设计上，每个后端服务器仅能最多接受4128个连接
示例
1
2
3
4
5
6
7
# cat app.ink8s.com.cfg 
...

backend app_servers
    balance roundrobin
    server web01 192.168.1.171:80 check
    server web02 192.168.1.172:80 check
4.1.1 动态调整
  • 通过 socat 命令动态调整权重，将web01节点的权重调整为3
1
2
# echo "get weight app_servers/web01" | socat stdio /data/apps/haproxy/stats        # 查看
# echo "set weight app_servers/web01 3" | socat stdio /data/apps/haproxy/stats      # 设置

upload successful

4.1.2 静态 static-rr
  • static-rr 加权轮询调度算法，根据服务器的硬件情况、以及处理能力，为每台服务器分配不同的权值，使其能够接受相应权值的服务器请求
  • 此算法是静态的，这表示其权重不可用在运行时进行调整
示例
1
2
3
4
5
6
7
# cat app.ink8s.com.cfg 
...

backend app_servers
    balance static-rr
    server web01 192.168.1.171:80 check
    server web02 192.168.1.172:80 check

4.2 leastconn

  • leastconn 新的连接请求被派发至具有最少连接数目的后端服务器
  • 此算法是动态的，可以在运行时调整其权重
示例
1
2
3
4
5
6
7
# cat app.ink8s.com.cfg 
...

backend app_servers
    balance leastconn
    server web01 192.168.1.171:80 check
    server web02 192.168.1.172:80 check

4.3 source

  • source 源地址hash调度算法，将请求的源地址进行 hash 运算，得到一个具体的数值，同时对后端服务器进行编号，按照运算结果将请求分发到对应编号的服务器上
  • 这可对不同源 IP 的访问进行负载分发，对同一客户端 IP 的请求始终被派发至某特定的服务器
  • 注意: 如果服务器宕机或新添加了服务器，许多客户端的请求可能会被派发至于此前请求不同的服务器；不过也可以使用 hash-type 修改此特性
示例
1
2
3
4
5
6
7
# cat app.ink8s.com.cfg 
...

backend app_servers
    balance source
    server web01 192.168.1.171:80 check
    server web02 192.168.1.172:80 check
示例
1
2
3
4
5
6
7
8
9
# cat app.ink8s.com.cfg 
// 一致性 hash 方式: 相同的IP，保持相同的会话
...

backend app_servers
    balance source
    hash-type consistent
    server web01 192.168.1.171:80 check
    server web02 192.168.1.172:80 check

4.4 rui

  • rui 基于对用户请求的 rui 做 hash 并将请求转发到后端指定服务器
  • 理解: 同一个节点访问不同的 rui 可能会被调度到不同的后端服务器处理，但是不同的节点访问相同的 rui 则会被调度到同一台服务器处理，因为基于 rui 调度是在服务端完成的而非客户端，这种调度算法多用在缓存场景，能有效提高命中率
  • 注意: 此算法仅应用于 HTTP 后端服务器场景；其默认为静态算法，不过也可以使用 hash-type 修改此特性
示例
1
2
3
4
5
6
7
8
# cat app.ink8s.com.cfg 
...

backend app_servers
    balance uri
    hash-type consistent
    server web01 192.168.1.171:80 check
    server web02 192.168.1.172:80 check

5.0 ACL

  • ACL 主要对请求报文和响应报文进行匹配和过滤。其配置法则通常分为两步:
    • 首先定义 ACL 规则，即定义一个测试条件，条件可以是请求报文中的源地址、源端口、目标地址、目标端口、请求方法、RUL、文件后缀等
    • 然后再条件得到满足时执行相应的动作；比如阻止请求、又或者转发请求至某特定的后端

5.1 ACL 定义方法

1
2
3
4
5
6
// ACL 语法
acl <aclname> <criterion> [flags] [operator] [<value>] ...
# acl 名称     条件        条件标记位 具体操作符   操作对象类型

// ACL 示例: 如果请求的User-Agent中包含Chrome且忽略大小写，规则则成立
acl my_chrome hdr(User-Agent) -m sub -i Chrom
  • ACL 名称，可使用字母 数字 : . - _ 区分字符大小写
  • <criterion> 比较的标准和条件
    • [:port]: 指定将连接所发往节点的目标端口,如未设定，则使用客户端请求的端口
    • [param*]: 为此服务器设定的一系列参数；其可用的参数非常多，下面仅说明几个常用的参数
  • <flags> 条件标记
    • -i 不区分大小写
    • -m 使用 pattern 匹配方法
    • -n 不做 DNS 解析
    • -u 禁止 acl 重名，否则多个同名的 ACL 为或的关系
  • [operator] 条件筛选
    • -eq、-ne、-ge、le、gt、lt
    • (-m str) 字符串必须完全匹配模式
    • (-m sub) 在提取的字符串中查找，如果其中任何一个被发现，ACL将匹配
    • (-m beg) 在提取的字符串首部中查找，如果其中任何一个被发现，ACL 将匹配
    • (-m end) 在提取的字符串尾部中查找，如果其中任何一个匹配，则 ACL 进行匹配
    • (-m dir) 提取用斜线 / 分隔的字符串，如果其中任何一个匹配，则 ACL 进行匹配
    • (-m dom) 提取用点 . 分隔字符串，如果其中任何一个匹配，则 ACL 进行匹配
  • <value> 条件目标
    • 布尔值: 比如 false，true
    • 整数或整数范围，比如用于匹配端口范围: 1024 ~ 32768
    • IP 地址或 IP 范围: 192.168.0.1 ~ 192.168.0.1/24
    • 字符串: 比如匹配 URL 路径，/static 、/images
5.1.1 src
  • src <string> 用于测试请求的源地址是否与 <string> 中定义的源地址一致
1
2
# 示例: 匹配请求源地址是 10.0.0.1、或 192.168.0.0/24 网段
acl deny_src_ip src 10.0.0.1 192.168.0.0/24
5.1.2 path_beg
  • path_beg <string> 用于测试请求的 URL 是否以 <string> 指定的模式开头
1
2
# 示例: 测试 URL 是否以 /static 、 /images 、 /javascript 开头
acl url_static path beg -i /static /images /javascript
5.1.3 hdr_beg
  • hdr_beg <string> 用于测试请求报文的指定首部的开头部分是否符合<string>指定的模式
1
2
# 示例: 测试请求的host开头是否为，img、video、static
acl host_static hdr_beg(host) -i img. video. static.
5.1.4 hdr_end
  • hdr_end 用于测试请求报文的指定首部的结尾部分是否符合指定的模式
1
2
# 示例: 测试请求的host的结尾是否为 .com .net .cn
acl host_static hdr_beg(host) -i .com .net .cn
5.1.5 hdr_dom
  • hdr_dom(host) 用于测试请求的 host 名称
1
2
3
4
5
# 示例: 测试请求的 host 是否为 web.ink8s.com
acl my_www_host hdr_dom(host) -i web.ink8s.com
acl my_blog_host hdr_dom(host) -i blog.ink8s.com
use_backend www_cluster if my_www_host
use_backend blog_cluster if my_blog_host
5.1.6 hdr
  • hdr <string> 用于测试请求头部首部指定内容
1
2
3
# 示例: 测试请求的 User-Agent 是否为 Chrome
acl my_chrome hdr(User_Agent) -m sub -i Chrome
    -m sub -i Chrome            # -m sub 去搜索 -i 中是否有 Chrome，有则匹配生效

5.2 ACL 逻辑关系

  • 多个 acl 作为条件的逻辑关系
    • 与: 默认，如 if acl1 acl2 表示满足第一个 acl 的同时要满足第二 acl 此条件才为真
    • 或: 使用 or 或 || 表示，如 if acl1 || acl2 表示满足 acl1 或 acl2 中的任意一个此条件就为真
    • 非: 使用 ! 表示，如 if ! acl1 表示对该 ACL 取相反的操作，意思就是非该 ACL 此条件为真

5.3 ACL 访问控制

5.3.1 基于 HTTP 访问控制
  • 配置7层的请求访问控制；只能用在 mode http 中
  • http-request { allow | deny } [ { if | unless } <condition> ]
  • 示例: 仅允许 10.10.10.100 访问 haproxy 的 stats
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
# cat /data/apps/haproxy/conf/conf.d/stats.ink8s.com.cfg
listen  stats.ink8s.com.cfg
    mode        http
    bind        *:9999
    stats       enable
    stats       refresh 30s
    stats       hide-version
    stats       uri /haproxy?stats
    stats       realm "HAProxy stats"
    stats       auth admin:ink8s.com
    stats       admin if TRUE
    log         global

    # 基于 http 访问控制 来源用户非 172.16.1.100 或 使用 curl 则拒绝
    acl source_ip src 172.16.1.100
    acl deny_curl hdr(User-Agent) -m sub -i curl
    http-request deny if !source_ip || deny_curl
微信

加微信,入技术群

微信

扫一扫，分享到微信

tag:

    缺失模块。
    1、请确保node版本大于6.2
    2、在博客根目录（注意不是yilia-plus根目录）执行以下命令：
    npm i hexo-generator-json-content --save

    3、在根目录_config.yml里添加配置： 

      jsonContent:
    meta: false
    pages: false
    posts:
      title: true
      date: true
      path: true
      text: false
      raw: false
      content: false
      slug: false
      updated: false
      comments: false
      link: false
      permalink: false
      excerpt: false
      categories: false
      tags: true

运维技术面：
1. Linux 基础、脚本、服务部署、虚拟化
2. Linux 自动化、服务器硬件
3. Kubernetes、kube 服务部署
4. Windows 客户端,服务端的便捷应用

微信： wnn_chat

写博客的动力,源自于个人爱好!