15%

全场主机优惠15%

测试技能,享折扣

使用代码:

Skills
开始使用
23.10.2024

专用服务器负载均衡:架构、算法与实际实施

负载均衡是将传入的网络流量分配到多台服务器的过程,确保没有单个节点成为瓶颈,从而保证稳定的性能、容错能力和水平可扩展性。在专用服务器环境中,负载均衡器位于服务器池前端,根据服务器健康状态、活跃连接数、响应延迟或自定义策略规则实时做出路由决策。

对于运行延迟敏感型工作负载的任何基础设施——电子商务平台、SaaS应用、高流量API或媒体流——负载均衡不是可选项,而是将脆弱的单点故障架构与生产级高可用系统区分开来的架构基础。

负载均衡的实际工作原理:技术流程

理解负载均衡需要了解完整的请求生命周期,而不仅仅是”分配流量”这一抽象概念。

请求路由管道

  1. DNS解析将客户端指向负载均衡器的IP地址(或任播设置中的虚拟IP),而非任何单台服务器。
  2. 负载均衡器在OSI模型的第4层(TCP/UDP)或第7层(HTTP/HTTPS)接收连接。
  3. 均衡器评估其路由表,应用配置的算法,并检查每个后端节点的当前健康状态。
  4. 请求被转发到所选后端服务器。根据模式(NAT、直接服务器返回或IP隧道),响应路径可能经过或不经过均衡器返回。
  5. 健康检查守护进程并行运行,通过TCP ping、HTTP状态码或自定义脚本持续探测每个后端。故障节点在数秒内从池中移除。

第4层与第7层负载均衡

这一区别是您将做出的最重要的架构决策之一。

特性第4层(传输层)第7层(应用层)
操作对象TCP/UDP数据包HTTP/HTTPS请求、头部、Cookie
路由逻辑IP地址+端口URL路径、主机名、Cookie值、头部内容
SSL终止否(透传)是(从后端卸载TLS)
基于内容的路由不支持完全支持(对/api//static/进行差异化路由)
性能开销极低中等(需要深度包检测)
典型使用场景原始TCP服务、数据库、游戏服务器Web应用、REST API、微服务
示例软件HAProxy(TCP模式)、LVS/IPVSNGINX、HAProxy(HTTP模式)、Traefik、Envoy
会话持久性源IP哈希Cookie注入、基于头部的亲和性

对于托管在专用服务器上的大多数Web应用,第7层是正确的选择,因为它支持智能路由、SSL卸载以及基于HTTP响应码(而非原始TCP连接)的精细化健康检查。

负载均衡算法:选择正确的策略

算法决定哪个后端服务器接收每个传入请求。为工作负载特征选择错误的算法是导致资源利用不均的常见原因。

轮询

请求按顺序分配到所有健康节点。当所有服务器具有相同硬件规格且请求处理时间大致相等时,此方法简单有效。

缺陷:如果一个请求需要10秒而下一个只需10毫秒,轮询无法考虑这种差异。慢速后端会积累队列,而其他服务器则处于空闲状态。

加权轮询

每台服务器被分配一个数值权重。权重为3的服务器接收的请求数是权重为1的服务器的三倍。当池中包含异构硬件时使用此方法——例如,混合使用32核节点和16核节点。

最少连接

均衡器跟踪每个后端的活跃连接数,并将新请求路由到开放连接最少的服务器。这是请求持续时间可变的工作负载(如数据库支持的Web应用)最合适的默认算法。

最短响应时间

最少连接的扩展版本,同时考虑测量的后端延迟。活跃连接数与平均响应时间组合最低的服务器获胜。这需要均衡器维护延迟指标,增加少量开销,但在混合负载下显著提升分配质量。

IP哈希(源亲和性)

对客户端源IP地址进行哈希以确定性地选择后端。只要池成员不变,同一客户端始终到达同一服务器。这提供了一种原始的会话持久性形式,无需共享会话存储。

关键边缘情况:如果大量流量来自企业NAT或移动运营商网关,数千用户可能共享同一源IP,导致严重失衡。在生产环境中依赖IP哈希之前,务必审计流量分布情况。

随机两选一(二选一原则)

均衡器随机选择两个候选服务器,并路由到活跃连接较少的那个。这种概率方法在大型池(50+节点)中扩展性极佳,因为它避免了全局最少连接扫描的协调开销,同时避免了纯随机选择的最坏情况失衡。

会话持久性:当无状态不是选项时

许多遗留应用在服务器本地存储会话状态(例如,写入磁盘的PHP $_SESSION)。在这些情况下,将返回用户路由到不同后端会导致会话丢失,表现为意外登出或购物车数据丢失。

负载均衡器通过粘性会话解决此问题,实现方式包括:

  • Cookie注入:均衡器在HTTP响应中注入Cookie(例如SERVERID=node2)。该客户端的后续请求携带此Cookie,均衡器读取它以路由回同一节点。
  • 源IP亲和性:如上所述,可靠性较低,但不需要应用程序支持Cookie。

正确的长期解决方案是将会话存储外部化到共享后端——Redis或Memcached——使任何后端节点都能为任何用户提供服务。这完全消除了对粘性会话的依赖,使池完全无状态,从而大幅简化扩展和故障转移。如果您正在构建新应用,从第一天起就为无状态后端进行设计。

健康检查:自动故障转移背后的机制

负载均衡器的可靠性取决于其健康检查配置。配置错误的健康检查是现实中负载均衡器事故的重要原因。

健康检查类型

  • TCP检查:向后端端口打开TCP连接。确认进程正在监听,但不验证应用层的正确性。
  • HTTP/HTTPS检查:向定义的端点(例如/health)发送HTTP请求,并期望特定状态码(通常为200 OK)。这是Web应用可接受的最低标准。
  • 自定义脚本检查:执行可查询数据库、检查磁盘空间或验证应用状态的任意脚本。健康返回0,不健康返回非零值。

关键配置参数

  • interval检查运行频率(例如每5秒一次)。
  • timeout在将检查标记为失败之前等待响应的时间。
  • rise将节点标记为健康所需的连续成功检查次数(防止抖动)。
  • fall将节点从池中移除所需的连续失败检查次数。

HAProxy的常见生产配置如下:

backend web_servers
    balance leastconn
    option httpchk GET /health HTTP/1.1rnHost: example.com
    http-check expect status 200
    default-server inter 5s fall 3 rise 2 slowstart 60s
    server node1 192.168.1.10:80 check weight 10
    server node2 192.168.1.11:80 check weight 10
    server node3 192.168.1.12:80 check weight 5

slowstart 60s指令特别有价值:它在60秒内逐步将流量增加到新恢复的节点,而不是立即发送全量负载,防止后端在维护后重新上线时出现惊群问题。

SSL终止与TLS卸载

处理TLS加密和解密在计算上代价高昂。在简单设置中,每台后端服务器独立执行此工作。在负载均衡器处进行SSL终止意味着均衡器解密传入的HTTPS流量,并通过受信任的内部网络将纯HTTP转发给后端。

优势:

  • 减少后端服务器的CPU负载,为应用逻辑释放计算资源。
  • 集中化证书管理——只需在均衡器上续期一个证书,而非在每个节点上分别操作。
  • 支持对请求内容进行第7层检查(加密透传时无法实现)。

安全注意事项:负载均衡器与后端之间的流量以未加密方式传输。当所有节点位于隔离的私有VLAN或专用管理网络时,这是可接受的。如果您的合规要求(PCI-DSS、HIPAA)要求端到端加密,请使用SSL重加密:均衡器终止面向客户端的TLS会话,并向每个后端建立新的TLS会话。这在保持完整加密的同时仍支持第7层路由。

将SSL终止与正确签发的SSL证书配合使用,可确保您的负载均衡基础设施同时满足性能和合规要求。

负载均衡器自身的高可用性

如果负载均衡器本身是单点故障,则整个架构的目的将落空。生产部署需要高可用负载均衡器对

基于VRRP/Keepalived的主备模式

两个负载均衡器节点共享一个虚拟IP(VIP)。主节点持有VIP并处理所有流量。备节点通过心跳监控主节点。如果主节点故障,keepalived触发VRRP故障转移,备节点在1-3秒内接管VIP。

# Install keepalived on both load balancer nodes (Debian/Ubuntu)
apt-get install keepalived

# /etc/keepalived/keepalived.conf on the MASTER node
vrrp_instance VI_1 {
    state MASTER
    interface eth0
    virtual_router_id 51
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass securepassword
    }
    virtual_ipaddress {
        203.0.113.10/24
    }
}

在备节点上,设置state BACKUPpriority 90。优先级较高的节点赢得VIP选举。

基于DNS轮询或任播的主主模式

两个负载均衡器节点同时主动处理流量。DNS返回多条A记录,将客户端分配到两个均衡器。这使吞吐量容量翻倍,但如果使用粘性会话,则需要仔细的状态同步。

对于专用服务器上的大规模部署,采用BGP任播路由的主主配置可提供最高吞吐量和地理冗余。

在负载均衡器层进行DDoS缓解

位于网络边缘的负载均衡器是在恶意请求到达应用服务器之前实施流量清洗和速率限制的天然位置。

连接速率限制(HAProxy)

frontend http_in
    bind *:80
    bind *:443 ssl crt /etc/haproxy/certs/
    stick-table type ip size 100k expire 30s store conn_rate(3s),http_req_rate(10s)
    tcp-request connection track-sc0 src
    tcp-request connection reject if { sc_conn_rate(0) gt 100 }
    http-request deny if { sc_http_req_rate(0) gt 300 }

此配置在粘性表中按源IP跟踪连接速率,并拒绝在3秒内超过100个新TCP连接或在10秒内超过300个HTTP请求的客户端——这些阈值可阻止大多数大容量HTTP洪水攻击,同时允许合法的突发流量。

SYN洪水防护

在负载均衡器节点的内核级别启用SYN Cookie,以在不耗尽连接表的情况下处理SYN洪水攻击:

sysctl -w net.ipv4.tcp_syncookies=1
sysctl -w net.ipv4.tcp_max_syn_backlog=4096
sysctl -w net.ipv4.tcp_synack_retries=2

通过将其添加到/etc/sysctl.conf使这些设置持久化。

NGINX作为第7层负载均衡器:生产配置

NGINX是HTTP负载均衡的广泛部署选项,尤其适用于需要与应用层功能紧密集成的场景。

upstream backend_pool {
    least_conn;
    keepalive 32;

    server 192.168.1.10:8080 weight=3 max_fails=3 fail_timeout=30s;
    server 192.168.1.11:8080 weight=3 max_fails=3 fail_timeout=30s;
    server 192.168.1.12:8080 weight=1 max_fails=3 fail_timeout=30s;
    server 192.168.1.13:8080 backup;
}

server {
    listen 443 ssl http2;
    server_name example.com;

    ssl_certificate     /etc/nginx/ssl/example.com.crt;
    ssl_certificate_key /etc/nginx/ssl/example.com.key;
    ssl_protocols       TLSv1.2 TLSv1.3;
    ssl_ciphers         HIGH:!aNULL:!MD5;

    location / {
        proxy_pass         http://backend_pool;
        proxy_http_version 1.1;
        proxy_set_header   Connection "";
        proxy_set_header   Host $host;
        proxy_set_header   X-Real-IP $remote_addr;
        proxy_set_header   X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_set_header   X-Forwarded-Proto $scheme;
        proxy_connect_timeout 5s;
        proxy_read_timeout    60s;
        proxy_next_upstream   error timeout http_502 http_503;
    }
}

此配置的关键细节:

  • keepalive 32维护到后端的持久连接,消除高频请求的TCP握手开销。
  • proxy_next_upstream自动在下一个健康后端上重试失败的请求。
  • backup指令将node4指定为备用节点,仅在所有主节点不可用时才接收流量。
  • X-Forwarded-For确保后端应用看到真实的客户端IP,而非均衡器的IP。

负载均衡器软件选项对比

软件层级性能SSL终止主动健康检查配置难易度最适用场景
HAProxyL4 + L7极高是(高级)中等高流量TCP/HTTP、细粒度ACL
NGINXL7(stream模块支持L4)非常高基础(高级功能需NGINX Plus)简单Web/API代理、集成Web服务器
TraefikL7是(自动Let’s Encrypt)非常简单容器化环境、Kubernetes
EnvoyL7非常高是(gRPC健康检查)复杂服务网格、微服务
LVS/IPVSL4内核级,最高通过Keepalived复杂原始吞吐量、内核旁路场景
AWS ALB/NLBL7/L4托管简单(托管)云原生、无需自行管理

对于自管理的专用服务器,HAProxy和NGINX涵盖了绝大多数生产使用场景。由于Traefik具备自动服务发现功能,它是Docker Swarm或Kubernetes工作负载的实用之选。

真实架构:峰值负载下的电子商务平台

考虑一个具体场景:一个电子商务平台在促销活动期间预计有50,000个并发用户。

基础设施布局:

  • 2个HAProxy节点以主备配置共享VIP(通过Keepalived)
  • 6个运行Web层的应用服务器
  • 2个专用数据库服务器(不在负载均衡器池中——它们使用自己的复制机制)
  • 1个Redis集群用于共享会话存储(消除粘性会话依赖)
  • 用于用户上传资产的共享NFS或对象存储

流量流程:

  1. 客户端DNS解析到主HAProxy节点持有的VIP。
  2. HAProxy应用leastconn算法,将请求分配到6台应用服务器。
  3. 每台应用服务器从Redis读写会话数据——无需会话亲和性。
  4. 静态资产通过CDN直接从对象存储提供,完全绕过负载均衡器,将其负载降低60-70%。
  5. 如果某台应用服务器的健康检查连续三次失败,HAProxy在15秒内将其从池中移除。其余5台服务器吸收其流量。
  6. 如果主HAProxy节点故障,Keepalived在2秒内将VIP转移到备节点——对所有客户端透明。

此架构在促销峰值期间无需任何单一组件成为瓶颈,并通过向HAProxy池添加更多应用服务器实现零停机水平扩展。

如果您在负载均衡器后运行GPU加速推理工作负载——例如,分配ML模型服务请求——同样的原则适用,但后端健康检查应验证GPU可用性和VRAM余量,而不仅仅是HTTP可达性。GPU托管基础设施从最短响应时间均衡中受益显著,因为不同请求类型的推理延迟差异较大。

监控负载均衡基础设施

在没有可观测性的情况下部署负载均衡器等于盲目运营。以下是重要的监控指标:

  • 每个后端的活跃连接数:揭示分配算法中的不均衡或粘性会话集中问题。
  • 每个后端的请求速率(RPS):应与服务器权重成比例。
  • 后端响应时间(p50、p95、p99):某个节点的p99延迟峰值在健康检查触发之前就能指示问题。
  • 健康检查失败率:在健康和不健康之间振荡(抖动)的后端表明存在需要调查的底层不稳定性。
  • 连接队列深度:如果均衡器队列增长,说明后端池对当前流量规模不足。
  • SSL握手速率:高速率表明可能存在TLS耗尽攻击或配置错误的客户端在积极重试。

HAProxy提供统计页面(在前端使用stats enable启用)和用于程序化查询的Unix套接字。通过haproxy_exporter将这些指标输入Prometheus,并在Grafana中可视化,构建完整的可观测性栈。

实用决策清单

在部署或修改负载均衡架构之前,使用此矩阵进行评估:

  • 有状态应用?在启用负载均衡之前,将会话存储迁移到Redis或Memcached。不要将粘性会话作为永久解决方案。
  • 需要TLS?在负载均衡器处终止SSL。确保后端网络隔离。通过SSL证书集中获取和管理证书。
  • 请求持续时间可变?使用leastconn,而非轮询。
  • 异构硬件?应用与服务器容量成比例的weight值。
  • 负载均衡器高可用?使用Keepalived/VRRP部署两个均衡器节点。切勿在生产环境中运行单个负载均衡器。
  • DDoS暴露?在内核和均衡器层实施连接速率限制和SYN Cookie保护。
  • 健康检查深度?对专用/health端点使用HTTP检查,验证数据库连接性,而非仅检查TCP端口可用性。
  • 扩展计划?向HAProxy或NGINX池添加新后端节点需要配置重载(haproxy -sf $(cat /var/run/haproxy.pid)用于零停机重载)——相应规划变更管理流程。
  • 监控?在上线之前(而非事故发生后)使用Prometheus导出器对HAProxy或NGINX进行监控。
  • 控制面板偏好?如果您希望在手动负载均衡器配置的同时进行基于GUI的服务器管理,请评估VPS控制面板用于各节点的管理任务。

常见问题

负载均衡器与反向代理有什么区别?

反向代理将客户端请求转发到一个或多个后端服务器,并将响应返回给客户端——它处理路由、缓存和SSL终止。负载均衡器是反向代理的一种特定类型,其主要功能是使用定义的算法将请求分配到多个后端。所有负载均衡器都是反向代理,但并非所有反向代理都执行负载均衡。

负载均衡能与单台专用服务器配合使用吗?

技术上可以——您可以在单台服务器前运行负载均衡器,用于SSL终止、缓存和速率限制。但容错和水平扩展的优势只有在两个或更多后端节点时才能实现。单服务器设置在负载均衡器后面是一种有效的过渡架构,使未来的扩展在操作上变得轻而易举。

负载均衡器如何处理WebSocket连接?

WebSocket需要持久的长连接TCP连接。第7层负载均衡器必须明确配置以处理HTTP升级握手,然后在WebSocket会话期间维护连接亲和性。在NGINX中,设置proxy_http_version 1.1proxy_set_header Upgrade $http_upgrade并配合proxy_set_header Connection "upgrade"。在HAProxy中,使用option http-server-close并配置适当的超时值(timeout tunnel 1h用于长连接)。

后端服务器故障时,正在处理的请求会怎样?

使用NGINX中的proxy_next_upstream或HAProxy中的retries,均衡器在第一次尝试时检测到连接错误或超时,并立即在下一个健康后端上重试请求。此重试对客户端透明。幂等请求(GET、HEAD)可以安全地自动重试。非幂等请求(POST、PUT)应谨慎重试——配置proxy_next_upstream以排除POST路由的http_500,避免重复处理支付或表单提交。

需要多少台后端服务器,负载均衡才能提供有意义的收益?

两台服务器提供即时故障转移能力,容量大约翻倍。三台或更多服务器提供有意义的统计分布,并允许滚动维护(将一个节点下线进行更新,同时其他节点吸收流量)。对于生产工作负载,三个节点是弹性池的实际最低要求——两个节点意味着单次故障使容量下降50%,在峰值负载下可能违反性能SLA。

15%

全场主机优惠15%

测试技能,享折扣

使用代码:

Skills
开始使用