LACP成员状态和流量分配要分开检查
聚合成功只是排障起点。要检查两端当前实际转发的成员集合;物理接口up并不能证明它在聚合中承载普通数据。随后检查发送设备采用的分配策略,反方向也要单独查看。
基于哈希的转发会把多条流映射到成员链路,不同流速可能形成负载不均。这一机制见信息性文档 RFC 7424 第3节,但不能据此推定某款交换机具有自动搬移大流的能力。
单连接吞吐测试不能代表生产流量如何使用整个聚合。采用常见的逐流转发时,增加物理成员数不会自动提高这条连接的吞吐。平台特性和分类方式各异,应记录设备实际行为。
聚合口利用率70%,单个成员仍可能过载
以下是合成的单方向持续算例:四条独立业务流估算线上需求分别为6、5、2、1 Gbps,假设两条10 Gbps成员都正常转发。
| 成员 | 分到的流 | 线上需求 | 相对成员线速 |
|---|---|---|---|
| A | 6+5 Gbps | 11 Gbps | 110% |
| B | 2+1 Gbps | 3 Gbps | 30% |
| 合计 | 四条流 | 14 Gbps | 20G总容量的70% |
11G是向A提出的需求,不是说万兆接口真能发出11G。持续超出的部分会排队、被丢弃,或让应用与传输协议降低发送速率,因此实际计数器看到的发送量可能更低。具体损失取决于缓存、调度、时序和协议响应,表格不预测丢包率。
B在这个例子里是轻载,不是真正空闲。流数量相同也不足以说明均衡:每边两条流,字节需求仍可能是11G对3G。若把5G流移到B,结果会是6G和8G;这只是算术演示,不是某项配置命令或哈希结果的保证。
交换机超售比指南解释已安装的线速容量。应把它与实测需求和成员流量落点分开判断。
按五步收集证据
- 记录活动转发成员。保存两端成员状态、协商速率、对端身份和相关配置。归因于哈希之前,先排除挂起、备用、individual或不兼容成员。根据设备文档使用命令;Cisco EtherChannel指南可作为检查入口示例。
- 在相同窗口测成员速率。分别记录每条成员的发送、接收字节增量、时间戳和计数器口径。速率按“8×字节增量÷秒数”计算,并处理复位和回绕;不能把两个方向相加后除以单向容量。
- 关联拥塞证据。在同一时间窗口收集出口丢弃、队列占用或设备支持的水位,以及应用症状。错误计数或光告警应进入其他方向的排查。五分钟平均值可能掩盖短时过载,更细采样也未必捕捉所有微突发。
- 找出主要流和哈希输入。使用流量遥测或经过批准的报文采样,整理端点、协议、端口、方向和速率估计。隧道环境应核实设备可见的内外层字段;采样记录是估计,也可能遗漏短时流量。
- 在可回退条件下复现。对比单连接和多条独立连接,同时观察两条成员;保持端点、方向和时长可比较。在实验环境或维护窗口测试变更,并对比成员丢弃和应用完成时间。
让变更与证据相匹配
若成员没有转发,先修复成员资格。如果成员均正常但大流碰撞,再评估平台支持的分配字段是否适合实际流量。全局策略可能影响其他聚合并改变现有流量,应准备回退,并关注对乱序敏感的应用。“增加哈希字段”是待验证的假设,不是通用修复。
错开作业或限速可降低同时到达的需求。应用支持时可对比多连接,但仍可能碰撞。增加成员可改善总容量和流量落点,却不一定解决超过单条成员线速的大流。更高速率成员可能更直接,但须确认交换机、对端、光模块和拓扑均支持。
可用带宽与传输时间计算器核对任务窗口;硬件变更前查看SFP/QSFP兼容性工具和厂商支持列表。网络容量预测工具可跟踪增长,但不能校验哈希分布。
用计算器复核聚合容量
交换机上联计算器只建模聚合需求。要复现14G算例,可输入:
活跃接入端口14,单端口1000 Mbps忙时利用率100%,并发活跃比例100%,协议/突发余量0%每条上联10000 Mbps,实际转发上联2,目标利用率80%峰值活跃端口14,增长0%,额外突发余量0%,故障上联114端口是等效需求代理,并非四条高速流的真实接入拓扑。该输入对应14 Gbps需求、20 Gbps聚合容量、16 Gbps目标可用容量、2 Gbps目标余量、70%需求利用率和0.7:1线速超售比。80%是本例规划目标,不是标准。应显式填写工程字段,因为页面默认值可能改变情景。计算器不模拟成员哈希、队列或丢包。
即使解决了成员不均,N-1仍可能不满足
假设故障后剩余一条10G仍能转发,需求不变时14÷10=140%;按本例80%目标,剩余目标容量为8G,目标余量为−6G。这是容量情景,不是故障切换保证。还要检查最低成员数和实际剩余路径;Cisco的min-links机制可在成员数低于要求时使port-channel失效。
N-1指南展开故障容量校核。接入交换机规划请另看48口2×10G指南;它的接入拓扑不同于本例服务器流量。交换机超售专题整理了相关学习顺序。
常见问题
LACP会保证每条成员带宽相等吗?
不会。需要核实活动成员和实测分布;速率相同不代表需求相同。
单条流能用满20G吗?
常见逐流转发下不要这样假设。应检查平台实际转发行为及明确支持的其他机制。
聚合利用率70%就安全吗?
总平均值不能回答这个问题。还要检查最忙成员、队列丢弃、突发和故障要求。
修改哈希就能修复吗?
它可能改变流量落点。先确认所选字段在真实业务中存在差异,再测量变更结果。
应该再加一条10G成员吗?
先比较流量落点、最大单流和N-1需求。扩大聚合容量与提高单成员速率解决的是不同限制。
下次上联变更评审时,附上同一窗口的成员状态、成员流量与丢弃、聚合需求复核和故障后的转发条件。先证明瓶颈,再决定调整分配、作业时间还是链路容量。