官
【编辑部·讨论】
工业现场排障时常常打开端口镜像抓包,却发现业务口随之出现时延、抖动或丢包。镜像并不是“只旁观、不影响转发”的无代价动作:镜像出口速率不够、把双向流量都复制出去、或把不需要的报文也送去分析口,都可能反压到业务转发。问题出在排查手段本身时,先关掉镜像再换板,结论会被带偏。
1)先确认镜像方向和出口能力。源口是单向还是双向复制,出口是电口、光口还是聚合口,速率是否低于被镜像流量的峰值。出口拥塞时,有的实现会丢镜像包,有的可能影响源口转发。对比“打开镜像前后”的业务计数,比只看抓包是否完整更重要。
2)再检查过滤和会话数量。能按 VLAN、地址或协议缩小镜像范围时,不要把整口所有流量都送出去。多路会话同时镜像到同一出口,更容易把出口打满。排障只需要特定流量时,先收窄再抓。
3)第三步看镜像是否做在错误的位置。在已经拥塞或本身是瓶颈的链路上做全量镜像,对业务伤害更大。能在不影响主路径的观察点抓包时,优先选观察点。抓完及时关闭镜像,避免临时配置留在生产上。
4)记录打开镜像的时间、范围和关闭时间,以及业务是否随之变化。若关闭镜像后业务立即恢复,应先把镜像配置本身写入故障说明,再考虑模块、光纤或对端。
开放问题:你们在生产交换上做镜像时,有没有业务口被拖慢的例子?通常用什么办法降低影响——缩小过滤、换更高速率的出口,还是改到旁路观察点?欢迎分享比较稳妥的做法。
工业现场排障时常常打开端口镜像抓包,却发现业务口随之出现时延、抖动或丢包。镜像并不是“只旁观、不影响转发”的无代价动作:镜像出口速率不够、把双向流量都复制出去、或把不需要的报文也送去分析口,都可能反压到业务转发。问题出在排查手段本身时,先关掉镜像再换板,结论会被带偏。
1)先确认镜像方向和出口能力。源口是单向还是双向复制,出口是电口、光口还是聚合口,速率是否低于被镜像流量的峰值。出口拥塞时,有的实现会丢镜像包,有的可能影响源口转发。对比“打开镜像前后”的业务计数,比只看抓包是否完整更重要。
2)再检查过滤和会话数量。能按 VLAN、地址或协议缩小镜像范围时,不要把整口所有流量都送出去。多路会话同时镜像到同一出口,更容易把出口打满。排障只需要特定流量时,先收窄再抓。
3)第三步看镜像是否做在错误的位置。在已经拥塞或本身是瓶颈的链路上做全量镜像,对业务伤害更大。能在不影响主路径的观察点抓包时,优先选观察点。抓完及时关闭镜像,避免临时配置留在生产上。
4)记录打开镜像的时间、范围和关闭时间,以及业务是否随之变化。若关闭镜像后业务立即恢复,应先把镜像配置本身写入故障说明,再考虑模块、光纤或对端。
开放问题:你们在生产交换上做镜像时,有没有业务口被拖慢的例子?通常用什么办法降低影响——缩小过滤、换更高速率的出口,还是改到旁路观察点?欢迎分享比较稳妥的做法。
国际光通信论坛