A
模块指示灯亮、笼子也卡到位,Linux 里 ip link 却一直 NO-CARRIER 或报 SFP 识别失败,是现场很常见的组合。不要先换模块再换网卡来回试,按层查会快很多:电气与在位、EEPROM 识别、速率与 FEC 协商、最后才是光路和对端。
第一层看内核有没有认出模块。dmesg 里搜索 sfp、qsfp、i2c。能读到 vendor、part number、比特率说明 I2C 和 EEPROM 基本健康;反复 timeout 或 checksum failed,先查模块是否插到底、是否不兼容该笼子的管脚定义(有的口是 SFP+ only,插了 SFP28/带特殊上拉的模块会识别异常)。ethtool ethX 看 supported link modes 和 advertised,确认网卡固件支持该模块的速率。有的网卡缺固件文件(例如常见的 /lib/firmware 缺失),模块永远初始化不完,这时 dmesg 会直接写 firmware 文件名。
第二层是速率和 FEC。两端必须在同一速率档上:一边强制 25G、一边自协商 10G,或者一边开 RS-FEC、一边关 FEC,都会出现“模块在、光也有、链路就是不起”。ethtool --show-fec 和 ethtool -s ethX speed ... autoneg ... 能对上两端配置。长距模块还要看是否需要打开对应的 FEC 才能达到该距离等级的误码要求,短链路乱开高增益 FEC 一般仍能通,但两端不一致就会完全不通。
第三层才是光路。本端 Tx 有光、对端 Rx 没光,查跳线、极性、法兰和是否用了单模模块配了多模跳线。本端 Rx 功率极低,查对端有没有发光、衰减是否过大。不要用“换一只模块好了”当作最终结论,把识别日志、ethtool 输出和两端 FEC/速率截下来,下次同样的口再出现问题就有对照。Linux 主机侧能做的是把这三层信息一次收齐,而不是在应用里只看到一个 Network is down。
第一层看内核有没有认出模块。dmesg 里搜索 sfp、qsfp、i2c。能读到 vendor、part number、比特率说明 I2C 和 EEPROM 基本健康;反复 timeout 或 checksum failed,先查模块是否插到底、是否不兼容该笼子的管脚定义(有的口是 SFP+ only,插了 SFP28/带特殊上拉的模块会识别异常)。ethtool ethX 看 supported link modes 和 advertised,确认网卡固件支持该模块的速率。有的网卡缺固件文件(例如常见的 /lib/firmware 缺失),模块永远初始化不完,这时 dmesg 会直接写 firmware 文件名。
第二层是速率和 FEC。两端必须在同一速率档上:一边强制 25G、一边自协商 10G,或者一边开 RS-FEC、一边关 FEC,都会出现“模块在、光也有、链路就是不起”。ethtool --show-fec 和 ethtool -s ethX speed ... autoneg ... 能对上两端配置。长距模块还要看是否需要打开对应的 FEC 才能达到该距离等级的误码要求,短链路乱开高增益 FEC 一般仍能通,但两端不一致就会完全不通。
第三层才是光路。本端 Tx 有光、对端 Rx 没光,查跳线、极性、法兰和是否用了单模模块配了多模跳线。本端 Rx 功率极低,查对端有没有发光、衰减是否过大。不要用“换一只模块好了”当作最终结论,把识别日志、ethtool 输出和两端 FEC/速率截下来,下次同样的口再出现问题就有对照。Linux 主机侧能做的是把这三层信息一次收齐,而不是在应用里只看到一个 Network is down。
国际光通信论坛