Diagnosticare una porta ConnectX-4 con link ma senza traffico e ottiche 25G che negoziano solo 1G su uno switch MikroTik
Con due schede Mellanox ConnectX-4 dual-port, uno switch MikroTik SFP+, bretelle OM4 da 1 m e transceiver misti 10G/25G di diversi vendor, una porta NIC mostrava link UP ma non otteneva DHCP e non riusciva a instradare, i transceiver 25G negoziavano solo 1G, e i link 10G prima stabili cadevano a intermittenza. Scambiare transceiver e fibre, forzare la velocità con ethtool e riavviare davano risultati incoerenti.
- Hardware: Mellanox ConnectX-4, switch MikroTik SFP+
- Transceiver: 10G SFP+ SR, 25G SFP28 SR (vendor misti), DAC SFP+
- Fattore di forma: SFP+, SFP28, DAC
Sintomi / messaggi:
link UP but no DHCP
25G optic negotiates 1G
intermittent link loss
Comments 2
Isola scambiando transceiver e fibre tra le porte (un singolo filo danneggiato può causarlo), usa un DAC come link di riferimento semplice, aggiorna il firmware della NIC, ispeziona il connettore edge della scheda, e conferma sul server DHCP se le richieste arrivano.
Testare con i network namespace ha finalmente prodotto 23,5 Gbps con le ottiche 25G e la seconda porta si è rivelata a posto; la causa radice è rimasta poco chiara ma sembrava legata al transceiver o all'ambiente.