Diagnostiquer un port ConnectX-4 avec lien mais sans trafic, et des optiques 25G qui ne négocient qu'en 1G sur un switch MikroTik
Avec deux cartes Mellanox ConnectX-4 double port, un switch SFP+ MikroTik, des jarretières OM4 d'1 m et des transceivers 10G/25G mélangés de plusieurs vendeurs, un port de la carte réseau montrait un lien UP mais n'obtenait pas de DHCP et ne pouvait pas router, les transceivers 25G ne négociaient qu'en 1G, et des liens 10G auparavant stables tombaient par intermittence. Échanger les transceivers et les fibres, forcer la vitesse avec ethtool et redémarrer donnaient des résultats incohérents.
- Matériel : Mellanox ConnectX-4, switch SFP+ MikroTik
- Transceivers : SFP+ SR 10G, SFP28 SR 25G (vendeurs mélangés), DAC SFP+
- Facteur de forme : SFP+, SFP28, DAC
Symptômes / messages :
link UP but no DHCP
25G optic negotiates 1G
intermittent link loss
Comments 2
Isoler en échangeant les transceivers et les fibres entre ports (un seul brin endommagé peut en être la cause), utiliser un DAC comme lien de référence simple, mettre à jour le firmware de la carte, inspecter le connecteur de bord de carte, et vérifier sur le serveur DHCP si les requêtes arrivent.
Des tests avec des espaces de noms réseau (network namespaces) ont finalement permis d'atteindre 23,5 Gbit/s avec les optiques 25G, et le second port s'est avéré fonctionner correctement ; la cause racine est restée incertaine, mais semblait liée au transceiver ou à l'environnement.