ConnectX-4 MCX456A-ECAT、100GBASE-LR4でCisco NCSとリンクしないがループバックは両端とも通る

キャリア向けのCisco NCSに接続する一対のラックを運用していて、100Gのサーバーアップリンクの1本が、構築時から一度も上がったことがありません。サーバーを別のパッチパネルがあるキャビネットに移しても同じ結果だったので、単発の問題として扱うのはやめました。

• Supermicroサーバー、NVIDIA/Mellanox ConnectX-4 MCX456A-ECAT、両ポートとも空き
• 汎用の100GBASE-LR4 QSFP28、シングルモード、10kmリーチ、両端に1つずつ
• 対向側のCisco NCS、部屋間はダークファイバー

行き詰まっているのはこの点です。各モジュールは自分のデバイス上ではループバックを通ります。ファイバーを同じQSFP28にそのままループバックさせると、NICはクリーンな100Gリンクを報告し、NCS側も同様です。実際の区間を間に入れると、何も出ません。

# module looped back on the NIC itself
Speed: 100000Mb/s
Link detected: yes

# same module, real span to the NCS
Speed: Unknown!
Link detected: no

すでに試したこと:

• 両方のモジュールを同じロットの予備品に交換、変化なし
• サーバーを移動し、別のパネル経由でパッチし直した
• NICベンダーにケースを開いたが、回答はファームウェアのリリースノートにある検証済みトランシーバーリストへの案内だけで、なぜループバックが通るのかは説明されなかった

ConnectX-4のLR4に、ローカルではリンクするのに実際の区間を跨ぐと絶対にリンクしないという何かがあるのでしょうか、それとも自分は見当違いのほうを追いかけているのでしょうか。