Brocade G720 bikin semua port 64G SFP-DD stuck di Module_Invalid padahal lisensi DD PoD udah aktif
Kami mewarisi sepasang Connectrix DS-7720B (Brocade G720) buat fabric baru, dan saya belum sempat sampai ke zoning, soalnya nggak satu pun port double density mau naik. Semuanya bilang hal yang sama persis di switchshow:
Index Port Address Media Speed State Proto
====================================================
48 48 031800 dd -- Module_Invalid (Speed Mismatch / Incompatible SFP)
49 49 031900 dd -- Module_Invalid (Speed Mismatch / Incompatible SFP)Yang ada di rack:
- Connectrix DS-7720B / Brocade G720, Fabric OS masih di line 9.0.x sejak dikirim
- lisensi Double Density Ports on Demand terpasang dan statusnya applied
- transceiver 64G FC SFP-DD merk Brocade, part 57-1000505-01
- patch cord factory dari box yang sama dengan optiknya
Sebelum ada yang nyaranin hal yang obvious: saya udah reseat semua modul dan pindahin dua di antaranya ke port lain, dan faultnya tetap di port-nya, bukan ikut modulnya. Lisensi Double Density Ports on Demand-nya beneran applied, bukan cuma dipesan, saya cek dua kali. Patch cord udah ditukar, ujungnya udah dibersihin, nggak ada bedanya. Port biasa di chassis yang sama jalan bawa traffic dengan baik-baik saja, jadi ini bukan switch yang mati.
Apa kami kena batch optik double density yang jelek, atau switch-nya nge-reject duluan sebelum bener-bener ngecek apa yang ada di cage?
Comments 6
Optikmu nggak ada masalah. Firmware-mu yang jadi masalah.
64G FC SFP-DD di G720 baru didukung mulai Fabric OS 9.1.0. Di 9.0.x, firmware-nya sama sekali belum kenal form factor itu, jadi dia nggak bisa identifikasi apa yang ada di cage dan balik nge-declare incompatible - itu persis Module_Invalid dengan Speed Mismatch / Incompatible SFP yang kamu lihat di setiap port double density. Kerjaan bench kamu bilang hal yang sama dari arah sebaliknya: optik biasa nyala di port yang sama yang nolak modul dd, dan chassis kedua juga berperilaku identik karena jalanin firmware yang sama persis.
Part yang kamu punya, 57-1000505-01, ada di daftar Brocade Transceiver Support Matrix, dan matrix itu tempat minimum firmware per platform ditulis. Buat G720, entry-nya mulai dari 9.1.0. Naik ke 9.1.0 atau lebih baru, dan port-port itu bakal naik dengan optik yang udah terpasang di situ.
Blade yang di box itu ceritanya sama. Setiap platform Gen 7 punya batas minimumnya sendiri di matrix - G730 (DS-7730B), 7850 (MP-7850B), dan FC64-64 termasuk di dalamnya - jadi cek satu-satu dulu sebelum kamu pindahin optik double density ke situ, atau kamu bakal buang sore ini lagi buat kedua kalinya di box berikutnya.
Apa pun yang kamu lakuin, jangan kirim balik modulnya.
Tahan dulu paperwork RMA-nya, soalnya dari sini kelihatannya ini bukan batch optik yang mati semua. Module_Invalid dengan dd yang udah nongol di kolom media artinya switch-nya berhasil baca sesuatu dari cage tapi nggak suka sama apa yang dibaca. Modul yang beneran mati biasanya nggak sampai segitu jauh - kamu bakal lihat status no-module, bukan ini.
Tiga hal ini bisa mempersempit masalahnya dan nggak ada yang bakal ngerugiin kamu:
Dan buat sementara, coret lisensi dari daftar kecurigaan kamu. Ports on Demand itu buka port; itu nggak ngajarin firmware soal form factor yang belum pernah dia temui.
Saran yang bagus soal optik pinjaman. Saya cabut modul Brocade yang jalan dari salah satu port normal, pasang ke port 48, dan langsung online jadi F-Port. Pasang lagi 64G SFP-DD ke port yang sama dan Module_Invalid lagi dalam satu dua detik. Jadi cage-nya hidup, lisensinya jalan sesuai fungsinya, dan port-nya sendiri nggak masalah - cuma modul double density yang ditolak switch-nya.
Dua-duanya switch, iya. DS-7720B kedua masih hampir seluruhnya di crate-nya, tapi saya pasang dua modul dd ke situ di bench dan dapat baris yang identik, jadi ini bukan satu chassis doang yang bermasalah.
Gen 7 di tempat lain: belum ada yang production, tapi ada blade FC64-64 di box yang lagi nunggu slot director, dan itu dibeli khusus buat pakai optik-optik ini juga. Kalau bakal kena masalah yang sama di situ juga, saya lebih baik tahu sekarang daripada pas migration window.
Vendor beda, tapi jebakannya bentuknya sama. Saya post di sini siapa tahu nyelametin orang lain dari buang waktu satu sore nyabutin modul dari cage.
Dell S5248F-ON, SONiC master build. Nggak ada satu pun port SFP28 yang jalan. LED tiap port nyala solid, dan show interface transceiver presence nampilin nggak ada transceiver sama sekali, padahal optiknya di cage sehat-sehat aja.
Nggak ada yang berhubungan sama optik sama sekali. Container platform monitor-nya down: pmon nggak jalan, begitu juga pcied, xcvrd, dan psud. xcvrd itu proses yang ngomong I2C ke modul-modulnya, jadi kalau dia mati, nggak ada yang baca EEPROM sama sekali, dan CLI-nya jujur aja ngelaporin apa yang dia tahu, yaitu nggak ada apa-apa. docker ps dan show system-health detail langsung kasih tahu semuanya dalam semenitan - setelah saya buang setengah hari nukerin modul.
Kejadian serupa di Z9264F, di mana konstruktor Sfp punya platform plugin-nya jatuh dengan AttributeError: 'Sfp' object has no attribute 'port_type' dan ikut nyeret determine-reboot-cause.service down pas boot. Kalau satu kelas port berkelakuan salah dengan cara yang sama persis, optiknya nyaris nggak pernah jadi hal pertama yang perlu dicurigai.
Separuh lainnya dari ini nggak seru, tapi di situlah waktu sebenarnya habis. Loncat Fabric OS di switch yang belum ada apa-apa di belakangnya tetap aja itu change window, bukan sesuatu yang dikerjain di sela-sela dua meeting, jadi cari tahu dulu apa lagi di fabric yang harus ikut pindah dan jadwalin outage-nya dengan bener.
Berhubung FC64-64 itu masih di box-nya: naikin ke 9.1.0 atau lebih baru sebelum dia sempat lihat optik double density. Kalau nggak, kamu bakal ngulang thread ini di director, bukan di edge switch, dengan penonton.
Satu hal praktis lagi. Hubungi supplier kamu sebelum mereka catat RMA-nya. Modul-modul itu identifikasi dirinya sendiri dengan sempurna, cuma host-nya aja yang belum punya entry tabel buat mereka. Kalau supplier nerima balik itu sebagai barang cacat, kamu bakal nunggu tiga minggu buat batch pengganti yang berkelakuan persis sama, terus tetap harus upgrade juga pada akhirnya.
Confirmed, dan itu memang firmware-nya.
Dua-duanya switch naik ke 9.1.0 di change window akhir minggu, dan pas reboot semua port double density keluar dari Module_Invalid dan online di 64G dengan optik 57-1000505-01 yang sama yang udah nangkring di situ dari awal. Nggak ada yang di-reseat, nggak ada yang diganti, nggak ada yang re-cable.
Lisensinya ternyata cuma red herring yang saya kejar-kejar - dari awal udah applied dengan benar, cuma emang nggak bisa ngapa-ngapain di 9.0.x. Blade-nya naik ke 9.1.0 dulu sebelum deket-deket slot director, dan itu udah saya tulis di box tempat dia duduk. Nyelametin kita dari RMA dan obrolan yang lumayan awkward sama supplier.