IBM Power FC 어댑터: SFP가 별도의 FRU인가, IBM에서 사지 않은 옵틱도 IBM이 교체해주나
작은 SAN 옆에 IBM Power 박스를 몇 대 운용하고 있는데, 다음 하드웨어 유지보수 갱신 전에 제대로 된 예비 부품 정책을 정리하려고 합니다. 제가 확신하지 못하는 부분은 트랜시버 자체입니다. 어떤 어댑터에서는 그 자체로 현장 교체 가능한 부품처럼 보이는데, 다른 어댑터에서는 서비스 콜을 부르면 어댑터 전체가 교체되면서 옵틱도 같이 딸려 나갑니다.
- IBM Power Systems, 32Gb와 64Gb 파이버 채널 어댑터
- 같은 섀시의 이더넷·RoCE 어댑터, SFP28과 QSFP28 케이지
- 옵틱은 대부분 IBM 공급, 이더넷 쪽에 서드파티 SFP28도 소수 있음
지금까지 어댑터 문서에서 캐낸 것:
64Gb FC: EN2N/EN2P (CCIN 2F05), EN1N/EN1P (CCIN 2CFD) - transceiver FRU 78P7722
32Gb FC: EN2L/EN2M (CCIN 2F06), EN1L/EN1M (CCIN 2CFC) - transceiver FRU 02CL041
시도해본 것:
- 조용해진 포트로 서비스 콜을 열었는데, 결과는 옵틱이 아니라 어댑터 FRU 교체였음
- 그냥 트랜시버 FRU를 주문해서 선반에 예비로 둘 수 있는지 물어봤는데 명확한 답을 못 받음
- 같은 논리가 이더넷 어댑터에도 적용되는지 보려고 이더넷 어댑터 기능들을 훑어봄
그래서 질문은 두 가지입니다. 어떤 기능에서 트랜시버가 진짜로 별도 FRU인가요? 그리고 케이지에 꽂힌 모듈을 IBM에서 사지 않았을 때 실제 서비스 입장은 어떻게 되나요?
Comments 3
FC 쪽 이해는 맞고, 거기서는 그 FRU 두 개가 얘기의 전부입니다. 64Gb 기능에는 78P7722, 32Gb 기능에는 02CL041입니다. 목록은 어댑터 계열별이 아니라 기능 코드별로 공개되니, 옆 슬롯도 똑같이 동작할 거라고 가정하지 말고 본인 것을 직접 찾아보세요.
이더넷과 RoCE에서 별도 교체 가능한 옵틱을 쓰는 기능에는 EC85/EC86, EC75/EC76, EC66/EC67, EC2R/EC2S, EC2T/EC2U, EC3L/EC3M, EC3A/EC3B, EN24/EN26, EC71/EC72가 있습니다. 반대 사례는 구리 어댑터입니다. 맞는 모듈을 찾았다고 해서 그게 광 포트가 되는 일은 없습니다. 애초에 그런 게임에 끼어 있지 않습니다.
서비스 관련 부분은 노골적이고, 이게 예비 부품 정책을 결정하는 대목입니다. IBM이 손을 대는 옵틱은 IBM에서 구입해서 아직 보증 기간 안에 있거나 하드웨어 유지보수 계약 아래 있는 것뿐입니다. 나머지는 케이지가 기계적으로는 열려 있고 포트가 완벽하게 링크되더라도 전부 서비스 계약 밖입니다. 같은 문서는 일반적인 트러블슈팅을 거치기 전에는 모듈을 교체하지 말라고도 말하는데, 아마 그게 이번 콜이 어댑터 교체로 끝난 이유일 가능성이 큽니다.
저희 랙에 있는 것과도 맞아떨어지네요. 저희 32Gb 포트는 EN1L/EN1M 페어라 02CL041이 선반에 둬야 할 번호이고, 이더넷 어댑터의 서드파티 SFP28이 뭔가로 커버된다고 시늉하는 것도 이제 그만두겠습니다. 그건 시설의 랩 쪽에만 남겨두겠습니다.
트러블슈팅 순서 얘기는 새겨듣겠습니다. 이제는 누구든 옵틱을 뽑기 전에 포트 에러와 모듈 수치부터 기록하게 해서, 누가 먼저 모듈을 건드렸다는 이유만으로 콜이 어댑터 교체로 종료되지 않게 하고 있습니다.
SAN 작업에서 계속 뒤섞이는 두 가지를 구분해둘 만합니다. 프로토콜 상호운용성과 포트별 코딩 체크입니다. 저희는 HPE MSA 2040 ES LFF 앞단에 IBM SAN24B-5를 뒀는데, 그 어레이 포트에는 HPE 8 Gb shortwave FC SFP+(C8R23A)가 꽂혀 있었고, 브랜드가 섞여도 아무도 신경 쓰지 않았습니다. 각 모듈은 자기가 꽂힌 케이지에만 받아들여지면 되기 때문입니다. 어레이 벤더의 옵틱은 어레이에, 스위치 벤더의 옵틱은 스위치에 두면 벤더 체크와 지원 논쟁 둘 다 피해 갈 수 있습니다.
또 다른 함정은 마이그레이션입니다. SAN48B-5에서 나온 오래된 8G long-wave SFP+(파트 57-1000027-02)는 SAN64B-7(내부적으로는 G720인 8960-P64)로 그대로 넘어가지 않습니다. Gen7 박스용 적격 목록에 없기 때문입니다. 이전 예산을 짜기 전에 각 파트넘버를 Brocade 트랜시버 지원 매트릭스에 대조해보고, 지금 뭘 갖고 있는지 정확히 알기 위해 오래된 스위치에서 먼저 sfpshow를 돌려보세요.