지난 3월, 한 클라우드 제공업체의 데이터 센터 구축이 중단되었습니다. 6주간의 지연. 범인은? 해당 팀은 MPO-16 인터페이스가 필요한 사양의 400G QSFP-DD SR8 광학 장치-를 갖고 있었지만 시설의 패치 패널은 모두 MPO-12였습니다. 일정대로 돌아오기까지 재작업 비용은 80,000달러를 넘어섰습니다. Ascent Optics는 폼 팩터 선택이 아무도 예상하지 못한 방식으로 인프라를 통해 어떻게 파급되는지에 대한 사례 연구로 문서화했습니다.
FOCC-Fiber에서는 이러한 변형을 지속적으로 볼 수 있습니다. 다른 디테일, 같은 패턴. 프랑크푸르트 데이터 센터는 작년에 우리에게 왔습니다.MPO/MTP 사전 종단 처리된-케이블400G 업그레이드를 앞두고 있습니다. 그들의 원래 사양은 다음을 요구했습니다.12파이버 트렁크. 사전{1}}판매 검토 결과 문제가 발견되었습니다. 스위치 라인 카드에는 실제로 16파이버 SR8 연결이 필요했습니다. 물건이 배송되기 전에 잡았습니다. 3주 동안 약 €15,000를 절약했습니다.
불편한 진실은 QSFP 선택이 위험 관리로 취급되어야 하는데 체크박스 연습처럼 취급된다는 것입니다.
동일한 커넥터 모양, 완전히 다른 규칙
가계도는 다음과 같습니다.
- QSFP+: 총 40G, 10G 레인 4개, NRZ 변조
- QSFP28: 총 100G, 25G 레인 4개, 여전히 NRZ
- QSFP56: 총 200G, 50G 레인 4개, PAM4로 전환
- QSFP-DD: 총 400G, 8개의 50G 레인, PAM4, 이전 버전과의 호환성을 유지하면서 4개의 레인을 추가합니다.
이전 버전과의 호환성 주장에는 별표가 필요합니다. 예, QSFP-DD 포트는 QSFP28 모듈을 수용하고 100G에서 원활하게 실행됩니다. 우리는 이것을 광범위하게 테스트했습니다. 그러나 QSFP56 모듈을 QSFP+ 포트에 삽입해 보면 아무 것도 얻지 못할 것입니다. 모듈은 물리적으로 자리를 잡습니다. 링크 LED가 어두운 상태로 유지됩니다. 스위치는 "지원되지 않는 트랜시버"를 기록하고 추가 설명을 제공하지 않습니다.
우리는 자체 연구실에서 Mellanox ConnectX-6 및 Cisco Nexus 장비 전반에 걸쳐 이를 확인했습니다. PAM4 전기 신호는 NRZ 전용 호스트 인터페이스와 통신하지 않습니다. 그들은 물리적 계층에서 서로 다른 언어를 사용하고 있습니다.
400G 마이그레이션 수학(기대했던 것과 다름)
대부분의 사람들은 100G에서 400G로의 전환이 광학 예산의 4배를 의미한다고 가정합니다. 실제 숫자는 다른 이야기를 말해줍니다.
산업 TCO 모델에서는 400G 배포를 35-45%로 설정합니다.낮추다총 소유 비용과 동급-용량 100G 구성 비교. 그러나 이는 기존 광섬유 공장, 스위치 공급업체 혼합, 케이블링 인프라가 열 변화를 흡수할 수 있는지 여부에 따라 크게 달라집니다. 약속이 아닌 벤치마크로 사용하십시오.
실제로 절감 효과는 어디에서 발생합니까?
포트 라이센스.Cisco와 Juniper는 일반적으로 속도에 관계없이 포트별로 요금을 청구합니다.- 동일한 총 대역폭을 유지하면서 포트 수를 75% 줄이면 라이선스 비용이 직접적으로 절감됩니다.
캐치가 있는 케이블링 복잡성-. 400G QSFP-DD DR4표준 MPO-12 단일 모드 커넥터를 사용합니다. 소싱이 쉽고 배송이 빠릅니다. SR8에는 다음이 필요합니다.각진 광택이 있는 MPO-16. 해당 커넥터 유형은 공급업체 옵션을 상당히 제한합니다. 자체 이행 데이터에 따르면 MPO-12 주문은 5~7일 내에 배송됩니다. MPO-16 APC 주문은 공급망 전체의 재고가 더 적기 때문에 일반적으로 10~14일이 소요됩니다.
열 부하는 사람들이 예상하지 못한 방식으로 비용이 많이 드는 부분입니다.100G QSFP28 모듈은 3.5~4.5W를 소비합니다. 400G QSFP-DD는 모듈당 10~14와트를 실행합니다. 36포트 스위치를 완전히 채우면 단일 랙 장치에 400와트 이상의 열이 추가됩니다.
우리는 고객에게 고밀도 400G 주문을 확정하기 전에 냉각 용량을 파악하라고 안내합니다.- HVAC가 속도를 따라잡지 못하는 배포 중간-을 발견하고 싶어하는 사람은 아무도 없습니다. 빠른 해결책이 없는 예산 문제입니다.
제3자-당사 광학 장치: 40-70%의 가격 격차
방 안의 코끼리에 대해 이야기해 봅시다.
Cisco-브랜드100G QSFP28 LR4모듈 목록은 약 $800입니다. 동일한 사양을 가진 타사 호환 모듈이 있습니까? $200~$300. 400G QSFP-DD DR4의 경우 OEM 가격은 약 1,500달러이고 타사 제품은 400-600달러입니다.
타사 모듈이-작동하나요? 예. MSA 사양은 물리적, 전기적 상호 운용성을 보장하기 위해 특별히 존재합니다. 이것이 업계 표준의 핵심입니다.
실제 질문은 오전 2시에 문제가 발생하여 에스컬레이션해야 하는 경우 어떻게 되는지입니다.
공급업체마다 "지원되지 않는" 트랜시버를 다르게 처리합니다.
- 시스코가장 엄격한 입장을 취합니다.-경고를 기록하지만 지원되지 않는 서비스 트랜시버를 활성화한 후 작업을 허용합니다.-
- 까끄라기라이센스 승인이 필요합니다
- 향나무기능을 차단하지 않고 경고를 기록합니다.
- 엔비디아/멜라녹스인프라는 일반적으로 불만 없이 MSA-호환 모듈을 수용합니다.
미국에 거주하는 경우 알아야 할 한 가지 사실은 Magnuson-Moss 보증법에 따라 제조업체가 타사 구성 요소를 설치했다는 이유만으로 장비 보증을 무효화하는 것을 금지하고 있다는 것입니다.- 이러한 보호에는 제한이 있지만 이는 호환 가능한 광학 장치가 스위치 보증을 자동으로 무효화할 수 없음을 의미합니다.
도매 구매자를 위한 우리의 추천은 무엇입니까? 지원 에스컬레이션 속도가 중요한 스파인 링크의 OEM 광학 장치입니다. 리프 및 액세스 레이어의 타사 호환 모듈은-문제 발생 시 40~70% 절감 효과로 약간 더 많은 문제 해결 오버헤드를 정당화합니다.
PAM4와 실제 비용
PAM4 변조는 단순한 기술 사양 변경이 아닙니다. 이는 100G 세계에는 존재하지 않았던 실제 예산 영향을 미칩니다.
첫째: PAM4에는 필수 전달 오류 수정이 필요합니다. FEC-가능 스위치 ASIC이 필요합니다. 기존 하드웨어가 이를 지원하지 않는 경우 이는 품목입니다.
둘째: FEC는 링크당 약 100나노초의 지연 시간을 추가합니다. 빈도가 높은-거래 또는 특정 실시간-산업 제어 애플리케이션의 경우 이것이 중요합니다. 일반 데이터 센터 워크로드의 경우? 소음 속으로 사라집니다. 아마 눈치 채지 못할 것입니다.
셋째, 이는 다시 냉각으로 돌아갑니다. 400G의 QSFP-DD 모듈은 각각 10~14와트를 끌어옵니다. 초기 800G 모듈은 16~20와트를 소비합니다. 열이 빨리 쌓입니다.
NVIDIA의 광학 모듈 지침은 이제 특히 열 관리가 제한 요소가 되기 때문에 새로운 AI 교육 클러스터에 OSFP를 명시적으로 권장합니다. OSFP는 등가 부하에서 QSFP-DD보다 약 15도 더 효과적으로 열을 방출합니다. 그러나 기존 QSFP 인프라와의 하위 호환성이 열 헤드룸 문제보다 중요한 기업 배포의 경우 QSFP-DD가 여전히 실용적인 선택입니다.
공급업체 평가
광 트랜시버 분야의 주요 기업: Coherent(이전 Finisar를 인수한 II{0}}VI), InnoLight, Cisco(Acacia Communications 인수 포함), 장거리 DCI 애플리케이션의 코히어런트 광학을 담당하는 Lumentum-
제3자{0}}호환 공급업체의 시장 점유율이 증가하고 있습니다. 평가할 때-저희도 포함-다음 사항을 요청해야 합니다.
- 특정 스위치 모델 및 펌웨어 버전에 대한 상호 운용성 테스트 로그
- DDM 진단 데이터
- BER 테스트 결과
- 열 순환 문서
평판이 좋은 공급업체는 이를 표준 관행으로 제공합니다. 공급업체가 제품을 생산할 수 없다면 이는 귀하에게 뭔가를 알려줍니다.
FOCC-Fiber에서 모든 트랜시버는 전체 테스트 보고서와 함께 배송됩니다. 삽입 손실 0.2dB 이하, 반사 손실 50dB 이상(UPC), 채널당 특정 판독값 포함. 우리는 Cisco, Arista, Juniper 및 NVIDIA/Mellanox 플랫폼 전반에 걸쳐 테스트 범위를 유지합니다. 아직 문서화하지 않은 플랫폼에 대한 확인이 필요한 경우 엔지니어링 팀이 호환성 검사를 실행하고 48시간 이내에 결과를 반환합니다.
대량 주문을 하기 전에
400G 배포를 계획하거나 기존 100G 인프라의 업그레이드 경로를 평가하는 경우 구매 주문이 발송되기 전에 호환성 검토를 받는 것이 좋습니다. 당사는 귀하가 실제 장비를 검증할 수 있도록 샘플 테스트 프로그램을 제공하고 일정이 빡빡할 경우 72시간 신속 생산도 제공합니다.
이제 폼 팩터 결정에 따라 향후 몇 년간의 케이블 비용, 열 요구 사항 및 지원 옵션이 결정됩니다. 사양을 바로 확인하는 것이 좋습니다.
연락처: focc@focc-fiber.com|WhatsApp: +86 138 2323 7984
