버전 비교

이전 버전 14

changes.mady.by.user 장민석(KN)

에 저장

비교대상

새 버전 15

changes.mady.by.user 장민석(KN)

에 저장

키

  • 이 줄이 추가되었습니다.
  • 이 줄이 삭제되었습니다.
  • 서식이 변경되었습니다.

목차

개요

목적

  • 400GbE 패킷 생성 (dpdk, RoCE, iperf3)
  • 400GbE 링크에서 NVMe 기반 Disk to Disk 전송 실험 (NVMe의 MTBF, TBW 낮아도 됨)

레퍼런스Type AType B비고

2023 ESnet6 200G DTN2025 KREONET 400G DTN Intel2025 KREONET 400G DTN AMD
CPU

AMD EPYC 73F3 (2ea) (Total 32C)

  • 16C 24T (per 1ea)
  • Base / Turbo
    : 3.5 / 4.0 GHz
  • L3 256 MB
  • PCIe 4.0 x128
  • EPYC 7003 Series (SP3)
  • TDP 240W
  • Q1'21
  • $3521

Intel Xeon w7-3565X

  • 32C 64T
  • Base / Turbo
    : 2.5 / 4.8 GHz
  • 82.5 MB
  • PCIe 5.0 x112
  • Xeon W (LGA4677)
  • TDP 335~402W
  • Q3'24
  • $2699 (390만원)

AMD EPYC™ 9355P (1ea)

  • 32C 64T
  • Base / All Turbo / Max Turbo
    : 3.55 / 4.2 / 4.4 GHz
  • L3 256 MB
  • PCIe 5.0 x128
  • EPYC 9005 Series (SP5)
  • TDP 280W
  • Q4'24
  • $2998 (435만원)

싱글소켓 구성 (듀얼소켓 구성 가격 비쌈)

Motherboard

SMCi H12DSU-iN

SMCi X13SWA-TF

SMCi H13SSW

  • EPYC™ 9005 series (SP5)
  • 1 PCIe 5.0 x16 Right Riser Slot
  • 1 PCIe 5.0 x16 Left Riser Slot
  • 2 PCIe 5.0 x16 AIOM Networking Slot
  • 6 MCIO (PCIe 5.0 x8) Port(s)
  • 2 MCIO (PCIe 5.0 x8/SATA3) Port(s)
  • M.2 Interface: 2 PCIe 3.0 x2
  • IPMI
  • (매뉴얼) SMCi H13SSW

Chassis

SMCi 2124US-TNRP

  • 24 front hot-swap 2.5" NVMe U.2

AS -1115CS-TNR

  • SMCi H13SSW

  • 2 PCIe 5.0 x16 FHHL slots

  • 2 PCIe 5.0 x16 AIOM slots (OCP 3.0 compatible)

  • 10 front hot-swap 2.5" PCIe 5.0 NVMe* drive bays

RAM

DDR4-3200 16GB x 16ea (256GB)

DDR5-4800 ECC 64GB x 4ea

  • 46만원/1ea (184만원/4ea)

DDR5-4800 ECC 64GB x 4ea

  • 46만원/1ea (184만원/4ea)

OS_Disk

Micron 7300 MAX 800G U.2 (2ea)

  • PCIe 3.0 x4



DATA_Disk

Micron 9300 MAX 3.2TB U.2 (10ea)

  • PCIe 3.0 x4
  • configured as RAID10

Hynix P51 1TB M.2 (8~12ea)

  • PCIe 5.0 x4
  • 29만원/ea (232만원/8ea, 348만원/12ea)

ASUS Hyper M.2 x16 Gen5 Card (2~3ea)

  • 12만원/1ea (관세 부가 전)

비고

  • 총 비용 240만원/8ea, 400만원/8ea
  • RAID0 묶어서 테스트 할 것

Hynix P51 1TB M.2 (8~12ea)

  • PCIe 5.0 x4
  • 29만원/1ea (232만원/8ea, 348만원/12ea)

ASUS Hyper M.2 x16 Gen5 Card (2~3ea)

  • 12만원/1ea (관세 부가 전)

저렴한 M.2 기반 구성

  • U.2는 국내 일반 마켓에서 구매가 어려워 M.2 선호

Hyper M.2 x16 Gen5 Card


Gen4 NVMe 5개, Gen5 NVMe 2~3개면 
레퍼런스와 비슷한 성능을 낼 수 있을 듯

목표는 레퍼런스보다 더 빠른 성능

NIC

MCX613106A-VDAT (1ea)

  • PCIe® 4.0 x16
  • 200GbE Dual

MCX75310AAS-NEAT (1ea)

  • PCIe 5.0 x16
  • 400GbE Single
  • RoCE 가능
  • $1700~4000 (250~580만원)

MCX75310AAS-NEAT (1ea)

  • PCIe 5.0 x16
  • 400GbE Single
  • RoCE 가능
400GbE 싱글 포트
PSU1300W (2ea)


구매가$25K in late 20221.5천 / 1대 (목표)1.5천 / 1대 (목표)

...