NVIDIA Mellanox 980-9I45J-00H010 Giải pháp kỹ thuật thiết bị mạng

NVIDIA Mellanox 980-9I45J-00H010 Network Appliance Technical Solution. Kết nối đáng tin cậy cao và tối ưu hóa hoạt động cho trung tâm dữ liệu và mạng doanh nghiệp

1- Phân tích các dự án và các yêu cầu

Các trung tâm dữ liệu doanh nghiệp đang trải qua một sự chuyển đổi quan trọng từ mạng "cố gắng tốt nhất" sang mạng "định quyết".lưu trữ phân tán dựa trên giao thông không mất góiCác kiến trúc mạng ba cấp truyền thống đã đạt đến giới hạn của họ về cân bằng tải, tốc độ hội tụ lỗi,và khả năng hiển thị hoạt độngGiải pháp này tập trung vàoNVIDIA Mellanox 980-9I45J-00H010là khối xây dựng nền tảng cho cơ sở hạ tầng mạng thế hệ tiếp theo, được thiết kế để giải quyết đồng thời ba yêu cầu cốt lõi:có sẵn cao(sự chuyển đổi lỗi liên kết/cấp độ thiết bị dưới 100ms),thông lượng cao với độ trễ cực thấp(400G chuyển tiếp tốc độ đường dây với độ trễ dưới 600ns), vàhoạt động thông minh(điện toán từ đầu đến cuối và dự đoán bất thường chủ động).

2Thiết kế kiến trúc mạng tổng thể

Giải pháp sử dụng kiến trúc CLOS hai cấp Spine-Leaf, nơi mỗi công tắc Leaf được kết nối hoàn toàn với mọi thiết bị Spine,đảm bảo số lượng nhảy cố định là 2 (Leaf→Spine→Leaf) giữa hai điểm cuốiLớp Leaf được phân chia theo lĩnh vực dịch vụ: vùng tính toán (đào tạo GPU / AI), vùng lưu trữ (NVMe-oF), vùng quản lý (iBMC / ngoài băng tần) và vùng thuê (độc lập thuê VXLAN).980-9I45J-00H010phục vụ như nút cốt lõi Spine, cung cấp cổng 32 x 400G QSFP-DD hoặc cổng 128 x 100G thông qua cáp đột phá, với dung lượng chuyển đổi 12,8 Tbps.Các thiết bị Leaf có thể được triển khai bằng cách sử dụng các công tắc loạt NVIDIA Spectrum-2, được kết nối với nhau thông qua các liên kết lên 100G/200G đến tầng cột sống, tạo thành một cấu trúc cây mỡ không chặn.

Trên mặt phẳng điều khiển, giải pháp triển khai BGP-EVPN như là giao thức mặt phẳng điều khiển thống nhất, mang tính ảo hóa mạng dựa trên VXLAN.MLAG (Multi-Chassis Link Aggregation) được thực hiện ở lớp Leaf để cho phép truy cập máy chủ hoạt động képTại lớp cột sống, khả năng NSR cấp phần cứng (Non-Stop Routing) của980-9I45J-00H010đảm bảo tính minh bạch của mặt phẳng chuyển tiếp trong quá trình chuyển đổi giám sát, được bổ sung bằng BFD (Bidirectional Forwarding Detection) để đạt được hội tụ tuyến đường dưới giây.

3Vai trò và đặc điểm chính củaNVIDIA Mellanox 980-9I45J-00H010trong dung dịch

Thiết bị này đảm nhận vai trò cốt lõi của Cột sống trong giải pháp, với giá trị khác biệt của nó biểu hiện trên bốn chiều:

• Ultra-Low Latency với Định hướng chuyển tiếp:Tận dụng chế độ chuyển tiếp cắt ngang, độ trễ cổng đến cổng dưới 600ns với jitter bị hạn chế ở ± 50ns, cung cấp thời gian hoàn thành dự đoán cho giao thông RoCEv2.
• Quản lý tắc nghẽn thông minh:Động cơ kiểm soát tắc nghẽn nhúng cung cấp gia tốc phần cứng cho DCQCN (Thông báo tắc nghẽn định lượng Trung tâm dữ liệu) và Kiểm soát dòng chảy ưu tiên (PFC),với tự động điều chỉnh ngưỡng ECN động để giảm thiểu rủi ro ngưng hoạt động của PFC.
• Máy đo từ xa tiên tiến:Hỗ trợ In-band Network Telemetry (INT) và streaming telemetry (gRPC) cho phép xuất thời gian thực về độ sâu hàng đợi, sử dụng liên kết và tỷ lệ lỗi CRC cho mỗi cổng,thiết lập cơ sở dữ liệu cho các hoạt động.
• Khả năng lập trình mở:Được xây dựng trên phần cứng sẵn sàng SONiC với hỗ trợ đường ống có thể lập trình P4, các nhóm hoạt động có thể tùy chỉnh logic xử lý data-plane để linh hoạt thích nghi với sự phát triển giao thức trong tương lai.

Là thành phần cốt lõi của980-9I45J-00H010 Trung tâm dữ liệu mạng tốc độ caogiải pháp, các thông số kỹ thuật tài nguyên phần cứng của nó được tóm tắt dưới đây:

4. Đề xuất triển khai và mở rộng quy mô (với Topology điển hình)

Topology triển khai điển hình (sử dụng 128 bộ chuyển mạch Leaf làm ví dụ): mỗi Leaf được kết nối lên thông qua các liên kết 4 x 100G đến 4 node Spine (tức là 4 đơn vị980-9I45J-00H010), đạt tỷ lệ đăng ký quá mức 4: 1 (bandwidth downlink: uplink bandwidth = 4: 1), phù hợp với khối lượng công việc đào tạo AI nhạy cảm với thông lượng.một dự trữ cổng 20% được khuyến cáo ở lớp cột sốngĐối với lựa chọn cáp đột phá: sử dụng quang học 400G ZR cho kết nối đường dài (≥ 2km) và cáp quang học 400G SR8 hoặc AOC hoạt động cho các liên kết đường ngắn (< 100m).Để đảm bảo tính tương thích với các danh sách quang học hiện có, xin vui lòng tham khảo980-9I45J-00H010 tương thíchma trận và ưu tiên các mô-đun QSFP-DD / OSFP được chứng nhận từ các nhà cung cấp đủ điều kiện.

Các khuyến nghị mở rộng quy mô theo một cách tiếp cận ba giai đoạn:Giai đoạn 1 (Dấu chân ban đầu): 2 Spines + 16 switch Leaf, hỗ trợ khoảng 1.000 máy chủ;Giai đoạn 2 (Tăng cường hiệu suất): mở rộng đến 4 Spines, tăng gấp đôi băng thông liên kết lên của Leaf để đạt được tổng công suất vải 50 Tbps;Giai đoạn 3 (Đối kết đa địa điểm): tận dụng các cổng 400G ZR trên các nút Spine cho kết nối vận chuyển quang DCI trực tiếp, cho phép kết nối liền mạch980-9I45J-00H010 Giải pháp sản phẩm mạngmở rộng qua nhiều trung tâm dữ liệu.

5. Giám sát hoạt động, khắc phục sự cố và khuyến nghị tối ưu hóa

Về mặt hoạt động, giải pháp thiết lập một vòng lặp khép kín bao gồm "thu thập dữ liệu → phát hiện dị thường → định vị nguyên nhân gốc → khắc phục tự động":

• Khung giám sát:triển khai NVIDIA NetQ hoặc Prometheus+Grafana để thu thập dữ liệu đo từ xa (bao gồm chiều sâu hàng đợi, tỷ lệ lỗi bit liên kết, nhiệt độ mô-đun quang học) từ980-9I45J-00H010thông qua gRPC, với cảnh báo dựa trên ngưỡng động.
• Phòng ngừa lỗi chủ động:Tận dụng các luồng dữ liệu INT để xây dựng một "bản đồ nhiệt" trên toàn mô, xác định các tiền thân của tắc nghẽn micro-burst và cho phép điều chỉnh trước các hạt giống hash ECMP hoặc ngưỡng ECN.
• Địa điểm ranh giới lỗi nhanh:Khi sự suy giảm liên kết xảy ra, sử dụng các mã lỗi và nhật ký sự kiện được xác định trongBảng dữ liệu 980-9I45J-00H010, kết hợp với các kỹ thuật tương quan dấu thời gian, để xác định chính xác cổng vật lý cụ thể hoặc máy thu.
• Phục hồi tự động:Tích hợp với Ansible hoặc NVIDIA UFM (Unified Fabric Manager) để phát triển sổ chơi tự động vô hiệu hóa và cô lập các cổng bị lỗi, kích hoạt việc tiếp quản liên kết chờ.

Đề xuất tối ưu hóa: Đối với các kịch bản giao thông hỗn hợp (lưu trữ + tính toán + quản lý), cấu hình các chính sách ECN và PFC khác nhau trên980-9I45J-00H010, gán hàng đợi ưu tiên cao hơn cho lưu lượng lưu trữ để ngăn chặn các vụ nổ tính toán tiêu thụ băng thông lưu trữ.

6Tóm lại và đánh giá giá trị

Giải pháp kỹ thuật này, được xây dựng xung quanhNVIDIA Mellanox 980-9I45J-00H010như là lõi cột sống, cung cấp một mạng trung tâm dữ liệu thế hệ tiếp theo được đặc trưng bởi độ trễ dưới microsecond, không mất gói tin, và các hoạt động dự đoán.tương đối với thiết kế vải 25G/100G truyền thống, kiến trúc này có thể cải thiện thông lượng công việc đào tạo AI khoảng 35% trong khi giảm MTTR khắc phục sự cố hoạt động lên đến 70%.980-9I45J-00H010 giáđại diện cho một khoản đầu tư ban đầu cao hơn so với các công tắc tiêu chuẩn,Thời gian hoàn vốn tổng chi phí sở hữu có thể được hạn chế đến 14-18 tháng thông qua tái sử dụng quang học (sự tương thích với các mô-đun 100G/200G hiện có), tăng hiệu quả năng lượng (40% giảm Watt mỗi Gbps) và tiết kiệm tự động hóa hoạt động.

Là mộtSản phẩm mạng 980-9I45J-00H010Giải pháp này đồng thời đáp ứng các yêu cầu băng thông cao của980-9I45J-00H010 Trung tâm dữ liệu mạng tốc độ caovà các tiêu chuẩn độ tin cậy cam kết trongThông số kỹ thuật 980-9I45J-00H010Sản phẩm hiện được liệt kê là980-9I45J-00H010 để bán, với hướng dẫn triển khai đồng hành và chuỗi công cụ tự động được xuất bản trên cổng thông tin tài liệu chính thức của NVIDIA (xemBảng dữ liệu 980-9I45J-00H010) Đối với các doanh nghiệp có kế hoạch nâng cấp mạng trung tâm dữ liệu, giải pháp này cung cấp sự cân bằng về khả năng triển khai và khả năng triển khai kỹ thuật.thiết lập một nền tảng mạng mạnh mẽ cho kỷ nguyên AI.