Kiến trúc tham khảo kỹ thuật NVIDIA Mellanox 980-9I45D-00H005

Kiến trúc tham chiếu kỹ thuật NVIDIA Mellanox 980-9I45D-00H005｜Cung cấp khả năng kết nối có độ tin cậy cao và vận hành xuất sắc cho các trung tâm dữ liệu và mạng doanh nghiệp

1. Phân tích bối cảnh và yêu cầu của dự án

Các trung tâm dữ liệu hiện đại đang phát triển nhanh chóng từ kiến ​​trúc ba tầng truyền thống sang cấu trúc liên kết phẳng bị chi phối bởi các mô hình lưu lượng đông-tây. Đồng thời, các cụm đào tạo AI, hệ thống lưu trữ phân tán và nền tảng phân tích thời gian thực đặt ra các yêu cầu gần như nghiêm ngặt đối với mạng cơ bản: độ trễ từ đầu đến cuối phải duy trì ổn định trong phạm vi micro giây, mức sử dụng liên kết cần vượt quá 70% mà không gây ra tình trạng tắc nghẽn và thời gian khôi phục lỗi phải được đo trong khoảng thời gian dưới giây. Tuy nhiên, nhiều thiết bị mạng hiện tại không có khả năng tích hợp đo từ xa sâu, hỗ trợ RoCE gốc và giao diện tự động hóa có thể lập trình, khiến các nhóm vận hành luôn trong tình trạng chữa cháy phản ứng liên tục.

Để giải quyết những thách thức này, chúng tôi đề xuất kiến ​​trúc mạng trung tâm dữ liệu thế hệ tiếp theo được xây dựng dựa trênNVIDIA Mellanox 980-9I45D-00H005. Giải pháp này được thiết kế để đồng thời đạt được ba mục tiêu chính: ① cung cấp một mặt phẳng chuyển tiếp vật lý không tổn hao, có độ giật thấp; ② thiết lập khung có thể quan sát ba chiều bao gồm các số liệu cấp thiết bị, cấp liên kết và cấp luồng; và ③ tích hợp liền mạch với các nền tảng tự động hóa chính thống thông qua các API được tiêu chuẩn hóa, chuyển các hoạt động mạng từ các tác vụ hướng dẫn CLI thủ công sang mô hình dựa trên chính sách, hướng đến mục đích.

2. Thiết kế kiến ​​trúc hệ thống và mạng tổng thể

Kiến trúc được đề xuất áp dụng cấu trúc liên kết vật lý Spine-Leaf trưởng thành, được bổ sung bởi EVPN-VXLAN làm mặt phẳng điều khiển lớp phủ cơ bản. Lớp Spine bao gồm nhiều980-9I45D-00H005các đơn vị tạo thành một mạng lưới hoàn toàn, trong đó mỗi Spine được kết nối với tất cả các công tắc Lá thông qua các cổng 400G—tạo ra cấu trúc cây mỡ Clos không chặn. Lớp Lá cung cấp các cấu hình cổng linh hoạt hỗ trợ tốc độ 100G, 25G hoặc 10G, chứa cả giá đỡ máy chủ x86 truyền thống và cụm tính toán tăng tốc GPU.

Trên mặt phẳng điều khiển, tất cả các thiết bị Spine và Leaf đều chạy BGP-EVPN làm giao thức định tuyến hợp nhất, cho phép thiết lập đường hầm VXLAN tự động và khám phá VTEP. Đối với khối lượng công việc điện toán hiệu năng cao và AI, mặt phẳng chuyển tiếp được cung cấp khả năng mạng không mất dữ liệu RoCEv2 bằng cách sử dụng PFC (Kiểm soát luồng ưu tiên) và ECN (Thông báo tắc nghẽn rõ ràng), với DCBx xử lý đàm phán luồng ưu tiên tự động. Thiết kế này đảm bảo rằngMạng tốc độ cao trung tâm dữ liệu 980-9I45D-00H005nền tảng mang lại cả hiệu suất xác định và khả năng cách ly nhiều bên thuê.

3. Vai trò và đặc điểm chính của NVIDIA Mellanox 980-9I45D-00H005

Trong kiến ​​trúc này,NVIDIA Mellanox 980-9I45D-00H005đóng vai trò là phần tử chuyển mạch Spine trung tâm và là yếu tố hỗ trợ chính cho kết nối có độ tin cậy cao. Khả năng chuyển đổi 12,8 Tbps, độ trễ cắt dưới 300ns và công cụ đo từ xa được tăng tốc phần cứng khiến nó phù hợp lý tưởng với các môi trường mà cả hiệu suất và khả năng dự đoán đều không thể thương lượng. cácThông số kỹ thuật 980-9I45D-00H005xác nhận hỗ trợ đầy đủ cho các cổng đa tốc độ 400G/200G/100G, cho phép tích hợp liền mạch với cáp quang và cáp hiện có đồng thời cung cấp lộ trình nâng cấp rõ ràng cho cơ sở hạ tầng sẵn sàng cho 800G trong tương lai.

Các điểm khác biệt chính bao gồm:

• Quản lý tắc nghẽn nâng cao:Các thuật toán cân bằng tải động và điều khiển luồng dựa trên phần cứng tích hợp sẵn đảm bảo rằng ngay cả khối lượng công việc nặng được truyền tải (ví dụ: liên lạc giữa tất cả các MPI) cũng gặp phải hiện tượng giật hình tối thiểu và tình trạng rớt gói gần như bằng không.
• Truyền phát dữ liệu từ xa ở quy mô:Thiết bị này xuất hàng trăm nhóm đối tượng thông qua gRPC và sFlow, bao gồm mọi thứ từ tỷ lệ chiếm dụng trên mỗi hàng đợi đến biểu đồ độ trễ trên mỗi luồng—trao quyền cho các nhóm vận hành phát hiện các điểm bất thường trước khi chúng trở thành sự cố.
• Tổ chức bảo mật Zero-Trust:Nguồn gốc phần cứng của sự tin cậy, khả năng khởi động an toàn và mã hóa MACsec tốc độ đường truyền cung cấp khả năng cách ly bằng mật mã mà không ảnh hưởng đến thông lượng, đáp ứng các yêu cầu tuân thủ nghiêm ngặt nhất cho lĩnh vực tài chính và chăm sóc sức khỏe.

Đối với các nhóm đánh giá việc mua lại,Giá 980-9I45D-00H005được định vị cạnh tranh trong phân khúc hiệu suất cao, trong khiCần bán 980-9I45D-00H005tính khả dụng thông qua các đối tác được chứng nhận bao gồm cấp phép linh hoạt cho các bộ tính năng nâng cao như EVPN/VXLAN và đo từ xa mạng trong băng tần (INT). cácBảng dữ liệu 980-9I45D-00H005VàGiải pháp sản phẩm mạng 980-9I45D-00H005tài liệu cung cấp hướng dẫn toàn diện về lựa chọn SKU và lập kế hoạch năng lực.

4. Khuyến nghị triển khai và mở rộng quy mô

Để triển khai ở trường xanh, chúng tôi khuyên bạn nên bắt đầu với tối thiểu bốn công tắc Spine (để đảm bảo dự phòng N+1) và tám công tắc Lá, trong đó mỗi Spine được kết nối với mọi Lá bằng quang học 400G-DR4 hoặc 400G-FR4. Số lượng công tắc Lá có thể tăng tỷ lệ tuyến tính theo mật độ giá đỡ; cái980-9I45D-00H005hỗ trợ tới 128 cổng 400G đầy đủ trên mỗi khung khi sử dụng cáp ngắt, mang lại nhiều không gian để mở rộng.

Đối với các kịch bản brownfield,Tương thích 980-9I45D-00H005hệ sinh thái đảm bảo khả năng tương tác với quang học 100G và 40G hiện có thông qua bộ điều hợp QSFP28/QSFP+, cho phép di chuyển theo giai đoạn mà không bị gián đoạn dịch vụ. Quy trình triển khai được đề xuất như sau:

• Giai đoạn 1:Thay thế các switch Spine bằng các thiết bị 980-9I45D-00H005, giữ lại các switch Lá nguyên bản để kết nối.
• Giai đoạn 2:Kích hoạt khả năng RoCEv2 trên các cổng Lá đã chọn cho lưu lượng GPU/bộ lưu trữ, sử dụng DCBx để cách ly các luồng không tổn hao.
• Giai đoạn 3:Triển khai bộ thu thập dữ liệu từ xa và tích hợp với nền tảng SIEM/NMS hiện có để giám sát thống nhất.
• Giai đoạn 4:Quy mô công suất của Lá khi khối lượng công việc tăng lên, tận dụng kiến ​​trúc không chặn của Spine để duy trì hiệu suất ổn định.

Ví dụ về cấu trúc liên kết: Thiết kế 4 cột × 8 lá với các kết nối 400G mang lại băng thông hai phần tối đa là 6,4 Tbps, đủ cho các cụm đào tạo AI cỡ trung bình có tối đa 512 nút GPU, trong khi lớp phủ EVPN cho phép nhiều người thuê và di chuyển khối lượng công việc liền mạch trên các giá đỡ hoặc thậm chí cả các khu vực trung tâm dữ liệu.

5. Vận hành, giám sát và tối ưu hóa

cácSản phẩm mạng 980-9I45D-00H005tích hợp nguyên bản với các công cụ NMS thương mại và nguồn mở thông qua RESTCONF, NETCONF và gNMI. Chúng tôi khuyên bạn nên triển khai một quy trình đo từ xa tập trung sử dụng dữ liệu từ ba nguồn riêng biệt:

• Tình trạng thiết bị:Nhiệt độ, tốc độ quạt, mức tiêu thụ điện năng và việc sử dụng ASIC để chủ động bảo trì phần cứng.
• Chất lượng liên kết:Số lỗi FEC (Sửa lỗi chuyển tiếp), chẩn đoán bộ thu phát quang (DDM) và tỷ lệ lỗi CRC để xác định chất lượng cáp hoặc quang học bị xuống cấp.
• Hiệu suất dòng chảy:Tỷ lệ chiếm dụng trên mỗi hàng đợi, tỷ lệ đánh dấu ECN và số liệu thống kê truyền lại RoCEv2 để tinh chỉnh ngưỡng tắc nghẽn và phân bổ bộ đệm.

Để khắc phục sự cố, thiết bị cung cấp khả năng phát lại cụm vi mô lịch sử và tạo đầu dò tổng hợp, cho phép các kỹ sư xác thực các thay đổi trong môi trường dàn dựng trước khi triển khai vào sản xuất. Quy trình khắc phục tự động—chẳng hạn như điều chỉnh động ngưỡng PFC hoặc định tuyến lại lưu lượng truy cập thông qua điều chỉnh trọng số ECMP—có thể được viết kịch bản bằng Ansible hoặc Python, giảm thời gian phân tích nguyên nhân gốc rễ trung bình từ 40 phút xuống dưới 8 phút dựa trên điểm chuẩn nội bộ.

Mẹo tối ưu hóa: Đối với khối lượng công việc đào tạo AI, chúng tôi khuyên bạn nên điều chỉnh ngưỡng ECN xuống 80% mức chiếm dụng bộ đệm và cho phép cân bằng tải động (DLB) để phân phối các luồng trên nhiều đường Spine. Đối với lưu lượng truy cập hướng đến lưu trữ (NVMe-oF), hãy ưu tiên bật mức ưu tiên 3 của DCBx cho lưu lượng RoCE và chỉ định lịch trình ưu tiên nghiêm ngặt để đảm bảo độ trễ nhất quán. cácThông số kỹ thuật 980-9I45D-00H005cung cấp các tham số điều chỉnh cấp độ đăng ký chi tiết cho người dùng nâng cao.

6. Tóm tắt và đánh giá giá trị

cácNVIDIA Mellanox 980-9I45D-00H005thể hiện sự thay đổi mô hình về cách mạng trung tâm dữ liệu có thể đạt được cả độ tin cậy cao và tính đơn giản trong vận hành. Bằng cách kết hợp cơ cấu chuyển mạch lớn, không chặn với độ sâu đo từ xa chưa từng có và khung bảo mật toàn diện, nó giải quyết những mối quan tâm cấp bách nhất của môi trường CNTT hiện đại: hiệu suất không thể đoán trước, cách ly lỗi chậm và quy trình mở rộng quy mô rườm rà. Các tổ chức áp dụng điều nàyGiải pháp sản phẩm mạng 980-9I45D-00H005có thể mong đợi những cải tiến có thể đo lường được trên ba khía cạnh chính:

• Độ tin cậy:Chuyển đổi dự phòng dưới 50ms và mất gói gần như bằng 0 dẫn đến SLA ứng dụng cao hơn và ít sự cố ảnh hưởng đến kinh doanh hơn.
• Nhanh nhẹn:Việc cung cấp tự động và phân khúc dựa trên chính sách giúp giảm thời gian triển khai từ vài tuần xuống còn vài ngày, đẩy nhanh thời gian tiếp thị các dịch vụ mới.
• Hiệu quả chi phí:Sự kết hợp giữa tính cạnh tranhGiá 980-9I45D-00H005, vòng đời dài và chi phí hoạt động giảm mang lại tổng chi phí sở hữu thấp hơn trong khoảng thời gian 5 năm so với các giải pháp tương đương của các nhà cung cấp khác.

Đối với các kiến ​​trúc sư mạng và các nhà lãnh đạo vận hành, sự lựa chọn rất rõ ràng:Mạng tốc độ cao trung tâm dữ liệu 980-9I45D-00H005nền tảng không chỉ là một bản nâng cấp tăng dần—nó là một khoản đầu tư chiến lược vào cơ sở hạ tầng phù hợp với tương lai và có thể mở rộng quy mô cho doanh nghiệp của bạn.