Dell Validated Design cho HPC pixstor Storage—Giải pháp chung với Kalray

Tổng quan

Trong điện toán hiệu năng cao (HPC), tất cả các thành phần khác nhau của nó phải được cân bằng để có hiệu suất tối ưu và tránh tắc nghẽn. Sự phát triển công nghệ của các thành phần nút điện toán như CPU ​​có số lượng lõi cao hơn, bộ nhớ lớn hơn và nhanh hơn, bus PCIe nhanh hơn và mạng ngày càng nhanh hơn đã khiến bộ nhớ trở thành nút thắt cổ chai trong nhiều khối lượng công việc. Hệ thống tệp song song (PFS) có thể mở rộng để đáp ứng nhu cầu hiệu suất cao hơn, cung cấp quyền truy cập đồng thời vào một tệp hoặc một tập hợp tệp từ nhiều nút, phân phối dữ liệu hiệu quả và an toàn tới nhiều LUN trên một số máy chủ lưu trữ và mảng lưu trữ. Các PFS này thường sử dụng phương tiện kéo sợi để cung cấp công suất cao nhất với chi phí thấp nhất. Tuy nhiên, tốc độ và độ trễ của vật liệu quay thường không thể theo kịp nhu cầu của nhiều khối lượng công việc HPC hiện đại. Những tiến bộ nhanh chóng gần đây trong công nghệ lưu trữ như SSD Non-Volatile Memory Express (NVMe), cung cấp các tùy chọn tốt hơn và nhanh hơn cho các hệ thống lưu trữ PFS. Việc sử dụng công nghệ NVMe này dưới dạng bộ đệm liên tục, các tầng nhanh hơn hoặc thậm chí là cào nhanh (cục bộ hoặc phân tán) có thể giảm thiểu hoặc loại bỏ các sự cố phương tiện quay.

Một hệ thống lưu trữ cân bằng tốt là cần thiết để đạt được hiệu suất tối ưu. Các thành phần của nó như mảng back-end, bộ điều khiển lưu trữ, ổ đĩa, thẻ IO, bộ điều hợp mạng và bộ chuyển mạch phải có khả năng cung cấp băng thông tương tự và phân phối tải giữa các bộ xử lý và bộ nhớ của máy chủ mà chúng sử dụng. PFS và phần mềm hỗ trợ phải có khả năng cân bằng tải trên các thành phần hệ thống lưu trữ khác nhau phân phối dữ liệu giữa chúng, giám sát hiệu suất cùng với tình trạng của các thành phần và cung cấp các công cụ quản trị để quản lý giải pháp một cách hiệu quả.

Dell Validated Design cho HPC pixstor Storage là một giải pháp (HA) có tính khả dụng cao. Nó cung cấp một tầng dung lượng cao, tiết kiệm chi phí dựa trên các máy chủ Dell PowerEdge R650, R750 và R7525 cũng như các mảng lưu trữ PowerVault ME5084 được bố trí trong các mô-đun lưu trữ ME5 và các nút NVMe để đáp ứng nhu cầu băng thông cao. Mỗi mô-đun lưu trữ ME5 có thể mở rộng dung lượng của nó lên 11,93 PiB của dung lượng lưu trữ có sẵn và được định dạng (dung lượng thô 13.440 TB) và có thể mở rộng quy mô theo yêu cầu của khách hàng bằng cách thêm nhiều mô-đun hơn đến dung lượng và hiệu suất cần thiết. Đối với các tình huống yêu cầu thông lượng cao hoặc yêu cầu siêu dữ liệu, tầng NVMe có thể mở rộng hiệu suất bằng cách thêm các cặp nút HA với thiết bị NVMe bằng cách sao chép giữa các cặp máy chủ.

Bộ lưu trữ pixstor sử dụng Hệ thống tệp song song chung (GPFS) đã được thiết lập tốt, hiện được gọi là Quy mô phổ, với đầy đủ các tính năng dành cho doanh nghiệp có thể được phân phối theo địa lý, các thành phần giúp đơn giản hóa việc quản trị, khả năng tìm kiếm nâng cao bổ sung, khả năng kết nối rộng rãi bằng các giao thức doanh nghiệp và truy cập vào các thiết bị lưu trữ khác cả trong và ngoài cơ sở bằng giao thức đám mây và các giao thức doanh nghiệp khác. Giải pháp lưu trữ này được hỗ trợ đầy đủ (phần cứng và phần mềm) với các dịch vụ triển khai có sẵn và cung cấp không gian tên duy nhất, nhiều tầng, dễ sử dụng, thông lượng cao, trong số các tính năng khác.

Mục đích tài liệu

Tài liệu này mô tả kiến ​​trúc, nguyên tắc thiết kế chung và hiệu suất của giải pháp lưu trữ HPC pixstor cho các khối lượng công việc vận hành siêu dữ liệu tuần tự, truyền nhỏ và IO ngẫu nhiên và truyền dữ liệu lớn.

Lưu ý : Nội dung của tài liệu này hợp lệ đối với các phiên bản phần mềm và phần cứng được mô tả. Để biết thông tin về các cấu hình cập nhật cho các phiên bản phần cứng và phần mềm mới hơn, hãy liên hệ với đại diện bán hàng Dell Technologies của bạn.

Khán giả

Tài liệu này chủ yếu dành cho các kiến ​​trúc sư và quản trị viên giải pháp dự định sử dụng hoặc đang sử dụng các cụm HPC và yêu cầu lưu trữ hiệu suất cao để theo kịp sức mạnh xử lý hiện đại. Tài liệu này không phải là hướng dẫn cấu hình chi tiết nhưng cung cấp các phương pháp hay nhất về cấu hình. Nó giả định rằng người đọc hiểu các khái niệm cơ bản về đo điểm chuẩn hiệu suất lưu trữ.