PowerScale: Nền tảng kiến ​​trúc cho khối lượng công việc GenAI

Bắt tay vào hành trình tạo ra AI (GenAI), một sự kết hợp mang tính đột phá giữa trí tuệ nhân tạo và dữ liệu phi cấu trúc, đòi hỏi một kiến ​​trúc lưu trữ mạnh mẽ có khả năng điều hướng sự phức tạp và mở rộng quy mô cùng với sự đổi mới. Nhập PowerScale . Bộ lưu trữ đáng tin cậy, dẫn đầu thị trường của chúng tôi được thiết kế để hợp lý hóa môi trường CNTT và thúc đẩy phân phối mô hình GenAI với tốc độ, sự đơn giản và tiết kiệm chi phí chưa từng có.

Kiến trúc PowerScale được làm sáng tỏ

Trọng tâm của PowerScale là kiến ​​trúc do AI tạo ra, được hỗ trợ bởi phần mềm OneFS , được thiết kế để quản lý dữ liệu phi cấu trúc trong môi trường phân tán. Hãy đi sâu vào ba lớp nền tảng.

Lớp truy cập của khách hàng . Thành phần quan trọng này của hệ thống tệp mạng đảm bảo quyền truy cập liền mạch vào dữ liệu phi cấu trúc từ nhiều máy khách và khối lượng công việc khác nhau. Tự hào với khả năng kết nối ethernet tốc độ cao và hỗ trợ nhiều giao thức như Hệ thống tệp mạng (NFS), Khối tin nhắn máy chủ (SMB) và Hệ thống tệp phân tán Hadoop (HDFS) , Lớp truy cập máy khách đơn giản hóa và thống nhất quyền truy cập tệp trên các khối lượng công việc khác nhau. Nó bao gồm các công nghệ tiên tiến như NVIDIA GPUDirect Storage và Remote Direct Memory Access (RDMA), hỗ trợ truyền dữ liệu trực tiếp giữa bộ nhớ GPU và thiết bị lưu trữ cho các ứng dụng GenAI. Chính sách cân bằng tải thông minh tối ưu hóa hiệu suất và tính khả dụng, trong khi các biện pháp kiểm soát nhiều bên thuê đảm bảo mức độ bảo mật và dịch vụ phù hợp.

Lớp trình bày tệp OneFS . Thống nhất quyền truy cập dữ liệu trên toàn cụm, lớp này giúp loại bỏ rắc rối lo lắng về vị trí dữ liệu vật lý. OneFS tích hợp liền mạch khả năng quản lý khối lượng, bảo vệ dữ liệu và phân tầng, đơn giản hóa việc quản lý khối lượng dữ liệu lớn trên nhiều loại lưu trữ khác nhau. Với tính sẵn sàng cao và hoạt động không gián đoạn, nó cho phép người dùng nâng cấp, mở rộng và di chuyển dễ dàng, đảm bảo hệ thống tệp thông minh và hiệu quả thích ứng với các nhu cầu đa dạng.

Lớp cụm lưu trữ và tính toán PowerScale . Đóng vai trò là xương sống, lớp này cung cấp các nút và các thành phần mạng nút nội bộ, cho phép các cụm tệp có khả năng mở rộng và có tính sẵn sàng cao. Từ các cụm nhỏ, giá cả phải chăng xử lý công suất cơ bản và các tác vụ tính toán cho đến các cấu hình mở rộng chứa dữ liệu ở quy mô petabyte, PowerScale dễ dàng mở rộng quy mô và tự động cân bằng các cụm mà không phải chịu gánh nặng quản trị. Được thiết kế để quản lý vòng đời dễ dàng, các nút hỗ trợ nâng cấp, di chuyển và làm mới công nghệ mà không làm gián đoạn hoạt động của cụm.

Các lớp này tạo thành nền tảng cho việc triển khai GenAI, hỗ trợ việc nhập, xử lý và phân tích dữ liệu hiệu suất cao theo cách linh hoạt và “luôn bật”.

Khả năng cốt lõi của PowerScale

Được cải tiến nhờ những cải tiến mới nhất trong công nghệ PowerScale all-flash và phần mềm OneFS, các nhà phát triển có thể đẩy nhanh vòng đời AI từ chuẩn bị dữ liệu đến suy luận mô hình. Được điều khiển bởi các máy chủ Dell PowerEdge , PowerScale mang lại hiệu suất nâng cao, tăng tốc độ đọc và ghi truyền phát cho các mô hình AI tiên tiến. Những khả năng cốt lõi này, kết hợp với các nút hiệu suất cao và mật độ cao, mở đường cho các quyết định dựa trên dữ liệu thông minh với tốc độ và độ chính xác tuyệt vời.

GPUDirect cho hiệu suất cực cao . Tận dụng bộ lưu trữ GPUDirect, PowerScale thiết lập đường dẫn trực tiếp giữa bộ nhớ GPU và bộ lưu trữ, giảm độ trễ và tăng băng thông. Hỗ trợ các máy chủ hỗ trợ GPUDirect và NFS qua RDMA, nó tăng cường thông lượng và giảm mức sử dụng CPU, mang lại cải thiện băng thông và thông lượng lên tới tám lần.

Trình điều khiển máy khách để hỗ trợ Ethernet thông lượng cao . Nâng cao hiệu suất của máy khách NFS qua mạng Ethernet tốc độ cao, trình điều khiển máy khách tùy chọn cho phép tận dụng đồng thời nhiều kết nối TCP đến các nút PowerScale khác nhau. Kiến trúc phân tán này đạt được thông lượng cao hơn cho các hoạt động I/O, cải thiện hiệu suất gắn NFS đơn lẻ và cân bằng lưu lượng mạng để ngăn ngừa tắc nghẽn.

Thu nhỏ để tăng và giảm quy mô . Được thiết kế để có khả năng mở rộng liền mạch, PowerScale đáp ứng nhu cầu GenAI ngày càng phát triển, từ các cụm nhỏ đến môi trường nhiều petabyte. Với việc bổ sung và nâng cấp nút dễ dàng, PowerScale đảm bảo hiệu suất nhất quán và có thể dự đoán được, ngay cả trên các loại nút và cấu hình khác nhau.

Tính linh hoạt để hỗ trợ các tầng lưu trữ . Cung cấp tất cả các nút Flash, Hybrid và Archive, PowerScale đáp ứng nhu cầu và ngân sách lưu trữ đa dạng. Chính sách cân bằng tải thông minh tối ưu hóa việc sử dụng tài nguyên, đồng thời giảm dữ liệu nội tuyến giúp giảm chi phí lưu trữ hiệu quả bằng cách loại bỏ dữ liệu trùng lặp hoặc dư thừa.

Cung cấp GenAI ngay hôm nay

Trong lĩnh vực GenAI, việc lựa chọn kiến ​​trúc là điều tối quan trọng. PowerScale nổi lên như một giải pháp tối ưu, đẩy nhanh hành trình AI và mang lại kết quả tốt hơn. Với khả năng vô song, bao gồm giao tiếp GPU trực tiếp, xử lý dữ liệu tốc độ cao và khả năng mở rộng liền mạch, PowerScale mở đường cho sự đổi mới vô song cho quy trình làm việc của GenAI. Tìm hiểu thêm về phương pháp lưu trữ tệp mở rộng linh hoạt, an toàn và hiệu quả nhất thế giới tại đây .