Các tính năng của Giải pháp Dell EMC Sẵn sàng cho Bộ lưu trữ HPC BeeGFS

Lưu ý: Cấu hình trên của thiết lập phương tiện chỉ nhằm mục đích kiểm tra thông lượng của các mục tiêu lưu trữ được định cấu hình trong các cấu hình RAID khác nhau bằng công cụ StorageBench.

StorageBench Write Benchmark – Trên cấu hình nhỏ với Mục tiêu lưu trữ được định cấu hình trong RAID 0

Điểm chuẩn lưu trữ được bắt đầu và theo dõi bằng công cụ beegfs-ctl. Gói beegfs-utils cung cấp công cụ dòng lệnh beegfs-ctl có thể được sử dụng để chạy điểm chuẩn mục tiêu lưu trữ. Ví dụ sau bắt đầu điểm chuẩn ghi trên tất cả các mục tiêu của tất cả các máy chủ lưu trữ BeeGFS với kích thước khối IO là 512KB, sử dụng 16 luồng cho mỗi mục tiêu, mỗi luồng sẽ ghi 200Gb dữ liệu vào tệp của chính nó.

[root@stor1 ~]# beegfs-ctl –storagebench –alltargets –write –blocksize=512K –size=200G –threads=16
Điểm chuẩn bộ nhớ ghi đã được bắt đầu.
Bạn có thể truy vấn trạng thái bằng đối số –status của beegfs-ctl.
Trạng thái điểm chuẩn của máy chủ:
Đang chạy: 10

Đầu ra “Đang chạy: 10” cho biết có tổng cộng 10 mục tiêu lưu trữ được định cấu hình trong hệ thống.

Để truy vấn trạng thái/kết quả điểm chuẩn của tất cả các mục tiêu, có thể thực hiện lệnh sau:

[root@stor1 ~]# beegfs-ctl –storagebench –alltargets –status
Trạng thái điểm chuẩn của máy chủ:
Đã hoàn thành: 10
Ghi kết quả điểm chuẩn:
Thông lượng tối thiểu: 4692435 KiB/giây ID nút: stor1-numa0-2 [ID: 6], targetID: 50
Thông lượng tối đa: 5368537 KiB/s nodeID: meta-stor-numa1-2 [ID: 2], targetID: 48
Thông lượng trung bình: 4907091 KiB/s
Thông lượng tổng hợp: 49070915 KiB/s

Thêm tiết vào lệnh trên, hiển thị danh sách tất cả các mục tiêu và thông lượng tương ứng của chúng.

[root@meta-stor ~]# beegfs-ctl –storagebench –alltargets –status –verbose
Trạng thái điểm chuẩn của máy chủ:
Đã hoàn thành: 10
Viết kết quả điểm chuẩn:
Thông lượng tối thiểu: 4692435 KiB/giây ID nút: stor1-numa0-2 [ ID: 6], targetID: 6
Thông lượng tối đa: 5368537 KiB/s nodeID: meta-stor-numa1-2 [ID: 2], targetID: 2
Thông lượng trung bình: 4907091 KiB/s
Thông lượng tổng hợp: 49070915 KiB/s
Danh sách tất cả mục tiêu:
1 5368477 KiB/s nútID: meta-stor-numa1-1 [ID: 1]
2 5368537 KiB/s nútID: meta-stor-numa1-2 [ID: 2]
3 4706368 KiB/s nútID: stor1-numa0 -1 [ID: 3]
4 4896077 KiB/s nodeID: stor1-numa1-1 [ID: 4]
5 4872876 KiB/s nútID: stor1-numa1-2 [ID: 5]
6 4692435 KiB/s nútID: stor1-numa0-2 [ID: 6]
7 4879054 KiB/s nútID: stor2-numa1-2 [ID: 7 ]
8 4864737 KiB/s nútID: stor2-numa1-1 [ID: 8]
9 4696152 KiB/s nútID: stor2-numa0-1 [ID: 9]
10 4726202 KiB/s nútID: stor2-numa0-2 [ID: 10]

Suy luận từ đầu ra:

Thông lượng trung bình cho mỗi mục tiêu lưu trữ được định cấu hình trong RAID 0 là 5,02 GB/giây.  

StorageBench Write Benchmark – Trên cấu hình Trung bình với Mục tiêu lưu trữ được định cấu hình trong RAID 10

Ví dụ sau bắt đầu điểm chuẩn ghi trên tất cả các mục tiêu của tất cả các máy chủ lưu trữ BeeGFS với kích thước khối IO là 512KB, sử dụng 16 luồng cho mỗi mục tiêu, mỗi luồng sẽ ghi 200Gb dữ liệu vào tệp của chính nó.

[root@node001 ~]# beegfs-ctl –storagebench –alltargets –write –blocksize=512K –size=200G –threads=16
Điểm chuẩn ghi bộ nhớ đã được bắt đầu.
Bạn có thể truy vấn trạng thái bằng đối số –status của beegfs-ctl.
Trạng thái điểm chuẩn của máy chủ:
Đang chạy: 22

Thêm tiết vào lệnh trên, hiển thị danh sách tất cả các mục tiêu và thông lượng tương ứng của chúng.

[root@node001 ~]# beegfs-ctl –storagebench –alltargets –status –verbose
Trạng thái điểm chuẩn của máy chủ:
Đã hoàn thành: 22
Viết kết quả điểm chuẩn:
Thông lượng tối thiểu: 2705987 KiB/giây ID nút: node006-numa0-1 [ID: 19], targetID: 1
Thông lượng tối đa: 3364311 KiB/s nodeID: node001-numa1-1 [ID: 1], targetID: 1
Thông lượng trung bình: 3212845 KiB/s
Thông lượng tổng hợp: 70682603 KiB/s

Danh sách tất cả các mục tiêu:
1 3364311 KiB/s nodeID: node001-numa1-1 [ID: 1]
2 3361591 KiB/s nodeID: node001-numa1-2 [ID: 2]
3 3309530 KiB/s nodeID: node002-numa0- 1 [ID: 3]
4 3312840 KiB/giây nútID: nút002-numa0-2 [ID: 4]
5 3332095 KiB/giây nútID: nút002-numa1-1 [ID: 5]
6 3323319 KiB/giây nútID: nút002-numa1 -2 [ID: 6]
7 3313000 KiB/giây nútID: node003-numa0-1 [ID: 7]
8 3321214 KiB/giây nútID: node003-numa0-2 [ID: 8]
9 3335072 KiB/giây nútID: node003- số1-1 [ID: 9]
10 3339743 KiB/s nútID: node003-numa1-2 [ID: 10]
11 3302175 KiB/s nútID: node004-numa0-1 [ID: 11]
12 3309474 KiB/s nútID: node004-numa0-2 [ID: 12 ]
13 3329879 KiB/giây nodeID: node004-numa1-1 [ID: 13]
14 3328291 KiB/giây nodeID: node004-numa1-2 [ID: 14]
15 3306132 KiB/giây nodeID: node005-numa0-1 [ID: 15]
16 3307096 KiB/giây nodeID: node005-numa0-2 [ID: 16]
17 3318436 KiB/giây nodeID: node005-numa1-1 [ID: 17]
18 3329684 KiB/giây nodeID: node005-numa1-2 [ID : 18]
19 2705987 KiB/giây nodeID: node006-numa0-1 [ID: 19]
20 2716438 KiB/giây nodeID: node006-numa0-2 [ID: 20]
21 2707970 KiB/giây nodeID: node006-numa1-1 [ID: 21 ]
22 2708326 KiB/s nodeID: node006-numa1-2 [ID: 22]

Suy luận từ đầu ra:

Thông lượng trung bình cho mỗi mục tiêu lưu trữ là 3,29 GB/giây.

Từ đầu ra của các bài kiểm tra điểm chuẩn StorageBench được thực hiện trên hai thiết lập BeeGFS khác nhau, một với Mục tiêu lưu trữ được định cấu hình trong RAID 0 và một mục tiêu khác với Mục tiêu lưu trữ được định cấu hình trong RAID 10, rõ ràng là hiệu suất ghi tốt hơn với các mục tiêu lưu trữ được định cấu hình trong RAID 0 thay vì trong RAID 10. Khi lệnh dd được sử dụng để ghi tệp 10G với kích thước khối 1M và “ofrag=direct”, tốc độ trung bình là khoảng 5,1 GB/giây cho hệ thống nhỏ được định cấu hình trong RAID 0 trong khi thông lượng trung bình là khoảng 3,4 GB /s cho hệ thống trung bình được định cấu hình trong RAID 10, có thể so sánh với kết quả thu được bằng công cụ storagebench. 

StorageBench – Để xác định các mục tiêu lưu trữ bị lỗi hoặc bị định cấu hình sai

StorageBench đã được chạy trên cấu hình trung bình được mô tả trong blog thông báo để tìm hiểu xem có bất kỳ mục tiêu lưu trữ nào bị cấu hình sai hoặc bị lỗi trong hệ thống hay không.

[root@node001 ~]# beegfs-ctl –storagebench –alltargets –status –verbose
Trạng thái điểm chuẩn của máy chủ:
Đã hoàn thành: 33
Đọc kết quả điểm chuẩn:
Thông lượng tối thiểu: 2830479 KiB/giây ID nút: node003-numa1-2 [ID: 14], targetID: 14
​​Thông lượng tối đa: 3025500 KiB/s nodeID: node005-numa0-1 [ID: 22], targetID: 22
Thông lượng trung bình: 2917836 KiB/s
Thông lượng tổng hợp: 96288596 KiB/s
Danh sách tất cả các mục tiêu:
1 2950039 KiB/s nodeID: node001-numa1-1 [ID: 1]
2 2956121 KiB/s nodeID: node001-numa1-2 [ID: 2]
3 2954473 KiB/s nodeID: node001-numa1-3 [ID: 3]
4 2957658 KiB/s nodeID: node002-numa0-1 [ID: 4]
5 2947109 KiB/s nodeID: node002-numa0-2 [ID: 5]
6 2969886 KiB/s nodeID: node002-numa0-3 [ID: 6 ]
7 2892578 KiB/giây nodeID: node002-numa1-1 [ID: 7]
8 2886899 KiB/giây nodeID: node002-numa1-2 [ID: 8]
9 2888972 KiB/giây nodeID: node002-numa1-3 [ID: 9]
10 2861995 KiB/giây nodeID: node003-numa0-1 [ID: 10]
11 2874314 KiB/giây nodeID: node003-numa0-2 [ID: 11]
12 2879096 KiB/giây nodeID: node003-numa0-3 [ID : 12]
13 2832635 KiB/s nútID: nút003-numa1-1 [ID: 13]
14 2830479 KiB/giây nodeID: node003-numa1-2 [ID: 14]
15 2830971 KiB/giây nodeID: node003-numa1-3 [ID: 15]
16 2986890 KiB/giây nodeID: node004-numa0-1 [ID: 16 ]
17 2979197 KiB/giây nodeID: node004-numa0-2 [ID: 17]
18 2983958 KiB/giây nodeID: node004-numa0-3 [ID: 18]
19 2897974 KiB/giây nodeID: node004-numa1-1 [ID: 19]
20 2900880 KiB/s nútID: nút004-numa1-2 [ID: 20]
21 2904036 KiB/s nútID: nút004-numa1-3 [ID: 21]
22 3025500 KiB/s nútID: nút005-numa0-1 [ID : 22]
23 3021558 KiB/s nodeID: node005-numa0-2 [ID: 23]
24 3017387 KiB/s nodeID: node005-numa0-3 [ID: 24]
25 2921480 KiB/s nodeID: node005-numa1-1 [ID: 25]
26 2930226 KiB/s nodeID: node005-numa1-2 [ID: 26 ]
27 2930548 KiB/giây nodeID: node005-numa1-3 [ID: 27]
28 2900018 KiB/giây nodeID: node006-numa0-1 [ID: 28]
29 2898520 KiB/giây nodeID: node006-numa0-2 [ID: 29]
30 2907113 KiB/giây nodeID: node006-numa0-3 [ID: 30]
31 2855079 KiB/giây nodeID: node006-numa1-1 [ID: 31]
32 2853527 KiB/giây nodeID: node006-numa1-2 [ID : 32]
33 2861480 KiB/giây nútID: nút006-numa1-3 [ID: 33]

Từ đầu ra trên, rõ ràng là tất cả các mục tiêu lưu trữ hoạt động thống nhất và không có mục tiêu bị lỗi trong hệ thống.

Kết luận và công việc trong tương lai

Blog này đã thảo luận về các tính năng chính của BeeGFS và giải thích tính hữu ích của tiêu chuẩn băng ghế lưu trữ để đánh giá hoặc so sánh hiệu suất của các cấu hình RAID khác nhau và cũng để xác định xem có bất kỳ mục tiêu lưu trữ nào bị lỗi hoặc bị định cấu hình sai hay không. Là một phần của các bước tiếp theo, chúng tôi sẽ xuất bản sách trắng sau với hiệu suất siêu dữ liệu và hiệu suất IOR cùng với các chi tiết bổ sung về cân nhắc thiết kế, điều chỉnh và cấu hình.