Dell Validated Design cho HPC pixstor Storage—Giải pháp chung với Kalray (12)

Hiệu suất siêu dữ liệu PowerEdge R650 với MDtest bằng 4 tệp KiB

  • Thử nghiệm này gần giống với thử nghiệm trước, ngoại trừ việc chúng tôi đã sử dụng các tệp nhỏ 4 KiB thay vì 3 tệp KiB, do đó, một phần của mỗi tệp không vừa với inode của nó và một thiết bị khác (bốn nút R650) được sử dụng để lưu trữ phần còn lại của các tập tin. Lệnh sau được sử dụng để chạy điểm chuẩn, trong đó  biến Chủ  đề là số lượng luồng được sử dụng (1 đến 512 tăng dần theo lũy thừa của hai) và  my_hosts.$Threads  là tệp tương ứng phân bổ mỗi luồng trên một nút khác nhau, sử dụng quay vòng để trải đều chúng trên 16 nút điện toán.

    mpirun –allow-run-as-root -np $Threads –hostfile my_hosts.$Threads –map-by node –mca btl_openib_allow_ib 1 –oversubscribe –prefix /usr/mpi/gcc/openmpi-4.1.2a1 / usr/local/bin/mdtest -v -d /mmfs1/perf/mdtest -P -i 1 -b $Directories -z 1 -L -I 1024 -u -t -F -w 4K -e 4K

    Hình 34.     Hiệu suất siêu dữ liệu – Tệp nhỏ (4 K)

    Hoạt động thống kê cho thấy những con số tốt, đạt giá trị cao nhất ở 64 luồng với 9,7 triệu thao tác/giây và hoạt động đọc đạt 3,9 triệu thao tác/giây ở 256 luồng. Thao tác xóa đạt tối đa 442,3K thao tác/giây và thao tác tạo đạt tối đa 147,2K thao tác/giây, cả hai đều ở 128 luồng.

    Vì những con số này dành cho mô-đun siêu dữ liệu với một cặp siêu dữ liệu PowerEdge R650 NVMe và hai cặp siêu dữ liệu PowerEdge R650 NVMe cho dữ liệu, nên hiệu suất siêu dữ liệu sẽ tăng đối với mỗi cặp siêu dữ liệu PowerEdge R650 NVMe bổ sung. Mỗi cặp PowerEdge R650 NVMe dành cho dữ liệu giúp tăng hiệu suất của một số thao tác như tạo, xóa và đọc. Các tệp càng lớn, tác dụng của các cặp PowerEdge R650 NVMe bổ sung được sử dụng cho dữ liệu càng lớn.

     

Tóm tắt cấp độ PowerEdge R650 NVMe

  • Giải pháp hiện tại đã có thể mang lại hiệu suất tốt, dự kiến ​​sẽ ổn định. Ngoài ra, tầng NVMe dự kiến ​​sẽ mở rộng quy mô về công suất và hiệu suất một cách tuyến tính khi có nhiều mô-đun tầng NVMe hơn được thêm vào. Hiệu suất tăng tương tự có thể được mong đợi từ các mô-đun NVMe siêu dữ liệu có nhu cầu cao bổ sung.

    Bảng 9.       Hiệu suất cao nhất và duy trì (2 mô-đun PowerEdge R650 NVMe = 4 máy chủ PowerEdge R650)

    điểm chuẩn

    Hiệu suất cao điểm

    hiệu suất bền vững

    Viết

    Đọc

    Viết

    Đọc

    Máy khách N tuần tự lớn đến N tệp

    40,2 GB/giây

    180,2 GB/giây

    40GB/giây

    180GB/giây

    Máy khách N tuần tự lớn cho một tệp được chia sẻ

    41,8 GB/giây

    180,7 GB/giây

    40GB/giây

    175GB/giây

    Khối nhỏ ngẫu nhiên N máy khách thành N tệp

    591K IOp

    3716K IOps

    575K IOps

    3.700K IOps

    Siêu dữ liệu Tạo tệp trống

    Hoạt động 301,9K

    Hoạt động 150K

    Siêu dữ liệu Thống kê các tệp trống

    10 triệu hoạt động

    Hoạt động 3M

    Siêu dữ liệu Đọc các tệp trống

    Hoạt động 4,03M

    2,3 triệu hoạt động

    Siêu dữ liệu Xóa các tệp trống

    Hoạt động 453,4K

    Hoạt động 312K

    Siêu dữ liệu Tạo 4 tệp KiB

    147.2 Hoạt động

    Hoạt động 110K

    Tệp siêu dữ liệu Stat 4 KiB

    9,7 triệu hoạt động

    Hoạt động 3,9M

    Siêu dữ liệu Đọc 4 tệp KiB

    Hoạt động 4M

    Hoạt động 3,9M

    Siêu dữ liệu Xóa 4 tệp KiB

    442,3 K Hoạt động

    Hoạt động 300K