Lustre 기반 스토리지 시스템에서 IO500 벤치마크 실행 및 최적 파라미터 적용

김효실, 서병준, 황세진, 한주연

http://doi.org/10.5626/JOK.2024.51.6.483

본 논문에서는 분산 병렬파일시스템인 Lustre 기반 스토리지 환경에서 다양한 튜닝 요소를 변경 하면서 IO500 벤치마크를 실행한 비교 연구를 수행한다. 본 논문의 기여는 다음과 같다. 1) IO500 벤치마크 와 Lustre 파일시스템에 대한 사용자 이해를 증진시키고, 2) 대규모 Lustre 환경을 직접 구축하여 IO500 성능을 향상시킬 수 있는 요소를 세가지 측면에서 분석하고, 실험을 통해 적용한 결과를 보여준다. 실험은 Data-on-MDT (DoM), MPI 프로세스 개수 (NP), 및 MPI CPU 친화도 파라미터에 대해 수행하였으며, DoM 을 설정한 경우, 적정 MPI 프로세스를 사용할 경우, CPU 친화도의 --bind-to core-overload-allowed 옵 션을 함께 사용할 경우 성능이 더 좋음을 보였다.