안녕하세요 slurm 막접하는 사람입니다.
테스트하면서 두개 서버로( Centos7.6 , sulrm19.05.7 ) slurm 노드별 연동해서 세팅을 맞추고 job제출 후 잘되는 것 같아 만족하는데 궁금한게 있어 존경하는 전문가분들에게 slurm 질문좀 드립니다
질문1. slurm으로 gpu사용할수 있다는데 gpu설정을 할려면 /etc/slurm/slurm.conf 에서 gpu관련 설정정보를 넣고 서비스 재시작하면 되는건가요 ??아니면 다른 별도 설정이 더 필요한지요 ?? ( 엔비디아 드라이버,쿠다툴킷설치 기본으로 함 ) gpu설정 정보 부탁드립니다.
질문2. slurm설정할때 노드별로 호스트네임을 node1~2 이렇게잡는데 이렇게 하지않고 master, slave 이런식으로 하면 안되는건가요 ???
slurm 설정 블로그 대부분 호스트네임을 옆에 숫자를 두면서 하는데 master,slave이런식으로 잡아도 문제없다면 /etc/slurm/slurm.conf 호스트네임 지정을 어떻게 잡는지 링크나 예시좀 부탁드립니다.
안녕하세요 반갑습니다
보통 slurm 서버를 스케쥴러라고 보시면 되고 스케쥴러는 요청된 작업에 대해서 적절한 계산 노드에서 프로그램이 실행되게 해주는 역할만 합니다
.
따라서 GPU를 사용할 수 있다고 하는 것은 결국에는 단순히 slurm에서 자원에 대한 정의만 하는 것 입니다.
잠깐 slurm문서를 봤는데 generic resouce 를 사용해서 처리할수있다고 나옵니다.
slurm.conf 파일과 gres.conf 파일에 GPU 리소스에 대한 정의를 해두시고 데몬 재시작 해주시면 됩니다.
그럼 다음 job을 던지실 때 sbatch -N 1 -n 4 --gres=gpu:1 이런식으로 던지시면 GPU가 달린 계산 노드에서 작업이 실행 됩니다.
노드들 이름은 마음대로 사용하셔도 됩니다. 보통 스케쥴러 클러스터는 master,slave,계산 노드를 이런형태로 구성이 됩니다.