Legacy 1080ti GPU 노드 설정

[jhgoh]

1080ti GPU 사용을 위한 노드 설정. 남는 데스크탑 PC를 활용.

[jhgoh]

[jhgoh]

cpu gpu 동시 풀로드시 각각 70도 84도 정도로 유지됨. 전원 문제도 없어보임.

프로덕션 모드로 이동해도 될 듯 함

[jhgoh]

기존 데스크탑들의 부품들을 빼서 대부분을 재조립함.

• 케이스: 가장 내부 크기가 큰 것으로 선택 + 파워가 별도 공간으로 분리됨
• CPU, MB: Ryzen 3 2220G, MSI B450M Mortar max (보드-CPU교체는 고려하지 않고 chatgpt 보드 추천을 따름)
• RAM: 2x16GB@3200 + 2x16GB@2666, 바이오스에서 램 클럭을 2666으로 고정함.
• VGA: 바이오스에서 온보드로 강제함
• 파워: 기존에 설치된 파워는 GPU용 파워잭이 없었음. 다른 PC들 중 하나의 파워에 GPU용 파워가 있어 교체함.

ubuntu 22.04 설치하고 기본 설정 완료.
nvidia-driver와 cuda 등 필수 패키지 설치 완료.
hostname은 naong 으로 함 :-)

[jhgoh]

쿨링 테스트로 앞뒤에 미니 선풍기를 놓아 보았지만 큰 차이는 없음. 케이스를 연 채 테스트 해도 마찬가지.
풀로드에서 온도나, nvidia-smi상에서 자체 팬 속도(50%) 등에서 문제가 없어 보임. 서버실에 설치 진행할 것.

[jhgoh]

확인 해 보니 다른 여분 PC쪽이 CPU세대가 달라 성능 차이가 클 것으로 보여 다시 이전 작업 진행함.

• 케이스: 변동 없음.
• CPU, MB: Ryzen 3 Pro 4350G, Asrock B550 pro (4 core 4 thread -> 4 core 8 threads)
• RAM: 변동 없음.
• VGA: 변동 없음
• 파워: 변동 없음. 단, 기존에 설치된 파워에도 GPU 잭이 있었음.

온도 상승 제어를 위해 몇 가지 추가함.

• 바이오스에서 팬 속도 셋업을 silent mode에서 performance mode로 변경
• 바이오스에서 시스템 팬 속도 셋업을 PWM에서 DC로 변경 (3핀이어서 필수)
• nvidia-smi에서 -pm 1 로 persistent mode 켜고, -pl 220으로 전력량 220와트로 제한 (테스트 결과 220와트 이상 잘 못 쓰는 것 같음)

CPU+GPU 동시 풀로드 테스트 결과, 팬 속도 셋업 전 GPU 84도에서 80도로 떨어지는 것으로 확인함. Gflops는 8500대로 나옴.

서버실에 설치 진행할 것.

[jhgoh]

전산실에 서버 설치 완료

[jhgoh]

서버실 환경에서 gpu-burn 5분간 테스트 결과 74도까지만 오름. 추가로 더 해 보는데 75도 정도에서 saturate되는 것 같음. 이전 오피스에서는 84도까지 올랐었음.

[jhgoh]

• telegraf 연동함. inputs.nvidia_smi도 추가함.
• nis 연동함. autofs/nfs 연동함. 로그인 확인함.
• slurm 연동함. 메모리값이 64000으로는 크기가 실측값과 안 맞아서 63으로 조정.
• cgroup v1으로 조정함.

[jhgoh]

sbatch -p gpu2 -G1 ./gputest.sh 식으로 job submit해서 GPU자원을 받아 gpu-burn 실행되는것까지 확인함. 작업 완료.