[Slurm] Dataset Condensation model 돌리기 (feat. 공용GPU)

 

 

 

 

https://github.com/VICO-UoE/DatasetCondensation

GitHub - VICO-UoE/DatasetCondensation: Dataset Condensation (ICLR21 and ICML21)

돌려볼 모델은 이 아이였습니다. . .

 

 

 

대강 해봤는데, CPU로는 절대 끝을 못보겠다 싶더라고요 . . (불행의 시작)

 

 

 

 

^^_

 

 

 

 

잠결에 들었더니 시험 3번째에 겨우 통과 . .

 

 

 

 

머나먼 머어ㅓㅓㅓㅓㅓㅓㅓㅓ나먼 시행착오 끝에 . 드디어 해결됨

 

 

 

 

랩미팅 + GoogleML + 과제 _ 시험공부 = 추석 반납

 

 

 

 

아주 . 아주 유용하게 쓴 것 (특히 4)

 

 

 

 

까먹기 전에 명령어 정리 ✍️

 

conda init

conda list

conda env list

conda activate pythorch1.12.1_p38

 

source ~/.bashrc

 

vim main.sh (쉘 파일 수정 시)

sbatch main.sh (쉘 파일 돌릴 때)

scancel "$JOBID" 

 

cat logs/slurm-19509.out (중.요.)

 

squeue

mkdir

rmdir / rm -> 폴더 및 파일 삭제

cd .. (뒤로가기)

 

conda install pytorch torchvision torchaudio -c pytorch

conda update -n base -c defaults conda

 

at vim ~.sh

O (수정)

esc (모드 변경)

:wq (저장 및 나가기)

 

srun --gres=gpu:1 --cpus-per-gpu=8 --mem-per-gpu=29G -p debug_ce_ugrad -w moana-r1 --pty $SHELL

nvidia-smi (GPU 확인)

 

srun으로 특정 파티션에 GPU 배정 받기 -> pip3 install torch 등 필요한 라이브러리 설치 

-> exit (nvidia-smi 으로 확인 가능) -> sbatch main.sh -> squeue로 올라오는지 + cat ~~ out 에러 확인하기

 

 

 

 

 

* 터미널에 N시간 갇혀 있었다. ^^_

* 탈출해서 넘 행 복 뿌 듯 .