본문 바로가기

분류 전체보기40

[Slurm] 노드 not responding 문제 팀에서 운영하던 GPU 클러스터에서 노드들이 간헐적으로 통신이 되지 않는 문제가 있었다. Idle*, drain*, down* 이런식으로 떠있는 노드들이 종종 발생하였고, 이로 인해 노드와 통신이 되지 않으면서 prolog error 및 학습이 종료되었다. prolog error는 job 종료하자마자 바로 학습을 재시작했을 때 발생하는 경우였는데, 이번에는 로그를 확인했을 때 노드와 connection이 맺어지지 않으면서 prolog 스크립트를 실행하지 못해서 발생하였다.  왜.. 커넥션이...되지 않았을까? ㅂㄷㅂㄷ.. Idle* drain* down* 이 뜨는 이유...* 이 뜨는 이유는 서버가 unreachable 상태일때 발생한다. * 상태에서 지속되면 노드가 drain상태가 된다. drain상태.. 2025. 2. 19.
4장 free 영역이 숨기고 있는 것들 # free -m total used free shared buff/cache availableMem: 7941 5626 361 166 2403 2314Swap: 0 0 0 Memtotal: 시스템에 설치되어 있는 전체 메모리양used: 사용하고 있는 메모리 양free: 아직 사용하고 있지 않은 메모리양shared: 프로세스 사이에 공유하고 있는 메모리 양buff/cache: 버퍼,캐시 용도로 사용하고 있는 메모리 양 (프로세스가 사용하는게 아니라 커널에서 사용)swap4.2 buffered, ca.. 2024. 12. 29.
[서평] 흰 - 한강 "흰"이라는 책을 주차별로 나누어 읽고 책을 읽어나가며 서평을 진행하였습니다!  [1주차] 책을 읽기 전이번에 노벨문학상을 받으신 한강 작가님의 책을 춘경야독 서평 쓰기에서 읽는다는 소식에 후다닥 달려왔습니다..! ​먼저 책 표지의 느낌은 “흰”이라는 책 제목과는 다르게 어두운 색의 표지였어요. "흰"이라고 생각했을 때 깨끗한 이미지 순수한 이미지도 있지만 무언가 공허하고 쓸쓸한 느낌도 있는데 표지에서 잘 전달되는 것 같았습니다. 꽤나 최근에 쓰여진 책으로 생각했는데 찾아보니 2016년도에 출판되었더라구요. 이 책 관련해서 이것저것 찾으면서 처음 알게된 것들이 있는데요!! 노벨문학상이라는게 하나의 작품에 대해서 주어지는 상인 줄 알았는데 찾아보니 영향력있는 작품을 쓴 작가에게 주어지는 상이더라구요. ㅎㅎ.. 2024. 11. 30.
[AWS] aws practitioner 시험 공부 자료 & 팁 공부 과정 : - 백서 1회독 및 정리 (어쩌면 3~4회독?) - 덤프 200문제 - 덤프 풀면서 잘 모르는 개념이 있으면 정리본에서 다시 찾아보고, 새로운 개념이 나오면 추가 정리 - 문제 1회 푼 이후 개념 정리하고 다시 한번 더 풀어보았습니다. 모든 공부가 마찬가지겠지만.. 항상 오답을 정리하는게 중요한 것 같아요..! 오답을 정리하다보면 기존에 알고 있던거도 헷갈릴 때가 있잖아요..? 그럴 때 헷갈리는 개념을 다시 한번 잡아주면 그제서야 온전히 알게 되는 것 같습니다 ㅎㅎ (이틀 동안 달렸습죠..포항항) 백서 보고 정리한 내용 올려놓습니다! — Amazon Web Service 소개 — 클라이언트-서버 모델이란? 클라이언트는 사람이 컴퓨터 서버에 요청을 보내기 위해 상호 작용하는 웹 브라우저 또는.. 2023. 4. 10.

티스토리툴바