머신/딥러닝 관련해서 누리온/뉴론 사용해보신 분 계실까요?

Question

최근에 파이썬 머신러닝 딥러닝 공부하면서 커뮤니티를 기웃거리기만 했다가 처음으로 글을 써봅니다.. 사물인식 관련해서 YOLO v5라는 모델을 학습시키는데, gpu없이 학습을 시키려니 하루가 꼬박 걸렸고어쩌다가 kisti의 누리온/뉴론 슈퍼컴퓨터를 사용할 수 있는 기회가 생겼는데요, 코드를 짰던 환경이랑 슈퍼컴퓨터 환경이랑 다르다보니 코드 자체가 돌아가질 않네요;; 가장먼저 시도해봐야 할 것은 코드를 짰던 컴터의 환경을 슈퍼컴퓨터에 똑같이 구성하는 일일텐데,처음으로 이런 시스템을 접하다보니 슈퍼컴 접속에 파일 이동에 작업제출 해본 것 만으로도진이 빠지네요..;; 윈도우에서 파이참이나 코랩으로만 작업하다보니 리눅스 명령어는 생소하고..복붙은 왜 안되는지..슈퍼컴 환경은 놔두고 내 컴터환경을 슈퍼컴 환경으로 만들어서 코드를 바꾸는게 빠르려나 싶다가도그러다 이도저도 안되면 어쩌나..하다가 자료를 찾아봐도 없고... 저는 gpu를 사용해야 해서 뉴론을 사용하려고 하는데, 먼저 사용해본 분들께 조언을 구하고 싶네요..사실 제가 지금 뭘 알고 뭘 모르고 있는지 조차 구분이 잘 안되고 있지만..일단 환경과 관련된 부분부터 도움을 얻고 싶은데, 참고할 만한 경험이나 자료에 대해 알려주시면 감사하겠습니다. 편안한 밤 보내세요!

LLM만들자 · Answer

누리온 사용해 본적은 없지만...말씀 주신 것을 보고 검색해 보니 그냥 리눅스가 설치된 GPU 서버 같습니다... 설치된 리눅스 OS가 뭔지를 보시고.. 만약 centos라면 &#34;centos 사용 법&#34;으로 검색해서 배우시면 될 듯 합니다. 우선 뉴럴넷을 학습 시키려면 파이썬 개발 환경을 구축해야 해서 Anaconda 설치를 추천 드리고요, Anaconda 설치된 이후에는 바로 파이썬을 사용할 수가 있겠습니다. 님 컴터가 리눅스면 바로 sshfs 등으로 슈퍼컴터의 특정 디렉터리에 님 코드가 들어있는 디렉터리를 마운트 시킬 수도 있을텐데요..음... 윈도우 리눅스 마운트 등의 키워드로 검색을 해보시면 될 듯 합니다.

takeone · Answer

댓글 감사합니다. 말씀해주신대로 찾아보니 OS가 CentOS 7.4 로 되어있더군요. Anaconda로 환경은 구축할 수 있게 설명은 되어 있는데 제 컴터에 설치된 모든 라이브러리를모두 같은 버전으로 설치할 수 있을지(requirements.txt를 이용하면 이것도 될 것 같긴하지만..),가능하다면 어떻게 해야 하는지 세부적으로 안내가 되어 있진 않아서 한번 시도해봐야 할 것 같습니다. 리소스를 할당받으면 할당받기 시작한 시간부터 반납한 시간만큼 과금되기 때문에 실시간으로코드를 돌려 놓기는 힘들 것 같습니다. (얼마나 걸릴지 아직 알 수 없어서요) 시간이 여의치는 않아서 유튜브 검색하면서 배워보겠습니다. 조언 감사합니다.

머신/딥러닝 관련해서 누리온/뉴론 사용해보신 분 계실까요?

2개의 답변

Q&A 목록