회사 핵심 루트 권한도 얻었습니다
입사할 때 이게 검색 엔진이야 대박이지~ 하시는거 봐도
와 빠르다! 와! 분산 환경! 말고 잘 안 와닿았었는데
그 때 그 상사님이 보여주신 서버와 화면에
오늘 오후부터 이해가쏙쏙되잖아하면서 드디어 루트 계정 받아 접속했네요
1 RAG 공부하기
2 RAG 를 써먹을 기획하기
3 기획한 내용이 실현 가능성이 있는지 벡터 없는 RAG 프로토타입 만들어보기
4 벡터 데이터 생성해낼 수단을 마련해서 테스트하기
5 회사 슈퍼컴으로 벡터 데이터 대령할 수 있으니 검색 엔진 단일 코어 버전업, 플러그인 마이그레이션 등등으로
실 환경과 최대한 비슷한 코어인데 벡터 가용 가능하게 구축하고 RAG 랑 연동하기
6 RAG 동작되는거 확인했으니 단일 코어, Java 스레드들, Python 프로세스들 랑 맞물려 돌아가는 파이프라인 구성해보기
7 단일 코어 상대로 파이프라인 만들어봤으니 기존 검색 엔진 서버 참고해서 서버 13대짜리 클러스터 구성해보기
대충 프로젝트 시작 한달만에 7번 시작까지 달려왔어요
이야 입사 전만 해도 배포 제대로 못 배워서 프로젝트할 땐
백엔드 코드는
배포 환경 구성은 도와줘!
하면서 아는 리눅스 명령어? 손가락? 으로 다 꼽을 수 있지 않을까? 하던 멍춍이가 전데
이미 구축된 레퍼런스가 있긴해도 추가 조건이 걸려 있으니
직접 공식 문서랑 기존 상사님 코드랑 씨름해보고 저만의 코드 만들면서
단일 코어, 간단한 파이프라인 이젠 클러스터 구축에 도전하고 있네요
하나의 프로젝트에서 이렇게 단계적으로 성장할 수 있는 퀘스트가 쏟아져 나오는게 참 신기합니다
그리고 상사님은 기존 시스템만 어떻게 접근하는지, 어떤 구성인지만 간단하게 알려주시고
RAG, Vector Embedding 은 다 네가 책임자야 해서 성장이 더더욱 빨리 되는거 같아요
어떤 분은 반년 1년이 지나도 문서 작업만 해서 화난다 그러는데
저희 회사는 개발 경험이 너무 달아요