RAG 기반 추천 모델의 대답이 일관적인 문제.

Question

안녕하세요 한국 전통주의 도수, 맛, 소개 같은 정보를 저장해놓은 문서를 바탕으로 적합한 술을 추천해주는 모델을 프로젝트 삼아 만드는 중입니다. 다음과 같은 문서를 PDF,TXT,XlcX등 다양한 형태로 시도를 해보았으나,00맛 00도수를 가진 술을 추천해줘 라는 말에 계속 특정 한개의 술만을 추천하는 문제가 있습니다. 왜 이 하나의 술에 꽂히게 된건지 어떻게 하면 이를 해결할 수 있는지, 프롬프트수정으로 혹시 될련지 기존에 추천 LLM모델 프로젝트를 해보신 분들에게 도움을 요청하고 싶습니다.

집킨 · Answer

편향이 생긴거죠 학습 데이터 문제일 가능성이 높습니다일단 사전 학습 모델로 어떤걸 썼고, 학습 데이터셋과 평가 데이터셋은 어떻게 구성했고, RAG면 프롬프팅은 어떤식으로 했으며 벡터에서 참조 데이터는 어떻게 구성했는지 등등을 알려주셔야 다른 분들이 보고 뭘 고쳐야 할지 알려주실 수 있을거에요

23rsefsa · Answer

가진 답이 하나니까 하나만 추천하는게 맞지 않나요? 논리적으로 틀린게 없어보이는데...? 예를들어서 XX업무 매뉴얼 추천해줘 라고 했을때 XX업무가 아니라 OO업무 매뉴얼이 나오면 더 이상한거죠. 아니면 개인화된 background data로 다양한 case로 조합 할 수 있게 만드셔야 할거 같은데요?

RAG 기반 추천 모델의 대답이 일관적인 문제.

2개의 답변

Q&A 목록