머신러닝 초보 자연어처리 유사도 측정에 대해 질문이 있습니다.

Question

현재 저는 대표어, 동의어1..6까지 이루어진 데이터를 fasttext 모델에 학습시키고 품목명이 적혀있는 엑셀을 읽어들여 해당 품목명과 일정 비율 이상의 유사도를 가진 단어를 추출하려고 하고 있습니다.대표어와 동의어들을 한줄씩 묶어 문장으로 만들고 해당 데이터를 학습시켜 유사도를 측정해보려했으나결과가 어느정도 유사하게 나오지만 유사도가 낮게 나오는 현상 예)0.22099727392196655 또는 아예 다른 단어들이 유사도가 매우 낮게 나오는 현상이 나오고 있습니다.혹시 이 현상을 해결하기 위해 어떤 조치를 취해야할지 조언을 구하고싶습니다.

Magritte · Answer

코드 볼 수 있을까요?

머신러닝 초보 자연어처리 유사도 측정에 대해 질문이 있습니다.

1개의 답변

기술 목록