검색
한국어

검색, 추천에 쓰는 투타워 모델, 사전 계산으로 빠르게 찾고 오답 고르는 법으로 학습(zenn.dev)

startupxo 토론하기

작성 언어: 한국어작성 언어로 보기

쉬운 요약

- 투타워는 검색어나 사용자 정보를 읽는 신경망과 검색 대상 항목을 읽는 신경망을 따로 두고, 각각 만든 숫자 묶음(벡터)을 곱해 얼마나 맞는지 점수를 낸다. 점수가 높은 항목을 위에 보여 준다. - 항목 쪽 벡터는 미리 계산해 저장해 둘 수 있어, 검색 때는 질의 쪽만 계산하면 된다. 필자는 이 점이 대량 후보 검색에 효율적이라고 설명한다. - 학습에서는 같은 묶음 안의 다른 정답 항목을 오답으로 재사용한다. 인기 항목이 오답으로 과하게 쓰이는 편향은 출현 확률로 보정하고(Yi 등 논문), 로그에 안 나오는 항목은 무작위 오답으로 보완한다(Yang 등 논문). - 헷갈리는 오답(hard negative)을 쓰는 방법에서 Facebook 검색 논문(Huang 등)은 101~500위 후보를 쓸 때 재현율이 가장 좋았다고 보고했다. 배포 시 근사 탐색은 속도를 높이지만 일부 후보를 놓칠 수 있다.

원문 읽기 ↗

발견한 곳

Zenn ↗ / 매체 발행 글

비슷한 일을 겪어 본 적이 있나요? 그때 어떻게 했는지 한두 줄로 들려주세요. 제품을 잘 몰라도 괜찮습니다.

로그인하고 댓글 쓰기

키보드 단축키

J와 K, 또는 위아래 방향키로 글을 고르고 Enter로 엽니다.

K ↑ / J ↓
이전 글 / 다음 글
Enter C
선택한 글의 요약과 댓글 열기
O
선택한 글의 원문 열기
/
검색
?
이 도움말 보기
Tab
글쓰기나 댓글 버튼으로 이동한 뒤 Enter

입력 칸에서는 평소처럼 입력하세요. Tab과 Enter는 항상 사용할 수 있습니다.