코드 스위칭 정보 검색: 벤치마크, 분석 및 현재 검색기의 한계
Code-Switching Information Retrieval: Benchmarks, Analysis, and the Limits of Current Retrievers
TL;DR AI
1분핵심 요약
새 연구는 코드스위칭 정보검색 벤치마크와 11개 태스크 평가 세트를 제안했다.
통계적, dense, late-interaction 검색기 모두 혼합 언어 질의에서 성능 저하가 크게 나타났다.
순수 언어와 혼합 언어 텍스트 사이의 임베딩 공간 불일치가 확인됐고, 일반적인 다국어 개선책은 효과가 제한적이었다.
결과적으로 코드스위칭 질의는 최신 다국어 시스템에서도 여전히 큰 약점임이 드러났다.
같은 주제
