SuperEMeans, e-means와 SuperKMeans 결합해 클러스터링 3배 빨라졌다

SuperEMeans: Making e-means 3× faster

SuperKMeans 개발팀이 e-means를 자체 라이브러리에 구현하고 SuperKMeans의 차원 가지치기 기법과 결합한 SuperEMeans를 공개했다. OpenAI 5M 1536차원 임베딩과 Cohere MS MARCO 10M 데이터셋에서 실험한 결과, 5 epoch 기준 e-means 대비 최대 3.2배 빠른 클러스터링 속도를 보였고 recall@100 품질은 동일하게 유지됐다. 다만 e-means 특유의 클러스터 불균형으로 검색 시 스캔하는 벡터 수가 늘어나는 문제도 함께 분석했다.

SuperEMeans substantially accelerates e-means, up to 1.8× faster.

이 날의 다른 글

2026-11-18