SuperEMeans ускоряет e-means в 3 раза без потери качества кластеризации
SuperEMeans: Making e-means 3× faster
Мы объединили SuperKMeans и e-means в SuperEMeans: на эмбеддингах OpenAI (5 млн, 1536 измерений) и Cohere (10 млн, 1024 измерения) кластеризация ускоряется до 3,2 раза при 5 эпохах и до 1,8 раза при 2 эпохах. Recall@100 остаётся на уровне e-means, а иногда и выше. Код открыт в репозитории SuperKMeans.
e-means — это большое дело: он обещает то же качество, что и Lloyd’s, всего за 2 эпохи.