Steck, Ekanadham & Kallus (2024) — Is Cosine-Similarity of Embeddings Really About Similarity?

占位 entity — recos 论文 ref [10] 引用的批判性文献。

完整 reference: Steck, H., Ekanadham, C., & Kallus, N. (2024). Is cosine-similarity of embeddings really about similarity? In Companion Proceedings of the ACM Web Conference 2024, pages 887–890, Singapore. ACM.

核心贡献: 在 recommender system 场景下, 形式化论证 cosine similarity 度量的"相似度"对推荐排序并不对应人类直觉的"相似度" — 高 cos 不等于高推荐价值。文中把这种不一致归因于 cos 的几何性质 (角度对齐) 与 recommender 目标 (排序 quality) 之间的 misalignment。

对 recos 的角色: 与 Zhou Ethayarajh Card Jurafsky 2022 Cosine Frequency Bias 一起构成 recos 的两条主要 motivation: (1) cos 对特定频段/特定场景系统性失真; (2) 即便忽略失真, cos 的"相似度"几何含义与下游应用目标也不一定吻合。recos 的 capture range 更广, 对 (1) 有 partial remedy, 对 (2) 是 different geometric interpretation 的候选替代。