LLM2D
亲和度与多样性:通过内部表示统一的示范选择度量标准
Affinity and Diversity: A Unified Metric for Demonstration Selection via Internal Representations
作者: Mariko Kato, Hakaze Cho, Yoshihiro Sakai, Naoya Inoue
发布日期: 2/21/2025
arXiv ID: oai:arXiv.org:2502.14380v1

摘要

arXiv:2502.14380v1 类型: cross 摘要:In-Context Learning (ICL) 的性能对所选示例的高度敏感。现有的示范选择方法优化不同的目标,导致不一致的结果。为了解决这一问题,我们提出了一种统一的度量标准——亲和性和多样性,该标准利用了ICL模型的内部表示。我们的实验表明,亲和性和多样性与测试准确性之间存在强烈的关联,这表明它们对于示范选择的有效性。此外,我们展示了我们提出的度量标准与各种先前工作很好地一致,以统一不一致性。