LLM2D
EVINCE:基于条件统计和信息论优化对抗性大型语言模型对话
EVINCE: Optimizing Adversarial LLM Dialogues via Conditional Statistics and Information Theory
作者: Edward Y. Chang
发布日期: 11/27/2024
arXiv ID: oai:arXiv.org:2408.14575v3

摘要

本文介绍了 EVINCE(条件交换中的熵和变异)框架,该框架利用条件统计和信息论优化多大型语言模型 (LLM) 对话。EVINCE 引入双熵优化来平衡观点多样性和先验知识,为调节 LLM 交互提供定量指标。通过信息论度量和互信息优化,该框架在从疾病诊断到新闻去偏见的各种应用中均展现出比单一 LLM 性能的持续改进。我们对这种结构化的 LLM 协作方法进行了理论基础和实证验证。