LLM2D
自动自适应符合性风险控制
Automatically Adaptive Conformal Risk Control
发布日期: 3/28/2025
arXiv ID: oai:arXiv.org:2406.17819v4

摘要

arXiv:2406.17819v4 宣告类型: replace-cross 摘要:科学和技术日益需要有效的机制,以确保黑盒机器学习算法的可靠和可控性能。这些性能保证应该条件性地成立,也就是说,无论输入如何,性能保证都应该至少大致成立。然而,除了如种族和性别这样的模式离散分类之外,正确的条件化概念定义起来可能很困难。例如,在图像分割问题中,我们希望不确定性反映测试样本的内在难度,但这可能很难通过一个条件事件来捕捉。基于Gibbs等人[2023]的近期工作,我们提出了一种实现统计风险(损失函数的期望值)近似条件控制的方法,通过适应测试样本的难度来进行调整。我们的框架超越了基于用户提供条件事件的传统条件风险控制,转向通过数据驱动的方法确定适当的函数类来进行条件化。我们将此框架应用于各种回归和分割任务,实现了对模型性能的更精细控制,并展示出通过不断监测和调整这些参数,可以实现比常规风险控制方法更高的精度。