我们将主动学习推广到现实世界环境中，在这些环境中，预测目标是具体的，采样仅限于域的易访问区域，而预测目标可能位于该区域之外。我们分析了一系列决策规则，这些规则自适应地采样以最大程度地减少对预测目标的不确定性。我们是第一个在一般规律性假设下表明，这种决策规则会一致地收敛到从可访问数据中获得的最小可能不确定性。我们在两个关键应用中证明了它们强大的样本效率：大型神经网络的主动少样本微调和安全的贝叶斯优化，在这些应用中，它们明显优于最先进的技术。