UQ验证的置信曲线:概率参考 vs. 神谕
摘要:使用置信曲线来评估大误差($E$)与大不确定性($u_E$)之间的关联。常用一个oracle曲线作为参考,用于估计测试数据集的质量。oracle是一个完美、确定性的误差预测器,如$|E|=p_m u_E$,在概率框架中对应一个很不可能的误差分布,并且无法告诉我们$u_E$的校准情况。我提出通过概率参考曲线替换oracle,概率参考曲线源于更实际的情况,即误差应该是从具有标准偏差$u_E$的分布中随机抽取的。概率曲线及其置信区间可以直接测试置信曲线的质量。与概率参考曲线配对使用,置信曲线可以用于检验预测不确定性的校准程度和紧密度。
作者:Pascal Pernot
论文ID:2206.15272
分类:Data Analysis, Statistics and Probability
分类简称:physics.data-an
提交时间:2022-12-20