🤷 弃权经济学实验室

「不知道」也是有价格的 —— RC 曲线 / AURC / 代价相变 / 校准不等于排序

🤷弃权经济学实验室

不确定性唯一有经济后果的出口——拖阈值 τ,看 coverage / risk / 期望效用怎么变,以及 τ* 什么时候直接塌到 0

RC 曲线 🧮AURC / E-AURC 🧮τ* 相变 🧮ECE 🧮⚠️ 样本为构造数据
⚠️ 数据来源
(confidence, correct) 样本由 seed 决定的潜变量模型构造(⚠️ 构造值,可换 seed / 调噪声), 代价三元组 (G, C_w, C_a) 是教学参数(⚠️ 滑杆可调,也可用真实场景预设)。 但 RC 曲线、AURC、E-AURC、U(τ)、τ*、解析临界比、ECE、保序回归全部在浏览器内真算(🧮)。 样本量 N = 480(8 领域 × 60)。
seed 20261002

📉 Risk–Coverage 曲线

按 confidence 降序排序后前缀累计:作答越多(coverage ↑),答错比例(selective risk ↑)。 拖 τ 滑杆,看当前工作点在曲线上滑动。

0%25%50%75%100%0.000.110.230.340.46random 基线 (瞎猜顺序)cov 59.8% / risk 28.6%Coverage(作答比例)→Selective risk →
本模型 RCoracle 下界(看穿对错)random 基线
59.8%
当前 coverage
287 / 480 作答
28.6%
当前 selective risk
82 个答错
0.2431
AURC
random 基线 0.4229
0.1374
E-AURC(超出 oracle 的部分)
oracle 0.1057

顶部 k% 准确率

Coverage作答数该档准确率相比全量
10%4891.7%+34.0pp
20%9685.4%+27.7pp
50%24076.7%+19.0pp
100%48057.7%—

全量准确率 57.7%;只答最有把握的 10%,准确率抬到 91.7%。这就是 selective prediction 的全部卖点——代价是 coverage。

⚠️ 构造数据(confidence, correct) 样本与代价三元组🧮 浏览器真算RC / AURC / U(τ) / τ* / 临界比 / ECE / 保序回归📖 文献risk–coverage 与 selective prediction 的标准结论