ArtificialAnlys· @ArtificialAnlys · X·· 3 小时前AI 评分
AA-Omniscience v1.1 新增难度匹配公开测试集
AA-Omniscience v1.1 在 @huggingface 上新增了一个公开测试集，其难度经过校准，与私有测试集相匹配。发布时，公开集与私有集在 AA-Omniscience Net Score 上的相关性为 0.99，分数中位数差异为 0.0 分。准确率和模型幻觉率的相关性也均为 0.99，中位数差异分别为 -0.07 和 -0.29 个百分点。
AA-Omniscience v1.1 在 @huggingface 上发布了一个新的公开测试集，其难度经过校准，与私有测试集相匹配。发布时，AA-Omniscience Net Score 的公开与私有得分相关系数为 0.99，得分中位数差异为 0.0 分。准确率和幻觉率也具有 0.99 的相关系数，中位数差异分别为 -0.07 和 -0.29 个百分点。
来源：ArtificialAnlys · x.com