实际做法是公开类别级结果和排行榜位置,同时保留足够多的评测资产,以维持未来比较的有效性。
对于同时承担欺诈识别和模型不匹配检测任务的系统,这种权衡是必要的。
因此,方法页更适合作为解读指南:告诉你测了什么、没测什么,以及为什么 benchmark 需要和验证证据一起看。
实际做法是公开类别级结果和排行榜位置,同时保留足够多的评测资产,以维持未来比较的有效性。
对于同时承担欺诈识别和模型不匹配检测任务的系统,这种权衡是必要的。
因此,方法页更适合作为解读指南:告诉你测了什么、没测什么,以及为什么 benchmark 需要和验证证据一起看。