跳到正文
原文
Google Research·· 2026-04-01

Google Research 研究:AI 基准测试需要多少标注者才够?

Building better AI benchmarks: How many raters are enough?

SI 导读

Google Research 在《Forest vs Tree: The (N, K) Trade-off in Reproducible ML Evaluation》中研究了标注条目数与每条目标注者数的权衡,发现常用的每条目 1、3、5 名标注者往往不足,可靠结果常需超过 10 名。

SI 评分31

来源:Google Research · research.google

© 2026 SI·Hot · Super Intelligence Hot · 超级智能热点 · 网站数据均来源于网络公开资料,版权归来源方所有