跳到正文
原文
Google Research·· 2026-04-01AI 评分31

Google Research 研究:AI 评测需要多少标注者才够?

Building better AI benchmarks: How many raters are enough?

AI 导读

Google Research 在《Forest vs Tree: The (N, K) Trade-off in Reproducible ML Evaluation》中提出,AI 评测常用的每项 1-5 名标注者往往不足,要反映人类意见差异常需每项超过 10 名标注者。

来源:Google Research · research.google