Google Research·· 2026-04-01AI 评分58
Google 研究:AI 评测需要多少评分者才够?
Building better AI benchmarks: How many raters are enough?
AI 导读
Google Research 发表研究探讨 AI benchmark 中评分者数量与项目数量的权衡。研究发现常见的 1-5 个评分者标准不足以捕捉人类观点的细微差别,若要反映真实的人类分歧通常需要超过 10 个评分者。
来源:Google Research · research.google