LLM
中等
面试题库
LLM
困难
如何构建内部领域评测集并避免「刷榜过拟合」?
LLM
中等
多语言与中文评测面临哪些挑战?
LLM
中等
指令遵循能力如何评测?为什么格式遵循是重要的评测维度?
LLM
困难
长上下文评测中的「大海捞针」(needle in a haystack)测的是什么?它有何局限?
LLM
困难
代码生成中的 pass@k 指标如何计算?为什么需要采样 k 个候选?
LLM
困难
评测基准污染(data contamination)是什么?如何检测与缓解?
LLM
中等
BLEU 与 ROUGE 等 n-gram 指标为什么不适合直接衡量大模型生成质量?
LLM
困难
LLM-as-judge 存在哪些偏差?如何设计更可靠的裁判流程?
LLM
中等
自动评测、人工评测与 LLM-as-judge 三者有什么区别?各自适合什么场景?
LLM
中等
常见大模型评测集如何分类?知识、推理、代码、事实性各有哪些代表基准?
LLM
中等