LLM
简单
面试题库
LLM
困难
红队测试(red teaming)与安全评测在大模型上线前的作用是什么?
LLM
中等
模型校准(calibration)与置信度是什么?为什么大模型常过度自信?
LLM
困难
如何构建内部领域评测集并避免「刷榜过拟合」?
LLM
中等
多语言与中文评测面临哪些挑战?
LLM
中等
指令遵循能力如何评测?为什么格式遵循是重要的评测维度?
LLM
困难
长上下文评测中的「大海捞针」(needle in a haystack)测的是什么?它有何局限?
LLM
困难
代码生成中的 pass@k 指标如何计算?为什么需要采样 k 个候选?
LLM
困难
评测基准污染(data contamination)是什么?如何检测与缓解?
LLM
中等
BLEU 与 ROUGE 等 n-gram 指标为什么不适合直接衡量大模型生成质量?
LLM
困难
LLM-as-judge 存在哪些偏差?如何设计更可靠的裁判流程?
LLM
中等