面试题库

全部 Django Elasticsearch FastAPI Flask Function Call JVM Java IO Java 后端 Java 基础 Java 并发 Java 新特性 Java 集合 JavaWeb Kafka LLM LangChain LangGraph MongoDB MyBatis MySQL Netty Nginx Python RAG RabbitMQ Redis RocketMQ Spring Spring AI SpringBoot SpringCloud SpringMVC ZooKeeper 分布式 后端技术 大厂面经 大数据 微服务 提示词工程 操作系统 数据库 数据结构 智能体 海康威视2026秋季社招专项 消息队列 监控运维 算法 系统设计 缓存 计算机基础 计算机网络 设计模式 面试题 高可用 高并发
LLM 中等

可学习位置编码与正弦位置编码各有何优缺点？

作答 →
LLM 中等

正弦位置编码的公式是什么？为什么说任意两个位置可以线性表示？

作答 →
LLM 简单

Transformer 为什么必须引入位置编码？去掉位置编码会发生什么？

作答 →
LLM 中等

保持 d_model 不变，把 head 数从 8 增加到 32 会带来什么变化？

作答 →
LLM 中等

多头注意力为什么比单头更有效？不同「头」之间如何分工？

作答 →
LLM 困难

多头注意力每个头的维度如何确定？为什么总参数量不随 head 数变化？

作答 →
LLM 中等

自注意力的计算过程如何用矩阵一次性表示？注意力分数矩阵的形状是什么？

作答 →
LLM 中等

为什么自注意力的点积要除以 sqrt(d_k)？不缩放会有什么后果？

作答 →
LLM 简单

自注意力机制中 Query、Key、Value 三个向量分别从何而来，各自扮演什么角色？

作答 →
LLM 简单

什么是过拟合与欠拟合？在大模型微调中如何判断

作答 →
LLM 困难

什么是奖励模型（Reward Model）？它如何训练与使用

作答 →
LLM 中等

什么是语义缓存（Semantic Cache）？它如何加速 LLM 应用

作答 →