基础与架构

Transformer / 位置编码 / Attention / Tokenizer 等基础面试题

返回 面试问答总览。

• LLM基础概念与架构
• 位置编码与长度外推
• Tokenizer分词技术
• Attention机制与优化
• LayerNormalization
• 激活函数与FFN
• 损失函数与相似度
• Transformers库操作
• LLM进阶问题
• 大模型位置编码技术全景
• 分词器技术对比与实践
• 混合专家模型MoE架构详解