大模型算法与数据全览:Transformer 架构、MoE 创新、多模态模型与数据工程全流程实践。
| 编号 | 名称 | 具体内容 |
|---|
| 1 | Transformer 架构 | Transformer 架构原理深度介绍 |
| 2 | MoE 架构 | MoE(Mixture of Experts) 混合专家模型架构原理与细节实现 |
| 3 | 创新架构 | SSM、MMABA、RWKV、Linear Transformer、JPEA 等新大模型结构 |
| 4 | 图文生成与理解 | 多模态对齐、生成、理解及统一多模态架构解析 |
| 5 | 视频大模型 | 视频多模态理解与生成方法演进及 Flow Matching 应用 |
| 6 | 语音大模型 | 语音多模态识别、合成与端到端模型演进及推理应用 |
| 7 | 数据工程 | 数据工程、Prompt Engine 等相关技术 |