LLM/AI 技术探索、源码解析、学习笔记
CS336 L4 讲了两条竞争路线:线性注意力与稀疏注意力,并断言"纯线性在大规模未被验证"。三个月后,Kimi K3 给线性路线投了 2.8T 参数的信任票,GLM-5.3-Flash 则把两条路线直接缝在了一起。
cs336 2026 相比去年,围绕 MoE、长上下文与 Agent 进行了重新组织。
Cordis 提供的正是这样一种能力:让 Harness 的每一层都可以被程序化地拆卸和重组,让 Agent 的自我改进成为可能。
一位成长股投资大师会怎么看当下的AI产业链
结合技术报告硬核细节,扒一扒 DeepSeek 全栈开源投机采样方案 DeepSpec 与 DSpark 是如何让 V4 推理速度飙升 60%-85% 的。
Stanford CS336 课程学习笔记系列
Stanford CS336 课程学习笔记系列
Stanford CS336 课程学习笔记系列