2026年9月15日从 ELIZA 到 Kimi K3:大模型 60 年,真正跨过的是四道门槛一张 AI 时间线把 ELIZA、感知机、反向传播、Word2Vec、Transformer 和前沿模型串在一起。真正值得带走的不是年份,而是表示、学习、路由与规模四道瓶颈如何依次被解除。AILLMTransformer零基础学习笔记
2026年8月27日扩散模型说人话:从擦掉噪点到造出新东西"加噪再去噪"这句话解释不了最关键的一件事:去噪只是把脏图擦干净,怎么能擦出一张从来不存在的图?这篇用一个不装任何库、复制就能跑的一维小例子讲透。AILLM零基础
2026年8月8日高中数学就够了:把梯度下降手算篇的每一步拆到初高中知识点《三个词的词表,十二个参数》的数学陪读篇。把原文用到的全部数学拆成七块积木——下标记号、乘加账单、e 和 ln、softmax、斜率、多旋钮下山、链式法则——每块只用初高中知识搭起来,配可按计算器复现的小例子,装完立刻回扣原文对应公式。结尾附逐符号拆解表和自检清单。数学LLM零基础
2026年8月7日三个词的词表,十二个参数:把一次真实的梯度下降全程手算一遍用能装进脑子的最小真实模型(3 词词表、12 个参数的 bigram 语言模型),把生产级训练的一整步走通:前向算损失、反向传播分账(从 p−y 起点到每个参数)、数值梯度检验、SGD 与 AdamW 各更新一步。每个数字都先用脚本验算过,结尾附 40 行可跑的验证脚本和自检清单。LLM数学零基础
2026年7月25日初中数学读懂 Attention Is All You Need:从加权平均到 Transformer按论文原始顺序拆解 Transformer 涉及的数学:向量、矩阵乘、QKV、scaled dot-product attention、multi-head、位置编码、残差、LayerNorm、FFN、softmax、loss、学习率和复杂度,让初中数学背景也能啃读原文。TransformerAI 数学零基础
2026年7月25日Grokking:为什么模型先死记硬背,后来突然真懂了用作业、考试、模运算和训练曲线递归拆解 Grokking:模型为什么会先过拟合,再延迟泛化,为什么看起来像相变,以及它和大模型涌现有什么关系。零基础
2026年7月25日一根针教会大模型学习者的事:从挂谷猜想到高维覆盖直觉不把挂谷猜想当高深数学炫技,而是把它转译成小白能带走的几种大模型学习能力:高维方向感、覆盖意识、极端例子思维和多尺度分析。AI 数学零基础
2026年7月25日线性代数到模型学习:从矩阵到秩的25道核心题按同济工程数学线性代数第七版的主干,围绕矩阵、行列式、线性方程组、向量组、秩和子空间设计25道原创题,服务模型学习。线性代数AI 数学零基础
2026年7月25日统计学和大模型:学会和不确定性共处借一张数理统计知识图谱,重新理解概率、分布、估计、检验和回归为什么是大模型时代的底层语言:模型给出的不是神谕,而是一组需要被校准、抽样和检验的不确定性。AI 数学零基础
2026年7月25日同济高数第八版上册到模型学习:25道核心题按同济高数第八版上册主线,围绕极限、导数、Taylor、积分和微分方程设计25道原创题,题题带详细答案,并说明它们如何服务模型学习。AI 数学模型训练零基础
2026年7月24日上下文学习像临时做贝叶斯:为什么大模型不改权重也能跟着例子走一篇从零开始的 In-Context Learning 深度讲解:模型没有更新权重,却能根据 prompt 里的几个例子临时跟上任务。一个有力解释是,它在上下文里推断当前任务是什么。LLM数学Transformer零基础
2026年7月24日小白也能听懂的奇异值分解:把矩阵拆成三件事用照片压缩、二维小例子和最少数学地基解释 SVD:U、Σ、Vᵀ 各自做什么,奇异值为什么代表重要程度,以及它和 PCA、推荐、LoRA、低秩压缩的关系。数学线性代数AI零基础
2026年7月22日经典数学函数图鉴:让每一条曲线都经得起坐标查验16 张可交互的经典函数图像:线性、二次、三次、反比例、根式、绝对值、指数、对数、三角、反三角、双曲、sigmoid、高斯、取整。用 function-plot 的区间算术精确绘制,滚轮缩放、悬停读坐标。附精确性质速查表和工具选型指南。数学零基础
2026年7月22日零基础陪读 Scaling Laws:那篇深读读不动?你缺的其实只是一条直线Scaling Laws 深读的陪读篇。用正方形、身高预测、餐巾纸记账几个能手算的真问题,把幂律、log-log 直线、拟合、外推、C≈6ND 五件工具逐件装好,每件装完立刻回扣深读原文。读完再回去,0.73 vs 0.5 之争会变成一个很直观的故事。LLM数学零基础
2026年7月18日零基础陪读 Big-O:那篇复杂度深读读不动?你缺的是六件初中数学工具上一篇 Big-O 深读的陪读篇。用折纸、猜数字、握手、排队照相六个能手算的真问题,把指数、对数、求和、阶乘、递推式、「阶」的眼镜逐件装好,每件工具讲完立刻回扣原文公式。读完这篇再回去,那些公式会自己开口说话。数学零基础
2026年7月18日零基础讲透欧拉公式:e^(iθ) = cos θ + i·sin θ 不是一个数,是"旋转"的名字费曼称它为"数学中最非凡的公式",但它第一眼看上去像语法错误——e 的虚数次方是什么鬼?这篇从复利、乘 -1、摩天轮三个能手算的真问题出发,把 e、i、cos/sin 三个符号包逐个拆开,再沿两条路线把公式拼回去:一条给直觉(增长掰成垂直方向就是绕圈),一条给验算(欧拉本人 1748 年的级数对账)。读完你带走一个可复用的模型:乘 e^(iθ) = 旋转 θ,它一路通到 LLM 的 RoPE 位置编码。数学零基础
2026年7月18日会加减乘除就够:十个问题,手算读懂 Kimi K3 心脏里的全部数学上一篇 KDA 深读里的公式劝退你了?这篇是零基础陪读:用一块 2×2 的迷你内存和十个问题,每一步都能用小学算术手算,算完你能逐个符号读懂 KDA 的核心公式。数学LLM零基础论文深读