已验证65% 置信事实精确时间

梯度下降有批量梯度下降、随机梯度下降SGD和小批量梯度下降三种变体

3

来源数

65%

置信度

长期有效

时效性

2026/8/10

首次发现

来源

5个方程搞懂AI数学：20个Python实战项目免费开放

相关事实

已验证梯度下降衍生出批量梯度下降、随机梯度下降和小批量梯度下降三种主要变体，Adam优化器是在动量与自适应学习率基础上的综合改进77% 相似待验证小批量梯度下降（Mini-batch GD）是批量梯度下降和随机梯度下降的折中方案，也是工业界最常用的梯度下降方式74% 相似待验证批量梯度下降使用全部训练数据计算梯度，随机梯度下降每次只用一个样本，小批量梯度下降在两者之间取得平衡73% 相似已验证梯度下降通过沿着损失函数梯度的反方向迭代调整权重使预测误差逐步收敛73% 相似待验证将AMP框架从全批量梯度下降推广到随机梯度下降（SGD）需要处理额外的采样随机性与数据复用偏差71% 相似

引用此条事实

Stable URI

https://kongchang.com/claim/721282

API

curl https://kongchang.com/api/v1/knowledge/claims/721282

MCP

get_claim(id=721282)