Day12-导数与梯度下降实战

关联:

今日目标

  • 把导数和损失下降联系起来
  • 理解学习率对训练稳定性的影响
  • 完成 gradient_descent_learning_rate_demo.py

今日任务

  • 回顾导数和梯度下降直觉
  • 用简单一元函数做下降实验
  • 对比 2 到 3 种学习率结果
  • 记录收敛、震荡或发散现象

记录区

  • 我选的函数是:
  • 不同学习率的表现:
  • 我现在如何解释梯度下降:

明日衔接