云鹊BLOG云鹊BLOG云鹊BLOG
  • 首页

云鹊BLOG云鹊BLOG云鹊BLOG

当前位置:首页关于 SAM 的文章
SAM 的临时扰动该不该留下:用一个二次损失检查两次梯度

SAM 的临时扰动该不该留下:用一个二次损失检查两次梯度

把SAM接进训练代码时,一个容易藏住的错误是:先把权重移到扰动位置,再直接在那里执行优化器更新。两次反向传播都成功,损失也可能下降,结果却偏离算法。拿一个能手算的目标检查“在哪里求梯度、从哪里出发”,比只看训练曲线更...

yunqueblogyunqueblog/ AI分享/ 2026-10-03/ 2 阅读
  • 1
  • 共 1 页
Copyright2020后台修改文字. 基于Z-BlogPHP搭建