云鹊BLOG云鹊BLOG云鹊BLOG
  • 首页

云鹊BLOG云鹊BLOG云鹊BLOG

当前位置:首页关于 PPO 的文章
让 AI 算 PPO 裁剪项:概率比同样超界,优势符号为何改变结果

让 AI 算 PPO 裁剪项:概率比同样超界,优势符号为何改变结果

看到PPO公式里的clip,容易让AI把所有超界的概率比都替换成边界,算完便结束。但原式还要比较裁剪前后两项,优势的正负会改变哪一项被保留下来。四格手算比一句“限制更新幅度”更能说明这件事。

yunqueblogyunqueblog/ AI分享/ 2026-10-02/ 3 阅读
  • 1
  • 共 1 页
Copyright2020后台修改文字. 基于Z-BlogPHP搭建