如何解释 PPO Loss 中没有 KL 散度这一说法？

知识专题：强化学习与奖励题目类型：原理机制技术难度：进阶

相关面经：1 篇题集来源：1 个

未标记

Sorry o(╥﹏╥)o，暂无参考答案。带这道题，问问AI吧~

问 AI

Kimi 千问 ChatGPT

本题目录

相关面经

1 篇

阿里巴巴

Agent 算法工程师

2026-06-23二面

查看原面经 →

从原理讲ppo loss里面为什么没有kl散度

收录题集

1 个来源，共1 份题集

腾讯问答汇编

Rocky Ding · AIGC-Interview-Book · 1 条原题

查看题集 →

- PPO的Clip截断约束与KL散度约束是否等价、适用场景差异