/llm-interview/llm-rlhf.md

RLHF

RLHF 完整训练过程是什么？RL建模过程中涉及到几个模型？

RLHF 过程中RM随着训练过程的进行，得分越来越高，效果就一定好吗？