RLHF (Christiano et al.)：Deep reinforcement learning from human preferences

arXiv · OpenAI, DeepMind

通过对轨迹片段收集人类成对偏好来异步拟合奖励模型，将人类反馈开销降低3个数量级并扩展至深度强化学习。