Preprint · ✓完成 · 深堀り済 2026.07.07 適応的余裕幅が強化学習をどう変えるか——新たな報酬モデル学習手法の可能性 選好に基づく適応的余裕幅の強化学習 査読前の可能性がある研究情報 人間からのフィードバックに基づく適応的余裕幅の使用で強化学習の性能を向上 RLHF DPO-PoP 直接的選好最適化 報酬モデル学習 arXiv cs.AI