Off-Policy RL with Online Inference Tuning: My Solution to the CoRL 2026 RoboEval Challenge
说明在线推理调参的离策略强化学习:CoRL 2026 RoboEval 挑战赛方案
简介本文介绍作者在 CoRL 2026 RoboEval 挑战赛中的方案,该赛事包含八项双臂任务,按任务各阶段的完成情况、安全性、效率与双臂协调性,并与人类示范对比评分。方案基于 π0.5 的离策略强化学习,策略兼作价值函数,并在每次采样中同时进行推理参数的汤普森采样。最终提交的策略在保留种子上达到 0.990 的 RDS,在官方种子上达到 0.987。