VLAC – 上海AI实验室开源的具身奖励大模型

VLAC是什么

VLAC是上海人工智能实验室发布的具身奖励大模型。以InternVL多模态大模型为基础，融合互联网视频数据和机器人操作数据，为机器人在真实世界中的强化学习提供过程奖励和任务完成情况估计。VLAC能有效区分正常推进与异常/停滞行为，支持通过in-context learning实现小样本快速泛化。具备局部平滑性和负向奖励机制，确保强化学习的稳定性和有效性。VLAC不仅输出奖励信号，还能输出机器人动作指令，助力机器人在真实世界中自主学习和快速适应新场景。VLAC支持人机协作模式，进一步提升训练效率。

VLAC的主要功能

• 提供过程奖励和完成情况估计：为机器人在真实世界的强化学习提供连续、可信的监督信号，判断任务是否完成并估计完成进度。