近日,由智元、NVIDIA以及普林斯顿大学、得克萨斯大学奥斯汀分校和多伦多大学研究人员联合开发的WorldOracle平台正式上线。作为全球首个以真实执行为基准的动作驱动世界模型评测工具,它向开发者开放了评测提交功能。
与传统侧重视频生成质量的评估方式不同,WorldOracle通过对比模型预测视频与机器人真实操作数据,重点检验模型对物理交互结果的预测准确度。目前平台已收录335条涵盖水果抓取、倒水、开合抽屉等任务的操作轨迹,其中约40%的片段包含失败或次优操作,旨在更全面地评估模型在复杂现实场景下的表现。