我眼中的“世界模型”｜SPP第56期

世界模型，是指智能体通过与环境交互，或通过观察物理世界的视觉表观演变，探索和推断内部动力学模型，构建物理世界的可微分模拟器。近十年间，J. Tenenbaum、J. Schmidhuber、Y. LeCun等人分别从贝叶斯认知理论、视觉环境决策、自监督学习的角度给出了世界模型的不同表达形式。然而，如何在复杂的视觉场景中建立有效的世界模型仍然是一项开放课题。本期SPP报告将围绕世界模型的“观察”与“交互”两个方面，分别介绍“3D逆图形学物理推断”和“基于世界模型的强化学习”方法，相关工作分别发表于2022年的ICML和NeurIPS（Spotlight）。前者为流体动力学模拟提供了一种新思路，后者应用于DeepMind Control机械臂视觉控制任务和CARLA自动驾驶任务，为当前最佳基线模型之一。

欢迎参加本期SPP：8月23日（本周三） 19:30-21:00

本期直播你将收获哪些

1、如何学“世界模型”，通过案例了解机器学习物理仿真的几种思路；

2、如何用“世界模型”，了解“世界模型”能帮助到强化学习的哪些放main；

3、了解上述方向上的一些前沿进展。

演讲嘉宾

王韫博

上海交通大学助理教授

王韫博，上海交通大学助理教授，清华大学博士，2020年CCF优博，国家自然科学基金原创探索项目负责人。主要从事机器学习与计算机视觉的研究，专注于可微物理模拟、强化学习等方向，在TPAMI、NeurIPS、ICML、CVPR等CCF-A类期刊和会议上发表论文20余篇，2020年入选上海市青年科技扬帆计划。

开课时间

2023年8月23日（本周三）19:30-21:00