大家觉得Offline RL的前景如何

大家觉得Offline RL的前景如何，未来几年内有大规模商业化的可能性吗？

从两个角度分析一下

从学习方式上说： Offline RL 结合了supervised learning的思路，从fixed数据集中学习摆脱了OnlineRL与环境交互的缺点，本质上说只要数据集好，基本可以达到Online的效果(这个和supervied learning对数据的要求一样，注意：这里的要求更高，是各个轨迹的数据质量高,且轨迹覆盖范围全，参考自：离线强化学习(Offline RL)系列4：(数据集)Offline数据集特征及对离线强化学习算法的影响)，有点数据+算法+算力==大力出奇迹的感觉。目前业界说这是RL落地的最佳方式之一
从领域推动与发展上说：目前诸如伯克利、国内的南京大学的俞扬老师都在做这块，主要集中在机器人等领域

最后推荐一个我发现的比较好的离线强化学习专栏： https://www.zhihu.com/column/c_1487193754071617536

Richard 谢谢 😄

有一家公司，南栖仙策，了解一下

Document