计算机工程

作者：姚铁锤, 王珏, 王彦棡, 迟学斌, 王晓光

单位：1. 中国科学院计算机网络信息中心, 北京 100190;2. 中国科学院大学 计算机科学与技术学院, 北京 100049

关键词：强化学习平台,物理引擎,渲染模块,云端可视化交互,接口标准

基金：国家重点研发计划“大规模并行计算的工具库和领域相关基础软件包”（2017YFB0202202）；“中国科技云”建设工程（二期）项目“超算资源池建设”（XXH13503）；国家电网有限公司总部科技项目“电力人工智能实验及公共服务平台技术”（SGGR0000JSJS1800569）。

强化学习是一个与环境交互的学习过程，在实验场景中，训练环境部署的可扩展性和算法验证的便捷性常受限于物理引擎和渲染模块的高耦合性。为对物理引擎和渲染模块进行解耦，构建一种面向物理引擎和渲染模块的云端交互式模型，其中包括操作字典、元素字典和对应的算法接口，并基于该模型实现模拟器。通过集成模拟器、可视化工具和知识管理等组件，搭建支持云端可视化交互的强化学习平台，并以MuJoCo物理引擎为例，验证Web模拟器接入自定义物理引擎的便捷性。实验和分析结果验证了该模型的有效性，其可方便接入平台，实现云端渲染并提高所属集群的利用率。

来源：2021年第5期

《计算机工程》期刊编辑部

查看计算机工程杂志2021年第5期