TorchRL-ReplyBuffer

1.性质

2.教程

3.构建

2.自定义存储空间

维度 ListStorage LazyTensorStorage LazyMemmapStorage
数据位置 内存 (作为 Python 对象) 内存 (作为连续张量) 磁盘/文件系统
形状要求 无限制 (最灵活) 严格一致 严格一致
采样效率 最高 高 (但有磁盘I/O)

3.采样

相关推荐
z樾3 天前
BenchMARL-前置TorchRL7
torchrl