【发布时间】:2019-05-25 16:43:24
【问题描述】:
我观察到 EC2 实例上的一些行为,我认为这是由于磁盘缓存造成的。基本上: 我有一个计算任务需要按顺序访问大量数据(约 60 个 1GB 文件)。我已将文件包含在我的亚马逊图片中。我还使用 mpi 启动约 30 个进程来同时访问不同的文件。顺便说一句,该程序受计算限制,但磁盘 IO 需要相当大的运行时间。我注意到,当我启动实例并在第一次尝试时执行计算时,速度非常慢。 top 命令将显示进程不时挂起,cpu 使用率约为 60%。但是,一旦运行完成,如果我再开始运行,它会快得多,cpu 大约是 99%。那是因为我的数据仍在网络驱动器 (EBS) 上并且自动加载到本地实例磁盘缓存(SSD 驱动器?)?我在 C5n.18xlarge 上运行它,但它仅被列为 EBS。 有没有人有类似的经历?还是其他解释?
【问题讨论】:
标签: amazon-web-services caching disk-io