在 Amazon EC2、S3 和/或 EBS 上托管和访问 HDF5 文件

Question

我希望在网上放置一个相当大的 HDF5 文件，并将 Amazon S3 和/或 EBS 作为存储它的可能位置，并可能利用一两个 EC2 实例进行后端处理。我正在寻找有关它可以或以前如何完成的实用想法，如果可能，请提供指向实际示例的链接。我认为它可以像访问其他嵌入式数据存储上的平面文件一样完成，但如果有可用的实用见解，我希望避免重新发明轮子。

Answer 1

您可以将 S3 安装在本地或使用 FUSE 安装在 EC2 上：

http://code.google.com/p/s3fs/wiki/FuseOverAmazon

此时您可以使用所有常用库来访问 HDF5。