如何存储一次写入、很少读取的数据答案

【问题标题】：How to store write-once, read-rarely data如何存储一次写入、很少读取的数据
【发布时间】：2013-11-18 00:11:06
【问题描述】：

我有一个生成大量数据的应用程序，这些数据全部写入一次，然后就不可更改（根据法律），并且很少被读取。读取时，始终会完整读取，例如，一次性读取 2012 年的所有数据，并进行处理以用于报告或以不同格式输出以供导出（或 gasp打印）。访问数据的唯一方法是访问一整天或一天以上的数据。

这些数据很容易表示为两个或三个关系表，或一长串自包含文档。

在文件系统中存储此类数据最节省存储空间的方法是什么？具体来说，我们正在考虑使用 Amazon S3（文件存储）进行存储，尽管我们可以使用诸如 RDS（他们的 MySQL 版本）之类的东西。

我目前最好的选择是一个 gzip 压缩文件，其中包含一整天的 JSON 数据，每天一个文件。

【问题讨论】：

【解决方案1】：

除非我的数据是纯 ASCII（即使是），我可能会选择一种二进制存储方法，例如

【讨论】：

【解决方案2】：

我会使用 Windows Azure 的 Table Storage，因为它允许将异构结构化数据存储在单个表中。拥有类似数据库的存储将允许您根据需要附加数据。您可以轻松地为每年创建新表。

【讨论】：