云环境中的数据操作答案

【问题标题】：Data manipulation in cloud environments云环境中的数据操作
【发布时间】：2012-05-25 06:45:31
【问题描述】：

我对在云存储服务中访问和处理数据有一些疑问。

1.是否有任何通用 API 可用于为主流云存储提供商（Amazon s3、Google 云存储、Windows Azure 编写应用程序。请指出我在此列表中遗漏的提供商。我专注于仅限企业域，不包括个人存储）

2.现在是 sdk 部分。如果我想编写一个在 iCloud 中处理数据的应用程序（让我们说一个 j2ee 应用程序），iCloud sdk 是否为我提供了那种灵活性？

3.云存储服务会为我提供交易支持吗？我的意思是对ACID属性的支持。或者我必须对此负责？

【问题讨论】：

标签： transactions azure amazon-s3 cloud icloud

【解决方案1】：

jClouds 提供了良好的存储抽象。它支持许多最常用的云存储提供商，包括 Amazon s3、MS Azure 等。有关存储提供程序的列表，请参见此处：http://www.jclouds.org/documentation/reference/supported-providers

这里是如何使用 jClouds 存储上下文：



    import static 
        org.jclouds.aws.s3.options.PutObjectOptions.Builder.withAcl;

    // get a context with amazon that offers the portable BlobStore API
    BlobStoreContext context = new BlobStoreContextFactory().
                         createContext("aws-s3", accesskeyid, secretkey);

    // create a container in the default location
    BlobStore blobStore = context.getBlobStore();
    blobStore.createContainerInLocation(null, bucket);

    // add blob
    Blob blob = blobStore.newBlob("test");
    blob.setPayload("test data");
    blobStore.putBlob(bucket, blob);

    // when you need access to s3-specific features,
    // use the provider-specific context
    AWSS3Client s3Client =
         AWSS3Client.class.cast(context.getProviderSpecificContext().getApi());

    // make the object world readable
    String publicReadWriteObjectKey = "public-read-write-acl";
    S3Object object = s3Client.newS3Object();

    object.getMetadata().setKey(publicReadWriteObjectKey);
    object.setPayload("hello world");
    s3Client.putObject(bucket, object, withAcl(CannedAccessPolicy.PUBLIC_READ));

    context.close();

不是真正的 iCloud 专家，但我的印象是它仅适用于各种苹果产品，而不是一个通用平台，正如之前的回答中提到的那样。
云存储服务通常不提供 ACID 属性。您正在寻找的内容听起来更像是一些云数据库服务 - Amazon SimpleDB 和 RDS、MS SQL Azure 等。您也许可以使用 JDBC 驱动程序来连接其中的一些服务。但这些不是“存储”服务——它们是在云中运行的数据库，每个都有自己的语义。

【讨论】：

【解决方案2】：

任何云服务提供商的基础都是使用 REST 接口。您可以使用任何语言来包装 REST 请求，只要该语言支持网络和 PKI 安全基础设施。所有现代语言都有这样的功能。

在大多数情况下，任何 SDK 都只是这些 REST 接口的包装器，因此您可以非常轻松地编写编码器并以同步或异步方式获得所需的内容。 SDK 只是将工作加速到多方面，与直接使用 REST 相比。这并不意味着您不能直接使用 REST，它只是一个 SDK 可以帮助您连接到特定的云服务。

SDK 是如何实现的，它提供了什么样的功能，因供应商和他们所拥有的服务而异。您不能使用适用于 Amazon Cloud 的 Windows Azure 开发工具包，因为内部服务连接端点和底层接口都封装在开发工具包本身中。这并不意味着无法创建 SDK 来连接所有云服务提供，而是每个云服务都为其云服务提供个性化的 SDK。

云服务为您的用户提供基础设施和平台来部署他们的应用程序，关于 ACID，您必须处理应用程序级别的工作，但是 ACID 可能是一个完全独立且冗长的讨论。..

【讨论】：

【解决方案3】：

关于你的 3 个问题：

这实际上不是一个具体的编程问题，更像是对可用产品的调查。我不知道有任何特定的库可以跨所有云提供商提供完全通用的接口。
据我了解，iCloud 用于存储和同步您的 Mac/iPad/iPod 内容，而不是计算平台。
我敢肯定，所有云提供商都提供不同的关系和非关系数据存储，每个都有自己的事务支持（或缺乏）。在 Windows Azure 中，除了分布式事务之外，SQL Azure 还提供类似于 SQL Server 的 ACID 支持。 Windows Azure 表存储在给定分区内提供原子操作，因此只要将多记录写入写入同一个分区，就可以在一个原子操作中完成。 SQL Azure 以及 Windows Azure 存储（blob、表和队列）被认为是持久的，因为存储是三重复制以实现冗余（并且 Windows Azure 存储也是异地复制）。

【讨论】：

【解决方案4】：

对于问题 1。如果您要询问您列出的所有服务是否共享一个通用 API，否。它们都使用 REST，这意味着您可以将 JSON 与它们中的任何一个一起使用，但调用将具有不同的名称和可能的语法。

【讨论】：

【解决方案5】：

您只能通过 Apple 的适用于 iOs 和 Mac OS X 的 SDK 使用 iClous。我几乎可以肯定您无法从 j2ee 应用程序访问它。

【讨论】：