【问题标题】:Software to manage 1 Million files on Amazon S3在 Amazon S3 上管理 100 万个文件的软件
【发布时间】:2012-02-26 17:35:41
【问题描述】:

我有一个 Amazon S3 帐户,根文件夹中有 100 万个项目。是否有任何 Windows 软件可用于管理这些文件?

我已经尝试过 Bucket Explorer 和 CloudBerry,但都无法列出这么多文件。

【问题讨论】:

  • 你考虑过使用 ssh,然后是 shell。平面目录中的 1M 文件是一个巨大的错误。见stackoverflow.com/q/8735875/841108
  • @basile 这是我使用的 Amazon S3,不是普通的文件系统。不能ssh,一个目录下的文件个数是没有意义的,可以是无限的。
  • 是的,文件的数量可以是'无限' S3 不在乎,但基本上所有工具都会在乎。我个人不知道 GUI 工具如何为您工作,除非您可以直接设置分隔符和/或标记。
  • 如果您是一名程序员,您可能会使用 IronWorker 和 ruby​​ 之类的工具来创建满足您需求的工具。

标签: amazon-s3


【解决方案1】:

http://www.bucketexplorer.com/documentation/amazon-s3--search-on-objects-in-bucket.html 显示如何为搜索设置分隔符和前缀。这可能是您需要的。您的文件可能有一些常见的前缀 - 文件名前缀,或者您可以用作创建文件夹的分隔符的常用字符 - 假设有很多数字,然后尝试使用 '1' 的分隔符而不是默认的 ' /'。

您可能需要阅读一些内容以了解 S3 中的分隔符和前缀。

【讨论】:

  • 很遗憾,我的文件没有可识别的前缀或分隔符。
  • 如果它们是随机的,然后选择一个字符,你会得到文件夹。
【解决方案2】:

在尝试了许多 S3 工具之后,我终于找到了一个可以轻松处理超过百万个文件的工具,并且还可以进行同步。它是免费的,我认为这对我来说并不重要,我只是想要一些有用的东西。

龙盘:

http://www.dragondisk.com

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2018-09-28
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2016-01-11
    • 1970-01-01
    相关资源
    最近更新 更多