【问题标题】:Cassandra's sstableloader too slow in import dataCassandra 的 sstableloader 导入数据太慢
【发布时间】:2022-01-14 17:41:01
【问题描述】:

我正在使用命令行sstableloader 复制 cassandra 3.11 版中的数据。该过程的持续时间是 3 小时 8 分钟来处理 356kb 的数量。这个持续时间是否正常,与数据量无关?

【问题讨论】:

    标签: cassandra cassandra-3.0


    【解决方案1】:

    sstableload 不会花费太多时间。但默认情况下您可能会限制数据传输

    --油门1

    (以 MB 为单位)。您可以通过控制每台主机的连接数来加快速度。

    sstableloader --node node_ip --connection-per-host 100

    另一个原因是如果您使用的是默认设置并且看起来很慢。也许加载的 sstable 文件在读取它们时会被压缩。您需要将加载的文件放在远离 Cassandra 数据目录的目录中。

    【讨论】:

      猜你喜欢
      • 2018-05-12
      • 2015-06-29
      • 1970-01-01
      • 2016-03-08
      • 2016-05-04
      • 1970-01-01
      • 2019-03-16
      • 2020-10-08
      • 2016-06-24
      相关资源
      最近更新 更多