【问题标题】:The execution time of parallel queries in Redshift increases drastically with the no of queriesRedshift 中并行查询的执行时间随着查询数量的增加而急剧增加
【发布时间】:2021-12-01 15:13:27
【问题描述】:

我是 Amazon Redshift 的新手。我已将一些数据预加载到表中,并且正在测试 Redshift 中的查询延迟。我观察到的事实是,对于并行查询,执行时间随着并行触发的查询数量的增加而大幅增加。 Redshift 文档指出了排序键的使用,我已经尝试了所有这些,但情况仍然保持不变。请帮助我改善 Redshift 中的并行查询执行时间。

【问题讨论】:

    标签: amazon-web-services performance amazon-redshift query-optimization


    【解决方案1】:

    听起来您只是发出更多查询而不更改队列定义,对吧?

    Redshift 使用排队系统来管理称为 WLM(工作负载管理器)的大量查询。 WLM 是可配置的,并限制实际并行执行的查询数量与队列中等待的数量。所以我想看看的第一个问题是观察到的延迟有多少是由于“排队等待”时间造成的。

    现在,在许多情况下,仅仅增加可以并行执行的查询数量并不能解决延迟问题。 Redshift 通常一次可以执行 1 到 2 打查询,具体取决于查询的复杂性。允许同时执行太多查询会大大降低集群的总体性能。大多数人都有大小查询混合使用,正确配置 WLM 可以通过允许在大批量查询排队时快速执行简单和高优先级的查询来改善查询延迟。

    【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多