【问题标题】:Using materialized view on a kusto table在 kusto 表上使用物化视图
【发布时间】:2021-06-23 01:46:28
【问题描述】:

我有一个场景,一个表每 3 分钟从不同来源接收 20k+ 条消息。我想获取每个唯一源发送的最新数据,源可以是一个 id。我无法编写这样的查询。

FactResources | summarize arg_max(Timestamp, *) by SubscriptionId, ResourceId 
  • 考虑到我的集群现在以 70% 的 CPU 利用率运行,我想了解这样做会影响集群的 CPU 性能吗?
  • 每次提取后物化视图刷新的延迟时间是多少?
  • 我可以像调用 kusto 函数一样从 java SDK 调用这个物化视图吗?

【问题讨论】:

    标签: azure-data-explorer kql


    【解决方案1】:
    • 是的,集群的 CPU 会受到影响,因为物化会消耗 CPU(就像在集群上运行的所有其他操作一样)。您可以使用.show commands-and-queries 命令估计实现过程消耗的资源量,如here 所述。
    • 无法保证实现的延迟。只要delta (what is delta?) 中有记录并且集群具有运行实现的可用容量,实现就会运行。延迟(称为物化视图年龄)取决于摄取模式、数据量和集群中的可用资源。您可以通过运行.show materialized-view 并检查MaterializedTo 值来检查物化视图年龄。在performance considerationsmonitoring 中查看更多信息。
    • 您可以像查询表 (ViewName) 或使用 materialized-view() 函数一样查询视图。见materialized views queries

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 2011-02-06
      • 2021-02-05
      • 2014-07-06
      • 2012-07-17
      • 1970-01-01
      • 2018-04-26
      • 1970-01-01
      相关资源
      最近更新 更多