Kibana: 支持Bucket Script聚合

创建于 2015-08-19 · 29评论 · 资料来源: elastic/kibana

鉴于新的 Bucket Script Aggregation，我们可以从聚合的指标值（例如metric1 / metric2 * 100 ）实现公式。这将允许计算例如两个度量结果之间的比率。

https://www.elastic.co/guide/en/elasticsearch/reference/master/search-aggregations-pipeline-bucket-script-aggregation.html

使用场景：
链接： https :

Aggregations KibanaApp enhancement

资料来源

rcrezende

👍55

最有用的评论

请在普通可视化中添加“Bucket Script Aggregation”或“Custom Aggregation”作为选项。应该很简单，就像其他聚合一样，但不要在聚合体中添加任何内容（只是用户提供的json）

Spacefish 于 2018-07-30

👍21

所有29条评论

重复https://github.com/elastic/kibana/issues/4584

rashidkpc 于 2015-08-19

@rashidkpc我不明白这是如何欺骗管道的东西。 5.4 中的管道，但我在那里没有看到存储桶脚本聚合。我们可以重新打开这个吗？

Kazark 于 2017-05-19

我感兴趣的是这个功能，以做代表农民域的文档，我需要更大的权重为大场和小的小字段的值值的可视化，搜索查询已选择包括在外地文件后，加权平均值。

bucket_script 功能似乎是答案（我在 elasticsearch 中使用它）但在使用 Kibana 可视化时我似乎无法重现这样的查询。

有没有计划很快支持这一点？

或者有什么解决方法吗？

（例如，我试图查看是否可以直接告诉 Kibana 我想要用于可视化的 elasticsearch 查询，而不是 Kibana 根据我的 UI 选择为我创建查询 - 但这似乎不可能？对吗？ )

darrencruse 于 2017-07-28

pant03 于 2017-08-02

👎1

我会对这个功能感兴趣。在我们的用例中，它将允许解决成功/失败比率。

smoreaud 于 2017-08-04

+1 也想看这个！实施起来应该非常简单.. 只是下拉列表中的“自定义指标”，它显示了一个框，您可以在其中输入聚合 JSON..

Spacefish 于 2017-08-08

从 Kibana 5.4 开始，时间序列可视化生成器现在支持存储桶脚本 agg，尽管它被称为“计算”（cc @simianhacker我想知道我们是否应该更明确地说明此选项依赖于“存储桶脚本”？）

这张票上的人（例如@Kazark）可以尝试一下，让我们知道它是否对您的用例有帮助吗？
screen shot 2017-08-30 at 6 51 54 am

tbragin 于 2017-08-30

👍4

我认为@simianhacker已经同意重命名此聚合是有意义的。我已经打开https://github.com/elastic/kibana/issues/13796进行跟踪。

alexfrancoeur 于 2017-08-31

@tbragin在

然而，如果 TSVB 支持额外的脚本聚合（例如脚本化总和聚合），那就太好了，因为如果支持所有类型的子聚合，桶脚本聚合只能充分利用其潜力。但是因为这里不是更详细讨论这个的地方，所以我打开了另一个问题。

hetzer-fastec 于 2017-09-11

这个功能有时间表吗？

shaharmor 于 2017-10-23

“计算”功能只能将存储桶脚本作为顶级，它不能应用于父存储桶聚合... :(

这只是在时间序列可视化中，标准可视化中没有存储桶脚本。

我们的特定用例需要两者，似乎都不支持 - 即使在 6.x(rc) 中也不支持
有没有这方面的计划？

在我们的用例中，每个文档都有一个开始时间和结束时间日期类型字段，我们需要生成跨这些存储桶的总体持续时间，按某个类别字段分组。
这涉及首先对该类别进行分桶，然后在该类别中执行 2 个指标：每个桶中文档的 min(start-time) 和 nax(end-time)，然后应用使用这两个指标的管道脚本桶聚合 - aggs 计算它们之间的持续时间（max_end_time - min_start_time）。这为我们提供了一个“持续时间”指标作为每个存储桶的输出。然后我们想对它们应用一些 metric-pipeline-aggs。

此处详细介绍了几乎相同的结构： https :

我能够在查询 DSL 中表达这一点，我们已经在生产中使用它 - 但我们无法在 Kibana 中将这些可视化 - 这真的很糟糕，因为我们的客户多年来一直要求这样的可视化，而我们'一直告诉他们“我们需要更高版本的支持，用于管道聚合”......
好吧，现在我们有了这些 - 但实际上，不要......
在时间序列构建器中，我们有可以表达的bucket-script管道聚合，但它不能消费/应用于父bucket-term-aggregation，而在另一个可视化中，我们有bucket-term-聚合和一些管道指标聚合，但不是表达这一点所需的存储桶脚本管道聚合...

是否有使用一些“高级 JSON”的解决方法，我可以将我的查询 DSL 放在那里？

ArnonMarcus 于 2017-11-12

👍8

只需按照此问题的要求添加我的用例：

我的索引包含以下文档类型（代表测试执行）：
测试 ID（字符串）
成功（布尔）
软件版本
我想建立以下直方图：
在 X 轴上：版本
在 Y 轴上：独特测试的数量，按成功/失败堆叠
同一个测试id可以在同一个版本上多次执行，结果不同：一次成功就算成功。

我真的希望这能得到实施，因为这对我们来说是一个明确的展示。

nicoulaj 于 2017-12-12

👍5

Spacefish 于 2018-07-30

👍21

对于任何对在 TSVB 中使用此功能的示例感兴趣的人，这里有一个相关的论坛帖子： https ://discuss.elastic.co/t/weighted-average-in-a-datatable-of-kibana/185909/2

cjcenizal 于 2019-06-18

👍2

请求的功能没有完成（！）这不是关于 TSVB，而是关于其他常规可视化类型（！）（条形图等）。我们现在在 6.4 上，但我们仍然不能做我们需要的。它也不在 7.x ASAIK 中。
同样，这是关于能够在条形图中选择“Bucket Script”（它在那里不可用）并在整体聚合的任何嵌套级别执行此操作。
我们还需要一个“Bucket Filter” BTW，以便能够通过一个简短的脚本过滤来自该聚合的桶。

ArnonMarcus 于 2019-06-20

👍4

抄送@elastic/kibana-app

cjcenizal 于 2019-06-20

“计算”功能只能将存储桶脚本作为顶级，它不能应用于父存储桶聚合... :(
这只是在时间序列可视化中，标准可视化中没有存储桶脚本。
我们的特定用例需要两者，似乎都不支持 - 即使在 6.x(rc) 中也不支持
有没有这方面的计划？
在我们的用例中，每个文档都有一个开始时间和结束时间日期类型字段，我们需要生成跨这些存储桶的总体持续时间，按某个类别字段分组。
这涉及首先对该类别进行分桶，然后在该类别中执行 2 个指标：每个桶中文档的 min(start-time) 和 nax(end-time)，然后应用使用这两个指标的管道脚本桶聚合 - aggs 计算它们之间的持续时间（max_end_time - min_start_time）。这为我们提供了一个“持续时间”指标作为每个存储桶的输出。然后我们想对它们应用一些 metric-pipeline-aggs。
此处详细介绍了几乎相同的结构： https :
我能够在查询 DSL 中表达这一点，我们已经在生产中使用它 - 但我们无法在 Kibana 中将这些可视化 - 这真的很糟糕，因为我们的客户多年来一直要求这样的可视化，而我们'一直告诉他们“我们需要更高版本的支持，用于管道聚合”......
好吧，现在我们有了这些 - 但实际上，不要......
在时间序列构建器中，我们有可以表达的bucket-script管道聚合，但它不能消费/应用于父bucket-term-aggregation，而在另一个可视化中，我们有bucket-term-聚合和一些管道指标聚合，但不是表达这一点所需的存储桶脚本管道聚合...
是否有使用一些“高级 JSON”的解决方法，我可以将我的查询 DSL 放在那里？

@ArnonMarcus你能做到这一点吗？我有类似的要求，但不知道如何在 Kibana 中实现。我目前使用的是 6.7.1 版本