小编点评

**创建日志搜索仪表板** **步骤 1：创建 Logs Panel** 1. 打开 Grafana。 2. 在左侧菜单中选择“仪表板”。 3. 在搜索栏中输入“Logs Panel”。 4. 点击“创建”。 **步骤 2：添加变量** 1. 在弹出的“配置”窗口中，选择“变量”。 2. 点击“添加”。 3. 为变量名输入 `namespace`。 4. 点击“确定”。 **步骤 3：创建 LogQL 表达式** 1. 在弹出的“配置”窗口中，选择“LogQL”。 2. 在“Variable” 中输入变量名 `namespace`。 3. 在“Query” 中使用以下表达式： ```logquery kube_pod_info.namespace = '$namespace' ``` **步骤 4：创建多值变量** 1. 在弹出的“配置”窗口中，选择“变量”。 2. 为变量名输入 `pod`。 3. 点击“确定”。 **步骤 5：创建多值变量** 1. 在弹出的“配置”窗口中，选择“变量”。 2. 为变量名输入 `multi`。 3. 在“Query” 中使用以下表达式： ```logquery container_network_receive_bytes_total{namespace=~"$namespace"} ``` **步骤 6：创建 LogQL 表达式** 1. 在弹出的“配置”窗口中，选择“LogQL”。 2. 在“Variable” 中输入变量名 `search`。 3. 在“Query” 中使用以下表达式： ```logquery ror (命中 Error 或 error) ``` **步骤 7：串联变量** 1. 在弹出的“配置”窗口中，选择“变量”。 2. 为变量名输入 `hostname`。 3. 在“Query” 中使用以下表达式： ```logquery hostname = ~"$hostname" ``` 4. 在“Variable” 中输入变量名 `unit`。 5. 在“Query” 中使用以下表达式： ```logquery unit = ~"$unit" ``` 6. 在“Variable” 中输入变量名 `multi`。 7. 在“Query” 中使用以下表达式： ```logquery multi = ~"$multi" ``` **步骤 8：创建 Logs Panel** 1. 在弹出的“配置”窗口中，选择“图表”。 2. 选择“图表类型”为“仪表板”。 3. 选择数据源为 Loki。 4. 在“LogQL” 中输入以下表达式： ``` {namespace=\"$namespace\", instance=~\"$pod\"} |~ \"$search\" ``` **步骤 9：保存并启动** 1. 点击“保存”。 2. 点击“启动”。 **完成** 您现在拥有一个可以快速搜索日志的 Grafana 仪表板。

正文

概述

创建一个简单的 Grafana 仪表板, 以实现对日志的快速搜索.

有经验的直接用 Grafana 的 Explore 功能就可以了.

但是对于没有经验的人, 他们如何能有一个已经预设了简单的标签搜索的仪表板，以帮助一些团队在排除故障时快速找到他们正在寻找的东西。虽然 Explore 很适合这个用例，但对于第一次使用的人，或者半夜收到告警的人来说，也可能有点令人生畏。

所以, 尝试通过一些模板变量来创建一个展示日志的 Grafana 仪表板.

步骤

实现概述

创建个 Logs Panel 的仪表板, 然后添加几个变量, Logs Panel 的 LogQL 表达式引入这些变量.

创建变量

因为 Loki 和 Prometheus 共享一套 Label, 所以可以通过 Prometheus 的 Label 来作为 Loki 的变量. 如下图:

这里创建一个可以通过: namespace, pod, 日志过滤条件 筛选日志的仪表板:

1. namespace 变量, 通过该变量获取所有的 namespace 作为变量筛选条件:
   1. Type: Query
   2. DataSource: Prometheus
   3. Query: label_values(kube_pod_info, namespace)
2. pod 变量, 通过该变量获取对应 namespace 下的 pod 作为变量筛选条件以缩小日志搜索空间:
   1. Type: Query
   2. DataSource: Prometheus
   3. Query: label_values(container_network_receive_bytes_total{namespace=~"$namespace"},pod)
   4. Multi-value: 勾选;
   5. Include All option: 勾选
   6. Custom all value: .*
   7. 🐾注意，使用container_network_receive_bytes_total作为指标名称来寻找可用的pod，但你可以使用任何指标来代表你环境中的所有pod。
3. search 变量, 通过该变量作为 LogQL 的管道过滤条件, 它被用来实际执行搜索:
   1. Type: Text Box
   2. Default value: rror (命中 Error 或 error)

执行 LogQL

最后, 把上面的变量串联起来, 添加 Logs Panel, 使用 Loki 作为数据源, 并使用{namespace="$namespace", instance=~"$pod"} |~ "$search" 作为 LogQL. 如下:

所有这些加在一起，提供了一个漂亮而简单的搜索日志的界面--不熟悉的人甚至不需要写一个LogQL查询!

如果你想查看的话，这里是仪表板json

再做一个查看 Journal 日志的

同样, 再做一个查看 Journal 日志的:

创建变量

这里直接使用 Loki 的 Label.

这里创建一个可以通过: hostname, unit, 日志过滤条件 筛选日志的仪表板:

1. hostname 变量, 通过该变量获取所有的 hostname 作为变量筛选条件:
   1. Type: Query
   2. DataSource: Loki
   3. Query: label_values(hostname)
   4. Multi-value: 勾选
   5. Include All option: 勾选
   6. Custom all value: .+
2. unit 变量, 通过该变量获取对应 hostname 下的 unit 作为变量筛选条件以缩小日志搜索空间:
   1. Type: Query
   2. DataSource: Loki
   3. Query: label_values({hostname=~"$hostname"}, unit)
   4. Multi-value: 勾选;
   5. Include All option: 勾选
   6. Custom all value: .+
   7. 🐾注意，使用container_network_receive_bytes_total作为指标名称来寻找可用的pod，但你可以使用任何指标来代表你环境中的所有pod。
3. search 变量, 通过该变量作为 LogQL 的管道过滤条件, 它被用来实际执行搜索:
   1. Type: Text Box
   2. Default value: rror (命中 Error 或 error)

执行 LogQL

最后, 把上面的变量串联起来, 添加 Logs Panel, 使用 Loki 作为数据源, 并使用{hostname=~"$hostname", unit=~"$unit"} |~ "$search" 作为 LogQL. 如下:

最终效果

最终效果如下:

和如下:

🎉🎉🎉

Grafana 系列文章

Grafana 系列文章

三人行, 必有我师; 知识共享, 天下为公. 本文由东风微鸣技术博客 EWhisper.cn 编写.