[转帖]PG Exporter

pg,exporter · 浏览次数 : 0

小编点评

**pg_exporter官方文档** **简介** pg_exporter 是一个用于收集 Postgre 和 Pgbouncer 指标的自我监控 exporter。它支持 PostgreSQL 9.4 ~ 13 版本和 Pgbouncer 1.8+ 版本几乎所有指标，完全定制化，提供热重载功能指标收集器可以根据类似Kubernetes的方式调度执行。 **功能** * 支持 PostgreSQL 9.4 + 和 Pgbouncer 1.8+ 版本的指标收集。 * 提供动态规划，用户可以提供多个 branch 的指标查询。 * 支持多种缓存策略和超时取消机制，以优化监控系统的性能。 * 提供健康检查、就绪探针、主从角色检查等功能。 * 可以根据需要定制指标收集策略。 **性能** pg_exporter 的性能对于极端场景可能会有所影响，但通常可以轻松处理大规模的数据库集群。性能测试表明，在大多数情况下，pg_exporter 可以提供毫秒级的响应时间。 **配置** pg_exporter 的配置文件使用 SQL 语句定义指标。指标可以配置为静态或动态的，并可以根据需要进行缓存。 **支持** pg_exporter 支持以下数据库版本： * PostgreSQL 9.4 + * Pgbouncer 1.8+ **使用方法** 1. 下载并安装 pg_exporter。 2. 配置 pg_exporter 的配置文件。 3. 启动 pg_exporter。 **示例配置文件** ```sql # postgres host = your_postgres_host user = your_postgres_user password = your_postgres_password database = your_postgres_database # pgbouncer host = your_pgbouncer_host port = your_pgbouncer_port database = your_pgbouncer_database user = your_pgbouncer_user password = your_pgbouncer_password ``` **总结** pg_exporter 是一个功能强大的自我监控 exporter，可用于收集 Postgre 和 Pgbouncer 指标。它提供了许多配置选项和功能，使其易于使用和配置。

正文

http://v0.pigsty.cc/zh/docs/reference/kernel-optimize/

Exporter

https://github.com/Vonng/pg_exporter

完全自研的 pg_exporter, 用于收集postgres与pgbouncer的指标：

支持PostgreSQL 9.4 ~ 13版本，Pgbouncer 1.8+版本

几乎所有指标都通过配置文件以SQL的形式获取，完全定制化，提供热重载功能

指标收集器可以根据类似Kubernetes的方式调度执行（例如只在从库上执行，只在带有tag启动标签的节点执行，只在安装特定扩展的实例上执行等）

带有灵活的指标缓存策略，自动超时取消，最小化监控系统对数据库的性能影响。

提供健康检查，就绪探针，主从角色检查等功能，可用于流量分发

PG Exporter

Prometheus exporter for PostgreSQL metrics. Gives you complete insight on your favourate elephant!

Latest binaries & rpms can be found on release page. Supported pg version: PostgreSQL 9.4+ & Pgbouncer 1.8+. Default collectors definition is compatible with PostgreSQL 10,11,12,13.

Latest pg_exporter version: 0.3.1

Features

Support both Postgres & Pgbouncer
Flexible: Almost all metrics are defined in customizable configuration files in SQL style.
Fine-grained execution control (Tags Filter, Facts Filter, Version Filter, Timeout, Cache, etc…)
Dynamic Planning: User could provide multiple branches of a metric queries. Queries matches server version & fact & tag will be actually installed.
Configurable caching policy & query timeout
Rich metrics about pg_exporter itself.
Auto discovery multi database in the same cluster (multiple database scrape TBD)
Tested and verified in real world production environment for years (200+ Nodes)
Metrics overhelming! Gives you complete insight on your favourate elephant!
(Pgbouncer mode is enabled when target dbname is pgbouncer)

性能表现

对于极端场景（几十万张表与几万种查询），一次抓取最多可能耗费秒级的时长。

好在所有指标收集器都是可选关闭的，且pg_exporter 允许为收集器配置主动超时取消（默认100ms）

自监控

Exporter展示了监控系统组件本身的监控指标，包括：

Exporter是否存活，Uptime，Exporter每分钟被抓取的次数
每个监控查询的耗时，产生的指标数量与错误数量。

Prometheus的配置

Prometheus的抓取频率建议采用10～15秒，并配置适当的超时。

演示或特殊情况也可以配置的更精细（例如2秒，5秒等）

单Prometheus节点可以支持几百个实例的监控，约几百万个时间序列（Dell R740 64 Core / 400GB Mem/ 3TB PCI-E SSD）

更大规模的集群可以通过Prometheus级联、联邦或分片实现伸缩。例如为每一个数据库集群部署一个Prometheus，并使用上级Prometheus统筹抓取并计算衍生指标