监控配置

gaea proxy基于prometheus做统计数据的存储，使用grafana实现数据可视化展示。

监控说明

gaea proxy监控

proxy grafana配置模板

proxy监控概览这部分主要展示gaea proxy的整体运行情况，主要包含以下几个监控项:

  • 集群QPS
  • 业务流量
  • 业务请求耗时
  • SQL 错误数
  • CPU 负载
  • 内存 负载
  • 流量负载
  • 会话数
  • 业务会话数
  • 协程数量
  • GC 停顿时间
  • 堆对象数量

租户各指标监控

namespace grafana配置模板

导入模板之前需要把模板里的gaea_test_namespace 替换为实际使用的namespace

租户指标监控主要展示某个namespace的统计数据，主要包含以下几个监控项:

  • QPS
  • 流量
  • SQL耗时
  • SQL错误数
  • 高耗时SQL指纹
  • 错误SQL指纹
  • 连接数
  • 空闲连接数
  • 连接等待队列

prometheus配置说明

  1. - job_name: 'gaea_proxy'
  2.     metrics_path: '/api/metric/metrics'
  3.     static_configs:
  4.     - targets: ["admin_addr1"]
  5.     - targets: ["admin_addr2"]
  6.     - targets: ["admin_addr3"]
  7.     basic_auth:
  8.       username: admin_user
  9.       password: admin_password

需要修改admin_addr,admin_user,admin_password与gaea.ini中的以下几项保持一致。

  1. ;管理地址
  2. admin_addr=0.0.0.0:13307
  3. ;basic auth
  4. admin_user=admin
  5. admin_password=admin

增加Prometheus Recoding Rules

  1. groups:
  2.   - name: gaea_proxy_rule
  3.     rules:
  4.     - record: gaea_proxy_sql_timings_count_rate_each_namespace
  5.       expr: sum(avg(rate(gaea_proxy_sql_timings_count[20s])) without (slave)) by (namespace)
  6.     - record: gaea_proxy_sql_timings_count_rate_total
  7.       expr: sum(sum(avg(rate(gaea_proxy_sql_timings_count[20s])) without (slave)) by (namespace))
  8.     - record: gaea_proxy_flow_counts_rate_namespace_flowdirection
  9.       expr: sum(avg(rate(gaea_proxy_flow_counts[20s])) without (slave)) by (namespace, flowdirection)
  10.     - record: gaea_proxy_flow_counts_rate_namespace
  11.       expr: sum(avg(rate(gaea_proxy_flow_counts[20s])) without (slave)) by (namespace)
  12.     - record: gaea_proxy_flow_counts_rate_total
  13.       expr: sum(sum(avg(rate(gaea_proxy_flow_counts[20s])) without (slave)) by (namespace))
  14.     - record: gaea_proxy_sql_timings_rate_namespace_operation
  15.       expr: sum(delta(gaea_proxy_sql_timings_sum[20s])) by (namespace,operation) / sum(delta(gaea_proxy_sql_timings_count[20s])) by (namespace,operation)
  16.     - record: gaea_proxy_sql_timings_rate_namespace
  17.       expr: sum(delta(gaea_proxy_sql_timings_sum[20s])) by (namespace) / sum(delta(gaea_proxy_sql_timings_count[20s])) by (namespace)
  18.     - record: gaea_proxy_sql_error_counts_rate_namespace
  19.       expr: sum(avg(rate(gaea_proxy_sql_error_counts[20s])) without (instance)) by (namespace)

新增监控项

Gaea 2.0

  • gaea_proxy_uptime_counts：counter 类型，记录 gaea_proxy 的启动时间，单位为秒
  • gaea_proxy_backend_instance_down_counts：gauge 类型，记录后端主从库的实例宕机状态，1 为不存活，0 为存活
  • gaea_proxy_cpu_busy: gauge 类型, 记录 gaea_proxy 的 CPU 负载占设置的 CPU 核数百分比（实际使用时需要除以 100 转化为小数）