AWS CloudWatch 集成

ProtonBase 已集成AWS CloudWatch,您可以通过配置将 ProtonBase 服务的监控数据推送到CloudWatch。之后,您可以直接在AWS控制台查看这些指标,并针对指定监控指标设置报警。

前提条件

配置步骤

Step 1. 创建 IAM 权限策略

  1. 访问[AWS IAM 访问管理 - 策略]。

  2. 点击“创建策略”,为 ProtonBase 监控指标的订阅创建一个新的权限策略。

{
    "Version": "2012-10-17",
    "Statement": [
        {
            "Sid": "Statement1",
            "Effect": "Allow",
            "Action": [
                "cloudwatch:ListMetrics",
                "cloudwatch:GetMetricData",
                "cloudwatch:GetMetricStatistics",
                "cloudwatch:PutMetricData",
                "cloudwatch:PutMetricAlarm",
                "cloudwatch:TagResource",
                "cloudwatch:UntagResource"
            ],
            "Resource": [
                "*"
            ]
        }
    ]
}

  1. 输入策略名 ProtonbaseMetricsPublishPolicy 并点击保存。

Step 2. 创建 IAM 角色

  1. 访问[AWS RAM 访问管理 - 角色]。

  2. 点击“创建角色”,为 ProtonBase 监控指标的订阅创建一个新的角色。

    • 选择可信实体:选择 [自定义信任策略],填写(将 ACCOUNT_ID 替换为你的 BYOC 账号 ID):
{
    "Version": "2012-10-17",
    "Statement": [
      {
          "Effect": "Allow",
          "Principal": {
            "AWS": "arn:aws-cn:iam::{ACCOUNT_ID}:root"
          },
          "Action": "sts:AssumeRole",
          "Condition": {}
      }
    ]
}
  1. 添加权限:选择之前创建的 ProtonbaseMetricsPublishPolicy

  2. 输入角色名称protonbase-metrics并点击创建。

  1. 点击角色protonbase-metrics详情并复制ARN

步骤3. 配置CloudWatch订阅

  1. 点击配置CloudWatch订阅配置

  2. 配置订阅信息

  • Namespace, Cloudwatch指标的namespace,填入自定义值;
  • 角色ARN,填入上一步复制的角色ARN;
  • 服务区域ID,根据实际进行填写,如
    • AWS 北京: cn-north-1
    • AWS 宁夏: cn-northwest-1
    • AWS 香港: ap-east-1
    • AWS 东京: ap-northeast-1

  1. 在AWS控制台查看指标

监控指标

指标名指标名(中文)类型样例值label含义
Warebase 计算指标
warebase_expect_units目标规格gauge5
  • _cloudProvider
  • _region
  • _datacloudId
  • _id
  • _name

目标/当前 规格:显示 Warebase 的目标和当前规格。当前规格指 Warebase 处于正常服务状态的 Unit 数量。例如,在新建或扩容时, 目标规格 > 当前规格 的情况会暂时出现,随后会调整为 目标规格 = 当前规格 。如果持续出现目标规格 != 当前规格的情况,则可能指示系统处于非正常状态,此时应联系管理员。

warebase_running_units当前规格gauge5
warebase_resource_percent_normalized利用率gauge0.8

利用率:表示 Warebase 资源的使用率,综合考虑了 CPU 和内存的消耗。如果这一指标持续高于 80%,可能需要考虑扩容。

warebase_select_qpsSelect QPSgauge1000

QPS: 显示 Warebase 每秒处理的 SQL 语句数量,包括 Select、Update、Insert、Delete 和 Copy 等类型。

warebase_update_qpsUpdate QPSgauge1000
warebase_insert_qpsInsert QPSgauge1000
warebase_delete_qpsDelete QPSgauge1000
warebase_copy_qpsCopy QPSgauge1
warebase_failure_qps失败 Query QPSgauge1

失败 Query 数:显示 Warebase 每秒执行失败的 SQL 语句数量。如数值突增,需结合业务和系统状况进行分析。

warebase_insert_affected_rowsInsert 影响行数gauge10000

影响行数:显示 Warebase 每秒执行插入(INSERT)、更新(UPDATE)或删除(DELETE)操作后受影响的行数。如出现异常或结果不符合预期,需结合业务和系统状况进行分析。

warebase_update_affected_rowsUpdate 影响行数gauge10000
warebase_delete_affected_rowsDelete 影响行数gauge10000
warebase_copy_affected_rowsCopy 影响行数gauge10000
warebase_sql_select_p90_latencySelect 延迟(P90)gauge38818282.52(纳秒)

各类型 SQL 延迟:分别统计 Warebase 上各类型 SQL(select、insert、update、delete、copy)的 P99 延迟和 P90 延迟。如果指标长时间异常(如持续数分钟),需结合业务和系统状况进行分析。

warebase_sql_select_p99_latencySelect 延迟(P99)gauge38818282.52(纳秒)
warebase_sql_insert_p90_latencyInsert 延迟(P90)gauge38818282.52(纳秒)
warebase_sql_insert_p99_latencyInsert 延迟(P99)gauge38818282.52(纳秒)
warebase_sql_update_p90_latencyUpdate 延迟(P90)gauge38818282.52(纳秒)
warebase_sql_update_p99_latencyUpdate 延迟(P99)gauge38818282.52(纳秒)
warebase_sql_delete_p90_latencyDelete 延迟(P90)gauge38818282.52(纳秒)
warebase_sql_delete_p99_latencyDelete 延迟(P99)gauge38818282.52(纳秒)
warebase_sql_copy_p90_latencyCopy 延迟(P90)gauge38818282.52(纳秒)
warebase_sql_copy_p99_latencyCopy 延迟(P99)gauge38818282.52(纳秒)
warebase_sql_service_p90_latencySQL 延迟(P90)gauge38818282.52(纳秒)

SQL 延迟:P99:统计 Warebase 上 99% 的 SQL 语句执行耗时; P90:统计 Warebase 上 90% 的 SQL 语句执行耗时。如果 P99 延迟或 P90 延迟指标长时间异常(如持续数分钟),需结合业务和系统状况进行分析。

warebase_sql_service_p99_latencySQL 延迟(P99)gauge38818282.52(纳秒)
warebase_network_receive_bytes网络吞吐(接收)gauge92468.533333(字节)

网络吞吐:显示 Warebase 的网络吞吐量,包括接收和发送的字节数。

warebase_network_send_bytes网络吞吐(发送)gauge92468.533333(字节)
warebase_active_sql_connections活跃连接数gauge100

连接数:显示 Warebase 上的 SQL 连接数,包括活跃和空闲连接。

warebase_idle_sql_connections闲置连接数gauge20
Database 存储指标
database_size_bytesDatabase 存储大小gauge1073741824 (即 1TB)
  • _cloudProvider
  • _region
  • _datacloudId
  • _handle

各 Database 存储大小:显示每个数据库的存储大小。

数据库存储大小包括所有数据所占用的底层存储空间,涵盖表索引数据和事务日志。数据插入、修改、索引整理、事务执行、schema 变更、复制和快照等操作都会影响存储大小。

Backup 备份指标
backup_size_bytesBackup 存储大小gauge1073741824 (即 1TB)
  • _cloudProvider
  • _region
  • _datacloudId
  • _handle
各备份 Backup 存储大小
Teleport 数据同步指标
teleport_source_idle_timegaugetodo
  • _cloudProvider
  • _region
  • _datacloudId
  • _jobId
  • _jobName

Source 闲置时间,单位秒当前系统时间 - 上一条数据的 event time 在没有数据的情况下,该指标会增加。

teleport_emit_event_timegaugetodo

最近一次读取到的数据延时时间,单位秒最近一次读取到数据的系统时间 - 最近一次读取到数据的业务时间在源端没有数据的情况,该指标不会增加

teleport_source_heartbeat_timegaugetodo

源端心跳时间,单位秒指标产生的时间 - 最近一次尝试读取源端的系统时间如果该指标持续增大,说明被写入端反压了

teleport_rpsgaugetodo每秒记录数
teleport_bpsgaugetodo每秒字节数