弹性 MapReduce Impala 监控指标

这里说明了腾讯云关于 Impala 相关的内容,包括 Impala-CATALOG、Impala-STATESTORE 和 Impala-DAEMON ,同时指出 Impala 指标目前仅支持 Impala3.4.0 及以上版本。无。

相关产品
弹性 MapReduce 产品页,含版本规格、价格与购买入口。

注意:Impala 指标目前仅支持 Impala3.4.0 及以上版本。

一、Impala-CATALOG

标题 指标名称 指标单位 指标含义
常驻内存集 RSS bytes 常驻内存集
JVM 内存 MemHeapInitM MB JVM 初始 HeapMemory 的数量峰值
 MemHeapCommittedM MB JVM 当前已经提交的 HeapMemory 的数量
 MemHeapMaxM MB JVM 配置的 HeapMemory 的数量
 MemHeapUsedM MB JVM 当前已经使用的 HeapMemory 的数量
 MemNonHeapInitM MB JVM 初始 NonHeapMemory的数量
 MemNonHeapCommittedM MB JVM 当前已经提交的 NonHeapMemory 的数量
 MemNonHeapUsedM MB JVM 当前已经使用的 NonHeapMemory 的数量
堆内存使率 MemHeapUsedRate % JVM 当前已经使用的 HeapMemory 的数量所占 JVM 配置的 HeapMemory 的数量的百分比
守护进程到 StateStore 的心跳间隔 Last s 守护进程到 StateStore 的最近心跳间隔
 Max s 守护进程到 StateStore 的最大心跳间隔
 Mean s 守护进程到 StateStore 的平均心跳间隔
 Min s 守护进程到 StateStore 的最小心跳间隔
 Stddev s 守护进程到 StateStore 的心跳之间的标准偏差
TCMALLOC 内存 Used bytes 程序使用的字节数
 PageheapFreeBytes bytes 页堆中空闲映射页的字节数
 PageheapUnmappedBytes bytes 页堆中空闲、未映射页的字节数
 PhysicalBytesReserved bytes 计算进程使用的物理内存量
 TotalBytesReserved bytes TCMalloc 保留的系统内存字节数
活跃连接数 Thrift_Server_Connections_Used 个 活跃连接数
进程运行时间 Uptime s 进程运行时间
文件描述符数 MaxFileDescriptorCount 个 最大文件描述符数
 OpenFileDescriptorCount 个 已打开文件描述符数
线程数 ThreadCount 个 总线程数量
 DaemonThreadCount 个 Daemon 线程数
CPU 利用率 SystemCpuLoad 个 系统 CPU 利用率

二、Impala-STATESTORE

标题 指标名称 指标单位 指标含义
常驻内存集 RSS bytes 常驻内存集
TCMALLOC 内存 Used bytes 程序使用的字节数
 PageheapFreeBytes bytes 页堆中空闲映射页的字节数
 PageheapUnmappedBytes bytes 页堆中空闲、未映射页的字节数
 PhysicalBytesReserved bytes 计算进程使用的物理内存量
 TotalBytesReserved bytes TCMalloc 保留的系统内存字节数
连接数 Used 个 活跃连接数
运行线程数 Count 个 运行线程数
StateStore 订阅者数量 Count 个 StateStore 订阅者数量

三、Impala-DAEMON

标题 指标名称 指标单位 指标含义
JVM 内存 MemHeapInitM MB JVM 初始 HeapMemory 的数量峰值
 MemHeapCommittedM MB JVM 当前已经提交的 HeapMemory 的数量
 MemHeapMaxM MB JVM 配置的 HeapMemory 的数量
 MemHeapUsedM MB JVM 当前已经使用的 HeapMemory 的数量
 MemNonHeapInitM MB JVM 初始 NonHeapMemory的数量
 MemNonHeapCommittedM MB JVM 当前已经提交的 NonHeapMemory 的数量
 MemNonHeapUsedM MB JVM 当前已经使用的 NonHeapMemory 的数量
堆内存使率 MemHeapUsedRate % JVM 当前已经使用的 HeapMemory 的数量所占 JVM 配置的 HeapMemory 的数量的百分比
TCMALLOC 内存 Used bytes 程序使用的字节数
 PageheapFreeBytes bytes 页堆中空闲映射页的字节数
 PageheapUnmappedBytes bytes 页堆中空闲、未映射页的字节数
 PhysicalBytesReserved bytes 计算进程使用的物理内存量
 TotalBytesReserved bytes TCMalloc 保留的系统内存字节数
线程数 ThreadCount 个 总线程数量
 DaemonThreadCount 个 Daemon 线程数
进程运行时间 Uptime s 进程运行时间
文件描述符数 MaxFileDescriptorCount 个 最大文件描述符数
 OpenFileDescriptorCount 个 已打开文件描述符数
CPU 利用率 SystemCpuLoad 个 系统 CPU 利用率
Beeswax API 客户端连接数 Use 个 活跃 Beeswax API 连接数
 Conn_In_Use 个 与此 Impala Daemon 的活跃 Beeswax API 连接数
 TotalConns 个 与此 Impala Daemon 的活跃 Beeswax API 连接总数
 ConnSetupQueueSize 个 此 Impala Daemon 已被接收并等待建立连接的 Beeswax API 连接数
HS2 API 客户端连接数 Use 个 活跃 HS2 API 连接数
 Conn_In_Use 个 活跃 HS2 API 连接数
 TotalConns 个 此 Impala Daemon 在生命周期内建立连接的 HS2 API 连接总数
 ConnSetupQueueSize 个 此 Impala Daemon 已被接收并等待建立连接的 HS2 API 连接数
线程管理器 RunningThreads 个 运行线程数
 TotalCreatedThreads 个 生命周期内创建的线程数
内存管理器限制 Limit Bytes 超过其内存限制的内存量(默认值-1)
超过其内存限制的内存量(默认值-1) OverLimit Bytes 生命周期内创建的线程数
HS2 API 客户端等待建立连接时间 P20 us HS2 API 客户端等待建立连接时间
   P50
   P70
   P90
   P95
   P99.9
Beeswax API 客户端等待服务线程建立时间 P20 us Beeswax API 客户端等待服务线程建立时间
   P50
   P70
   P90
   P95
   P99.9
已超时的 Beeswax API 连接数 TimeOutCnncRequests 个 已超时的 Beeswax API 连接数
解析请求池请求所花费时间(毫秒) Total ms 解析请求池请求所花费时间(毫秒)
外部数据源缓存类中缓存未命中数 Misses 个 外部数据源缓存类中缓存未命中数
已超时等待设置的 Impala 后端服务器的连接请求数 ConnSetupQueueSize 个 已超时等待设置的 Impala 后端服务器的连接请求数
已超时等待设置的 Impala be 的连接请求数 TimeOutCnncRequests 个 已超时等待设置的 Impala be 的连接请求数
与此 Impala 守护程序建立的 Impala 后端客户端连接总数 TotalConnections 个 与此 Impala 守护程序建立的 Impala 后端客户端连接总数
Impala be 的客户端等待连接建立所花费的时间 P20 us Impala be 的客户端等待连接建立所花费的时间
   P50
   P70
   P90
   P95
   P99.9
   Count
   Sum
Impala be 的客户端等待服务线程所花费的时间 P20 us Impala be 的客户端等待服务线程所花费的时间
   P50
   P70
   P90
   P95
   P99.9
   Count
   Sum
HS2 API 客户端等待服务线程建立时间 P20 us HS2 API 客户端等待服务线程建立时间
   P50
   P70
   P90
   P95
   P99.9
   Count
   Sum
HS2 HTTP API 客户端等待服务线程时间 P20 us HS2 HTTP API 客户端等待服务线程时间
   P50
   P70
   P90
   P95
   P99.9
   Count
   Sum
DataStreamService:服务队列溢被拒绝数 RpcsQueueOverflow 个 DataStreamService:服务队列溢被拒绝数
ControlStreamService:服务队列溢被拒绝数 RpcsQueueOverflow 个 ControlStreamService:服务队列溢被拒绝数
DataStreamService:使用字节数 PeakUsageBytes Bytes Memtracker DataStreamService 峰值使用字节数
 CurrentUsageBytes Bytes Memtracker DataStreamService 当前使用字节数
ControlService:使用字节数 PeakUsageBytes Bytes Memtracker ControlService 峰值使用字节数
 CurrentUsageBytes Bytes Memtracker ControlService 当前使用字节数
此进程的驻留集大小(RSS) RSS Bytes 此进程的驻留集大小(RSS)
StateStore 中注册后端总数 Total 个 StateStore 中注册后端总数
查询延迟分布 P20 us 查询延迟分布
   P50
   P70
   P90
   P95
   P99.9
   Count
   Sum
打开已进行写入 HDFS 文件数 NumFilesOpenForInsert 个 打开 HDFS 文件数
进程生命周期内读取的扫描范围 ScanRangesTotal 个 进程生命周期内读取扫描范围
打开 Beeswax 会话数量 NumOpenBeeswaxSessions 个 打开 Beeswax 会话数量
进程生命周期内处理查询 fragment 总数 NumFragments 个 进程生命周期内处理查询 fragment 总数
在无 volum 元数据的进程生命周期内读取的扫描范围总数 ScanRangesNumMissingVolumId 个 在无 volum 元数据的进程生命周期内读取的扫描范围总数
Hedged reads 尝试次数 HedgedReadOps 个 Hedged reads 尝试次数
在进程生命周期内处理查询总数 NumQueries 个 在进程生命周期内处理查询总数
支持缓存 HS2 FETCH_FIRST 的总行数 ResultSetCacheTotalNumRows 个 缓存已支持 HS2 FETCH_FIRST 总行数
此 Impala 服务器上注册的查询总数 NumQueriesRegistered 个 此 Impala 服务器上注册查询总数
be 查询总数 NumQueriesExecuted 个 be 查询总数
非活动状态而终止会话数 NumSessionsExpired 个 非活动状态而终止会话数
非活动状态而终止查询数 NumQueriesExpired 个 非活动状态而终止查询数
打开 HS2会话数 NumOpenHS2Sessions 个 打开 HS2会话数
Catalog 里面表数量 NumTables 个 Catalog tables 数量
Catalog 里面数据库数量 NumDatabases 个 Catalog Databases 数量
IO 管理器写入磁盘的字节数 BytesWritten 个 IO 管理器写入磁盘的字节数
IO 管理器打开的文件数 NumOpenFiles 个 IO 管理器打开的文件数
使用的 HDFS 文件句柄数 NumFileHandlesOutstanding Bytes 使用的 HDFS 文件句柄数
读取的本地字节数 LocalBytesRead Bytes IO 管理器读取的本地字节数
be 查询速率 RateQueriesExecuted count/s be 执行的查询速率
处理查询速率 RateQuery count/s 处理的查询速率
处理查询 fragment 速率 RateFragments count/s 处理的查询 fragment 速率
赞 (0)
上一篇 4天前
下一篇 4天前