资讯专栏INFORMATION COLUMN

监控项说明 Kafka消息队列 UKafka

ernest.wang / 2506人阅读

摘要:监控项说明监控项说明监控项说明控制台的监控视图提供了集群和节点的多维度监控,以下分模块对监控项做说明。如果一个挂掉了,一些的会收缩。当那个重新起来时,一旦它的完全跟上,会扩大。在集群中只有一个的这个值为,其他值为,如果都为,集群有问题。

监控项说明

UKafka 控制台的 <监控视图> 提供了集群和节点的多维度监控,以下分模块对监控项做说明。

监控指标类别监控项说明节点指标CPU使用率(%)节点的CPU使用率:::内存使用率(%)节点的内存使用率:::数据盘使用率(%)节点数据盘使用率:::系统盘使用率(%)节点系统盘使用率:::磁盘读/写吞吐(Kb/s)磁盘读写吞吐量:::磁盘读/写次数(次/s)磁盘读写次数:::网卡出/入带宽(Kb/s)网卡出入带宽值:::网卡出/入包量(个/s)网卡出入包量zookeeper指标watcher数量(个)watch机制用于数据变更时zookeeper的主动通知。<r>watch可以被附加到每一个节点上,那么如果一个应用有10W个节点,<r>那zookeeper中就可能有10W个watch(甚至更多):::znode数量(个)znode是zookeeper的节点,类似文件系统的目录或者文件kafka指标每秒流入消息个数(个/s)所有的topic的消息速率(个/s),取一分钟的平均值:::每秒流入数据(B/s)所有的topic的流入数据速率(B/s),取一分钟的平均值:::每秒流出数据(B/s)所有的topic的流出数据速率(B/s),取一分钟的平均值:::Follower落后Leader最大消息量(个)follower落后leaderreplica的最大的消息数量:::分布在该节点上的分区总数(个)该节点上分区总数:::分布在该节点上的leader分区总数(个)该节点上leader分区总数:::未复制的分区总数(个)待做复制的分区的数量,正常值为0:::ISR收缩速率(个/s)ISR的收缩(shrink)速率。<r>如果一个broker挂掉了,一些partition的ISR会收缩。<r>当那个broker重新起来时,一旦它的replica完全跟上,ISR会扩大(expand)。<r>除此之外,正常情况下,此值和下面的扩大速率都是0:::ISR扩大速率(个/s)ISR的扩大(expansion)速率,参见ISR的收缩(shrink)速率:::管理节点个数(个)当前的broker是否为controller。<r>在集群中只有一个broker的这个值为1,其他值为0,如果都为0,集群有问题。:::离线分区总数(个)离线的partition个数:::消费者失败请求(次/s)消费者失败的请求个数,取一分钟的平均值:::生产者失败请求(次/s)生成者失败请求的个数,取一分钟的平均值:::Broker拒绝的消息(B/s)Broker拒绝的消息量,取一分钟的平均值:::生产者请求响应时间(ms)生产者平均响应时间:::消费者请求响应时间(ms)消费者平均响应时间:::生产者QPS(次/s)生产者QPS,取一分钟的平均值:::消费者QPS(次/s)消费者QPS,取一分钟的平均值

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/126733.html

相关文章

  • FAQs Kafka消息队列 UKafka

    摘要:大量的和分区会严重影响集群性能。介绍可参考收到离线分区总数异常告警一般是某个节点宕机或者服务异常导致。若服务卡住,可在评估后在控制台重启该节点服务。若想了解当前请求延时情况,建议关注平均请求延时监控项。 FAQs本篇目录一个UKafka集群可以创建多少个Topic?如何增加Topic的副本数量(ReplicationFactor)?收到离线分区总数>=10.0个告警,离线分区总数是什么,怎么...

    ernest.wang 评论0 收藏2407
  • 概览 Kafka消息队列 UKafka

    摘要:概览概览产品简介操作指南集群管理节点管理磁盘管理管理管理监控视图监控项说明开发指南快速开始认证配置与外网访问客户端性能测试连接器产品介绍快速开始产品功能性能测试产品价格产品价格 概览产品简介操作指南集群管理节点管理磁盘管理Topic管理ConsumerGroup管理监控视图监控项说明开发指南快速开始认证配置与外网访问客户端SDK性能测试FAQsKafka连接器产品介绍快速开始产品功能性能测试...

    ernest.wang 评论0 收藏2613
  • 监控视图 Kafka消息队列 UKafka

    摘要:监控视图监控视图监控视图集群监控集群监控提供小时至天多个维度的集群流入流出数据量和消息个数监控,生产者消费者监控数据,以及相关监控数据。节点监控节点监控提供每个上的磁盘网卡,服务,以及监控数据 监控视图集群监控提供1小时至15天多个维度的集群流入、流出数据量和消息个数监控,Kafka生产者、消费者监控数据,以及Zookeeper相关监控数据。节点监控提供每个Broker上的CPU、MEM、磁...

    ernest.wang 评论0 收藏680
  • Kafka消息队列 UKafka

    摘要:快速开始本例以数据同步到来做说明。创建连接器点击创建连接器按钮,打开配置页面。若下游为,则需配置路径,若为,则需填写信息。连接器列表详情页数据验证参考,为集群创建,并写入消息到其中。快速开始本例以UKafka数据同步到UHadoop来做说明。创建连接器点击【创建连接器】按钮,打开配置页面。配置连接器基本信息配置按需填写。【上游】意为Kafka连接器上游的Kafka集群,【下游】意为Kafka...

    ernest.wang 评论0 收藏1595
  • 集群管理 Kafka消息队列 UKafka

    摘要:集群管理集群管理集群管理本篇目录创建集群创建集群调整集群参数调整集群参数创建集群创建集群创建集群点击控制台左上角全部产品选择消息队列也可锁定到左侧菜单栏。选择完毕后,进入集群设置页面,可对集群参数进行配置。 集群管理本篇目录创建集群调整集群参数创建集群1. 点击控制台左上角全部产品选择Kafka消息队列 UKafka,也可锁定到左侧菜单栏。2. 进入UKafka操作界面,点击创建集群进行UK...

    ernest.wang 评论0 收藏276
  • 性能测试 Kafka消息队列 UKafka

    摘要:性能测试性能测试性能测试上游,下游是的连接器节点数分区数数消息大小机型速度消息数核核核核核核核上游,下游是连接器节点数分区数数消息大小机型版本机型节点数分片数副本数速度消息数核核核核核核核核核 性能测试上游UKafka,下游是UHadoop的HDFS 连接器节点数分区数broker数消息大小/byteskafka机型hadoopmasterhadoopcore速度(消息数/s)1331024...

    ernest.wang 评论0 收藏1358

发表评论

0条评论

ernest.wang

|高级讲师

TA的文章

阅读更多
最新活动
阅读需要支付1元查看
<