资讯专栏INFORMATION COLUMN

集群管理 Kafka消息队列 UKafka

ernest.wang / 716人阅读

摘要:集群管理集群管理集群管理本篇目录创建集群创建集群调整集群参数调整集群参数创建集群创建集群创建集群点击控制台左上角全部产品选择消息队列也可锁定到左侧菜单栏。选择完毕后,进入集群设置页面,可对集群参数进行配置。

集群管理

本篇目录

创建集群调整集群参数

创建集群

1. 点击控制台左上角“全部产品”选择“Kafka消息队列 UKafka”,也可锁定到左侧菜单栏。

2. 进入UKafka操作界面,点击“创建集群”进行UKafka集群创建。

3. 选择相应Kafka版本和业务需求量,以及节点机型与数量,集群最小规模至少3个节点。选择完毕后,进入集群设置页面,可对集群参数进行配置。

集群可选机型可参考:机型列表

集群可配置参数见下表(集群已有默认配置,以下配置请您在确认实际需求后再更改):

参数名称参数类型参数范围释义auto.create.topics.enablebooltrue/false是否允许自动创建Topicauto.leader.rebalance.enablebooltrue/false是否开启节点间数据均衡default.replication.factorint1-10默认复制因子数量delete.topic.enablebooltrue/false是否允许删除topic信息log.cleaner.delete.retention.msint1-2147483646压缩日志最长保留时间log.cleaner.enablebooltrue/false是否开启压缩日志清理log.cleanup.policystringdelete/compact日志清理策略,删除/压缩log.retention.hoursint1-10000日志最小保留时间log.segment.bytesint1-2147483646每个segment文件的大小message.max.bytesint1-2147483646消息体的最大大小num.io.threadsint1-32处理磁盘IO的线程数num.network.threadsint1-32处理网络请求的线程数num.partitionsint1-1000分区数量replica.fetch.max.bytesint1-2147483646副本同步时消息的最大尺寸zookeeper.session.timeout.msint1-2147483646zksession超时时间zookeeper.connection.timeout.msint1-2147483646客户端连接zk超时时间zookeeper.sync.time.msint1-2147483646zk信息同步间隔

replica.fetch.max.bytes须大于等于message.max.bytes;

num.io.threads与num.network.threads可控制节点负载与集群性能均衡。

调整集群参数

同创建集群,创建完毕后,也可调整Kafka服务的配置参数。参数内容详见上表。

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/126898.html

相关文章

  • FAQs Kafka消息队列 UKafka

    摘要:大量的和分区会严重影响集群性能。介绍可参考收到离线分区总数异常告警一般是某个节点宕机或者服务异常导致。若服务卡住,可在评估后在控制台重启该节点服务。若想了解当前请求延时情况,建议关注平均请求延时监控项。 FAQs本篇目录一个UKafka集群可以创建多少个Topic?如何增加Topic的副本数量(ReplicationFactor)?收到离线分区总数>=10.0个告警,离线分区总数是什么,怎么...

    ernest.wang 评论0 收藏2407
  • Kafka消息队列 UKafka

    摘要:快速开始本例以数据同步到来做说明。创建连接器点击创建连接器按钮,打开配置页面。若下游为,则需配置路径,若为,则需填写信息。连接器列表详情页数据验证参考,为集群创建,并写入消息到其中。快速开始本例以UKafka数据同步到UHadoop来做说明。创建连接器点击【创建连接器】按钮,打开配置页面。配置连接器基本信息配置按需填写。【上游】意为Kafka连接器上游的Kafka集群,【下游】意为Kafka...

    ernest.wang 评论0 收藏1595
  • 概览 Kafka消息队列 UKafka

    摘要:概览概览产品简介操作指南集群管理节点管理磁盘管理管理管理监控视图监控项说明开发指南快速开始认证配置与外网访问客户端性能测试连接器产品介绍快速开始产品功能性能测试产品价格产品价格 概览产品简介操作指南集群管理节点管理磁盘管理Topic管理ConsumerGroup管理监控视图监控项说明开发指南快速开始认证配置与外网访问客户端SDK性能测试FAQsKafka连接器产品介绍快速开始产品功能性能测试...

    ernest.wang 评论0 收藏2613
  • 监控视图 Kafka消息队列 UKafka

    摘要:监控视图监控视图监控视图集群监控集群监控提供小时至天多个维度的集群流入流出数据量和消息个数监控,生产者消费者监控数据,以及相关监控数据。节点监控节点监控提供每个上的磁盘网卡,服务,以及监控数据 监控视图集群监控提供1小时至15天多个维度的集群流入、流出数据量和消息个数监控,Kafka生产者、消费者监控数据,以及Zookeeper相关监控数据。节点监控提供每个Broker上的CPU、MEM、磁...

    ernest.wang 评论0 收藏680
  • 性能测试 Kafka消息队列 UKafka

    摘要:性能测试性能测试性能测试在不同机型集群默认配置下,利用脚本进行性能基准测试测试结果下载 性能测试在不同机型 ukafka 集群默认配置下,利用 kafka-producer-perf-test.sh 脚本进行性能基准测试测试结果下载

    ernest.wang 评论0 收藏1086

发表评论

0条评论

ernest.wang

|高级讲师

TA的文章

阅读更多
最新活动
阅读需要支付1元查看
<