摘要:監(jiān)控項(xiàng)說(shuō)明監(jiān)控項(xiàng)說(shuō)明監(jiān)控項(xiàng)說(shuō)明控制臺(tái)的監(jiān)控視圖提供了集群和節(jié)點(diǎn)的多維度監(jiān)控,以下分模塊對(duì)監(jiān)控項(xiàng)做說(shuō)明。如果一個(gè)掛掉了,一些的會(huì)收縮。當(dāng)那個(gè)重新起來(lái)時(shí),一旦它的完全跟上,會(huì)擴(kuò)大。在集群中只有一個(gè)的這個(gè)值為,其他值為,如果都為,集群有問(wèn)題。
UKafka 控制臺(tái)的 <監(jiān)控視圖> 提供了集群和節(jié)點(diǎn)的多維度監(jiān)控,以下分模塊對(duì)監(jiān)控項(xiàng)做說(shuō)明。
監(jiān)控指標(biāo)類(lèi)別監(jiān)控項(xiàng)說(shuō)明節(jié)點(diǎn)指標(biāo)CPU使用率(%)節(jié)點(diǎn)的CPU使用率:::內(nèi)存使用率(%)節(jié)點(diǎn)的內(nèi)存使用率:::數(shù)據(jù)盤(pán)使用率(%)節(jié)點(diǎn)數(shù)據(jù)盤(pán)使用率:::系統(tǒng)盤(pán)使用率(%)節(jié)點(diǎn)系統(tǒng)盤(pán)使用率:::磁盤(pán)讀/寫(xiě)吞吐(Kb/s)磁盤(pán)讀寫(xiě)吞吐量:::磁盤(pán)讀/寫(xiě)次數(shù)(次/s)磁盤(pán)讀寫(xiě)次數(shù):::網(wǎng)卡出/入帶寬(Kb/s)網(wǎng)卡出入帶寬值:::網(wǎng)卡出/入包量(個(gè)/s)網(wǎng)卡出入包量zookeeper指標(biāo)watcher數(shù)量(個(gè))watch機(jī)制用于數(shù)據(jù)變更時(shí)zookeeper的主動(dòng)通知。<r>watch可以被附加到每一個(gè)節(jié)點(diǎn)上,那么如果一個(gè)應(yīng)用有10W個(gè)節(jié)點(diǎn),<r>那zookeeper中就可能有10W個(gè)watch(甚至更多):::znode數(shù)量(個(gè))znode是zookeeper的節(jié)點(diǎn),類(lèi)似文件系統(tǒng)的目錄或者文件kafka指標(biāo)每秒流入消息個(gè)數(shù)(個(gè)/s)所有的topic的消息速率(個(gè)/s),取一分鐘的平均值:::每秒流入數(shù)據(jù)(B/s)所有的topic的流入數(shù)據(jù)速率(B/s),取一分鐘的平均值:::每秒流出數(shù)據(jù)(B/s)所有的topic的流出數(shù)據(jù)速率(B/s),取一分鐘的平均值:::Follower落后Leader最大消息量(個(gè))follower落后leaderreplica的最大的消息數(shù)量:::分布在該節(jié)點(diǎn)上的分區(qū)總數(shù)(個(gè))該節(jié)點(diǎn)上分區(qū)總數(shù):::分布在該節(jié)點(diǎn)上的leader分區(qū)總數(shù)(個(gè))該節(jié)點(diǎn)上leader分區(qū)總數(shù):::未復(fù)制的分區(qū)總數(shù)(個(gè))待做復(fù)制的分區(qū)的數(shù)量,正常值為0:::ISR收縮速率(個(gè)/s)ISR的收縮(shrink)速率。<r>如果一個(gè)broker掛掉了,一些partition的ISR會(huì)收縮。<r>當(dāng)那個(gè)broker重新起來(lái)時(shí),一旦它的replica完全跟上,ISR會(huì)擴(kuò)大(expand)。<r>除此之外,正常情況下,此值和下面的擴(kuò)大速率都是0:::ISR擴(kuò)大速率(個(gè)/s)ISR的擴(kuò)大(expansion)速率,參見(jiàn)ISR的收縮(shrink)速率:::管理節(jié)點(diǎn)個(gè)數(shù)(個(gè))當(dāng)前的broker是否為controller。<r>在集群中只有一個(gè)broker的這個(gè)值為1,其他值為0,如果都為0,集群有問(wèn)題。:::離線分區(qū)總數(shù)(個(gè))離線的partition個(gè)數(shù):::消費(fèi)者失敗請(qǐng)求(次/s)消費(fèi)者失敗的請(qǐng)求個(gè)數(shù),取一分鐘的平均值:::生產(chǎn)者失敗請(qǐng)求(次/s)生成者失敗請(qǐng)求的個(gè)數(shù),取一分鐘的平均值:::Broker拒絕的消息(B/s)Broker拒絕的消息量,取一分鐘的平均值:::生產(chǎn)者請(qǐng)求響應(yīng)時(shí)間(ms)生產(chǎn)者平均響應(yīng)時(shí)間:::消費(fèi)者請(qǐng)求響應(yīng)時(shí)間(ms)消費(fèi)者平均響應(yīng)時(shí)間:::生產(chǎn)者QPS(次/s)生產(chǎn)者QPS,取一分鐘的平均值:::消費(fèi)者QPS(次/s)消費(fèi)者QPS,取一分鐘的平均值文章版權(quán)歸作者所有,未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請(qǐng)注明本文地址:http://systransis.cn/yun/126733.html
摘要:大量的和分區(qū)會(huì)嚴(yán)重影響集群性能。介紹可參考收到離線分區(qū)總數(shù)異常告警一般是某個(gè)節(jié)點(diǎn)宕機(jī)或者服務(wù)異常導(dǎo)致。若服務(wù)卡住,可在評(píng)估后在控制臺(tái)重啟該節(jié)點(diǎn)服務(wù)。若想了解當(dāng)前請(qǐng)求延時(shí)情況,建議關(guān)注平均請(qǐng)求延時(shí)監(jiān)控項(xiàng)。 FAQs本篇目錄一個(gè)UKafka集群可以創(chuàng)建多少個(gè)Topic?如何增加Topic的副本數(shù)量(ReplicationFactor)?收到離線分區(qū)總數(shù)>=10.0個(gè)告警,離線分區(qū)總數(shù)是什么,怎么...
摘要:概覽概覽產(chǎn)品簡(jiǎn)介操作指南集群管理節(jié)點(diǎn)管理磁盤(pán)管理管理管理監(jiān)控視圖監(jiān)控項(xiàng)說(shuō)明開(kāi)發(fā)指南快速開(kāi)始認(rèn)證配置與外網(wǎng)訪問(wèn)客戶端性能測(cè)試連接器產(chǎn)品介紹快速開(kāi)始產(chǎn)品功能性能測(cè)試產(chǎn)品價(jià)格產(chǎn)品價(jià)格 概覽產(chǎn)品簡(jiǎn)介操作指南集群管理節(jié)點(diǎn)管理磁盤(pán)管理Topic管理ConsumerGroup管理監(jiān)控視圖監(jiān)控項(xiàng)說(shuō)明開(kāi)發(fā)指南快速開(kāi)始認(rèn)證配置與外網(wǎng)訪問(wèn)客戶端SDK性能測(cè)試FAQsKafka連接器產(chǎn)品介紹快速開(kāi)始產(chǎn)品功能性能測(cè)試...
摘要:監(jiān)控視圖監(jiān)控視圖監(jiān)控視圖集群監(jiān)控集群監(jiān)控提供小時(shí)至天多個(gè)維度的集群流入流出數(shù)據(jù)量和消息個(gè)數(shù)監(jiān)控,生產(chǎn)者消費(fèi)者監(jiān)控?cái)?shù)據(jù),以及相關(guān)監(jiān)控?cái)?shù)據(jù)。節(jié)點(diǎn)監(jiān)控節(jié)點(diǎn)監(jiān)控提供每個(gè)上的磁盤(pán)網(wǎng)卡,服務(wù),以及監(jiān)控?cái)?shù)據(jù) 監(jiān)控視圖集群監(jiān)控提供1小時(shí)至15天多個(gè)維度的集群流入、流出數(shù)據(jù)量和消息個(gè)數(shù)監(jiān)控,Kafka生產(chǎn)者、消費(fèi)者監(jiān)控?cái)?shù)據(jù),以及Zookeeper相關(guān)監(jiān)控?cái)?shù)據(jù)。節(jié)點(diǎn)監(jiān)控提供每個(gè)Broker上的CPU、MEM、磁...
摘要:快速開(kāi)始本例以數(shù)據(jù)同步到來(lái)做說(shuō)明。創(chuàng)建連接器點(diǎn)擊創(chuàng)建連接器按鈕,打開(kāi)配置頁(yè)面。若下游為,則需配置路徑,若為,則需填寫(xiě)信息。連接器列表詳情頁(yè)數(shù)據(jù)驗(yàn)證參考,為集群創(chuàng)建,并寫(xiě)入消息到其中。快速開(kāi)始本例以UKafka數(shù)據(jù)同步到UHadoop來(lái)做說(shuō)明。創(chuàng)建連接器點(diǎn)擊【創(chuàng)建連接器】按鈕,打開(kāi)配置頁(yè)面。配置連接器基本信息配置按需填寫(xiě)?!旧嫌巍恳鉃镵afka連接器上游的Kafka集群,【下游】意為Kafka...
摘要:集群管理集群管理集群管理本篇目錄創(chuàng)建集群創(chuàng)建集群調(diào)整集群參數(shù)調(diào)整集群參數(shù)創(chuàng)建集群創(chuàng)建集群創(chuàng)建集群點(diǎn)擊控制臺(tái)左上角全部產(chǎn)品選擇消息隊(duì)列也可鎖定到左側(cè)菜單欄。選擇完畢后,進(jìn)入集群設(shè)置頁(yè)面,可對(duì)集群參數(shù)進(jìn)行配置。 集群管理本篇目錄創(chuàng)建集群調(diào)整集群參數(shù)創(chuàng)建集群1. 點(diǎn)擊控制臺(tái)左上角全部產(chǎn)品選擇Kafka消息隊(duì)列 UKafka,也可鎖定到左側(cè)菜單欄。2. 進(jìn)入U(xiǎn)Kafka操作界面,點(diǎn)擊創(chuàng)建集群進(jìn)行UK...
摘要:性能測(cè)試性能測(cè)試性能測(cè)試上游,下游是的連接器節(jié)點(diǎn)數(shù)分區(qū)數(shù)數(shù)消息大小機(jī)型速度消息數(shù)核核核核核核核上游,下游是連接器節(jié)點(diǎn)數(shù)分區(qū)數(shù)數(shù)消息大小機(jī)型版本機(jī)型節(jié)點(diǎn)數(shù)分片數(shù)副本數(shù)速度消息數(shù)核核核核核核核核核 性能測(cè)試上游UKafka,下游是UHadoop的HDFS 連接器節(jié)點(diǎn)數(shù)分區(qū)數(shù)broker數(shù)消息大小/byteskafka機(jī)型hadoopmasterhadoopcore速度(消息數(shù)/s)1331024...
閱讀 484·2024-11-07 18:25
閱讀 130851·2024-02-01 10:43
閱讀 961·2024-01-31 14:58
閱讀 925·2024-01-31 14:54
閱讀 83048·2024-01-29 17:11
閱讀 3312·2024-01-25 14:55
閱讀 2086·2023-06-02 13:36
閱讀 3208·2023-05-23 10:26