kafka重啟消費 offset kafka集群重啟,怎樣確?
kafka集群重啟,怎樣確?1. 查詢當前線程是否包含kafka2,查詢當前端口占用的線程是否屬于kafka3,打開消費線程查看運行狀態(tài),借助第三方監(jiān)控工具查看集群運行狀態(tài)怎么查看kafka集群中所有
kafka集群重啟,怎樣確?
1. 查詢當前線程是否包含kafka2,查詢當前端口占用的線程是否屬于kafka3,打開消費線程查看運行狀態(tài),借助第三方監(jiān)控工具查看集群運行狀態(tài)
怎么查看kafka集群中所有broker節(jié)點?
問題1:Kafka剛剛與zookeeper分離了嗎?
Zookeeper只是一個服務注冊表。如果卡夫卡能找到一個替代者,更換動物園管理員就沒問題了。
有許多現(xiàn)有的服務器注冊中心。比如淘寶有自己的服務注冊中心產(chǎn)品。
因此,用其他服務注冊系統(tǒng)代替zookeeper是可行的(實際上,zookeeper作為服務注冊的功能并不理想)。例如,它的狀態(tài)檢測不能真實反映broker的狀態(tài)(如果可以連接,可以嗎?不
問題2:卡夫卡從zookeeper代表的服務注冊中心免費嗎?
不,Kafka集群管理的核心是zookeeper,盡管它并不完美(甚至有許多缺點)。但如果沒有ZK,卡夫卡是不可用的。因此沒有服務注冊的Kafka是不可用的。
kafka脫離了zookeeper可以集群嗎?
感謝您的邀請。作為卡夫卡多年的使用者,我對使用卡夫卡的感覺還是很好的。
卡夫卡的每個數(shù)據(jù)流應該對應一個主題,每個主題可以有多個部分?,F(xiàn)在每個零件只能由一個消費者消費。更多的分區(qū)意味著更多的吞吐量。需要更多的文件句柄。如果使用者較少,則更多的分區(qū)將浪費系統(tǒng)資源。從另一個角度看,越來越多的延遲將增加,這將對實時數(shù)據(jù)讀寫產(chǎn)生不利影響。
因此,適當?shù)姆謪^(qū)數(shù)量將對Kafka的性能產(chǎn)生重要影響。
1!卡夫卡在2011被捐贈給Apache基金會,而RAFT的論文是在尋找一個潛在的一致算法,由斯坦福大學在2013出版,卡夫卡出生在RAFT之前。當1/3節(jié)點不可用時,服務不可用。Kafka中維護的ISR(in-sync replica,同步副本)可以提供服務,即使副本不可用,只剩下領頭羊
3:更大的數(shù)據(jù)吞吐量。木筏適用于強稠度