linux查看kafka狀態(tài) 怎么查看logstash發(fā)送到kafka上的數(shù)據(jù)?
怎么查看logstash發(fā)送到kafka上的數(shù)據(jù)?在output->elasticsearch下添加一個索引以配置output{elasticsearch{hosts=>[“192.168.1
怎么查看logstash發(fā)送到kafka上的數(shù)據(jù)?
在output->elasticsearch下添加一個索引以配置output{elasticsearch{hosts=>[“192.168.10.166:9200”]index=>“testsystemLog”}}要查看它,請安裝kibana。在kibana的settings->indexes頁面上,在頁面的輸入框中輸入test。
日志采集系統(tǒng)flume和kafka有什么區(qū)別及聯(lián)系?
flume和Kafka的一些功能是相同的,但總體上是不同的;它們的場景不同,但可以一起使用。
簡而言之,flume是一個分布式日志收集系統(tǒng),它從各種服務(wù)器收集日志并將其傳輸?shù)街付ǖ奈恢?,如HDFS。
Kafka是一個分布式消息中間件,有自己的存儲,提供推拉數(shù)據(jù)訪問功能。
整個過程如下:
登錄服務(wù)器<--flume-->kafka-->hdfs-->離線計算
登錄服務(wù)器<--flume-->kafka-->storm
希望我的回答能對您有所幫助
如何搭建kafka?該如何學(xué)習(xí)kafka?
很多百度