怎么查看logstash發(fā)送到kafka上的數(shù)據(jù)？在output->elasticsearch下添加一個(gè)索引以配置output{elasticsearch{hosts=>[“192.168.1

怎么查看logstash發(fā)送到kafka上的數(shù)據(jù)？

在output->elasticsearch下添加一個(gè)索引以配置output{elasticsearch{hosts=>[“192.168.10.166:9200”]index=>“testsystemLog”}}要查看它，請(qǐng)安裝kibana。在kibana的settings->indexes頁面上，在頁面的輸入框中輸入test。

日志采集系統(tǒng)flume和kafka有什么區(qū)別及聯(lián)系？

flume和Kafka的一些功能是相同的，但總體上是不同的；它們的場(chǎng)景不同，但可以一起使用。

簡(jiǎn)而言之，flume是一個(gè)分布式日志收集系統(tǒng)，它從各種服務(wù)器收集日志并將其傳輸?shù)街付ǖ奈恢茫鏗DFS。

Kafka是一個(gè)分布式消息中間件，有自己的存儲(chǔ)，提供推拉數(shù)據(jù)訪問功能。

整個(gè)過程如下：

登錄服務(wù)器<--flume-->kafka-->hdfs-->離線計(jì)算

登錄服務(wù)器<--flume-->kafka-->storm

希望我的回答能對(duì)您有所幫助

如何搭建kafka？該如何學(xué)習(xí)kafka？

很多百度