日志采集系統(tǒng)flume和kafka有什么區(qū)別及聯(lián)系？flume和Kafka的一些功能是相同的，但總的來(lái)說(shuō)，它們是完全不同的；它們的場(chǎng)景是不同的，但它們可以一起使用。簡(jiǎn)而言之，flume是一個(gè)分布式日志

日志采集系統(tǒng)flume和kafka有什么區(qū)別及聯(lián)系？

flume和Kafka的一些功能是相同的，但總的來(lái)說(shuō)，它們是完全不同的；它們的場(chǎng)景是不同的，但它們可以一起使用。

簡(jiǎn)而言之，flume是一個(gè)分布式日志收集系統(tǒng)，它從各種服務(wù)器收集日志并將其傳輸?shù)街付ǖ奈恢?，如HDFS。

Kafka是一個(gè)分布式消息中間件，有自己的存儲(chǔ)，提供推拉數(shù)據(jù)訪問(wèn)功能。

整個(gè)過(guò)程如下：

登錄服務(wù)器<--flume-->kafka-->hdfs-->離線計(jì)算

登錄服務(wù)器<--flume-->kafka-->storm

希望我的回答能對(duì)您有所幫助

想成為java高級(jí)程序員，需要掌握哪些技術(shù)？

分布式、設(shè)計(jì)模式、前端技術(shù)、網(wǎng)絡(luò)支付、全文搜索引擎、docker、WebService等

詳細(xì)可以到如鵬官方網(wǎng)站學(xué)習(xí)，那里有網(wǎng)絡(luò)，你可以學(xué)習(xí)，隨時(shí)提問(wèn)，老師可以在線實(shí)時(shí)答疑。有技術(shù)大牛親自授課，口碑好，基本上都很佩服。有新課程更新，也可以繼續(xù)申請(qǐng)學(xué)習(xí)。