400-650-7353

精品課程

什么是Apache Kafka? Apache Kafka是什么?

發(fā)布： 大數(shù)據(jù)培訓 發(fā)布時間：2021-08-02 19:03:50

推薦答案
品牌型號：聯(lián)想 YOGA 14c/系統(tǒng)版本：windows7

Apache Kafka是一個分布式數(shù)據(jù)流處理平臺，可以實時發(fā)布、訂閱、存儲和處理數(shù)據(jù)流。它設(shè)計為處理多種來源的數(shù)據(jù)流，并將它們交付到多個消費者。簡而言之，它可以移動大量數(shù)據(jù)，不僅是從A點移到B點，而是能從A到Z的多個點移到任何您想要的位置，并且可以同時進行。

Apache Kafka 可以取代傳統(tǒng)的企業(yè)級消息傳遞系統(tǒng)。它最初是Linkedin為處理每天1.4萬億條消息而開發(fā)的一個內(nèi)部系統(tǒng)，現(xiàn)已成為應(yīng)用于各式各樣企業(yè)需求的開源數(shù)據(jù)流處理解決方案。

Kafka主要有兩類用途：構(gòu)建能讓系統(tǒng)或應(yīng)用之間可靠地獲取數(shù)據(jù)的實時流數(shù)據(jù)管道;構(gòu)建轉(zhuǎn)換或響應(yīng)流數(shù)據(jù)的實時流應(yīng)用

Kafka有四個核心API，分別為：

Producer API：該接口允許應(yīng)用發(fā)布一個流數(shù)據(jù)到一個或多個topics。

Consumer API：該接口允許應(yīng)用訂閱一個或多個topics然后處理這些topics中的流數(shù)據(jù)。

Streams API：該接口允許應(yīng)用作為一個流處理器(stream processor) ，從一個或多個topics 的輸入流中消費數(shù)據(jù)，然后轉(zhuǎn)換并生產(chǎn)數(shù)據(jù)到一個或多個topics的輸出流中。

Connector API：該接口允許構(gòu)建和運行可重用的生產(chǎn)者(Producer)或者消費者(Consumer)，這些生產(chǎn)者或消費者講Kafka中的topics和現(xiàn)有的應(yīng)用或者數(shù)據(jù)系統(tǒng)(如數(shù)據(jù)庫)連接起來。比如一個connector 可以連接到一個關(guān)系型數(shù)據(jù)庫從而可以捕捉到數(shù)據(jù)表中的任何變化，然后進行響應(yīng)的處理。
 

其它答案
冰闊落2020-06-22 18:56:36

Apache Kafka是一個分布式發(fā)布—訂閱消息系統(tǒng)和一個強大的隊列，可以處理大量的數(shù)據(jù)，并使你能夠?qū)⑾囊粋�端點傳遞到另一個端點。Kafka適合離線和在線消息消費。Kafka消息保留在磁盤上，并在群集內(nèi)復制以防止數(shù)據(jù)丟失。Kafka構(gòu)建在ZooKeeper同步服務(wù)之上。它與Apache Storm和Spark非常好地集成，用于實時流式數(shù)據(jù)分析。

Kafka 是一個分布式消息隊列，具有高性能、持久化、多副本備份、橫向擴展能力。生產(chǎn)者往隊列里寫消息，消費者從隊列里取消息進行業(yè)務(wù)邏輯。一般在架構(gòu)設(shè)計中起到解耦、削峰、異步處理的作用。

中公旗下IT培訓品牌

  • 中公教育品牌

    　中公教育是一家中國領(lǐng)先的全品類職業(yè)教育機構(gòu)，提供超過100個品類的綜合職業(yè)就業(yè)培訓服務(wù)。公司在全國超過1000個直營網(wǎng)點展開經(jīng)營，深度覆蓋300多個地級市，并正在快速向數(shù)千個縣城和高校擴張。

  • 完善就業(yè)體系

    通過階段性授課機制，和每階段的定期考核，先讓學員能夠?qū)W會所學內(nèi)容，才能找打合適工作。最后一個階段為就業(yè)課程，從技術(shù)和面試兩個方面加深就業(yè)能力，并且還有不定期的雙選會供大家選擇。

  • 全程面授+實戰(zhàn)技術(shù)

    線下課程全程是師資面對面教學，不會存在上課只對著大屏幕上課的情況，有問題都可以在課上得到解答。并且優(yōu)就業(yè)通過自主研發(fā)大綱和學習路線，并且定期更新課程所學技術(shù)，讓大家所學技術(shù)不落伍。

中公優(yōu)就業(yè)專業(yè)職業(yè)規(guī)劃老師

為您詳細答疑解惑，更能領(lǐng)取免費課程

相關(guān)問題

更多課程

專業(yè)課程老師將第一時間為您解答

立即答疑
修改
優(yōu)就業(yè)：ujiuye

關(guān)注中公優(yōu)就業(yè)官方微信

  • 關(guān)注微信回復關(guān)鍵詞“大禮包”，領(lǐng)80G學習資料