開源Apache Kafka

banq發表於2011-11-28
Apache Kafka是一個分散式事件publish-subsribe訊息系統,類似Facebook's Scribe的,Kafka最大特點就是吞吐量,應用在LinkedIn,作為活動流資料和操作的監測,以方便和離線分析系統OLAP如Hadoop整合。

其他應用:
Mate1.com Inc.主要使用其作為事件匯流排event bus增強新聞和活動資料服務,實時提醒和日誌分發。

Tagged - 使用其實現pub sub系統,將遊戲使用者的實時事件進行傳遞。

Boundary - 聚合高吞吐量訊息流進入一個統一的pubsub 服務, 是實時資料和其他離線分析系統的介面協調者。

DataSift - 使用其作為事件監測者和收集者,實時跟蹤使用者消費資料。

Wooga - 聚合處理所有來自facebook的資料。

Clearspring - 資料網路的事件收集者,實時資料和分析叢集系統的中間銜接者。

相關文章