現代流計算架構

OReillyData發表於2017-04-13

講師:Sijie Guo (Streamlio), Maosong Fu (Twitter)

13:30–17:00 週四, 2017-07-13

物聯網&實時計算

地點: 多功能廳8A+8B

觀眾水平: Beginner


必要預備知識

Basic knowledge about stream computing systems, messaging/stream storage systems, and distributed systems.


您將學到什麼

Learn the modern streaming architectures.

Learn the Twitter's real-time stack.

Learn the lessons learned at running real-time stack at Twitter's scale.


描述

Twitter的所有應用都是實時的。由於對於實時性的高要求,Twitter在過去幾年的時間內投入人力和研發了一整套實時資料技術棧。最近,越來越多的企業對於實時資料技術架構感興趣。從批處理向流計算機構的轉型,是企業關於如何使用資料的一次技術革命。但是,實時資料技術棧(包括流計算引擎、資料儲存引擎、程式語言和工具)的最前沿現狀又是什麼呢?在這其中,又有哪些技術挑戰?以及這些前沿技術怎麼影響流計算的架構和應用呢?


本輔導課將會介紹:

- 流計算的簡介,以及一些典型應用

- 流計算架構是什麼?

- 不同型別的流計算架構和他們的優缺點

- 詳細討論為實時資料儲存設計的Apache DistributedLog,以及它在現代實時資料技術棧裡的使用場景

- 詳細討論流計算引擎Heron,以及它在現代實時資料技術棧裡的使用場景

- Twitter在使用Apache DistributedLog和Heron來搭建實時資料技術棧時獲得的經驗教訓。


講師介紹

Sijie Guo (Streamlio)

Sijie Guo is the tech lead of Twitter’s Messaging group. Sijie is the cocreator of Apache DistributedLog and the PMC chair of Apache BookKeeper.


Maosong Fu (Twitter)

Maosong Fu is the technical lead for Heron and Real Time Analytics at Twitter. He is the author of few publications in distributed area and has a master’s degree from Carnegie Mellon University and bachelor’s from Huazhong University of Science and Technology.




Strata Data Conference北京站已經開啟註冊系統,閱讀原文可瀏覽截止到目前為止的講師名單和已經確認的議題,最優惠票價期截止到5月5日為止儘快註冊以確保留位

640?wx_fmt=png


相關文章