開源大資料週刊-第7期

開源大資料發表於2016-05-30
大資料

阿里雲E-Mapreduce動態

E-Mapreduce團隊
1.3.2版本（已經發布）：

  • Master HA功能

1.4版本（正在研發）:

  • 使用者執行計劃及叢集執行狀態自定義報警
  • 叢集整體執行情況的儀表盤
  • 叢集的一些專家建議，例如：擴容提醒
  • 叢集一鍵重啟

資訊

  • 擁抱資本的“熱戀”物件 看大資料時代下的創新與創造
    2011年以來，大資料在以美國為代表的西方國家被熱炒，成為越來越多人關注的焦點和熱議的話題。說起大資料，大家可能都會覺得很熟悉。但若讓你來解釋，恐怕多數人都會說一句“臣妾做不到啊”。而大資料卻像空氣一般時刻存在在我們的生活中
  • 打破資訊孤島 公開資料大有可為
    “大資料等新一代網際網路技術深刻改變了世界，也讓各國站在科技革命的同一起跑線上。”5月25日，李克強總理在貴陽出席中國大資料產業峰會暨中國電子商務創新發展峰會時指出，中國曾屢次與世界科技革命失之交臂，今天要把握這一歷史機遇，搶佔先機，贏得未來
  • 海量吞吐的實時NoSQL—HBase的七劍和20151111聖戰
    七劍：ExploringCompaction成為預設選舉演算法、Replication的優化、單元化及Diamond整合、MTTR1期、限制大scan請求的、源使用、混合儲存、基於虛擬節點的跨ZK叢集切庫
  • Hadoop3.0新特性預覽
    Hadoop3.0基於JDK1、8開發，引入了一些重要的功能和優化，包括HDFS 可擦除編碼、多Namenode支援、MR Native Task優化、YARN基於cgroup的記憶體和磁碟IO隔離、YARN container resizing等
  • Apache Spark作為編譯器：深入介紹新的Tungsten執行引擎
    Apache Spark 2.0中附帶了第二代Tungsten engine。這一代引擎是建立在現代編譯器和MPP資料庫的想法上，並且把它們應用於資料的處理過程中。主要想法是通過在執行期間優化那些拖慢整個查詢的程式碼到一個單獨的函式中，消除虛擬函式的呼叫以及利用CPU暫存器來存放那些中間資料。
  • Twitter Heron正式開源
    Heron支撐Twitter的所有實時分析業務已經有兩年多了。它替代了之前使用的Apache Storm系統。Heron有很多架構方面的改進，而且向後相容Storm生態系統。

國內大資料相關會議

| 會議 | 地點 | 時間 | 費用 |
| — | — | — | — |
| 2016廈門雲棲大會 | 上海 | 2016年06月15日 | 免費|
| 2016上海china Hadoop Summit | 上海 | 2016年07月29日-2016年07月30日 | 收費 |
| Strata + Hadoop World | 北京 | 2016年8月04- 2016年8月06日 | 收費 |

版權宣告

資訊都是來自網際網路，都給出了原文的連結，如果侵權，請聯絡我們，我們負責刪除。
阿里雲E-Mapreduce團隊 出品


相關文章