為Hadoop上的大資料準備的統一的SQL
講師:Xuefu Zhang (Software Engineer, Uber)
16:20–17:00 週六, 2017-07-15
資料工程和架構
地點:多功能廳6A+B
觀眾水平: Intermediate
議題
為Hadoop上的大資料準備的統一的SQL(Unified SQL for Big Data on Hadoop)
必要預備知識
SQL, Hadoop, Big Data
您將學到什麼
SQL on Hadoop, Query Processing, GeoSpacial UDFs
描述
在Uber,我們非常依賴從收集到的大資料裡學習司機和出行的資訊,並用來做每日的商業決策。諸如Apache Hive和Presto這樣的SQL工具被用於不同的業務場景,也包括像Vertica這樣的舊有資料倉儲。這些工具提供了相似但是不同的SQL句法,因此使用者經常會面對切換工具所帶來的挑戰。更重要的是,SQL使用者並不知道什麼是他們業務場景下正確的工具。每種引擎都有不同特點(優點和缺點),適用於不同的任務。如果選擇不恰當,查詢效能和資源的使用效率都會受影響。U-SQL是由Uber工程師內部開發的工具,希望能作為未來的SQL平臺,自動地解析、翻譯、優化和路由使用者用任何支援的查詢語言寫出的查詢,並提供一個統一的SQL介面給那些可能根本不熟悉底層SQL引擎的SQL使用者使用。
講師介紹
Xuefu Zhang(Uber)
Xuefu Zhang is a veteran in the open source communities and spends his main efforts on Apache Hive and Pig.
He worked in the Hadoop team at Yahoo when the majority of the development on Hadoop was still there. In addition, he spent his early career at Informatica, gaining important experience on enterprise software development, especially in ETL and data warehousing. Prior to Uber, Xuefu was the tech lead for Hive at Cloudera and led a global effort in Hive on Spark project. Working for Uber since 2016, he is the tech/team lead for SQL on Hadoop. Xuefu Zhang is an Apache member, and PMC member for Hive, Sentry, and Pig.
Strata Data Conference北京站已經開啟註冊系統,閱讀原文可瀏覽截止到目前為止的講師名單和已經確認的議題,最優惠票價期截止到5月5日為止,儘快註冊以確保留位。
相關文章
- 為大資料時代做好準備——來自《大資料的衝擊》一書精彩片段大資料
- 零基礎學習大資料Hadoop需要什麼準備?Hadoop如何發展起來的?大資料Hadoop
- 測試基準資料的準備
- 為資料庫可恢復做一些必要的準備工作資料庫
- 分享一個自己準備 PHP 面試的資料PHP面試
- 為你下一個專案準備的50個Bootstrap外掛(上)boot
- 資料遷移前的準備和系統檢查
- 資料探勘之資料準備——原始資料的特性
- 準備的一年的專案上線失敗
- Hadoop - 企業級大資料管理平臺CDH(介紹和準備工作)Hadoop大資料
- 從零自學Hadoop(03):Linux準備上HadoopLinux
- Hadoop的大資料分析技術Hadoop大資料
- SQL on Hadoop在快手大資料平臺的實踐與優化SQLHadoop大資料優化
- 大資料分析系統Hadoop的13個開源工具!大資料Hadoop開源工具
- 大資料分析系統Hadoop的13個開源工具大資料Hadoop開源工具
- 關於STM324的一些實驗的準備資料
- 準備好迎接大資料爆炸時代麼? 3個重要的資料庫策略技巧大資料資料庫
- 大資料下的運營利器:精準推送系統大資料
- PHP 使用 Oracle 資料庫的準備工作PHPOracle資料庫
- Datapump資料遷移前的準備工作
- ERP實施時的資料準備
- 超越Hadoop的大資料分析之致謝Hadoop大資料
- 為敏捷團隊準備的Lisp敏捷Lisp
- 大資料(Hadoop)元件安裝 Linux環境準備 步驟簡單 詳細大資料Hadoop元件Linux
- 大資料和Hadoop什麼關係?為什麼大資料要學習Hadoop?大資料Hadoop
- 大資料時代之hadoop(一):hadoop安裝大資料Hadoop
- 手機上的大資料:手機大資料的挑戰大資料
- 大資料hadoop資料大資料Hadoop
- Datapump資料遷移前的準備工作(二)
- CE認證需準備的資料(轉載)
- 這家背靠FICO的大資料風控服務商,準備上市了大資料
- 為學習Hadoop使用VMware準備3臺一模一樣的Linux虛擬機器的詳細搭建過程HadoopLinux虛擬機
- 構建大資料平臺(二)準備工作大資料
- 大資料之Hadoop偽分散式的搭建大資料Hadoop分散式
- 從Hadoop開始的大資料之旅 - 75Hadoop大資料
- 正式上崗前的準備:怎麼檢視資料庫引數配置資訊資料庫
- 為Apache Spark準備的深度學習ApacheSpark深度學習
- Openfire安裝準備-MySQL資料庫準備MySql資料庫