在Apache Hadoop和Spark上加速大資料加密 [session]
Strata Data Conference早期門票優惠6月9日截止!點選閱讀原文可登入會議網站,儘快報名以確定留位!
在Apache Hadoop和Spark上加速大資料加密
講師:Haifeng Chen (Intel)
14:50–15:30 Friday, 2017-07-14
安全 (Security)
地點: 多功能廳2(Function Room 2)
觀眾水平 (Level): Intermediate
必要預備知識
A basic understanding of distributed systems like HDFS and Spark, how data encryption works, and encryption algorithms
您將學到什麼
Understand the performance challenges of data encryption posed by the existing implementations and learn the proven ways to solve these challenges in Hadoop and Spark
描述
當現代平臺的資料處理能力已經達到了記憶體速度級時,使用加密來確保資料安全卻會嚴重地降低效能。在大資料時代,當企業偏好效能而不是安全的時候,它們就正在面臨著嚴重的資料洩露的風險,並由此帶來對它們業務的損害的增加。
本議題裡,我們會幫助你理解這一問題,以及現有的加密實現方法所導致的資料加密帶來的效能挑戰。同時會展示一些經過證明是有效的在Hadoop和Spark上充分利用已有硬體來提升資料加密速度的方法。我們也會介紹我們在Apache開源社群裡為幫助使用者解決這一問題所做的工作和最新的進展,並解密使用硬體加速技術來保護你的資料的方法。
更具體地,我們將分享:
Java AES加密的效能現狀和麵臨的挑戰,以及基於SASL DIGEST-MD5的RPC和網路加密。
為什麼以及怎麼樣在基於硬體加速的條件下使用Apache Commons Crypto來提升加密的效能
Apache Hadoop和Spark社群為解決這個加密的效能挑戰所完成的最新工作,以及瞭解它是如何工作的
講師介紹:
Haifeng Chen (Intel)
Haifeng Chen is a senior software architect at Intel’s Asia Pacific R&D Center. He has more than 12 years’ experience in software design and development, big data, and security, with a particular interest in image processing. Haifeng is the author of image browsing, editing, and processing software ColorStorm.
相關文章
- 大資料框架對比 - Hadoop、Spark、Storm、Samza、Spark、Flink大資料框架HadoopSparkORM
- 大資料入門課程:Hadoop和spark的效能比較大資料HadoopSpark
- 使用Apache Spark和Apache Hudi構建分析資料湖ApacheSpark
- 大資料開發:剖析Hadoop和Spark的Shuffle過程差異大資料HadoopSpark
- 《Hadoop+Spark大資料分析實戰》簡介HadoopSpark大資料
- 每週一書《Spark與Hadoop大資料分析》分享!SparkHadoop大資料
- 三種大資料流處理框架選擇比較:Apache Kafka流、Apache Spark流和Apache Flink - quora大資料框架ApacheKafkaSpark
- 資料演算法 Hadoop/Spark大資料處理---第十六章演算法HadoopSpark大資料
- 資料演算法 Hadoop/Spark大資料處理---第十二章演算法HadoopSpark大資料
- 大資料Storm相比於Spark、Hadoop有哪些優勢(摘錄)大資料ORMSparkHadoop
- [譯] Python 與大資料:Airflow、 Jupyter Notebook 與 Hadoop 3、Spark、PrestoPython大資料AIHadoopSparkREST
- Apache Spark:資料框,資料集和RDD之間的區別 - BaeldungApacheSpark
- 大資料hadoop資料大資料Hadoop
- 大資料架構師必讀:常見的七種Hadoop和Spark專案案例大資料架構HadoopSpark
- 好程式設計師分享大資料入門教程:Hadoop和spark的效能比較程式設計師大資料HadoopSpark
- 好程式設計師大資料培訓分享常見的Hadoop和Spark專案程式設計師大資料HadoopSpark
- 大資料和Hadoop什麼關係?為什麼大資料要學習Hadoop?大資料Hadoop
- Apache Hudi助力nClouds加速資料交付ApacheCloud
- 大資料和Hadoop平臺介紹大資料Hadoop
- hadoop和spark的區別HadoopSpark
- 1、大資料 Hadoop配置和單機Hadoop系統配置大資料Hadoop
- Hadoop大資料部署Hadoop大資料
- 大資料hadoop工具大資料Hadoop
- 比較 Apache Hadoop 資料儲存格式 - techwellApacheHadoop
- 大資料學習,大資料發展趨勢和Spark介紹大資料Spark
- Apache Spark和Hive有用的功能ApacheSparkHive
- NAS上如何建立和使用加密資料夾?加密
- **大資料hadoop瞭解**大資料Hadoop
- 如何掌握Spark和Hadoop的架構SparkHadoop架構
- Hadoop資料傳輸:如何將資料移入和移出Hadoop?Hadoop
- tomaztk/Spark-for-data-engineers:面向資料工程師的Apache Spark學習教程Spark工程師Apache
- Apache Spark:分割槽和分桶 - NiveditaApacheSpark
- springboot對接spark大資料Spring BootSpark大資料
- 【大資料】Spark RDD基礎大資料Spark
- 淺析大資料框架 Hadoop大資料框架Hadoop
- Apache Spark常見的三大誤解ApacheSpark
- Hadoop高階資料分析 使用Hadoop生態系統設計和構建大資料系統Hadoop大資料
- 免費課程 | 大資料系列免費視訊教程(Linux、Hadoop、Spark、Kylin、Hive等)大資料LinuxHadoopSparkHive
- 談談Hadoop MapReduce和Spark MR實現HadoopSpark