Splunk>live!2018北京站激情開場:合格的大資料處理平臺到底是什麼樣子?
作為本屆Splunk>live!2018中國使用者大會的收官之戰,北京站的會場流程以及議題設定更加嚴謹,並且下午雙會場並行,以期真正讓所有參會者有所收穫。在IT世界,真正的基礎設施是什麼?一切熱門技術的基礎又是什麼?到底什麼樣的公司可以稱作是真正的大資料企業?什麼樣的平臺可以稱作真正的大資料處理平臺?這一切都可以在北京站獲得答案。
激情的能量舞蹈開場
Splunk中國區總經理嚴立忠:數字業務轉型,“親”聽你的資料
依舊座無虛席的會場和川流不息的展區
如今,企業對於“數字化轉型”並不陌生。嚴立忠表示,資料是有溫度的,甚至是有生命力的。曾有專家表示,人工智慧並沒有那麼神乎其神,歸根結底無非是統計學概念的擴充。無論對這個觀點是否認可,你或許都已經發現人工智慧早已走下神壇。不僅僅是人工智慧,無人駕駛、物聯網、機器學習、區塊鏈等無數熱門技術的背後基礎到底是什麼?IT世界,真正足以稱為基礎架構的又是什麼?真正的大資料企業和大資料處理平臺到底是什麼?
Splunk認為,大資料和雲端計算才是基礎方向,大資料代表了技術邏輯的變化。真正的大資料企業可以處理一切結構化和非結構化資料(機器資料),真正的大資料處理平臺可以整合任何來源、型別、資料量的資料,並可對資料進行關聯分析,這就是Splunk一直在做的事情。
Splunk北亞區技術總監李輝:Splunk為中國區使用者所做的努力!
2014年,Splunk在上海建立了研發中心。如今,Splunk在中國的技術實力和業務能力越來越強大。到今天為止,Splunk雖然不是專業的安全廠商,但已經連續五年成為Gartner 魔力象限——安全資訊與事件管理領域的領導者。
李輝表示,Splunk透過人工智慧和機器學習方式實現了AIOps。在CSV盛行的年代,程式設計師不僅要程式設計,還要擔當管理員的角色,一旦應用出現問題,大部分企業無法立刻精準定位問題根源,導致應用體驗十分糟糕,使用者流失率逐年升高。Splunk可以迅速定位問題源並給出可能的解決方案,運維人員只需要透過簡單的UI互動便可實現自動化安全運營和問題追溯,Splunk針對中國區客戶在業務層面加入了不少本地化功能,應用體驗提升只是其中一個,已有不少產品可以免費獲取,比如Security Essentials。
ofo資訊保安負責人王太愚:Splunk與阿里雲安全實踐
過去,ofo面臨的挑戰主要有裝置品牌多,日誌格式無法統一;合規性要求有重要日誌檔案不少於半年;根據審計記錄進行資料分析,並生成統計報表;避免審計記錄遭受未預期的刪除、修改或覆蓋;實時資訊系統的統一安全策略,實現集中審計。王太愚表示,ofo的日誌系統經歷了石器時代,青銅器時代和帝國時代三個階段,直到帝國時代,ofo才與Splunk達成完美深度合作,實現日誌分析與安全運營。
ofo目前在使用的Splunk 的app有Splunk_Security_Essentials,Splunk_ML_Toolkit,微步線上Splunk app,lookup_editor。在最終實踐中,ofo的業務日誌遠大於傳統日誌,需要更多的資訊保安測評。使用Splunk之後,王太愚表示,ofo的資料可以使用spl搜尋;MTTR縮減到分鐘級別;提出一個安全需求,可以很快響應;解放腦力;可以快速copy各家思路,反覆校驗條件。
清華大學資訊化技術中心工程師姚星昆:大資料系統應用場景測試分享
姚星昆開場談及自己對大資料的理解是資料量大、資料型別複雜且資料具有未知性,只有同時滿足這三大要求才可以稱得上是大資料。姚星昆表示,清華大學對大資料平臺的需求是資料安全合規、資料統一儲存、資料可視洞察,海量資料處理。對於大資料處理和分析產品要求具備相容性、易用性、可擴充套件性、開放性和資料處理高效性。
在產品調研階段,最初清華大學基於開源ELK自我搭建平臺,但隨著資料量的逐漸增大,該平臺的效能弊端逐漸暴露了出來,清華大學開始與多家廠商進行接洽,希望可以找到合適的替代品。姚星昆表示,未來所希望的架構是包含防火牆、網路、主機、應用、身份、測試等資料,整個平臺由資料採集、統一大資料儲存、關聯規則引擎、機器學習引擎、資料介面和響應介面組成,同時具備分析、運營和展示能力。當然,這一切還需要管理團隊、響應團隊、分析和支撐團隊的支援。
天學網 (UP366.com) 副總裁劉文:從運維到全業務流程管理
天學網是一家面向校內教育的k12領域企業,其選擇Splunk的主要目的是希望應用出現問題後,可以快速主動發現問題,當然更希望防患於未然,其次是對全業務流程的管理。在使用Splunk之前,天學網更接近半自動化分析,難以預測可能出現的問題;顆粒度大,無法精細化分析;資料無法有效利用,只能被丟棄。
在接入Splunk之後,天學網實現了自動化運營分析,可實時掌握應用動態,精準分析資料以達到物盡其用的效果。目前,天學網也在嘗試將技術層面的智慧擴充套件到業務層面,在業務層實現智慧課程的ITSI應用。
展區F1賽車案例演示
至此,Splunk>live!2018中國使用者大會北京站的上半場就全部結束了,下半場我們將可以聆聽到安全和IT運維兩大重要領域的應用場景、案例分享及Splunk技術創新,讓我們共同期待吧!
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/31077337/viewspace-2214563/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 剖析大資料平臺的資料處理大資料
- 大資料處理平臺都有哪些?大資料
- 大資料開發需要學習什麼?大資料平臺是什麼?大資料
- 22個大資料開發處理框架平臺和工具大資料框架
- 大資料平臺之大資料處理系統的架構大資料架構
- 學會“親”聽資料,Splunk>live!2018中國使用者大會解鎖資料洞察難關!
- 大資料平臺是什麼?有哪些功能?如何搭建大資料平臺?大資料
- 大資料分析平臺的目的是什麼大資料
- 大資料分析平臺的作用有什麼大資料
- 支付類系統資料處理和資料中臺的資料處理方式有什麼不同?
- 怎樣搭建大資料平臺大資料
- 大資料分析平臺究竟是什麼大資料
- 三大亮點燃爆Splunk>live!2018使用者大會北京收官之站!
- 大資料的處理是怎樣的過程大資料
- 大資料處理過程是怎樣大資料
- 大資料平臺對企業有什麼作用大資料
- 什麼情況下需要搭建大資料平臺大資料
- 一名合格的程式設計師應該是什麼樣子程式設計師
- 資料海洋視覺化,Splunk平臺價值實現視覺化
- MapReduce中對大資料處理最合適的資料格式是什麼?大資料
- 大資料分析平臺具備怎樣的功能大資料
- 免費OA辦公系統到底是什麼樣子的?
- RocketMQ Connect 構建流式資料處理平臺MQ
- Apache Wayang :跨平臺資料處理系統Apache
- 智慧經營平臺到底是幹什麼用的?
- 大資料分析平臺建設需要注意什麼大資料
- 大資料視覺化平臺有什麼特點大資料視覺化
- python資料處理是什麼意思Python
- 什麼是大資料?大資料開發是做什麼的?大資料
- 本地部署的低開發平臺有什麼好處
- 不care工具,在大資料平臺中Hive能自動處理SQL大資料HiveSQL
- 大資料到底是幹什麼用的?大資料
- 什麼是大資料分析平臺?由哪些部分組成?大資料
- 誕生至今,大資料的真正含義到底是什麼?大資料
- 資料平臺、大資料平臺、資料中臺……還分的清不?大資料
- 低程式碼開發平臺有什麼好處
- PLC資料雲平臺是什麼?有什麼功能?
- 資料融合平臺,資料服務一站式處理