下秒資料受邀參加CSDN"現代資料棧峰會",活動圓滿結束
下秒資料受邀參加CSDN"現代資料棧峰會",活動圓滿結束
近幾年, 隨著雲端計算技術的成熟,一個圍繞在雲資料倉儲周圍的資料工具生態正在蓬勃的發展,它們被叫做現代資料技術棧。相對於傳統的資料平臺,使用它們可以讓資料具備更好的可操作性,從而降低資料從產生到被企業中資料工作者可以使用的時間,實現資訊同步,輔助企業管理者更科學決策。
圍繞現代資料棧有一堆的新技術,包括湖倉一體、ELT、資料管道、Dataops、反向ETL、Metric Store、Data engineering等等。伴隨國內公有云市場的高速發展以及各SaaS系統之間的開放對接,資訊資料的爆增等企業現狀,資料有效整合,資料整合,使資料價值得以充分展現,促進企業數字化轉型 毋庸置疑成為行業共識。
7 月12日本週二,由CSDN主辦的雲原生系列線上峰會 —— ”現代資料棧峰會“成功舉辦,行業專家與線上行業同仁們一起探討現代資料棧最新技術和最佳實踐,幫助大家多角度、全方位瞭解現代技術棧。下秒科技聯合創始人李元佳有幸受邀請擔任出品人,下秒資料CEO蔡致暖受邀參會,與快用雲科聯合創始人閻志濤、白鯨開源聯合創始人代立冬、Kyligence合夥人兼副總裁李棟就“現代資料棧”主題進行深度演講。
”受儲存成本及計算能力的限制,傳統資料架構在處理資料時主要是分段進行“,下秒資料聯合創始人李元佳在開場分享中表示,”而云所具有的儲存成本及高計算效能的優勢為資料架構的發展提供新的可能性,現代資料棧(Modern Data Stack,MDS)的生態正在形成“,這是現代數字化階段使然的。
1 雲原生的資料管道
下秒資料CEO蔡致暖針對資料管道1.0至3.0的迭代過程及技術特點發表了詳細的演講。
蔡致暖表示,” 資料管道解決的是如何自動化地把不同來源的資料傳遞給組織中的人、系統、應用程式,並將資料轉化為業務價值。“
” 最終,組織像用水和用電一樣用資料。” 蔡致暖認為。
2 Data Modeling in Modern Data Stack
快用雲科聯合創始人閻志濤表示企業使用資料進行驅動也是不可逆轉的趨勢,並針對資料建模及其在現代資料棧中的應用做了深入分享,包括Dbt、Dataform、Datameer、QuickTable。
3 現代資料棧之DataOps
DataOps 是一種協作式資料管理的實踐,致力於改善組織中資料管理者與使用者之間資料流的溝通,整合和自動化。關於這方面 白鯨開源聯合創始人代立冬有深刻的理解,“ 雲原生分散式大資料工作流排程系統DolphinScheduler所具備的高可靠性、簡單易用、高擴充性、雲原生能力等優勢,正是其受歡迎的原因。”並從DataOps的任務編排、資料整合能力以及其與開源的關係三個方面進行深入剖析、分享實際案例。
4 從資料湖到指標中臺,提升資料分析ROI
Kyligence 合夥人兼副總裁李棟為我們分享了中臺發展的趨勢及資料分析ROI的三大困境:
- 指標口徑不一——資料量很大,但缺少信任;
- “渾濁”的資料湖——寬表爆炸,資料儲存和ETL任務冗餘;
- IT 成本&時效性——IT成本隨資料量和使用者量增長而迅速增長。
最後我們可以瞭解到,隨著雲技術的加速發展,市場在面臨挑戰與機遇的同時,各位演講嘉賓仍然對未來充滿期待。
關於「下秒資料」
「下秒資料」正圍繞API打造的低程式碼能力擴充套件更豐富更實用的業務應用場景,通過智慧資料管道做資料整合、分析建模後再反哺資料結果到對應的SaaS或其他應用中來驗證實現更多應用場景。
下秒資料通過提供預整合的模組,預置聯結器以及預置模型,使用者只需要一個api就能輕鬆打通異構,自動生成業務資料分析結果。無需費力處理資料來源,思考資料指標維度,通過預置的業務指標模型就能一鍵生成。比如,Nexadata會和用友、騰訊廣告、旺店通等應用的資料整合好,通過API進行所需資料的對接。在客戶所需資料得以整合到資料倉儲後,Nexadata會幫助進行資料建模。在具體落地上,Nexadata會針對每個平臺打造專門的聯結器用以對接資料,並在對接好資料之後,再通過各個行業的特點,進行場景化建模(如客戶在騰訊、頭條、快手等不同平臺投放廣告後,系統會遮蔽不同平臺的差異,自動整理諸如PV、UV等指標形成統一的ROI模型),輔助客戶業務。
「下秒資料」創始團隊都是資料領域的老兵,都有在華為從事大資料解決方案或資料庫研發的經驗。公司CEO蔡致暖是中山大學計算機碩士,具備13年軟體、大資料和機器學習領域工作經驗,曾任廣州數說故事資料平臺業務部負責人和相關合資公司CTO。聯合創始人李元佳,是早稻田大學通訊系統碩士,擁有17年資料庫產品研發工作經驗,是雲徙科技聯合創始人,曾任華為高斯DB產品負責人。
「下秒資料」目前已經在零售、電力、通訊等行業實現十餘個標杆客戶落地,具體包括廣州酒家、陶陶居、中國移動、湘潭電網等。
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/70019413/viewspace-2906000/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 2017 看雪安全開發者峰會 圓滿結束!
- 《資料資產管理核心技術與應用》首次大型贈書活動圓滿結束
- 杉巖資料受邀參加智慧軍工聯盟會員代表大會
- APENFT Marketplace釋出會圓滿結束
- 解構現代資料棧
- 解構現代資料棧之資料整合
- 【活動回顧】Apps Everywhere 上海站圓滿結束APP
- 活動回顧 | 2024 搜尋客社群 Meetup 首期線上直播活動圓滿結束,附 PPT 下載
- 孫宇晨受邀參加36氪元宇宙峰會並發表主題演講元宇宙
- 參加Google AI 年度峰會有感GoAI
- 參加資料庫嘉年華有感資料庫
- js實現資料結構--棧JS資料結構
- 酷客多小程式受邀參加 中國縣域連鎖藥店發展峰會
- TDengine 3.0 重磅釋出,首屆開發者大會圓滿結束
- 大資料技術大會參會小結大資料
- 資料結構-棧資料結構
- 資料結構 - 棧資料結構
- 資料結構之php實現棧資料結構PHP
- 資料庫查不出資料:傳參不要加引號資料庫
- DataOps是現代資料棧的未來嗎?
- 現代資料棧是如何走向實時化的?
- 什麼是現代資料棧?有什麼特徵?特徵
- 首屆中國網際網路大資料年會圓滿落幕大資料
- GBase 8a MPP CLuster資料庫2022年第8期培訓圓滿結束資料庫
- GBase 8a MPP CLuster資料庫2022年第3期培訓圓滿結束資料庫
- RPA企業:「實在智慧」受邀參加贛江新區數字經濟產業峰會產業
- Orange Cyberdefense 受邀參加2021第三屆亞洲網路安全創新國際峰會
- 參加阿里雲北京峰會隨感阿里
- 360代表中國安全行業受邀參加RSA大會行業
- 駐華機構高階別交流活動暨遊戲行業國際合作交流會在廣州圓滿結束遊戲行業
- 資料結構之「棧」資料結構
- 資料結構之——棧資料結構
- javascript資料結構 -- 棧JavaScript資料結構
- 資料結構之棧資料結構
- 資料結構(1):棧資料結構
- 杉巖資料受邀出席雙態資料基礎設施建設峰會,助力雙態IT技術新發展
- 圖靈參加的線下活動和技術會議——現場照片及人物圖靈
- FY18 微軟Dynamics 365技術高階分享會圓滿結束微軟