系統自動化調優時代來臨,DBA真的要失業了?
前段時間,亞馬遜和卡內基梅隆大學一起開發了一套名叫“OtterTune”的機器學習自動化調整DBMS的系統。這個訊息一出引無數DBA淚奔,就連阿里雲棲社群也在大呼“OtterTune來了,DBA真的要失業了嗎?”
系統自動化調優到底有什麼優勢讓DBA們人人自危?它到底解決了企業的哪些痛點?DBA們真的會失業嗎?2017年10月19日-21日,在北京舉辦的第九屆系統架構師大會邀請了優調科技技術總監朱妤晴為我們一一解答上面的問題,並帶來目前業界在系統自動化調優領域最前沿的研究。
什麼是系統自動化調優呢?為了適應不同應用需求,系統在開發時就暴露了大量與部署、應用場景相關的引數,這些引數與系統效能緊密相關,必須由對系統和應用有資深經驗的技術人員來調優,而系統自動化調優指的就是將這一過程自動化。
目前系統自動化面臨的挑戰是企業為了適應更多的部署環境和應用場景,系統引數的個數越來越多,為了滿足不同的應用負載需求,涉及的系統也越來越多,而引數設定與系統、應用緊密相關,這就造成了效能曲線複雜多變。
所以系統調優就成為了企業的痛點,對於大公司來說,系統調優耗時長不說,而且聘請調優專家成本非常高,如果自己培養優秀的調優人員週期長、開銷大。對於中小公司來說,支付高昂調優專家費用,價效比低;系統效能不高,導致硬體開銷大;難以迅速上手新系統,導致業務受限。
針對企業痛點,系統自動化調優應運而生。朱妤晴表示目前系統自動化調優工具主要有兩個,一個是上文提到的OtterTune,還有一個就是有中科院計算所,先進計算機系統研究中心研發的BestConfig。
BestConfig的關鍵技術包括高可擴充套件調優系統架構、分割差異化取樣演算法和遞迴限定查詢演算法,可應用於Cassandra、MySQL、Tomcat、Spark、Hadoop、Hive 6個常見系統及JVM,最多可以調優109個引數。BestConfig與OtterTune的對比詳見下圖:
系統自動化調優僅調整系統引數值,即可使效能最大提升11倍;節省人力開銷;減少硬體開銷;更公平地測試和比較系統效能;確定系統瓶頸。那麼系統自動化調優工具的出現真的會讓DBA們失業嗎?朱妤晴表示DBA們並不會失業,但是他們必須主動融入智慧化、自動化的潮流中,讓這些更有價值的工具為你所用,為你服務。
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/31137683/viewspace-2154043/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 自動剎車時代來臨 智慧掌控真的可靠?
- Rpc 的時代要來臨了RPC
- 真的要進行介面測試自動化?
- 原雲生時代下,自動化運維指令碼真的沒前途了嗎運維指令碼
- 智慧 | 你真的瞭解自動化倉儲系統嗎?
- BCG報告:自動駕駛時代來臨前的萬字忠告自動駕駛
- 【大話IT】雲端計算時代:DBA會不會失業?
- 專訪鄭東雲:自動化運維時代,DBA命運如何?運維
- 自動化客服系統:定義與優勢
- 數字時代來臨,推動IT資訊化建設迅速發展
- NoSQL時代終將來臨?SQL
- 遊戲行業的大品牌時代要來了遊戲行業
- DBA的性格(轉自老白的dba優化手記)優化
- 在AI面前,Rapper要率先失業了?AIAPP
- 【Oracle】undo 自動調優Oracle
- OA系統流程自動化為了節約時間
- 後REST時代正在來臨REST
- 大資料時代來臨大資料
- 全新智慧時代的來臨
- 全HTTPS時代來臨?HTTP
- 恆訊科技分享:噴淋系統降溫伺服器系統應用時代來臨伺服器
- 移動開發者的冬天真的來了移動開發
- 自動系統的發展面臨哪些挑戰?
- 《荒野大鏢客:救贖2》11月登陸谷歌Stadia,雲遊戲時代真的要來了嗎?谷歌遊戲
- 傳真智慧化時代的來臨令業務更高效
- 通過機器學習來自動調優 DBMS,讓任何人都可以部署資料庫管理系統機器學習資料庫
- 裁員潮來了要先幹掉DBA?DBA該如何穿越技術迭代週期?
- 個性化推薦系統來了
- SpringAI 她來了,真的來了SpringAI
- Linux優化之IO子系統監控與調優Linux優化
- 都說無程式碼時代要來了,那麼無程式碼的優缺點有哪些?
- AMP,來自 Google 的移動頁面優化方案Go優化
- Linux系統調優Linux
- 馬司系統調優
- 《QTP自動化測試實踐》要出第二版了!QT
- 智慧供暖時代來臨 碳纖維與水地暖優劣選擇
- 2 Day DBA-管理方案物件-監控和優化資料庫-配置自動SQL優化指導物件優化資料庫SQL
- 資料新時代已經來臨