上雲實踐操作(漫步雲端)之上雲動力
上雲之前
在選擇使用阿里雲之前,整個技術部門採用的是自購伺服器+機房託管的方式來部署所需要的程式。並且考慮到不同區域的業務以及災備的問題,一共在南北兩個城市的IDC機房都部署有伺服器來支撐日常業務的執行。在IDC模式的運維工作上面,首先帶來的問題是日常的巡檢和維護,當某一個機房的裝置如果出現了硬體損壞的情況,運維通常可以聯絡機房進行臨時的裝置替換,並重新申請購買新的裝置,併到機房去安裝。 這樣的話,首先就是當損害一旦產生,某些服務或者程式所提供的算力會在某一段時間內降低,而且對於裝置損壞重新購買所申請的費用,在預算控制上面也是一個比較難以估計的問題。再者,當新裝置回來後,還是得需要運維人員到機房現場去替換裝置,這樣隨之而來的也就產生了一些不必要的差旅費用,這些臨時費用的產生,對於整個部門的預算管理都是一種挑戰。
假設上架的伺服器都沒有問題,穩定的渡過了3年的時間,或者因為業務做得特別好,需要對機房進行擴容,這個對於在傳統機房部署上又是一個比較頭疼的問題。從選擇什麼樣的機器,機房是否有足夠的機櫃,機櫃間的網路狀況,給供應商簽署合同,發貨,機器到貨上架,整個流程會非常的長,如何選擇最經濟合適的方案來採購機器以匹配現有的業務,這個應該是對決策者比較考驗的問題。 如果我們把整個IDC機房的執行時間和裝置採購的成本以放到5年來看,我們會發現下面的一個情況。
從上圖我們可以看得出來,根據逐年的業務提升,總是會發現IDC的服務無法滿足業務的要求,從而再次對IDC機房進行擴容,擴容後的某一段時間內是可以滿足業務的需要,但是再某些時候IDC機房所能提供的能力又大於業務的需求,造成了資源的浪費,圖形中的兩條線並不是平滑匹配的。
為了解決以上的問題,我們再2018年的時候開始考慮使用雲端計算的方案來替代我們現有的IDC的機房結構。
準備上雲
上雲之需求
說到為什麼要上雲,其本質上並不是說要去追尋什麼現在主流的上雲趨勢。而是要實實在在解決我們在上一個章節中遇到的問題,總結來說,上雲需要解決:
- 預算控制問題
- 日常運維的快速響應問題
- 算力擴容問題
- 業務與機器平滑匹配的問題
帶著以上的幾個問題,我們也開始著手去調研過一些雲廠商的產品與服務。最後從提供的產品,價格的方面考慮還是選擇了阿里雲。最初在選擇的時候我們調研到了阿里雲的以下幾個產品能夠滿足我們的需求:
- ECS (提供與日常伺服器一致的功能)
- EMR (提供hadoop叢集功能)
- RDS (提供Mysql和Redis的功能)
但如果只是僅僅考慮到以上的幾個產品就去上雲感覺無非就是把雲服務當成了普通的伺服器來使用,並沒有什麼太大的優勢。但是結合到阿里雲提供的一些其他產品,整個系統的結構會發生大的變化,所以我們最後選擇使用的產品有: - VPC
- NAT 閘道器
- RDS
- SLS
- OSS
- MaxCompute
- CDN
- PAI
- EMR
- SLB
最終組成的業務架構圖如下:
首先通過EIP按照業務的需要向外暴露服務,整個服務都裝在VPC當中,通過NAT閘道器的DNAT和SNAT進行指向,進入的流量由SLB的規則分發到指定的ECS當中進行業務的處理,ECS當中的PHP,Python, Go 等程式可以通過讀寫RDS當中的資料進行處理,處理後的日誌檔案交由SLS統一收集並推送到Maxcompute 當中進行一些業務計算。計算後的最終結果再次寫入到RDS當中供前端程式展示。計算中間結果存入OSS當中進行備份儲存。
在配置沙河環境的時候同樣採用了以上的思路,只是具體機器配置上比正式環境的略低幾個檔即可。
以上的所涉及到的各個產品與服務將在後面的章節具體介紹。
相關文章
- 雲上密碼應用最佳實踐——為雲海漫步保駕護航密碼
- 乾貨|雲中漫步-淺談雲端計算
- 騰訊雲操作實踐
- 雲上深度學習實踐分享——雲上MXNet實踐深度學習
- Nebula Operator 雲上實踐
- 阿里雲OSS雲端儲存管理實踐阿里
- KeystoneJS之雲中漫步JS
- 雲原生推動全雲開發與實踐
- 跨越雲端,華為雲技術專家分享高效跨雲遷移實踐
- 阿里雲E-HPC GROMACS分子動力學模擬實踐阿里Mac
- 愛奇藝的雲上資料治理實踐
- 【騰訊課堂】視訊點播上雲實踐
- 在滴滴雲上搭建 API-Gateway Kong 實踐APIGateway
- PgSQL·最佳實踐·雲上的資料遷移SQL
- 『雲產品最佳實踐』1Panel 搭建操作指南
- 雲上安全不容忽視,華為雲技術硬實力織成“保護網”
- 阿里雲王林平:一站式資料庫上雲最佳實踐阿里資料庫
- 雲原生灰度更新實踐
- 上雲精品,實力認證丨思邁特軟體入駐華為雲嚴選商城
- 雲監控最佳實踐之-容器所有例項的熱力圖
- 峰值利用率80%+,視訊雲離線轉碼自研上雲TKE實踐
- 融雲 IM 在 Electron 平臺上的設計實踐
- 雲端開發環境 ,「開發者上雲」新起點開發環境
- 案例實踐|Apache Pulsar 在移動雲智慧運維平臺的實踐Apache運維
- 位元組跳動 YARN 雲原生化演進實踐Yarn
- 阿里雲 EventBridge 事件驅動架構實踐阿里事件架構
- 位元組跳動機器學習系統雲原生落地實踐機器學習
- Sentry 後端雲原生中介軟體實踐 ClickHouse PaaS ,為 Snuba 事件分析引擎提供動力後端事件
- openGauss資料庫部署實踐(華為雲開發者雲實驗)資料庫
- 揭秘!2周實現上雲上市,阿里雲SaaS上雲工具包如何打造新雲梯?阿里
- 【雲圖】如何建立雲圖(雲端儲存)
- OPPO雲VPC網路實踐
- 天翼雲CDN最佳實踐
- Terraform管理雲資源實踐ORM
- Apache Flink 在移動雲實時計算的實踐Apache
- 如何選擇最優路徑完成雲原生上雲?聽這場阿里雲特別分享【雲原生技術與最佳實踐】阿里
- 核心系統上雲部署等工作,實現核心系統雲端執行。
- MSSQL·最佳實踐·例項級別資料庫上雲RDSSQLServerSQL資料庫Server