ds5020儲存升級

tonglei2000發表於2014-11-09
最近幹活精力不夠集中,導致問題百出,檢討,深刻檢討!
ds5020儲存升級,可以不停業務,為了安全起見,向使用者要求停業務,先新增了partition的授權。新的兩個磁碟籠子加完成,儲存軟體認不到。
升級前就知道主機的開關是2gb,想試試擴充套件櫃是4gb是否可行,發現認不到,就關閉擴充套件櫃,把開關撥到2gb,加電,磁碟能夠認定了。
儲存在5分鐘後出現報警,說是儲存的授權是32槽位,現在是48槽位,超出授許可權制。
以前真不知道有這個限制,只好來日再幹。授權透過商務,終於到手。
雖然第一次擴容沒有成功,但擴容的磁碟擴充套件櫃都經過加電,並確定和儲存控制器的微碼匹配,我們認為消除了擴容工作的部分風險,可以考慮第二次擴容在不停業務的情況下進行線上擴容。


晚上,擴容工作按照計劃準時開始。我們先對資料都進行了備份,然後按步開始擴容。儲存先新增64槽位的授權,然後擴充套件櫃加電,工程師沒有往上面查硬碟,等檢測正常,兩塊硬碟兩塊硬碟的往上插,硬碟都認到,開始配raid。劃盤,主機認盤。        然後線上在hacmp裡面透過選單把硬碟新增到存在的卷組裡面。一切正常後,心裡糾結了一下,就把檔案系統給擴了,新的擴容是10tb左右,就從5tb擴大到了15tb。大概等待了15分鐘左右,檔案系統顯示擴充套件完成,到了15tb。
到次,所有的擴容工作全部完成,不到10點。我們對儲存和儲存上執行的資料庫都進行測試,聯絡應用工程師進行業務測試,沒有發現問題,離開了機房。


凌晨十二點半左右,我們接到應用工程師電話,說系統可能不正常,我們馬上趕到了現場。經過我們在小型機和儲存上檢查,系統全部執行正常。和應用的工程師繼續溝通,他反映資料庫的啟動和停止都正常,使用oracle客戶端登陸和訪問資料庫正常,部分業務正常,但有些業務不正常。我們經過測試,確定新擴容的儲存在小型機上讀寫正常,資料庫執行正常,可以正常登陸,訪問和備份。資料庫、小型機、儲存都沒有任何的錯誤資訊報出。
     登到儲存上面,劃得lun有的初始化完成,有的是pending狀態,有的是正在初始化。懷疑是因為擴盤,而硬碟沒有初始化完成,導致效能低而出現的問題

到三點半,問題還是沒有解決,我們一邊繼續分析問題,一邊開始準備回退方案,確定在六點如果不能解決問題 就進行回退操作。到了6點,lun全部初始化完成,這時我們沒有對業務進行測試,直接對主機進行重啟後,業務就全部正常,問題解決。
感覺還是應該等初始化完成後在往檔案系統裡面加就好了,以後的所有擴容工作都要記住這一點。

來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/13337857/viewspace-1325987/,如需轉載,請註明出處,否則將追究法律責任。

相關文章