IBM HA雙機光交鏈路問題導致的oracle資料庫exp備份問題
12月份,上地機房進行電源割接,不少光線交換機重啟,業務系統、資料庫主機也進行了重啟,但是由於裝置重啟順序不同導致一內容撥測系統資料庫出現了異常。
出問題的資料庫所在主機是IBM的AIX 6100,資料庫版本是11.2.0.4,採用的是HA雙機軟體管理的熱備雙機,資料庫安排的有exp定時計劃任務。
出現的問題是:資料庫exp定時備份計劃任務出現告警,
處理過程:
使用ps -ef|grep exp發現後臺有3個exp相關的.sh備份程式掛起;
檢視備份目錄發現有3天前的備份檔案和備份日誌,但是備份檔案是4096位元組,而備份日誌是0位元組;
首先殺死3個相關的exp備份程式,刪除失敗的備份日誌和備份檔案,重新發起exp備份,發現備份卡在登入sqlplus 2個小時候自動斷開,而備份檔案還是4096位元組,備份日誌是0位元組;
從伺服器端登入sqlplus,select username from dba_users;能查詢到資料庫相關使用者,select file_name,tablespace_name from dba_data_files;卻一直卡主沒有輸出結果;
退出sqlplus切換到root使用者lsvg能輸出相關vg資訊,lsvg -p rootvg顯示rootvg相關的2個pv卷資訊,但是lsvg -p vg_oravg卻是卡主沒有輸出;
經AIX主機工程師檢視並與系統管理員溝通判斷是電源切割引起光交鏈路發生改變,而AIX主機不識別鏈路導致的;
嘗試使用root 透過smit hacmp將服務切換到備機解決鏈路不識別問題,發現HA切換失敗;
接下來重啟HA相關的2個主機,重啟完成後lsvg -p vg_oravg有正常輸出,登入資料庫查詢資料檔案正常,重新發起exp備份4分鐘完成;
到此故障解決。
出問題的資料庫所在主機是IBM的AIX 6100,資料庫版本是11.2.0.4,採用的是HA雙機軟體管理的熱備雙機,資料庫安排的有exp定時計劃任務。
出現的問題是:資料庫exp定時備份計劃任務出現告警,
處理過程:
使用ps -ef|grep exp發現後臺有3個exp相關的.sh備份程式掛起;
檢視備份目錄發現有3天前的備份檔案和備份日誌,但是備份檔案是4096位元組,而備份日誌是0位元組;
首先殺死3個相關的exp備份程式,刪除失敗的備份日誌和備份檔案,重新發起exp備份,發現備份卡在登入sqlplus 2個小時候自動斷開,而備份檔案還是4096位元組,備份日誌是0位元組;
從伺服器端登入sqlplus,select username from dba_users;能查詢到資料庫相關使用者,select file_name,tablespace_name from dba_data_files;卻一直卡主沒有輸出結果;
退出sqlplus切換到root使用者lsvg能輸出相關vg資訊,lsvg -p rootvg顯示rootvg相關的2個pv卷資訊,但是lsvg -p vg_oravg卻是卡主沒有輸出;
經AIX主機工程師檢視並與系統管理員溝通判斷是電源切割引起光交鏈路發生改變,而AIX主機不識別鏈路導致的;
嘗試使用root 透過smit hacmp將服務切換到備機解決鏈路不識別問題,發現HA切換失敗;
接下來重啟HA相關的2個主機,重啟完成後lsvg -p vg_oravg有正常輸出,登入資料庫查詢資料檔案正常,重新發起exp備份4分鐘完成;
到此故障解決。
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/29357786/viewspace-1874356/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 【YashanDB知識庫】EXP導致主機卡死問題
- oracle資料庫備份之exp增量備份Oracle資料庫
- Oracle資料庫備份、災備的23個常見問題Oracle資料庫
- ODPS主備叢集雙向資料複製導致主備中心網路打爆問題
- Oracle日常問題-臨時表過多導致exp速度慢Oracle
- [BUG反饋]ot資料庫備份問題資料庫
- Oracle資料傾斜導致的問題-無繫結變數Oracle變數
- Oracle資料傾斜導致的問題-有繫結變數Oracle變數
- 使用資料庫處理併發可能導致的問題資料庫
- mysqldump備份時的資料一致性問題--single-transactionMySql
- 網路問題導致更多的資料中心中斷
- oracle 序列值導致的主鍵衝突問題Oracle
- 有問題的mybatis的sql導致對資料庫進行了批量的修改MyBatisSQL資料庫
- 資料鏈路層的三個基本問題
- 【epoll問題】EPOLLRDHUP使用導致無法接受資料
- ANALYZE導致的阻塞問題分析
- [20190313]備份問題.txt
- 關於oracle資料庫訊號量的問題Oracle資料庫
- Oracle資料庫中的逐行處理問題NEOracle資料庫
- Redis和資料庫的資料一致性問題Redis資料庫
- 資料庫不使用悲觀鎖導致問題的一種復現方式資料庫
- 關於 iconv 轉碼導致資料丟失的問題
- Oracle資料庫啟動問題彙總(一)Oracle資料庫
- Oracle EXPDP自動備份緩慢問題解決Oracle
- Oracle 自動備份觸發ORA-01513問題Oracle
- Chrome89針對sessionStorage的更新導致資料共享問題ChromeSession
- [20190522]rman備份問題.txt
- 「Oracle」Oracle 資料庫備份還原Oracle資料庫
- 快取與資料庫雙寫,不一致問題及解決方案快取資料庫
- oracle 備份資料庫,匯出資料庫Oracle資料庫
- 如何處理Oracle資料庫中的壞塊問題(轉)Oracle資料庫
- Oracle表空間切換路徑,解決硬碟滿導致的ORA-01653問題Oracle硬碟
- golang slice使用不慎導致的問題Golang
- CAS導致的ABA問題及解決
- 分散式鎖導致的超賣問題分散式
- MySQL8.0 view導致的效能問題MySqlView
- 什麼是資料洩露?哪些問題可導致資料洩露
- 【ERROR】儲存鏈路問題造成oracle錯誤,ora-600[4193] 問題處理ErrorOracle
- 硬碟問題導致Gbase資料庫叢集SQL任務執行效率變慢硬碟資料庫SQL