大容量XML檔案處理如何解決效能問題
HI,ALL
需求：每天有一個非常大的XML檔案過來，我需要將它解析入庫，現在是單執行緒，效能不行，每天的檔案處理不完，堆了很多
想法：我的想法是能不能把它拆分成多個小XML檔案，然後交給多個執行緒去解析入庫肯定比一個執行緒處理要快，問題是如果拆分？
請banq和各位高手給以建議或者提示一下如何解決這個需求？
需求：每天有一個非常大的XML檔案過來，我需要將它解析入庫，現在是單執行緒，效能不行，每天的檔案處理不完，堆了很多
想法：我的想法是能不能把它拆分成多個小XML檔案，然後交給多個執行緒去解析入庫肯定比一個執行緒處理要快，問題是如果拆分？
請banq和各位高手給以建議或者提示一下如何解決這個需求？
[該貼被thinkjava於2009-12-02 14:29修改過]
[該貼被thinkjava於2009-12-02 14:30修改過]
相關文章
- 大體積XML檔案處理效能問題XML
- XML檔案處理中增加xmlns問題XML
- Go xml檔案處理GoXML
- xml處理的問題XML
- 如何提升大容量檔案上傳效能
- tempfile檔案過大問題處理 for logical standby
- oracle bdump 下.trc檔案過大問題處理Oracle
- 如何解決soap的效能問題?
- 解決properties、xml等配置檔案無法找到問題XML
- 如何解決重要資料檔案各種問題？
- Python處理大檔案Python
- 使用Java處理大檔案Java
- linux 透過xmllint處理xml檔案LinuxXML
- jQuery如何處理xml檔案程式碼例項jQueryXML
- 管理大容量匯入的批處理
- lxml處理xml時的字元編碼問題XML字元
- 【問題處理】處理alert警告日誌中出現無法找到libocr*.so檔案問題
- 如何解決90％的自然語言處理問題：分步指南奉上自然語言處理
- 如何解決醫院內外網檔案共享問題？
- .net異常處理的效能問題
- Python 如何處理大檔案Python
- 如何解決大資料安全問題大資料
- Java 大資料量處理問題Java大資料
- jaxb輸出xml檔案的中文問題？XML
- 關於SAX解析xml檔案的問題XML
- 【NPL】如何解決90％的自然語言處理問題：分步指南奉上自然語言處理
- 乾貨！Apache Hudi如何智慧處理小檔案問題Apache
- Python編解碼問題與文字檔案處理Python
- iis 下 swfupload 上傳大檔案 卡頓 404 錯誤 等問題處理方法
- 檔案監控效能問題【BUG】
- java讀取大檔案並處理Java
- 【問題處理】通過調整資料檔案的位置解決磁碟空間緊張的問題
- 產品經理如何解決產品和運營六大問題
- Sax 解析xml檔案時, 資料資訊不完整問題解決方法XML
- 解決建立帶有NameSpace的XML檔案出現空白xmlns的問題namespaceXML
- php上傳大檔案失敗處理PHP
- 教你如何解決el-table巢狀el-popover處理卡頓問題巢狀
- 處理檔案上傳時的訊息格式轉換問題