用SQL*Loader載入外部資料

llnnmc發表於2017-09-22


SQL*Loader可用於批次上載某些第三方系統生成的資料集。DBA配置一個能夠解釋輸入資料檔案內容的SQL*Loader控制檔案,SQL*Loader就可以讀取輸入檔案,將資料插入到Oracle資料庫表中。

 

SQL*Loader是一個客戶端-伺服器程式,可採用兩種技術匯入資料:常規方式或直接路徑。

 

常規方式使用普通的INSERT語句。SQL*Loader使用者程式構造VALUES子句中包含繫結變數的INSERT語句,然後讀取源資料檔案,為每個要插入的行執行一次INSERT。此方法使用資料庫緩衝區快取,並生成撤銷和重做資料。

 

直接路徑避開了資料庫緩衝區快取。SQL*Loader讀取源資料檔案,並將其內容傳送到伺服器程式。此後,伺服器程式在其PGA中組裝表資料的塊,並將它們直接寫入資料檔案。寫操作在表的高水位線上完成,稱為資料儲存。載入完成後,SQL*Loader移動高水位線,從而包含最新寫入的資料塊。此時不會生成撤銷,因此直接路徑載入極為快捷。

 

直接路徑載入速度快,但存在以下問題:

  • 操作期間必須刪除或禁用引用完整性約束和check約束,只能實施unique、primary key和not null約束
  • 不會啟用INSERT觸發器
  • 針對其它會話的DML鎖定表
  • 無法為群集表使用直接路徑

之所以存在以上限制,是因為載入期間缺少與SGA的互動。

 

SQL*Loader使用多種檔案:

輸入資料檔案(input datafile):將要上載到資料庫的源資料。

控制檔案(control file):指示SQL*Loader如何解釋輸入檔案的內容如何提取記錄。

日誌檔案(log file):概述了作業的成功與失敗及相關錯誤細節。

錯誤檔案(bad file):違反規則而未能成功插入資料庫的記錄被寫入該檔案。

廢棄檔案(discard file):提取記錄成功但不匹配選擇標準而被丟棄的記錄寫入該檔案。

 

考慮下面的表:

SQL> desc dept

Name   Type         Nullable Default Comments

------ ------------ -------- ------- --------

DEPTNO NUMBER(2)                             

DNAME  VARCHAR2(14) Y                        

LOC    VARCHAR2(13) Y                        

 

此源資料檔案為e:\dept.txt

60,liuln,nanjing

70,shenzj,jiaxing

80,chenyz,shanghai

 

用於載入此資料的SQL*Loader控制檔案是e:\dept.ctl

load data

infile 'e:\dept.txt'

badfile 'e:\dept.bad'

discardfile 'e:\dept.dsc'

append

into table scott.dept

fields terminated by ','

trailing nullcols

(deptno integer external(2),

dname,

loc)

 

控制檔案中指定了輸入檔案、錯誤檔案、廢棄檔案,指定為表新增行而不是截斷它,指定了插入的表、欄位分割符,trailing nullcols表示如果缺少欄位,就插入NULL值,最後指明瞭插入資料對應的列。

 

要執行載入,在作業系統提示符下執行以下命令

sqlldr scott/tiger control=e:\dept.ctl log=e:\dept.log direct=true

 

direct=true引數指示SQL*Loader使用直接路徑,而不是預設的常規插入操作。操作結束後可以檢視一下生成的日誌檔案資訊,同時查詢表dept確認資料被新增進來。


來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/28974745/viewspace-2145360/,如需轉載,請註明出處,否則將追究法律責任。

相關文章