sql server編寫archive通用模板指令碼實現自動分批刪除資料

张工502219048發表於2019-10-10
SQLServerHive指令碼

博主做過比較多專案的archive指令碼編寫，對於這種刪除資料的指令碼開發，肯定是一開始的話用最簡單的一個delete語句，然後由於部分表資料量比較大啊，索引比較多啊，會發現刪除資料很慢而且影響系統的正常使用。然後就對delete語句進行按均勻資料量分批delete的改寫，這樣的話，原來的刪除一個表用一個語句，就可能變成幾十行，如果archive的表有十幾個甚至幾十個，那我們的指令碼篇幅就非常大了，增加了開發和維護的成本，不利於經驗比較少的新入職同事去開發archive指令碼，也容易把注意力分散到所謂分批邏輯中。

　　根據這種情況，本週博主（zhang502219048）剛好在工作過程中，總結並編寫了一個自動分批刪除資料的模板，模板固定不變，只需要把注意力集中放在delete語句中，並且可以在delete語句中控制每批刪除的資料量，比較方便，透過變數組裝模板sql，避免每個表就單獨寫一個分批邏輯的重複程式碼，化簡為繁，增加分批刪除一個表指定資料的話只需要增加幾行程式碼就可以（如下所示中的demo1和demo2）。

　　demo1：不帶引數，根據表tmp_Del刪除表A對應ID的資料。

　　demo2：帶引數，根據Date欄位是否過期刪除表B對應資料。

　　具體請參考下面的指令碼和相關說明，如有不懂的地方歡迎評論或私信諮詢博主。

-- ===== 1 分批archive模板 =======================================================
--【請不要修改本模板內容】
/* 
說明：
1. 組裝的archive語句為：@sql = @sql_Part1 + @sql_Del + @sql_Part2
2. 組裝的引數@parameters為：@parameters = @parameters_Base + 自定義引數
3. 傳入引數：@strStepInfo 需要print的step資訊
4. archive邏輯專注於@sql_Del，而非分散於分批。
*/
declare @parameters nvarchar(max) = ''
, @parameters_Base nvarchar(max) = N'@strStepInfo nvarchar(100)'
, @sql nvarchar(max) = ''
, @sql_Part1 nvarchar(max) = N'
declare @iBatch int = 1,   --批次
    @iRowCount int = -1 --刪除行數，初始為-1，後面取每批刪除行數@@ROWCOUNT
print convert(varchar(50), getdate(), 121) + @strStepInfo
while @iRowCount <> 0
begin
  print ''begin batch:''
  print @iBatch
  print convert(varchar(50), getdate(), 121)
  begin try
    begin tran
'
, @sql_Del nvarchar(max) = '
' --@sql_Del指令碼需要根據實際情況在後續指令碼中自行編寫
, @sql_Part2 nvarchar(max) = N'  
      select @iRowCount = @@rowcount
    commit tran 
  end try
  begin catch
    rollback tran
    print ''-- Error Message：'' + convert(varchar, error_line()) + '' | '' + error_message()
  end catch
  waitfor delay ''0:00:01'' --延時
  print convert(varchar(50), getdate(), 121)
  print ''end batch''
  select @iBatch = @iBatch + 1
end'
-- ===== 2 demo1（delete語句不含引數）：archive 表A =======================================================
select @parameters = @parameters_Base + '' --如果有需要增加自定義引數，在這裡加，例如@parameters = @parameters_Base + ', @ArchiveDate datetime'
, @sql_Del = '
      delete top (50000) tc_Del 
      from 表A tc_Del
      inner join tmp_Del cd on cd.ID = tc_Del.ID
'
select @sql = @sql_Part1 + @sql_Del + @sql_Part2
print @sql
exec sp_executesql @sql, @parameters, N' 2 archive 表A'
-- ===== 3 demo2（delete語句含引數）：archive 表B =======================================================
select @parameters = @parameters_Base + ', @ArchiveDaate datetime' --如果有需要增加自定義引數，在這裡加，例如@parameters = @parameters_Base + ', @ArchiveDate datetime'
, @sql_Del = '
      delete top (50000) 
      from 表B
      where Date < @ArchiveDate
'
select @sql = @sql_Part1 + @sql_Del + @sql_Part2
print @sql
exec sp_executesql @sql, @parameters, N' 3 archive 表B', @ArchiveDate

總結

以上所述是小編給大家介紹的sql server編寫archive通用模板指令碼實現自動分批刪除資料，希望對大家有所幫助。

相關文章