在Java中向資料庫執行大量插入操作，通常需要考慮效能和效率。對於大量資料的插入，有幾種方法可以提高效能，比如使用批處理（Batch Insert）、JDBC的批處理API、或者使用SQL Server的特定功能如表值引數（Table-Valued Parameters，TVP）或SQL Server Integration Services (SSIS)。在這裡，我將提供兩種方法的示例：使用JDBC批處理和SQL Server的表值引數（如果環境支援）。
1.使用JDBC批處理和SQL Server的表值引數
1.1 示例 1: 使用JDBC批處理
JDBC批處理是處理大量插入的一種簡單而有效的方法。它允許我們將多個SQL語句作為一個批處理傳送到資料庫，從而減少了網路往返次數和資料庫操作開銷。
首先，確保我們已經新增了SQL Server JDBC驅動到我們的專案依賴中。
import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.PreparedStatement;
import java.sql.SQLException;
public class BatchInsertExample {
public static void main(String[] args) {
String url = "jdbc:sqlserver://localhost:1433;databaseName=YourDatabase;user=yourUsername;password=yourPassword;";
String insertSQL = "INSERT INTO YourTable (Column1, Column2) VALUES (?, ?)";
try (Connection conn = DriverManager.getConnection(url);
PreparedStatement pstmt = conn.prepareStatement(insertSQL)) {
conn.setAutoCommit(false); // 關閉自動提交，以啟用批處理
// 假設有1000條資料需要插入
for (int i = 0; i < 1000; i++) {
pstmt.setString(1, "Value1_" + i);
pstmt.setInt(2, i);
pstmt.addBatch(); // 將SQL語句新增到批處理中
// 每100條資料執行一次批處理，以減少記憶體使用
if (i % 100 == 0 && i != 0) {
pstmt.executeBatch(); // 執行批處理
conn.commit(); // 提交批處理
pstmt.clearBatch(); // 清空批處理
}
}
// 插入剩餘的資料
if (pstmt.getBatchCount() > 0) {
pstmt.executeBatch();
conn.commit();
}
conn.setAutoCommit(true); // 恢復自動提交
System.out.println("插入完成");
} catch (SQLException e) {
e.printStackTrace();
}
}
}
1.2 示例 2: 使用表值引數（如果可用）
表值引數是一種高效的方式來將表資料型別的值傳遞給SQL Server儲存過程或函式。不過，這種方法需要資料庫端的支援（定義表型別和使用該型別的儲存過程或函式）。這裡僅展示Java呼叫端的一個簡單示意（實際使用前需要在資料庫中定義相應的表型別和儲存過程）。
由於Java JDBC API本身不直接支援表值引數，我們可能需要使用第三方庫（如jTDS）或編寫自定義的序列化邏輯來傳送資料，或者使用更高階的庫如JPA（雖然JPA通常不直接支援表值引數，但可以間接透過呼叫儲存過程）。
// 注意：這是一個示意性虛擬碼，因為JDBC標準API不支援直接傳送表值引數
// 你需要自定義邏輯或使用支援表值引數的庫
// 假設有一個儲存過程接受表值引數
// EXEC YourStoredProcedure @YourTVP = @YourTableTypeData;
// 在Java中，你可能需要：
// 1. 使用支援表值引數的JDBC驅動
// 2. 呼叫儲存過程，並傳入適當格式化的資料
// 由於具體實現高度依賴於所使用的庫和資料庫配置，這裡不給出具體程式碼。
對於大多數情況，JDBC批處理是處理大量插入操作的一個簡單且有效的解決方案。如果我們的環境或場景有特殊需求，如需要處理大量複雜資料型別或已經使用了特定的資料庫技術棧，那麼可能需要考慮使用表值引數或其他高階技術。
2. 使用SQL Server的表值引數（TVP）進行大量資料的插入
另外一種方法是使用SQL Server的表值引數（Table-Valued Parameters, TVP）進行大量資料的插入。表值引數允許我們以表的形式向SQL Server的儲存過程或函式傳遞多行資料，這在處理大量資料時可以提高效能和效率。不過，需要注意的是，直接在Java JDBC API中並沒有直接支援表值引數的功能，我們需要透過一些額外的步驟或第三方庫來實現。
以下是使用表值引數進行大量資料插入的一般步驟：
2.1 在SQL Server中定義表型別
首先，我們需要在SQL Server中定義一個表型別，這個表型別將作為表值引數的基礎。
CREATE TYPE MyTableType AS TABLE
(
Column1 INT,
Column2 VARCHAR(50)
-- 可以根據需要新增更多列
);
2.2 建立接受表值引數的儲存過程
然後，我們需要建立一個儲存過程，該儲存過程將接受前面定義的表型別作為表值引數。
CREATE PROCEDURE InsertDataUsingTVP
@MyTable MyTableType READONLY
AS
BEGIN
SET NOCOUNT ON;
INSERT INTO MyTargetTable (Column1, Column2)
SELECT Column1, Column2
FROM @MyTable;
END;
2.3 在Java中準備資料
在Java中，我們不能直接建立一個MyTableType的例項並傳遞給儲存過程，因為JDBC API不支援這種操作。但是，我們可以使用JDBC的CallableStatement來呼叫儲存過程，並透過某種方式（如ADO.NET中的SqlDataTable或使用其他第三方庫）將資料包裝成表值引數所需的形式。然而，在標準的Java JDBC環境中，這通常意呀著我們需要將資料插入到一個臨時的資料結構中（如ArrayList），然後遍歷這個資料結構，為每個元素構造一個單獨的SQL插入語句（這不是真正的表值引數方法，但可以作為替代方案）。
2.4 使用第三方庫或自定義解決方案
為了真正使用表值引數，我們可能需要尋找支援此功能的第三方JDBC庫，如Microsoft提供的JDBC驅動可能具有更好的支援。或者，我們可以編寫自定義的序列化邏輯，將Java中的資料轉換為SQL Server可以理解的格式，並透過某種方式（如ADO.NET的SqlDataTable的序列化）傳遞給儲存過程。但是，這種方法通常比較複雜且容易出錯。
2.5 呼叫儲存過程
如果我們找到了支援表值引數的JDBC庫或實現了自定義的序列化邏輯，我們就可以像呼叫任何其他儲存過程一樣呼叫這個儲存過程，並傳遞我們的表值引數。
2.6 注意
（1）由於Java JDBC API的限制，直接在Java中使用表值引數可能不是最直接的方法。
（2）考慮使用其他技術或工具，如SQL Server Integration Services (SSIS)、批次插入工具或第三方資料庫管理工具，這些工具可能提供了更好的支援來處理大量資料的插入。
（3）如果我們正在使用Spring框架等現代Java開發框架，我們可能能夠找到或建立一些整合解決方案來簡化這個過程。
2.7 結論
雖然Java JDBC API本身不直接支援表值引數，但我們可以透過一些額外的步驟或第三方庫來實現類似的功能。然而，在處理大量資料插入時，通常建議使用JDBC批處理或其他更高效的方法。如果表值引數對於我們的場景至關重要，我們可能需要尋找其他解決方案或考慮在資料庫端進行更多的處理。
3. 使用SQL Server的Bulk Insert功能的方法
在Java中向SQL Server資料庫進行大量資料插入的第三種方法，除了之前提到的JDBC批處理和表值引數外，還可以考慮使用SQL Server的Bulk Insert功能或者SQL Server Integration Services (SSIS)。這裡我將詳細介紹使用SQL Server的Bulk Insert功能的方法。
3.1 使用SQL Server的Bulk Insert功能
Bulk Insert是SQL Server提供的一個高效的資料載入工具，它允許我們將資料從檔案（如CSV或文字檔案）直接匯入到SQL Server表中。雖然Bulk Insert本身不是透過Java直接實現的，但我們可以在Java程式中呼叫SQL Server的Bulk Insert語句，或者使用Java將資料寫入到檔案中，然後透過SQL Server的Bulk Insert命令或儲存過程來載入這些資料。
3.2步驟概述：
（1）準備資料檔案：
- 將要插入的資料準備好，並將其儲存為SQL Server可以識別的格式（如CSV）。
（2）使用Java寫入資料到檔案（如果需要）：
- 如果資料不是預先準備好的檔案，我們可以使用Java的IO功能將資料寫入到檔案中。
（3）執行Bulk Insert：
- 透過SQL Server Management Studio (SSMS)、SQLCMD命令列工具或直接在Java程式中呼叫資料庫儲存過程來執行Bulk Insert命令。
- 如果在Java程式中呼叫，我們可能需要使用JDBC來執行一個包含Bulk Insert語句的CallableStatement或簡單SQL語句（如果Bulk Insert被封裝在儲存過程中）。
（4）驗證資料：
- 執行查詢以驗證資料是否已成功插入到SQL Server表中。
3.3 示例（非Java直接執行，但展示了Bulk Insert的SQL語法）：
BULK INSERT MyTable
FROM 'C:\path\to\your\data.csv'
WITH
(
FIELDTERMINATOR = ',', -- 欄位分隔符
ROWTERMINATOR = '\n', -- 行分隔符
FIRSTROW = 2, -- 跳過第一行（假設第一行是標題行）
ERRORFILE = 'C:\path\to\your\errorlog.txt',
TABLOCK
);
3.4 在Java中呼叫（如果Bulk Insert封裝在儲存過程中）：
如果我們已經將Bulk Insert的邏輯封裝在了一個SQL Server儲存過程中，我們可以透過JDBC來呼叫這個儲存過程。
String procedureCall = "{call MyBulkInsertStoredProcedure()}";
try (CallableStatement cstmt = conn.prepareCall(procedureCall)) {
cstmt.execute();
} catch (SQLException e) {
e.printStackTrace();
}
請注意，上述程式碼中的MyBulkInsertStoredProcedure應該替換為我們實際建立的儲存過程名稱。
3.5 注意事項：
（1）效能：Bulk Insert通常比逐條插入或標準JDBC批處理快得多，因為它減少了與資料庫的互動次數並最佳化了資料載入過程。
（2）安全性：確保資料檔案來源可靠，並對檔案執行適當的驗證和清理，以防止SQL隱碼攻擊等安全風險。
（3）許可權：執行Bulk Insert的SQL Server賬戶需要具有足夠的許可權來讀取資料檔案並將資料插入到目標表中。
（4）錯誤處理：在Bulk Insert操作中，建議指定一個錯誤檔案來捕獲任何在載入過程中發生的錯誤。
綜上所述，雖然Java本身不直接支援Bulk Insert，但我們可以透過將資料寫入檔案並使用SQL Server的Bulk Insert功能，或者透過呼叫封裝了Bulk Insert邏輯的儲存過程來間接實現大量資料的插入。這種方法可以顯著提高資料載入的效能和效率。