Java SQLServerBulkCopyを使用したデータベース・バッチ・オペレーション
2672 ワード
Microsoft SQL Serverのbcpコマンドは、大規模なファイルをすばやくデータベースにコピーして挿入できます.C#はSqlBulkCopyメソッドでこの機能を実現しますが、javaではSQLServerBulkCopyクラスで同様の機能を実現できます.insert、updateなどのコマンドに比べて、このクラスの効率はずっと高いです.(よく使われるJDBCのBatchよりも方法が高いことが多い).
SQLServerBulkCopyクラスはSQL Severデータベースへの挿入にのみ使用できますが、データソースはSQL Severデータベースではありません.旧バージョンのMicrosoftSQL Server JDBCドライバはこのクラスを提供していません.MicrosoftSQL Server JDBCドライバ6.0のバージョンをダウンロードする必要があります.https://www.microsoft.com/zh-cn/download/confirmation.aspx?id=11774.MS公式の説明書はこの住所にあります.https://docs.microsoft.com/en-us/sql/connect/jdbc/using-bulk-copy-with-the-jdbc-driver.
SQLServerBulKCopyクラスは、Java自体が提供するResultSet、RowSet、JDBCが提供するISQLServerBulkRecordインタフェース実装クラスの3種類のパッケージデータをデータベースに挿入します.以下に実装を示します.
SQLServerBulkCopyクラスはSQL Severデータベースへの挿入にのみ使用できますが、データソースはSQL Severデータベースではありません.旧バージョンのMicrosoftSQL Server JDBCドライバはこのクラスを提供していません.MicrosoftSQL Server JDBCドライバ6.0のバージョンをダウンロードする必要があります.https://www.microsoft.com/zh-cn/download/confirmation.aspx?id=11774.MS公式の説明書はこの住所にあります.https://docs.microsoft.com/en-us/sql/connect/jdbc/using-bulk-copy-with-the-jdbc-driver.
SQLServerBulKCopyクラスは、Java自体が提供するResultSet、RowSet、JDBCが提供するISQLServerBulkRecordインタフェース実装クラスの3種類のパッケージデータをデータベースに挿入します.以下に実装を示します.
/**
* CachedRowSet
* BaseDao JDBC , ,
* @throws SQLException
*/
public CachedRowSetImpl getCachedRowSet() throws SQLException{
// CachedRowSetImpl
ResultSet rs = baseDao.executeSQL("select * from FactMonthTimeTable where 1=0");
CachedRowSetImpl crs = new CachedRowSetImpl();
crs.populate(rs);
// crs
baseDao.closeResource();
return crs;
}
/**
* CachedRowSet
* , CachedRowSet
* @param crs
* @param fmt
* @return
* @throws SQLException
*/
public CachedRowSetImpl insertIntoCachedRowSet(CachedRowSetImpl crs,Student stu) throws SQLException{
// “ ”,
crs.moveToInsertRow();
//
crs.updateString("name", stu.getName());
crs.updateInt("id", stu.getId());
//
crs.insertRow();
//
crs.moveToCurrentRow();
return crs;
}
/**
* BulkCopy RowSet
* @param crs
* @param batchSize
*/
public void insertBatch(CachedRowSetImpl crs,int batchSize)throws SQLException{
//
String url = "jdbc:sqlserver://localhost:1433;DatabaseName=datebaseName"
+";user=userName;password=userPassword";
SQLServerBulkCopyOptions copyOptions = new SQLServerBulkCopyOptions();
copyOptions.setKeepIdentity(true);
copyOptions.setBatchSize(8000);
copyOptions.setUseInternalTransaction(true);
SQLServerBulkCopy bulkCopy =
new SQLServerBulkCopy(connectionUrl);
bulkCopy.setBulkCopyOptions(copyOptions);
bulkCopy.setDestinationTableName("tableName");
bulkCopy.writeToServer(crs);
crs.close();
bulkCopy.close();
}